JP2023000937A - 疑似面接システム、疑似面接方法、疑似面接装置、及びプログラム - Google Patents

Abstract

【課題】疑似面接を受けるユーザが自身の評価を速やかに得る疑似面接システム、方法及びを提供する議事面接方法を提供する。【解決手段】端末装置２０と、サーバ装置３０とが、ネットワーク１１を介して接続される疑似面接システム１０において、端末装置１０は、疑似面接における質問に対して回答するユーザの音声を録音する収集部２１３と、ユーザの音声を録音した音声データをテキストデータに変換する音声認識部２１４と、ユーザに対して質問を出力し、またユーザに対する評価情報を出力する音声入出力部２４及び表示部２５と、を備える。サーバ装置３０は、ユーザの音声データ、及びテキストデータを解析する解析部３１２と、前の質問に対応する解析部による解析結果に基づいて次の質問を決定する質問決定部３１１と、解析部３１２による解析結果に基づいてユーザに対する評価情報を生成する評価部３１４と、を備える。【選択図】図１

Description

本発明は、疑似面接システム、疑似面接方法、疑似面接装置、及びプログラムに関する。

例えば、特許文献１には、「応募者に対する質疑応答を通じて、前記応募者の顔の映像情報を含む応答情報を取得する情報取得装置と、前記情報取得装置で取得された前記顔の映像情報に基づいて前記応募者の時間経過に伴って変化する様子を分析し、前記質疑応答時における感情の種類を判別する制御装置と、前記制御装置で判別された前記感情の種類と、前記情報取得装置で取得された前記応答情報とが、前記応募者に対応付けて蓄積された応募者情報データベースを記憶する記憶装置と、前記記憶装置における前記応募者情報データベースにアクセス可能な端末装置とを有する面接システム」が記載されている。

特開２０１８－３２１６４号公報

特許文献１に記載の面接システムによれば、面接を実施する企業等の求人側は、応募者による応答情報の信頼性を判断できる。一方、面接を受ける応募者側としては、自身のどのような発言や表情、態度等が信頼性を得られるのか、自身が求人側からどのように評価されているのか等を速やかに把握することができれば、今後の面接に役立てることができる。しかしながら、現状において、そのようなシステムは存在しない。

本発明は、このような状況に鑑みてなされたものであり、疑似面接を受けるユーザが自身の評価を速やかに得られるようにすることを目的とする。

本願は、上記課題の少なくとも一部を解決する手段を複数含んでいるが、その例を挙げるならば、以下のとおりである。

上記課題を解決すべく、本発明の一態様に係る疑似面接システムは、端末装置、及びサーバ装置を含む疑似面接システムであって、前記端末装置は、疑似面接における質問に対して回答する前記ユーザの音声を録音する収集部と、前記ユーザの音声を録音した音声データをテキストデータに変換する音声認識部と、前記ユーザに対して前記質問を出力し、また前記ユーザに対する評価情報を出力する出力部と、を備え、前記サーバ装置は、前記ユーザの前記音声データ、及び前記テキストデータを解析する解析部と、前の質問に対応する前記解析部による解析結果に基づいて次の質問を決定する質問決定部と、前記解析部による解析結果に基づいて前記ユーザに対する前記評価情報を生成する評価部と、を備える。

前記端末装置は、前記ユーザによる選択操作に応じて疑似面接におけるコース及びレベルのうちの少なくとも一方を設定する設定部、を備えることができ、前記質問決定部は、設定された前記疑似面接におけるコース及びレベルのうちの少なくとも一方に基づいて前記疑似面接における前記質問を決定することができる。

前記サーバ装置は、前記質問に対応する解析結果に基づいて前記ユーザに対するリアクションを決定するリアクション決定部、を備えることができ、前記出力部は、決定された前記リアクションを出力することができる。

前記解析部は、前記解析結果として、前記前の質問に対するユーザの回答に所定のキーワードが含まれていたか否かを解析することができ、前記質問決定部は、前記前の質問に対する回答に含まれていた前記所定のキーワードに関する質問を前記次の質問に決定することができる。

前記収集部は、前記疑似面接における質問に対して回答する前記ユーザの様子を録画することができ、前記解析部は、前記ユーザの音声を録音した前記音声データ、前記テキストデータ、及び前記ユーザの様子を録画した画像データを解析することができる。

前記解析部は、前記解析結果として、前記ユーザの回答に所定のキーワードが含まれているか、発声の速度、声量、長さ、及び緊張度のうちの少なくとも一つを前記評価部に出力することができる。

前記評価部は、前記評価情報として、緊張度、伝わり易さ判定、会話の長さ、会話速度、声量、企業分析、自己分析、経験・スキル、協調性、帰属意識、展開力、努力・熱意、一貫性、誇張・嘘判定、論理性、主体性、柔軟性、ストレス耐性、理解力、ネガ・ポジ判定のうちの少なくとも一つを生成することができる。

前記出力部は、質問中の面接官の画像、及び前記面接官からの質問に回答中の前記ユーザの画像の少なくとも一方を表示することができる。

前記サーバ装置は、求人票、職務経歴書、履歴書、及びプロフィール情報のうちの少なくとも一つに基づいて前記ユーザに対する質問を生成する質問生成部、を備えることができる。

本発明の他の態様に係る疑似面接方法は、端末装置とサーバ装置とからなる疑似面接システムによる疑似面接方法であって、前記サーバ装置による、疑似面接における質問を決定する第１の質問決定ステップと、前記端末装置による、決定された前記質問をユーザに対して出力する第１の出力ステップと、前記端末装置による、前記質問にして回答する前記ユーザの音声を録音する録音ステップと、前記端末装置による、前記ユーザの音声を録音した音声データをテキストデータに変換する音声認識ステップと、前記サーバ装置による、前記ユーザの前記音声データ、及び前記テキストデータを解析する解析ステップと、前記サーバ装置による、前の質問に対応する前記解析ステップによる解析結果に基づいて次の質問を決定する第２の質問決定ステップと、前記サーバ装置による、解析ステップの解析結果に基づいて前記ユーザに対する評価情報を生成する評価ステップと、前記端末装置による、生成された前記ユーザに対する前記評価情報を出力する第２の出力ステップと、を含む。

本発明のさらに他の態様に係る疑似面接装置は、疑似面接における質問にして回答するユーザの音声を録音する収集部と、前記ユーザの音声を録音した音声データをテキストデータに変換する音声認識部と、前記ユーザの前記音声データ、及び前記テキストデータを解析する解析部と、前の質問に対応する前記解析部による解析結果に基づいて次の質問を決定する質問決定部と、前記解析部の解析結果に基づいて前記ユーザに対する評価情報を生成する評価部と、前記ユーザに対して前記質問を出力し、また、前記ユーザに対する評価情報を出力する出力部と、を備える。

本発明のさらに他の態様に係るプログラムは、コンピュータを、疑似面接における質問にして回答するユーザの音声を録音する収集部と、前記ユーザの音声を録音した音声データをテキストデータに変換する音声認識部と、前記ユーザの前記音声データ、及び前記テキストデータを解析する解析部と、前の質問に対応する前記解析部による解析結果に基づいて次の質問を決定する質問決定部と、前記解析部の解析結果に基づいて前記ユーザに対する評価情報を生成する評価部と、前記ユーザに対して前記質問を出力し、また、前記ユーザに対する評価情報を出力する出力部と、して機能させる。

本発明によれば、疑似面接を受けるユーザが自身の評価を速やかに得ることができる。

上記した以外の課題、構成及び効果は、以下の実施形態の説明により明らかにされる。

図１は、本発明の一実施形態に係る疑似面接システムの構成例を示す図である。 図２は、質問ＤＢ（データベース）のデータ構造の一例を示す図である。 図３は、疑似面接処理の一例を説明するフローチャートである。 図４は、ホーム画面の表示例を示す図である。 図５は、音声チェック画面の表示例を示す図である。 図６は、カメラチェック画面の表示例を示す図である。 図７は、面接画面の表示例を示す図である。 図８は、面接画面の他の表示例を示す図である。 図９は、評価画面の表示例を示す図である。 図１０は、評価詳細画面の表示例を示す図である。

以下、本発明に係る一実施形態を図面に基づいて説明する。なお、一実施形態を説明するための全図において、同一の部材には原則として同一の符号を付し、その繰り返しの説明は省略する。また、以下の実施形態において、その構成要素（要素ステップ等も含む）は、特に明示した場合および原理的に明らかに必須であると考えられる場合等を除き、必ずしも必須のものではないことは言うまでもない。また、「Ａからなる」、「Ａよりなる」、「Ａを有する」、「Ａを含む」と言うときは、特にその要素のみである旨明示した場合等を除き、それ以外の要素を排除するものでないことは言うまでもない。同様に、以下の実施形態において、構成要素等の形状、位置関係等に言及するときは、特に明示した場合および原理的に明らかにそうでないと考えられる場合等を除き、実質的にその形状等に近似または類似するもの等を含むものとする。

＜本発明の一実施形態に係る疑似面接システム１０＞
図１は、本発明の一実施形態に係る疑似面接システム１０の構成例を示している。

疑似面接システム１０は、例えば、就職活動を行う求職者（以下、ユーザと称する）に対して疑似的な面接を行い、疑似面接におけるユーザの評価を速やかにユーザに出力するものである。ユーザは、疑似面接における自身の評価を速やかに把握することができ、該疑似面接を、例えば、企業等の求人側が実施する実際の面接の練習として利用できる。

疑似面接システム１０は、ネットワーク１１を介して接続された端末装置２０、及びサーバ装置３０を備える。ネットワーク１１は、インターネット、携帯電話通信網等に代表される双方向通信網である。

端末装置２０は、例えば、スマートフォン、タブレット型ＰＣ(Personal Computer)、ノート型ＰＣ、デスクトップ型ＰＣ等の一般的なコンピュータにて専用のアプリケーションプログラムを実行することにより実現される。

ただし、一般的なコンピュータにて汎用のＷｅｂブラウザを用いて所定のサーバ（例えば、サーバ装置３０あるいはサーバ装置３０と通信可能なＷｅｂサーバ）に接続することにより端末装置２０を実現するようにしてもよい。この場合、所定のサーバは、以下に説明する端末装置２０の処理部２１の機能ブロックを備え、所定のサーバが備える各機能ブロックとユーザの使用するコンピュータ（Ｗｅｂブラウザ）との情報の入出力は、各機能ブロックが生成した操作画面（Ｗｅｂページ）を介して行われる。

さらに、端末装置２０は、以下に説明する機能ブロックの一部または全部を実現する集積回路等のハードウェアを備える専用装置（例えば対話型玩具やスマートスピーカ）であってもよい。

以下、端末装置２０は、ＣＰＵ(Central Processing Unit)等のプロセッサ、ＤＲＡＭ(Dynamic Random Access Memory)等のメモリ、ＳＳＤ(Solid State Drive)等のストレージ、表示デバイスとしてのディスプレイ、ディスプレイに積層された入力デバイスとしてのタッチパネル、マイクロフォン及びスピーカ等の音声入出力デバイス、光学レンズ及びＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサ等からなるカメラモジュール、並びに、通信モジュールを備えるスマートフォンにて専用のアプリケーションプログラムを実行することにより実現されるものとして説明する。

端末装置２０は、処理部２１、記憶部２２、操作部２３、音声入出力部２４、表示部２５、撮像部２６、及び通信部２７を備える。

処理部２１は、スマートフォンのプロセッサにより実現される。処理部２１は、操作受付部２１１、設定部２１２、収集部２１３、音声認識部２１４、発話制御部２１５、及び表示制御部２１６の各機能ブロックを有する。これらの機能ブロックは、スマートフォンのプロセッサが専用のアプリケーションプログラムを実行することによって実現される。

操作受付部２１１は、スマートフォンの操作部２３に対するユーザからの操作を受け付けて、ディスプレイ上に表示されているどの操作ボタン等が操作されたのかを特定する。

設定部２１２は、操作受付部２１１によって特定されたユーザの操作に基づき、疑似面接のコース、及びレベルの設定を受け付ける。

疑似面接のコースとしては、例えば、一般転職、役員面接、新卒入社、外資(英語)、ＳＥ(System Engineer)転職（Ｗｅｂ）、未経験ＳＥ転職（Ｗｅｂ）、ＳＥ転職（スマホアプリ）、Ｗｅｂデザイナ転職、Ｗｅｂディレクタ転職等が想定される。さらに、例えば、特定の業種や業界等に特化したコースや、特定の会社に特化したコースを設けてもよい。さらに、求職面接だけでなく、例えば、大学入学試験や各種資格試験の面接に特化したコースを設けてもよい。

レベルとしては、例えば、初級、中級、及び上級の３段階を設けることが想定される。レベルが初級の場合、質問数は５問程度、ユーザの回答に対して深堀する質問の頻度は比較的少なめとされる。レベルが中級の場合、質問数は８問程度、ユーザの回答に対して深堀する質問の頻度は半分程とされる。レベルが上級の場合、質問数は１０問程度、ユーザの回答に対して深堀する質問の頻度は多めとされる。ただし、質問数については、絶対的な値ではなく、ユーザの回答内容に応じて増加したり、減少したりする。

さらに、設定部２１２は、ユーザのプロフィール情報（年齢、業種、就業状況（在学中、離職中、在職中等）、転職回数、マネジメント経験の有無、使用言語等）の設定を受け付ける。

収集部２１３は、音声入出力部２４を制御して、疑似面接の質問に回答するユーザの音声を録音し、その音声データを記憶部２２に一時的に記録させる。また、収集部２１３は、撮像部２６を制御して疑似面接の質問に回答するユーザの様子を撮像、録画させ、その動画像データを記憶部２２に一時的に記録させる。なお、動画像データの代わりに所定の間隔で撮像された静止画像データを録画してもよい。また、音声データと動画像データを個別に録音、録画する代わりに、音声付きの動画像データを録画するようにしてもよい。またさらに、ユーザの様子を撮像、録画させる動作は、１問目の回答時だけでもよく、２問目以降は省略してもよい。

音声認識部２１４は、収集部２１３によって録音された、疑似面接の質問に回答するユーザの音声データを音声認識によりテキストデータに変換する。音声認識部２１４は、認識できる言語は、日本語に限らず、多言語に対応できるようにすることが望ましい。なお、音声認識部２１４は、音声データをネットワーク１１を介して外部のサーバ装置（音声認識サービスを提供するクラウドサーバ等）に送信し、音声認識の結果としてテキストデータを取得するようにしてもよい。また、音声認識部２１４を端末装置２０ではなく、サーバ装置３０に設けるようにしてもよい。

発話制御部２１５は、サーバ装置３０から送信された、疑似面接における質問の音声データを再生して音声入出力部２４から出力させる。

表示制御部２１６は、各種の画面を表示するための画像データを記憶部２２から読み出してディスプレイに表示させる。また、表示制御部２１６は、サーバ装置３０から送信された、ユーザに対する評価情報等をディスプレイに表示させる。

記憶部２２は、スマートフォンのメモリ、及びストレージによって実現される。記憶部２２には、各種の画面を表示するための画像データが予め格納されている。また、記憶部２２には、収集部２１３によって録音された疑似面接の質問に回答するユーザの音声データ、及び録画された動画像データが一時的に格納される。なお、記憶部２２には、上記以外の情報やデータを格納してもよい。

操作部２３は、スマートフォンのディスプレイに積層された透明なタッチパネルによって実現される。音声入出力部２４は、スマートフォンの音声入出力デバイスにより実現される。表示部２５は、スマートフォンのディスプレイによって実現される。これにより、ユーザは画面上に表示されている操作ボタン等に対して操作を行うことができる。撮像部２６は、スマートフォンのカメラモジュールによって実現される。音声入出力部２４、及び表示部２５は、本発明の出力部に相当する。

通信部２７は、スマートフォンの通信モジュールによって実現される。通信部２７は、ネットワーク１１を介してサーバ装置３０に接続し、ユーザによる各種の設定情報、ユーザの回答に対応する音声データ、テキストデータ、及び動画像データを送信する。また、通信部２７は、サーバ装置３０から送信される、疑似面接における面接官の画像データや質問の音声データ等を受信する。

サーバ装置３０は、処理部３１、記憶部３２、及び通信部３３の各機能ブロックを備える。サーバ装置３０は、ＣＰＵ(Central Processing Unit)等のプロセッサ、ＤＲＡＭ(Dynamic Random Access Memory)等のメモリ、ＨＤＤ(Hard Disk Drive)やＳＳＤ(Solid State Drive)等のストレージ、キーボード、マウス、タッチパネル等の入力デバイス、ディスプレイ等の出力デバイス、及び、ＮＩＣ(Network Interface Card)等の通信モジュール（いずれも不図示）を備えるサーバコンピュータ等の一般的なコンピュータからなる。

処理部３１は、コンピュータのプロセッサにより実現される。処理部３１は、質問決定部３１１、解析部３１２、リアクション部３１３、評価部３１４、及び質問生成部３１５の各機能ブロックを有する。これらの機能ブロックは、コンピュータのプロセッサがメモリにロードされた所定のプログラムを実行することによって実現される。ただし、これらの機能ブロックの一部または全部を集積回路等によりハードウェアとして実現してもよい。

質問決定部３１１は、端末装置２０のユーザが選択した疑似面接のコース及びレベルに基づき、記憶部３２の質問ＤＢ３２１を参照して、疑似面接における質問を決定する。具体的には、疑似面接のコース及びレベルに対応する質問リスト群から、前回選択した質問リスト以外の質問リストをランダムに又は所定の順序で１つを選択し、どの質問リストを選択したかを表す情報を記憶部３２に記録する。そして、１問目の質問については、選択した質問リストの１番目に記録されている質問ＩＤを読み出し、読み出した質問ＩＤに対応する質問を質問群から読み出すことによって質問を決定する。２問目以降については、質問リストから、２番目以降に記録されている質問ＩＤを順に、またはランダムに読み出して、読み出した質問ＩＤに対応する質問を質問群から読み出すことによって質問を決定するか、または、前問に対するユーザの回答の内容に基づいて次の質問を決定する。例えば、前問に対するユーザの回答に所定のトリガーワードが含まれていた場合、トリガーワードに関する深堀り質問を次の質問に決定する。この場合、ユーザに対する質問数は、深堀り質問の分だけ増加することになる。なお、１問目の質問から質問ＩＤをランダムに読み出して決定するようにしてもよい。また、ユーザが選択した疑似面接のコース及びレベルだけでなく、ユーザが設定したプロフィール情報（年齢、業種、就業状況、転職回数、マネジメント経験の有無等）に基づいて質問を決定するようにしてもよい。

ここで、深堀り質問とは、例えば、「生産性」がトリガーワードとして予め設定されていた場合、前問に対してユーザから「ＸＸによって「生産性」を上げました」との回答が得られたときには、次の質問として「どうやって「生産性」を上げたのかもう少し詳しく教えて下さい」等とトリガーワード「生産性」に関連したより具体的な回答を求める質問を意味する。

さらに、質問決定部３１１は、決定した質問に対応する音声データを音声ＤＢ３２２から読み出し、また、画像ＤＢ３２３から面接官の画像データを読み出して、通信部３３に対し、ネットワーク１１を介して端末装置２０に送信させる。なお、サーバ装置３０から端末装置２０に対し、質問に対応する音声データの代わりにテキストデータを送信するようにし、端末装置２０にて音声合成処理によりテキストデータから音声データを生成するようにしてもよい。

解析部３１２は、疑似面接における質問に回答中のユーザの音声データ、テキストデータ、及び動画像データを解析する。具体的には、例えば、テキストデータに基づいてユーザの回答に所定のキーワード（トリガーワード、グッドワード、ノーグッドワード、ポジティブワード、ネガティブワード）が含まれているか否か、回答に含まれるワード数を解析する。また、音声データに基づいて声量、回答時間、質問終了から回答開始までの思考時間を解析する。また、音声データ及び動画像データに基づいて緊張度を解析する。また、回答の速度（回答時間／ワード数、又はワード数／回答時間）も解析する。緊張度の解析は、例えば、音声のトーンや顔の表情を「笑顔」、「冷静」、「怒り」、「戸惑い」、「恐れ」、「悲しみ」、「驚き」等の項目別に数値化し、それらを総合的に判断して、緊張しているか否かあるいは緊張の度合いを解析する。なお、解析部３１２は、音声データ、テキストデータ、及び動画像データを、ネットワーク１１を介して外部のサーバ装置（解析サービスを提供するクラウドサーバ等）に送信し、解析の結果を取得するようにしてもよい。

リアクション部３１３は、ユーザの回答に対する解析部３１２による解析結果（回答の内容）に基づいて疑似面接における面接官のリアクションを決定する。リアクションとしては、例えば、顔の表情の変化、頭部の頷きや首を傾げる等の動作、各種の発声等が想定される。

面接官の発声の具体例としては、ユーザの回答が平凡な内容であった場合、通常の声のトーンで「ありがとうございます。では、次の質問に移ります」等が想定される。回答が高評価であった場合（所定のグッドワードが含まれていた場合等）、面接官側が好印象を得たことが伝わるように声の高いトーンで「素晴らしいですね。では、次の質問に移ります」等が想定される。回答が低評価であった場合（所定のノーグッドワードが含まれていた場合等）、面接官側が残念な印象を得たことが伝わるように声の低いトーンで「そうなんですね。では、次の質問に移ります」等が想定される。さらに、ユーザの回答に所定のトリガーワードが含まれていた場合、面接官側が興味を持ったことが伝わるように声の高いトーンで「なるほど。」等が想定され、この後、トリガーワードに関する深掘り質問に移行する。

さらに、リアクション部３１３は、決定したリアクションに対応する音声データ及び画像データを音声ＤＢ３２２または画像ＤＢ３２３から読み出し、通信部３３に対し、ネットワーク１１を介して端末装置２０に送信させる。なお、サーバ装置３０から端末装置２０に対し、リアクションに対応する音声データの代わりにテキストデータを送信するようにし、端末装置２０にて音声合成処理によりテキストデータから音声データを生成するようにしてもよい。

評価部３１４は、解析部３１２による各質問の回答に対する解析結果に基づいてユーザに対する評価情報を生成し、通信部３３に対し、ネットワーク１１を介して端末装置２０に送信させる。評価部３１４が生成する評価情報には、緊張度、伝わり易さ判定、会話の長さ、会話速度、声量、企業分析、自己分析、経験・スキル、協調性、帰属意識、展開力、努力・熱意、一貫性、誇張・嘘判定、論理性、主体性、柔軟性、ストレス耐性、理解力、ネガ・ポジ判定等の評価項目が含まれる。

緊張度は、解析部３１２の解析結果（緊張度）を用いればよい。伝わり易さ判定は、各質問への回答のテキストデータにおいて、各質問に関する所定の評価キーワードがどのように含まれているか否かに基づいて評価することができる。例えば「僕は、僕は・・・」等のように同じ言葉が頻発したり、「あー」、「えー」等の無意味なつなぎ言葉が頻発したりした場合、低評価と判定し、例えば「理由は２つあります。１つ目は、・・・、２つ目は、・・・」等のように論理的に話していたり、「・・・なぜなら」等のように理由を説明していたり、「はい（いいえ）、・・・です」等のようにはじめから結論を言っていたり、「・・・％売上向上に貢献」、「・・・人日実施」、「・・・円の利益を獲得」等のように数字を踏まえて伝えていたりした場合、高評価と判定することが考えられる。

会話の長さ、会話速度、及び声量の評価項目は、解析部３１２の解析結果（回答時間、思考時間、回答の速度、声量）を用いればよい。なお、これらの解析結果を使って、ユーザの印象を評価してもよい。ユーザの印象は、声量、表情、話の速度（回答時間／ワード数、又は回答時間／ワード数）、質問終了から回答開始までの思考時間等から評価され、例えば、声量が大きく表情の変化が豊かである場合には好印象と評価され、話の速度が速かったり（早口であったり）、質問が終了した直後に間髪入れずに回答したり、質問が終了していないにも拘らず回答したりした場合には、人の話を聞かない性格と判断されて悪印象と評価される。

企業分析、自己分析、経験・スキル、協調性、帰属意識、展開力、努力・熱意、一貫性、誇張・嘘判定、論理性、主体性、柔軟性、ストレス耐性、理解力、ネガ・ポジ判定の評価項目は、各質問への回答のテキストデータにおいて、各質問に関する所定の評価キーワードが含まれているか否かに基づいて評価することができる。例えば、回答にグッドワードやポジティブワードが含まれていれば加点され、回答にノーグッドワードやネガティブワードが含まれていれば減点される。また、各評価項目は、各質問への回答時間が、各質問に関する所定の基準回答時間より長いか否か（又は短いか否か）に基づいて評価することもできる。例えば、回答時間が基準回答時間より長い場合に加点され、回答時間が基準回答時間より短い場合に減点される。質問内容によっては加点と減点が反対の場合もあり得る。なお、どの質問をどの評価項目の算出に使うかが定義されていてもよい。

ネガ・ポジ判定は、例えば回答にネガティブワード（またはポジティブワード）が含まれていたか否かによって判定することができる

誇張・嘘判定は、深掘り質問に対して適切に回答できない場合には誇張や嘘と判定する。例えば、質問「なぜ弊社を希望しましたか？」、回答「企業理念が素晴らしいと思いまして」、深堀り質問「なるほど、では、企業理念はなんですか？」のように問答が進んだ後、次の回答に所定のノーグッドワード（「分かりません」、「知りません」、「あー、えー、うー」等）が含まれていた場合に、適切な回答でないと判定することができる。

質問生成部３１５は、所定の書式に従って作成された求人票を企業等から取得し、求人票に基づいて疑似面接における質問を生成する。また、質問生成部３１５は、ユーザが設定したプロフィール情報や、所定の書式に従ってユーザが作成した職務経歴書、履歴書等を取得し、職務経歴書、履歴書等に基づいて疑似面接におけるユーザに対する質問を生成する。

具体的には、例えば、職務経歴書に記載されている転職回数に応じ、「転職回数が少し多いかなと思いますが、それぞれの転職理由を教えてください。」等の質問を生成する。また例えば、求人票、職務経歴書、履歴書、プロフィール情報等の各種の記入欄（求める人材、資格、志望動機等）から、所定の１つ以上のキーワードを抽出し、抽出した各キーワードに関連する質問を質問ＤＢ３２１又は他に用意した質問ＤＢから抽出することにより生成する。

生成した質問の音声データは、予め用意されている単語の音声データや雛形の音声データを組み合わせたり、一部または全部を音声合成処理により生成したりすればよい。

質問生成部３１５により生成した質問は、例えば、特定の企業やユーザに特化した質問集としては、質問ＤＢ３２１に登録するようにし、疑似面接のコースとして選択できるようにしてもよい。

また、疑似面接の既存のコースに対応する質問に、質問生成部３１５により生成した質問を混在させるようにしてもよい。このようにすれば、ユーザの個別の事情を踏まえた実際の面接の練習を行うことができる。

なお、質問決定部３１１、解析部３１２、リアクション部３１３、評価部３１４、及び質問生成部３１５の各々は、少なくとも一部の機能の処理にＡＩ（Artificial Intelligence）を用いて実現してもよい。

記憶部３２は、コンピュータのメモリ及びストレージによって実現される。記憶部３２には、質問ＤＢ３２１、音声ＤＢ３２２、画像ＤＢ３２３、及びキーワードＤＢ３２４が格納されている。なお、記憶部３２には、上記以外の情報やデータを格納してもよい。

質問ＤＢ３２１には、疑似面接における質問が記録されている。質問ＤＢ３２１の詳細については後述する。音声ＤＢ３２２には、質問ＤＢ３２１に記録されている各質問を声優等が発声させて録音した音声データや、リアクションの音声データ等が記録されている。なお、音声データについては、疑似面接の面接官に合わせて、同一の質問やリアクションに対して複数（例えば、男性の音声、女性の音声、多言語の音声等）の音声データを用意することが望ましい。さらに、声優等の音声を録音して音声データを用意する代わりに、質問やリアクションのテキストデータを音声合成処理により読み上げて音声データを生成するようにしてもよい。

画像ＤＢ３２３には、端末装置２０の画面に表示される、疑似面接において質問したり、リアクションしたりする面接官の動画像（静止画像でもよい）が記録されている。該動画像は、実際に俳優等の演技を撮像した実写画像でもよいし、ＣＧ(Computer Graphics)やアニメーション等であってもよい。キーワードＤＢ３２４には、トリガーワード、グッドワード、ノーグッドワード、ポジティブワード、及びネガティブワードが予め記録されている。

通信部３３は、コンピュータの通信モジュールによって実現される。通信部３３は、ネットワーク１１を介して端末装置２０に接続し、各種のデータを通信する。

なお、サーバ装置３０を複数の一般的なコンピュータから成し、サーバ装置３０が備える各機能ブロックやＤＢを分散して配置してもよい。また、サーバ装置３０が備える各機能ブロックやＤＢの一部または全部を端末装置２０側に設けるようにしてもよい。

次に、図２は、サーバ装置３０の記憶部３２に格納されている質問ＤＢ３２１のデータ構造の一例を示している。

質問ＤＢ３２１には、疑似面接のコース及びレベルに対応付けて、複数の質問リストからなる質問リスト群が記録されている。質問リストには、質問ＩＤが所定の数だけ記録されている。さらに、質問ＤＢ３２１には、質問群、及び深掘り質問群が記録されている。質問群には、質問ＩＤにそれぞれ対応付けられた複数の質問が記録されている。深掘り質問群には、前問に対する回答に含まれていたトリガーワードにそれぞれ対応付けられた複数の深掘り質問が記録されている。

＜疑似面接システム１０による疑似面接処理＞
次に、図３は、疑似面接システム１０による疑似面接処理の一例を説明するフローチャートである。

該疑似面接処理は、端末装置２０に対するユーザからの所定の操作に応じて開始される。はじめに、端末装置２０の表示制御部２１６が、ホーム画面１００を表示部２５に表示させる（ステップＳ１）。

図４は、ホーム画面１００の表示例を示している。ホーム画面１００には、疑似面接におけるコースを選択するためのコース選択欄１０１、レベルを選択するためのレベル選択ボタン１０２、及び、次の音声チェック画面１１０に遷移するための「次へ」ボタン１０３が設けられている。

図３に戻る。ホーム画面１００において、ユーザが、疑似面接のコース及びレベルを選択し、「次へ」ボタン１０３を操作すると（ステップＳ２）、操作受付部２１１が、選択操作を受け付け、設定部２１２が疑似面接のコース及びレベルを記憶部２２に記録する。そして、通信部２７が、疑似面接のコース及びレベルを、ネットワーク１１を介してサーバ装置３０に送信する。

次に、表示制御部２１６が音声チェック画面１１０（図５）を表示部２５に表示させる（ステップＳ３）。

図５は、音声チェック画面１１０の表示例を示している。音声チェック画面１１０には、ユーザの音量の大小を表す音量ゲージ１１１、ホーム画面１００に遷移するための「ホーム」ボタン１１２、及び、次のカメラチェック画面１２０に遷移するための「次へ」ボタン１１３が設けられている。

図３に戻る。音声チェック画面１１０において、ユーザが、自己の音量を確認し、「次へ」ボタン１１３を操作すると、次に、表示制御部２１６がカメラチェック画面１２０（図６）を表示部２５に表示させる（ステップＳ４）。

図６は、カメラチェック画面１２０の表示例を示している。カメラチェック画面１２０には、撮像部２６によって撮像されているユーザのリアルタイムの画像と、ユーザと端末装置２０との位置関係を確認するためのシルエット１２１とが表示される。さらに、カメラチェック画面１２０には、ホーム画面１００に遷移するための「ホーム」ボタン１２２、前の音声チェック画面１１０に遷移するための「戻る」ボタン１２３、及び、次の面接画面２００（図７）に遷移するための「次へ」ボタン１２４が設けられている。

図３に戻る。カメラチェック画面１２０において、ユーザが、自己と端末装置２０との位置関係を確認して「次へ」ボタン１２４を操作すると、次に、サーバ装置３０の質問決定部３１１が、記憶部３２の質問ＤＢ３２１を参照して、ステップＳ２で端末装置２０から送信されている疑似面接のコース及びレベルに対応する質問リスト群から、該ユーザに対して前回選択した質問リスト以外の質問リストをランダムに１つ選択し、選択した質問リストに基づいて１問目の質問を決定する。さらに、質問決定部３１１は、決定した質問に対応する音声データを音声ＤＢ３２２から読み出し、また、画像ＤＢ３２３から面接官の動画像データを読み出して、通信部３３に対し、ネットワーク１１を介して端末装置２０に送信させる（ステップＳ５）。

次に、端末装置２０の表示制御部２１６が、サーバ装置３０から送信された面接官の動画像データを再生した動画像を表示する面接画面２００（図７）を表示部２５に表示させ、発話制御部２１５が、サーバ装置３０から送信された質問の音声データを再生して音声入出力部２４から出力させる（ステップＳ６）。

図７は、面接画面２００の表示例を示している。面接画面２００には、画面の略２分割して面接官表示領域２０１、及びユーザ表示領域２０２が設けられている。面接官表示領域２０１には、サーバ装置３０から送信された動画像データを表示制御部２１６が再生して得られた面接官の動画像が表示される。ユーザ表示領域２０２には、撮像部２６によって撮像中のユーザの動画像が表示される。ユーザは、ユーザ表示領域２０２にて、自身の回答中の様子を確認できる。

さらに、面接画面２００には、現在の質問に対するユーザの回答が終了したことを知らせるための「回答終了」ボタン２０３、及び現在の質問をスキップするための「スキップ」ボタン２０４が設けられている。ただし、「スキップ」ボタン２０４は、基本的には設けられず、特定の質問（例えば、専門的な質問「最近読んだ業務に関わる専門書を教えてください。」等）が出された時にだけ設けられる。

ユーザは、「スキップ」ボタン２０４を操作することにより、回答に自信がない質問をスキップすることができる。この場合、後述するステップＳ７～Ｓ１０は省略されて、処理はステップＳ１１に進められる。

図８は、面接画面２００の他の表示例を示している。図８の面接画面２００では、画面の大部分を面接官表示領域２０１が占め、面接官表示領域２０１に重畳し、面接官表示領域２０１よりも縮小されたユーザ表示領域２０２が設けられている。なお、図８の面接画面２００において、面接官表示領域２０１とユーザ表示領域２０２とを置換できるようにし、ユーザの動画像を面接官の動画像よりも大きく表示するようにしてもよい。また、ユーザ表示領域２０２を消して、面接官表示領域２０１だけを残すようにしてもよい。

図３に戻る。質問の音声が出力されてから面接画面２００の「回答終了」ボタン２０３が操作されるか、ユーザから回答の終了を意味する所定の言葉「以上です。」等が発声されるまでの間、収集部２１３が、音声入出力部２４を制御して、回答中のユーザの音声を録音させるとともに、撮像部２６を制御して回答中のユーザの様子を録画させる（ステップＳ７）。次に、音声認識部２１４が、回答中のユーザの音声データを順次、音声認識によりテキストデータに変換する（ステップＳ８）。そして、ユーザが面接画面２００の「回答終了」ボタン２０３を操作したことに応じ、収集部２１３が、回答中のユーザの音声の録音と録画とを停止させて、通信部２７が、回答中のユーザの音声データ、音声認識結果のテキストデータ、及び動画像データを、ネットワーク１１を介してサーバ装置３０に送信する（ステップＳ９）。

次に、サーバ装置３０の解析部３１２が、端末装置２０から送信された、回答中のユーザの音声データ、音声認識結果のテキストデータ、及び動画像データを解析する（ステップＳ１０）。次に、リアクション部３１３が、ユーザの回答に対する解析部３１２による解析結果に基づいて疑似面接における面接官のリアクションを決定し、決定したリアクションに対応する音声データ及び画像データを音声ＤＢ３２２及び画像ＤＢ３２３から読み出し、通信部３３に対し、ネットワーク１１を介して端末装置２０に送信させる（ステップＳ１１）。これにより、端末装置２０に表示された面接画面２００の面接官表示領域２０１における面接官がリアクションとしての動作や発言を行うことになる。

次に、質問決定部３１１が、ステップＳ５で選択した質問リストに記録されている全ての質問ＩＤに対応する質問を質問群から読み出したか否かに基づき、現在の質問が最後の質問であるか否かを判定し（ステップＳ１２）、最後の質問ではないと判定した場合（ステップＳ１２でＮＯ）、次の質問を決定する（ステップＳ１３）。この後、処理はステップＳ６に戻されて、ステップＳ６～Ｓ１２が繰り返される。

そして、質問決定部３１１が、現在の質問が最後の質問であると判定した場合（ステップＳ１２でＹＥＳ）、次に、評価部３１４が、解析部３１２による各質問の回答に対する解析結果に基づいてユーザに対する評価情報を生成し、通信部３３に対し、ネットワーク１１を介して端末装置２０に送信させる（ステップＳ１４）。これにより、端末装置２０には、評価画面４１０（図９）が表示される。

図９は、評価画面４１０の表示例を示している。評価画面４１０には、総合的な判定結果をＡ，Ｂ，Ｃ，Ｄ等で表す総合判定４１１、解析結果の項目や評価結果の項目を数値化したレーダチャート４１２、及び総評４１３が表示される。レーダチャート４１２に表示する項目は、ユーザが選択することができる。さらに、評価画面４１０には、評価詳細画面４２０（図１０）に遷移するための「詳細」ボタン４１４が設けられている。ユーザが「詳細」ボタン４１４を操作すると、端末装置２０には、評価詳細画面４２０が表示される。

図１０は、評価詳細画面４２０の表示例を示している。評価詳細画面４２０には、選択欄４２１、「再生」ボタン４２２、再生領域４２３、及び質問別講評４２４が設けられている。ユーザが、何問目の質問に対する回答の動画像を再生するかを選択欄４２１にて選択し、「再生」ボタン４２２を操作すると、再生領域４２３には、選択欄４２１にて選択された質問に回答するユーザの様子を撮像した動画像が表示される。質問別講評４２４には、選択欄４２１にて選択された質問に回答するユーザに対する講評が表示される。

以上で、疑似面接システム１０による疑似面接処理の説明を終了する。以上に説明した疑似面接処理によれば、ユーザは、疑似面接における自身の評価を速やかに得ることができる。

＜変形例＞
サーバ装置３０あるいは端末装置２０にユーザに対する通知機能を設け、疑似面接を所定期間実施していないユーザに対して「しばらく面接練習してないのでやってみませんか？」等を通知したり、ユーザが設定したプロフィール情報に基づき、ユーザに適した転職エージェントや転職情報をユーザに勧めたりするようにしてもよい。

サーバ装置３０あるいは端末装置２０に疑似面接の結果を履歴一覧として記録し表示する機能を設け、ユーザが、履歴一覧から過去の疑似面接を振り返ることができるようにしてもよい。これにより、実際の面接を受ける前に、Ａ判定であった疑似面接を見直して自信をつけたり、Ｃ判定であった疑似面接で受けたアドバイスを確認して注意をしたりができる。なお、履歴一覧はユーザが任意の削除できるようにすることが望ましい。

本発明は、上述した実施形態に限定されるものではなく、様々な変形が可能である。例えば、上述した実施形態は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、ある実施形態の構成の一部を他の実施形態の構成に置き換えたり、追加したりすることが可能である。

また、上記の各構成、機能、処理部、処理手段等は、それらの一部又は全部を、例えば集積回路で設計する等によりハードウェアで実現してもよい。また、上記の各構成、機能等は、プロセッサがそれぞれの機能を実現するプログラムを解釈し、実行することによりソフトウェアで実現してもよい。各機能を実現するプログラム、テーブル、ファイル等の情報は、メモリや、ハードディスク、ＳＳＤ等の記録装置、または、ＩＣカード、ＳＤカード、ＤＶＤ等の記録媒体に置くことができる。また、制御線や情報線は説明上必要と考えられるものを示しており、製品上必ずしも全ての制御線や情報線を示しているとは限らない。実際には殆ど全ての構成が相互に接続されていると考えてもよい。

１０・・・疑似面接システム、１１・・・ネットワーク、２０・・・端末装置、２１・・・処理部、２１１・・・操作受付部、２１２・・・設定部、２１３・・・収集部、２１４・・・音声認識部、２１５・・・発話制御部、２１６・・・表示制御部、２２・・・記憶部、２３・・・操作部、２４・・・音声入出力部、２５・・・表示部、２６・・・撮像部、２７・・・通信部、３０・・・サーバ装置、３１・・・処理部、３１１・・・質問決定部、３１２・・・解析部、３１３・・・リアクション部、３１４・・・評価部、３１５・・・質問生成部、３２・・・記憶部、３２１・・・質問ＤＢ、３２２・・・音声ＤＢ、３２３・・・画像ＤＢ、３２４・・・キーワードＤＢ、３３・・・通信部、１００・・・ホーム画面、１１０・・・音声チェック画面、１２０・・・カメラチェック画面、２００・・・面接画面、４１０・・・評価画面、４２０・・・評価詳細画面

Claims (12)

1. 端末装置、及びサーバ装置を含む疑似面接システムであって、
   前記端末装置は、
   疑似面接における質問に対して回答するユーザの音声を録音する収集部と、
   前記ユーザの音声を録音した音声データをテキストデータに変換する音声認識部と、
   前記ユーザに対して前記質問を出力し、また前記ユーザに対する評価情報を出力する出力部と、を備え、
   前記サーバ装置は、
   前記ユーザの前記音声データ、及び前記テキストデータを解析する解析部と、
   前の質問に対応する前記解析部による解析結果に基づいて次の質問を決定する質問決定部と、
   前記解析部による解析結果に基づいて前記ユーザに対する前記評価情報を生成する評価部と、を備える
   疑似面接システム。
2. 請求項１に記載の疑似面接システムであって、
   前記端末装置は、
   前記ユーザによる選択操作に応じて疑似面接におけるコース及びレベルのうちの少なくとも一方を設定する設定部、を備え、
   前記質問決定部は、設定された前記疑似面接におけるコース及びレベルのうちの少なくとも一方に基づいて前記疑似面接における前記質問を決定する
   疑似面接システム。
3. 請求項１または２に記載の疑似面接システムであって、
   前記サーバ装置は、
   前記質問に対応する解析結果に基づいて前記ユーザに対するリアクションを決定するリアクション決定部、を備え、
   前記出力部は、決定された前記リアクションを出力する
   疑似面接システム。
4. 請求項１～３のいずれか一項に記載の疑似面接システムであって、
   前記解析部は、前記解析結果として、前記前の質問に対するユーザの回答に所定のキーワードが含まれていたか否かを解析し、
   前記質問決定部は、前記前の質問に対する回答に含まれていた前記所定のキーワードに関する質問を前記次の質問に決定する
   疑似面接システム。
5. 請求項１～４のいずれか一項に記載の疑似面接システムであって、
   前記収集部は、前記疑似面接における質問に対して回答する前記ユーザの様子を録画し、
   前記解析部は、前記ユーザの音声を録音した前記音声データ、前記テキストデータ、及び前記ユーザの様子を録画した画像データを解析する
   疑似面接システム。
6. 請求項１～５のいずれか一項に記載の疑似面接システムであって、
   前記解析部は、前記解析結果として、前記ユーザの回答に所定のキーワードが含まれているか、発声の速度、声量、長さ、及び緊張度のうちの少なくとも一つを前記評価部に出力する
   疑似面接システム。
7. 請求項１～６のいずれか一項に記載の疑似面接システムであって、
   前記評価部は、前記評価情報として、緊張度、伝わり易さ判定、会話の長さ、会話速度、声量、企業分析、自己分析、経験・スキル、協調性、帰属意識、展開力、努力・熱意、一貫性、誇張・嘘判定、論理性、主体性、柔軟性、ストレス耐性、理解力、ネガ・ポジ判定のうちの少なくとも一つを生成する
   疑似面接システム。
8. 請求項１～７のいずれか一項に記載の疑似面接システムであって、
   前記出力部は、質問中の面接官の画像、及び前記面接官からの質問に回答中の前記ユーザの画像の少なくとも一方を表示する
   疑似面接システム。
9. 請求項１～８のいずれか一項に記載の疑似面接システムであって、
   前記サーバ装置は、
   求人票、職務経歴書、履歴書、及びプロフィール情報のうちの少なくとも一つに基づいて前記ユーザに対する質問を生成する質問生成部、を備える
   疑似面接システム。
10. 端末装置とサーバ装置とからなる疑似面接システムによる疑似面接方法であって、
    前記サーバ装置による、疑似面接における質問を決定する第１の質問決定ステップと、
    前記端末装置による、決定された前記質問をユーザに対して出力する第１の出力ステップと、
    前記端末装置による、前記質問にして回答する前記ユーザの音声を録音する録音ステップと、
    前記端末装置による、前記ユーザの音声を録音した音声データをテキストデータに変換する音声認識ステップと、
    前記サーバ装置による、前記ユーザの前記音声データ、及び前記テキストデータを解析する解析ステップと、
    前記サーバ装置による、前の質問に対応する前記解析ステップによる解析結果に基づいて次の質問を決定する第２の質問決定ステップと、
    前記サーバ装置による、解析ステップの解析結果に基づいて前記ユーザに対する評価情報を生成する評価ステップと、
    前記端末装置による、生成された前記ユーザに対する前記評価情報を出力する第２の出力ステップと、
    を含む疑似面接方法。
11. 疑似面接における質問にして回答するユーザの音声を録音する収集部と、
    前記ユーザの音声を録音した音声データをテキストデータに変換する音声認識部と、
    前記ユーザの前記音声データ、及び前記テキストデータを解析する解析部と、
    前の質問に対応する前記解析部による解析結果に基づいて次の質問を決定する質問決定部と、
    前記解析部の解析結果に基づいて前記ユーザに対する評価情報を生成する評価部と、
    前記ユーザに対して前記質問を出力し、また、前記ユーザに対する評価情報を出力する出力部と、
    を備える疑似面接装置。
12. コンピュータを、
    疑似面接における質問にして回答するユーザの音声を録音する収集部と、
    前記ユーザの音声を録音した音声データをテキストデータに変換する音声認識部と、
    前記ユーザの前記音声データ、及び前記テキストデータを解析する解析部と、
    前の質問に対応する前記解析部による解析結果に基づいて次の質問を決定する質問決定部と、
    前記解析部の解析結果に基づいて前記ユーザに対する評価情報を生成する評価部と、
    前記ユーザに対して前記質問を出力し、また、前記ユーザに対する評価情報を出力する出力部と、
    して機能させるプログラム。

Images