JP2017204267A - 発話認識装置及びゲーミングマシン - Google Patents

Abstract

【課題】発話したプレイヤに対する的確な演出動作をディーラー代替装置に高い信頼性で行わせる。【解決手段】発話認識装置５は、複数の人物について、各人物の口元を含む動画を撮影するカメラ機構５１１・５１２と、各人物の発話による音声を取得するマイク機構５１３と、マイク機構５１３が音声を取得したときにおけるカメラ機構５１１・５１２により撮影された各人物の口元の動きに基づいて、発話した人物を複数の人物の中から特定するメインユニット１０１とを有する。【選択図】図１

Description

本発明は、人間の発話内容を自動的に認識する発話認識装置及びゲーミングマシンに関する。

従来から、人間が発話したときに、発話した内容を自動的に認識し、表示装置や発話情報として出力する音声認識装置の開発が進められている（特許文献１等）。

特開２０１６−９９４６９号公報

しかしながら、上記従来の構成は、一人の人間が発話することを前提に形成されているため、複数の人間の発話が混在した状態では認識することができない。従って、隣り合う者同士の発話が混在するような場所においても、発話した人物を特定して音声認識装置による認識処理を行うことができることが望まれている。

そこで、本発明は、発話した人物を高い信頼性で特定することができる発話認識装置及びゲーミングマシンを提供することを目的する。

本発明は、発話認識装置であって、複数の人物について、各人物の口元を含む動画を撮影するカメラ機構と、前記各人物の発話による音声を取得するマイク機構と、前記マイク機構が音声を取得したときにおける前記カメラ機構により撮影された各人物の口元の動きに基づいて、発話した人物を前記複数の人物の中から特定する発話認識制御装置とを有する。

上記の構成によれば、マイク機構による音声と、カメラ機構で取得された各人物の口元の動きとに基づいて、発話した人物を特定することによって、隣り合う人物の距離が近くて音声だけでは発話した人物を特定し難い状況下においても、発話した人物を高い信頼性で特定することができる。

本発明における前記カメラ機構は、前記各人物を個別に撮影するように設定されており、前記マイク機構は、前記各人物の発話による音声を個別に取得するように設定されていてもよい。

上記の構成によれば、各人物ごとに撮影及び音声の取得が行われることによって、発話した人物を一層高い信頼性で特定することができる。

本発明における発話認識装置は、前記カメラ機構により撮影された前記動画と、当該動画の撮影時間とを記憶する動画記憶装置を有し、前記発話認識制御装置は、前記音声を取得したときの撮影時間を含む動画を前記動画記憶装置から読み出し、前記撮影時間の動画を用いて発話した人物を特定してもよい。

上記の構成によれば、動画を撮影するタイミングが音声を取得するタイミングよりも早くなるという時間差が生じていても、音声を取得したタイミングの撮影時間の動画を用いることにより時間差を解消することによって、発話した人物を一層高い信頼性で特定することができる。

本発明は、ゲーミングマシンであって、上記の発話認識装置を備えている。

上記の構成によれば、騒がしい環境下にゲーミングマシンが配置された場合であっても、発話した人物を高い信頼性で特定することができる。

本発明は、ゲーミングマシンであって、上記の発話認識装置と、遊技に使用される遊技用具の取り扱い動作と、前記人物であるプレイヤに対する演出動作とを行うディーラー代替装置と、を備えている。

上記の構成によれば、無人のゲーミングマシンに要請されるプレイヤに対する演出動作の高い信頼性を、発話した人物の特定という点で実現することができる。

本発明におけるゲーミングマシンは、前記発話認識制御装置で特定されたプレイヤの発話内容に対応する動作を前記ディーラー代替装置に実行させるように制御する制御装置を備えていてもよい。

上記の構成によれば、発話したプレイヤに対する的確な演出動作をディーラー代替装置に高い信頼性で行わせることができる。

本願発明のゲーミングマシンは、ゲームオブジェクトに対する処理を行う処理部を三次元位置に配置するアームと、前記アームを支持しプレイヤに対する動作を行う胴部とを有するゲームディーラー装置と、各プレイヤがゲームをプレイ可能な複数のステーションと、プレイヤの画像を撮影し記録する複数のカメラ装置と、プレイヤの音声を取得する複数のマイクロホン装置と、制御装置とを備えており、前記制御装置は、前記マイクロホン装置がプレイヤからの入力を受け取ったか否かを判定し、前記マイクロホン装置に入力があったときに、カメラ装置により記録された画像から各プレイヤの顔の表情を解析し、どのステーションでプレイヤが話しているのかを判定し、入力に対応する動作を行うように前記ゲームディーラー装置を制御する。

また、本願発明のゲーミングマシンは、ゲームオブジェクトに対する処理を行う処理部を三次元位置に配置するアームと、前記アームを支持しプレイヤに対する動作を行う胴部とを有するゲームディーラー装置と、各プレイヤがゲームをプレイ可能な複数のステーションと、前記複数のステーションの画像を撮影し記録するカメラ装置と、制御装置とを備えており、前記制御装置は、前記カメラ装置によって記録された画像から人の動きを解析し、解析結果に対応する動作を行うように前記ゲームディーラー装置を制御する。

また、本願発明のゲーミングマシンは、ゲームオブジェクトに対する処理を行う処理部を三次元位置に配置するアームと、前記アームを支持しプレイヤに対する動作を行う胴部とを有するゲームディーラー装置と、ゲームを行うゲームエリアと、前記ゲームエリアの画像を撮影し記録するカメラ装置と、制御装置とを備えており、前記制御装置は、前記カメラ装置によって撮影された画像から、新規オブジェクトがゲームエリアに入ってきたか否かを判断し、前記新規オブジェクトがゲームエリアに入ったと判断した場合、前記新規オブジェクトの加入に対応する動作を行うように前記ゲームディーラー装置を制御する。

また、本発明のゲームディーラー装置は、ゲームオブジェクトに対する処理を行う処理部を三次元位置に配置するアームと、前記アームを支持しプレイヤに対する動作を行う胴部と、前記アームと胴部の三次元移動パターンを記憶するメモリと、制御装置とを備えており、前記制御装置は、前記移動パターンと前記アームと胴部の移動を比較し、前記比較に基づいて、前記アームと前記胴部が誤動作しているか否かを判断する。

また、本発明のゲームディーラー装置は、ゲームオブジェクトに対する処理を行う処理部を三次元位置に配置するアームと、前記アームを支持しプレイヤに対する動作を行う胴部とを備え、前記胴部は、半透明樹脂の顔部を有し、前記顔部は異なる状態に対して異なる色を発する発光体を備えている。

また、本発明のルーレットゲーム装置は、回転レールと複数の停止位置とを有するルーレットテーブルであって、ルーレットボールが前記回転レールに沿って回転し前記停止位置の何れか一つに入り停止するように構成されたルーレットテーブルと、前記ルーレットテーブルの前記回転レール付近に配置され、前記ルーレットボールを回転用の打出し位置に保持するように構成されたボール支持部を有する。

本発明は、発話したプレイヤに対する的確な演出動作をディーラー代替装置に高い信頼性で行わせることができる。

ゲーミングマシンの概要を示す説明図である。 発話処理ルーチンのフローチャートである。 発話処理ルーチンの実行時におけるタイミングチャートである。 俯瞰処理ルーチンのフローチャートである。 感情の種類と感情動作との関係を示す説明図である。 セーフティー処理ルーチンのフローチャートである。 ゲーミングマシンの斜視図である。 ロボットディーラの斜視図である。 ゲーミングマシンにおける撮影状態を示す説明図である。 ゲーミングマシンの要部拡大図である。 ルーレット球保持機構の動作状態を示す説明図である。 ルーレット球保持機構の動作状態を示す説明図である。 ルーレット球保持機構の斜視図である。 ルーレット球保持機構の斜視図である。 ルーレット球保持機構におけるルーレット球の保持過程を示す説明図である。 ルーレット装置の要部断面図である。 ルーレット球保持機構におけるルーレット球の保持過程を示す説明図である。 ルーレット球保持機構におけるルーレット球の抜脱過程を示す説明図である。 ルーレット球保持機構におけるルーレット球の動作状態を示す説明図である。 警報境界線と停止境界線の状態を示す説明図である。 ゲーミングマシンの概要を示す説明図である。 管理装置の表示状態を示す説明図である。 ゲーミングマシンの状況把握処理を示す説明図である。 ゲーミングマシンの会話処理を示す説明図である。 ゲーミングマシンの行動処理を示す説明図である。 警報境界線と停止境界線の状態を示す説明図である。 ロボットディーラの動作経路の状態を示す説明図である。 ロボットディーラの顔面の表情光領域を示す説明図である。 感情と表情との関係を示す説明図である。 本発明の実施形態におけるゲーミングマシンの概略斜視図である。 図２８に示すゲーミングマシンの部分拡大図である。 本発明の実施形態におけるゲーミングマシンの右手側を示す概略斜視図である。 本発明の実施形態におけるゲーミングマシンの左手側を示す概略斜視図である。 本発明の実施形態におけるゲーミングマシンの右手側を示す概略正面図である。 本発明の実施形態におけるゲーミングマシンの右手側を示す概略後面図である。 本発明の実施形態におけるゲーミングマシン左手側のオブジェクトホルダを示す概略断面図である。 本発明の実施形態におけるゲームディーラー装置の表情を示す図である。 本発明の実施形態におけるゲーミングマシンの概略ブロック図である。 本発明の実施形態におけるゲーミングマシンの概略斜視図である。 本発明の実施形態における情報取得部の概略図である。 本発明の実施形態におけるオーバービューカメラユニットによって撮影された画像である。 本発明の実施形態における情報取得部の概略図である。 本発明の実施形態におけるプレイヤカメラユニットによって撮影された画像である。 本発明の実施形態におけるゲーミングマシンの動作を示すフローチャートである。 本発明の実施形態におけるゲーミングマシンの部分動作を示すフローチャートである。 本発明の実施形態におけるゲーミングマシンのモニターの画面を示す図である。 本発明の実施形態におけるゲーミングマシンの部分動作を示すフローチャートである。 本発明の実施形態におけるゲーミングマシンの部分動作を示すフローチャートである。

（実施形態１）
以下、本発明の実施形態１を図面に基づいて説明する
（ゲーミングマシン１：概要）
図１に示すように、ゲーミングマシン１は、発話認識装置５とセーフティーカメラ認識機構６と俯瞰カメラ認識機構７とＣＡＩＷＡサーバ８と管理装置９とを有している。また、ゲーミングマシン１は、人間のディーラをロボットにより模擬したロボットディーラ２（ディーラー代替装置）と、ルーレットゲームを実行するルーレット装置３と、ルーレット装置３の周囲に配置された３台の端末装置４Ａ〜４Ｃ（図７）とを有している。

尚、本実施形態におけるゲーミングマシン１は、端末装置が２台以上の複数人用の構成であってもよいし、端末装置が１台の単数人用の構成であってもよい。また、ゲーミングマシン１は、ルーレットゲーム以外のバカラゲームやカードゲーム等のゲームを実行可能であってもよい。

（ゲーミングマシン１：発話認識装置５）
発話認識装置５は、プレイヤ（人物）の動画と発話による音声とを取得及び解析し、解析結果等のプレイヤ情報を出力する３台のプレイヤ解析機構５Ａ・５Ｂ・５Ｃを有している。プレイヤ解析機構５Ａ・５Ｂ・５Ｃは、ゲーミングマシン１の各端末装置４Ａ〜４Ｃに対応してそれぞれ設けられている。

各プレイヤ解析機構５Ａ・５Ｂ・５Ｃは、プレイヤ（人物）の口元を含む動画と、プレイヤの発話による音声とを取得するプレイヤ情報取得機構５１を有している。尚、プレイヤ（人物）の口元を含む動画は、プレイヤの顔全体を含む映像であってもよいし、プレイヤの顔の一部領域の映像であってもよい。

プレイヤ情報取得機構５１は、プレイヤの口元を含む動画を撮影する２種類のカメラ機構５１１・５１２と、プレイヤの発話による音声を取得するマイク機構５１３とを有している。一方のカメラ機構５１１は、高精細度ビデオカメラである。他方のカメラ機構５１２は、赤外線カメラである。尚、プレイヤ情報取得機構５１は、一種類のカメラ機構を有していてもよい。また、プレイヤ情報取得機構５１は、インテル株式会社製の「ＲｅａｌＳｅｎｓｅ」（登録商標）を適用することができる。「ＲｅａｌＳｅｎｓｅ」によりプレイヤ情報取得機構５１を構成した場合は、３台のカメラ（１０８０ｐ ＨＤカメラ、赤外線カメラ、赤外線レーザー・プロジェクター）を連動させることによって、人間の目のように見る処理と、奥行きを認識する処理と、プレイヤの動きを追跡する処理とを実行することが可能になる。

また、各プレイヤ解析機構５Ａ・５Ｂ・５Ｃは、情報処理装置であるプレイヤカメラユニット５２を備えている。プレイヤカメラユニット５２は、プレイヤ情報取得機構５１に接続されており、プレイヤ情報取得機構５１で取得されたプレイヤの動画や音声の信号を取り込むようになっている。プレイヤカメラユニット５２は、動画に基づいて画像解析を行うことによって、感情の判定処理や性別判定処理、会話の有無の判定処理、アプリケーション映像の形成処理を行うと共に、これらの処理等で得られた解析結果情報及び動画情報の送信処理を行うようになっている。さらに、プレイヤカメラユニット５２は、音声に基づいて音声認識処理、文字列変換処理、及びこれらの処理等で得られた音声情報の送信処理を実行するようになっている。

また、プレイヤ解析機構５Ａ・５Ｂ・５Ｃは、ハブ１０２を介して情報処理装置であるメインユニット１０１に接続されている。メインユニット１０１は、発話認識制御装置として機能するように発話認識処理を実行可能になっている。発話認識処理は、マイク機構５１３が音声を取得したときにおける、カメラ機構５１１・５１２により撮影された各プレイヤの口元の動きに基づいて、発話したプレイヤを複数のプレイヤの中から特定する処理である。

尚、プレイヤを特定する処理は、マイク機構５１３が音声を取得した直後に、カメラ機構５１１・５１２から取得された動画に基づいて行われてもよいが、音声の取得時間と動画の取得時間との時間差を解消するように、マイク機構５１３が音声を取得した撮影時間の動画情報に基づいて行われることが好ましい。ここで、「撮影時間」は、リセット時点や電源オン時点等の或る時点からの経過時間であってもよいし、現在時刻であってもよい。

具体的に説明すると、メインユニット１０１は、カメラ機構５１１・５１２により撮影された動画と動画の撮影時間とを記憶する動画記憶装置を有し、音声を取得した撮影時間を含む動画を動画記憶装置から読み出し、撮影時間の動画を用いて発話した人物を特定するように構成されていることが好ましい。これにより、メインユニット１０１は、動画を撮影するタイミングが音声を取得するタイミングよりも早くなるという時間差が生じていても、音声を取得したタイミングの撮影時間の動画を用いることにより時間差を解消することによって、発話した人物を高い信頼性で特定することが可能になる。尚、動画記憶装置は、メインユニット１０１の内部及び外部の何れに設けられていてもよい。

また、メインユニット１０１は、特定されたプレイヤの発話内容に対応する動作をロボットディーラ２に実行させる制御を可能になっている。これにより、メインユニット１０１は、発話したプレイヤに対する的確な演出動作をロボットディーラ２に高い信頼性で行わせることができるようになっている。

（ゲーミングマシン１：発話認識装置５：動作）
メインユニット１０１は、図２の発話処理ルーチンを実行している。発話処理ルーチンは、発話したプレイヤを複数のプレイヤの中から特定し（発話認識処理）、特定したプレイヤの会話内容を解析し、解析結果に基づいて応答を行うようになっている。

具体的に説明すると、各プレイヤ解析機構５Ａ・５Ｂ・５Ｃは、各端末装置４Ａ〜４Ｃにおける動画情報と、経過時間や撮影時刻を示す撮影時間とを取得し、撮影時間付きの動画情報をメインユニット１０１に送信している。尚、端末装置４Ａ〜４Ｃでプレイヤが遊技している場合は、カメラ機構５１１・５１２がプレイヤの口元を含む顔の一部や全部を撮影する一方、プレイヤが遊技していない場合は、カメラ機構５１１・５１２が端末装置４Ａ〜４Ｃの背景映像を撮影する。また、各プレイヤ解析機構５Ａ・５Ｂ・５Ｃは、端末装置４Ａ〜４Ｃでゲームを行うプレイヤの音声をマイク機構５１３により取得し、音声をテキスト化したデータ等の音声情報をメインユニット１０１に送信している。そして、これらの動画情報及び音声情報は、ゲーミングマシン１が稼働している間、継続して送信され続けている。

図２に示すように、上記のようにしてプレイヤ解析機構５Ａ・５Ｂ・５Ｃから動画情報及び音声情報が入力されるメインユニット１０１は、動画情報と撮影時間とを取得し、これらを記憶する（Ｓ１）。

続いて、メインユニット１０１は、プレイヤ解析機構５Ａ・５Ｂ・５Ｃからの音声情報を受け付け（Ｓ２）、音声情報が入力されたか否かを判定する（Ｓ３）。何れのプレイヤ解析機構５Ａ・５Ｂ・５Ｃからも、音声情報が入力されない場合は（Ｓ３：ＮＯ）、Ｓ３が再実行されることによって、音声情報が入力されるまで待機状態にされる。

一方、１以上のプレイヤ解析機構５Ａ・５Ｂ・５Ｃからの音声情報が入力された場合は（Ｓ３：ＹＥＳ）、音声情報が入力されたプレイヤ情報取得機構５Ａ・５Ｂ・５Ｃに基づいて端末装置が特定され（Ｓ４）、特定された端末装置における動画情報が読み出される（Ｓ５）。そして、音声情報の入力時間に一致する撮影時間を含む動画情報が再生され（Ｓ６）、撮影時間に一致するタイミングでプレイヤの口元が動いているか否かが判定される（Ｓ７）。尚、「口元の動作」は、発話した瞬間から一定時間が経過する期間内において口元が連続的に動くか否かで判定することができる。口元が動いていなければ（Ｓ７：ＮＯ）、Ｓ３から再実行される。一方、口元が動いていれば（Ｓ７：ＹＥＳ）、プレイヤが発話していると判定される。

例えば図３における「第１判定期間」で示すように、２台のプレイヤ解析機構５Ａ・５Ｃから音声情報が入力された場合は、それぞれのプレイヤ解析機構５Ａ・５Ｃにおける動画情報が読み出され、音声情報の入力時間に一致する撮影時間において、口元が動作しているか否かが判定される。ここで、プレイヤ解析機構５Ａの動画情報は、口元が動作する映像が存在する。一方、プレイヤ解析機構５Ｃの動画情報は、背景映像や口元が閉じた状態の映像ように、口元が動作する映像が存在しない。これにより、「第１判定期間」においては、プレイヤ解析機構５Ａに対応した端末装置４Ａで遊技するプレイヤ１が話していると判定される。尚、プレイヤ１が発話している第１判定期間において、他のプレイヤ２が発話しても、このプレイヤ２の発話は受け付けられない。

また、「第２判定期間」で示すように、プレイヤ解析機構５Ａから音声情報が入力された場合は、プレイヤ解析機構５Ａにおける動画情報が読み出され、音声情報の入力時間に一致する撮影時間において、口元が動作しているか否かが判定される。ここで、プレイヤ解析機構５Ａの動画情報は、口元が動作した映像が存在しない。これにより、プレイヤ解析機構５Ａに対応した端末装置４Ａで遊技するプレイヤ１が話していないと判定される。

また、「第３判定期間」で示すように、プレイヤ解析機構５Ｃから音声情報が入力された場合は、プレイヤ解析機構５Ｃにおける動画情報が読み出され、音声情報の入力時間に一致する撮影時間において、口元が動作しているか否かが判定される。ここで、プレイヤ解析機構５Ｃの動画情報は、口元が動作した映像が存在している。これにより、プレイヤ解析機構５Ｃに対応した端末装置４Ｃで遊技するプレイヤ３が話していると判定される。

このように、発話認識装置５がゲーミングマシン１に搭載されると、ゲーミングマシン１が騒がしい環境下に配置された場合であっても、発話したプレイヤを高い信頼性で特定することができる。

図２に示すように、この後、特定されたプレイヤ（端末装置）の発話が終了したか否かが判定される（Ｓ８）。「発話の終了」は、０．５秒や１秒等の一定期間において音声入力がない場合に、発話が終了したと判定される。発話が終了していない場合は（Ｓ８：ＮＯ）、Ｓ８が再実行されることによって、繰り返して発話の終了が判定される。一方、発話が終了した場合は（Ｓ８：ＹＥＳ）、発話内容をテキスト化したテキストデータに基づいてテキスト解析処理が実行される（Ｓ９）。この後、テキスト解析結果に応じた演出動作等の応答処理が実行される（Ｓ１０）。これにより、発話認識装置５は、発話したプレイヤを高い信頼性で特定することができるため、演出動作の高い信頼性を実現することができる。この結果、プレイヤに対する演出動作について高い信頼性が要請されるディーラー不在のゲーミングマシン１において好適なものとなる。

（ゲーミングマシン１：発話認識装置５：変形例）
本実施形態の発話認識装置５において、プレイヤ情報取得機構５１は、各プレイヤを個別に撮影するように設定されたカメラ機構５１１・５１２と、各プレイヤの発話による音声を個別に取得するように設定されたマイク機構５１３とを有している。即ち、プレイヤ情報取得機構５１は、プレイヤとカメラ機構５１１・５１２１とを１対１に対応付けると共に、プレイヤとマイク機構５１３とを１対１に対応付けることによって、発話したプレイヤを高い信頼性で特定することを可能にしているが、これに限定されるものではない。

例えば、プレイヤ情報取得機構５１は、複数のプレイヤを１以上のカメラ機構５１１・５１２により撮影し、複数のプレイヤの音声を１以上のマイク機構５１３で取得するように設定されていてもよい。この場合においても、音声を取得した撮影時間の動画情報に基づいて、プレイヤの口元の動作の有無を確認することによって、複数のプレイヤの中から発話したプレイヤを特定することができる。

また、本実施形態の発話認識装置５は、プレイヤの口元を含む動画を撮影するカメラ機構と、プレイヤの発話による音声を取得するマイク機構と、マイク機構が音声を取得したときに、カメラ機構により撮影された口元の動きに基づいて、プレイヤが発話したか否かを判定する制御装置とを有した構成にされていてもよい。上記の構成によれば、マイク機構による音声と、カメラ機構で撮影された口元の動きとに基づいて人物の発話の有無を判定することによって、マイク機構が人物以外の音声を取得し易い状況下においても、人物が発話したか否かを高い信頼性で判定することができる。

（ゲーミングマシン１：俯瞰カメラ認識機構７）
ゲーミングマシン１は、端末装置４Ａ〜４Ｃを含む周辺領域の動画を撮影する２種類のカメラ機構７１１・７１２と、カメラ機構７１１・７１２で撮影された周辺領域の動画に基づいて、周辺領域に存在する人物の動作を分析し、分析結果に対応付けられた動作をロボットディーラ２に実行させるように制御するメインユニット１０１（制御装置）とを備えている。これにより、ゲーミングマシン１は、端末装置４Ａ〜４Ｃでプレイするプレイヤの他、端末装置４Ａ〜４Ｃを含むゲーミングマシン１の周辺領域に存在する人物に対しても、ロボットディーラ２が分析結果に対応した各種の動作を行うため、ゲーミングマシン１の遊技環境を人間のディーラーで操作される雰囲気に近づけることができる。

ここで、「端末装置４Ａ〜４Ｃを含む周辺領域」は、図７に示すように、俯瞰情報取得機構７１から視て全ての端末装置４Ａ〜４Ｃの後方を含む領域である。「周辺領域」は、カメラ機構７１１・７１２の画角で設定された撮影範囲の全体であってもよいし、一部であってもよい。「周辺領域に存在する人物」は、カメラ機構７１１・７１２で撮影された人物であり、端末装置４Ａ〜４Ｃでプレイするプレイヤと、プレイヤ以外の人物とがある。プレイヤ以外の人物としては、ルーレットゲームを観ている観客や、端末装置４Ａ〜４Ｃ後方の周辺領域を横切る通行人、ゲーミングマシン１に近づく人物、ゲーミングマシン１から遠ざかる人物等が例示される。

「人物の動作」は、首や腕、肩、胴体等の人体の一部が動作する形態と、人体の全部が動作する形態とが存在する。人体の一部が動作する形態としては、首や腕を左右に振る動作や、腕を上下させる動作、仰け反る動作等が例示される。人体の全部が動作する形態としては、立上る動作や立去る動作、座る動作、横切る動作等が例示される。「動作の分析」は、人体の一部や全部が動作する形態を分析することによって、首や腕を左右に振る動作や立上る動作等を分析結果として得ることである。

尚、メインユニット１０１は、分析結果が感情に関係する感情動作である場合は、感情動作に対応する感情を、現時点における人物の感情として取得し、感情に対応した応答をロボットディーラ２に行わせてもよい。

図５は、感情と感情動作とを対応付けたデータテーブルの説明図である。具体的には、「嫌悪」の感情動作は、顔・身体を対象から背ける動作である。「恐怖」の感情動作は、頭や体を後退させる動作や、身体を硬直させる動作、逃げる動作、声のピッチが高くなる
動作、突然の深呼吸などの動作である。「怒り」の感情動作は、頭やあごが前に突き出される動作や、全身の筋肉が緊張する動作、ドスのきいた声、荒々しい声の様子、大声等の動作である。

「幸福」の感情動作は、興奮した声の動作や他者に近づく動作である。「悲しみ」の感情動作は、頭・視線を下げる動作、うなだれる動作、緩やかな声、言葉数が少なくなるといった動作である。「軽蔑」の感情動作は、自己の鼻先を見るように頭を後方に引き上げる動作や、その状態で頭を左右片方に傾ける動作である。「驚き」の感情動作は、肩を引き上げる動作や深呼吸などの動作である。

さらに、メインユニット１０１は、俯瞰情報取得機構７１のカメラ機構７１１・７１２から得られた映像動画やプレイヤ情報取得機構５１のカメラ機構５１１・５１２から得られた映像動画に基づいて、プレイヤやその他の人物の微表情を取得し、微表情から感情を判別し、感情に対応した応答をロボットディーラ２に行わせてもよい。

ここで、「微表情」は、感情の種類により顔の一部領域が０．２５秒等の一定時間内において瞬間的に変化する表情である。メインユニット１０１は、人物を撮影した映像動画から微表情を分析し、感情の種類を判別するため、人物の顔を複数の領域とに区分し、各領域における瞬間的な変化を検出し、変化の状態の組み合わせに一致する条件に対応した種類の感情であると判定している。

メインユニット１０１は、以上のような各種の動作形態に対応した応答データを記憶している。応答データは、ロボットディーラ２における音声や演出光、動作等の応答要素の変化と、応答要素の組み合わせである。「応答要素の変化」は、「音声」においては高音や低音、男性的・女性的な音色、大きな音声や小さな音声等の変化である。「演出光」においては、発光色や点滅等の変化である。「動作」においては、左アーム２２や右アーム２１、頭部２４等を前後や左右に搖動させたり、高速や低速で搖動させる等の機械的な変化である。

応答データを具体的に説明すると、例えば、ゲーミングマシン１に人物が近づくという分析結果に対応する応答データは、近づく人物に対向するようにロボットディーラ２が頭部２４や胴体２３を動かし、大きな声でゲームを促す発話を行い、右アーム２１で手招きする等の動作を行うという一連の動作を行うデータである。プレイヤが端末装置４Ａ〜４Ｃから離席するという分析結果に対応する応答データは、離席するプレイヤに対向するようにロボットディーラ２が胴体２３を動かし、お辞儀をしてお礼の言葉を発話する一連の動作を行うデータである。プレイヤが「喜び」の感情動作を行ったという分析結果に対応する応答データは、プレイヤに向かってロボットディーラ２が祝福の言葉を発話する一連の動作を行うデータである。

周辺領域の動画を撮影するカメラ機構７１１・７１２は、ルーレット装置３の全体及び端末装置４Ａ〜４Ｃの背景を撮影するように配置されている。一方のカメラ機構７１１は、高精細度ビデオカメラである。他方のカメラ機構７１２は、赤外線カメラである。尚、カメラ機構７１１・７１２は、何れか一方のカメラ機構であってもよい。カメラ機構７１１・７１２は、俯瞰情報取得機構７１に備えられている。俯瞰情報取得機構７１は、プレイヤ情報取得機構５１と同様に、インテル株式会社製の「ＲｅａｌＳｅｎｓｅ」（登録商標）を適用することができる。「ＲｅａｌＳｅｎｓｅ」により俯瞰情報取得機構７１を構成した場合は、３台のカメラ（１０８０ｐ ＨＤカメラ、赤外線カメラ、赤外線レーザー・プロジェクター）を連動させることによって、人間の目のように見る処理と、奥行きを認識する処理と、プレイヤの動きを追跡する処理とを実行することが可能になる。

俯瞰情報取得機構７１は、俯瞰カメラユニット７２に接続されている。俯瞰情報取得機構７１と俯瞰カメラユニット７２とは、俯瞰カメラ認識機構７を構成している。俯瞰カメラユニット７２は、カメラ機構７１１・７１２からの映像動画に基づいてカメラ映像の読み込み処理や画像解析処理、人数・人位置・行動の分析処理、アプリケーションの映像取り込み処理、映像配信処理を実行するようになっている。尚、これらの処理は、俯瞰カメラユニット７２及びメインユニット１０１の何れで実行されてもよい。

ここで、「アプリケーションの映像取り込み処理」は、人物の動作を分析した分析結果と分析対象の人物とを関連付けることによって、人物キャラクターの近傍に分析結果のテキストが表示されたアプリケーション映像を周辺領域の動画に基づいて形成し、映像配信するものである。ゲーミングマシン１は、映像配信されたアプリケーション映像を管理装置９（モニター画面）に表示させることによって、周辺領域に存在する人物を容易に監視することができる。

（ゲーミングマシン１：俯瞰カメラ認識機構７：動作）
次に、メインユニット１０１が図４の俯瞰処理ルーチンを実行することによって、俯瞰カメラ認識機構７からの映像動画に基づいて、ゲーミングマシン１の周辺領域に存在する人物の動作を分析し、分析結果に対応付けられた動作をロボットディーラ２に実行させる動作について説明する。

図４に示すように、メインユニット１０１が俯瞰処理ルーチンを実行すると、俯瞰カメラ認識機構７からの映像動画を含む動画情報が取得される（Ｓ２１）。動画情報に基づいて所定の周辺領域内に存在する全ての人物が抽出される（Ｓ２２）。

この後、抽出した人物の特徴が分析される（Ｓ２３）。「人物の特徴」としては、性別や年齢、プレイヤ、プレイヤ以外の人物等が例示される。尚、抽出した人物がプレイヤであるか否かは、画像中の人物の位置が各端末装置４Ａ〜４Ｃを操作する人物の位置に一致するか否かで判定することができる。また、抽出した人物がプレイヤであると判定した場合は、発話認識装置５のプレイヤ解析機構５Ａ・５Ｂ・５Ｃにより人物の顔が撮影されているか否かで二重に確認されてもよい。プレイヤの確認が俯瞰カメラ認識機構７とプレイヤ解析機構５Ａ・５Ｂ・５Ｃとを用いて二重で行われた場合は、プレイヤとプレイヤ以外の人物とを高精度に判別することができる。また、プレイヤの特徴をプレイヤ解析機構５Ａ・５Ｂ・５Ｃにより高精度に分析することができる。そして、上記のようにして抽出された人物と分析結果とを示すアプリケーション映像が管理装置９において表示される（Ｓ２４）。

次に、俯瞰カメラ認識機構７の動画情報について、一定時間差の変化量が求められる（Ｓ２５）。この後、単位遊技が終了したか否かが判定される（Ｓ２６）。ここで、「単位遊技」は、図１０示すように、ルーレット盤３１におけるルーレット球３３の移動を開始してからポケット３２１に収容させて遊技結果を得るまでの１回分のゲームである。

単位遊技が終了していない場合は（Ｓ２６：ＮＯ）、ゲーム途中における全て又は一部の人物の動作に対してロボットディーラ２の応答動作が行われる。尚、メインユニット１０１は、抽出した人物に優先順位を付けておき、ゲームの進行状況や人物の人数に応じて、優先順位の高い一部の人物に対してロボットディーラ２に応答動作を行わせることが好ましい。これにより、ロボットディーラ２によるゲームを進行が円滑になる場合がある。

カメラ機構７１１・７１２からの映像動画に基づいて、所定値以上の変化量があった全ての人物が抽出される（Ｓ２７）。抽出された人物の動作が分析される（Ｓ２８）。抽出された各人物に対して、動作に対応した応答動作が行われる（Ｓ２９）。これにより、例えば、人物がゲーミングマシン１を横切っている場合は、通行人としての人物に対してゲーミングマシン１の存在を気付かせるように、ロボットディーラ２が右アーム２１を動かし、ルーレットゲームを紹介する言葉を発話する等の動作を行うことになる。

また、単位遊技が終了した場合は（Ｓ２６：ＹＥＳ）、ゲーム直後における全て又は一部のプレイヤの感情に対してロボットディーラ２の応答動作が行われる。尚、メインユニット１０１は、プレイヤの感情に優先順位を付けておき、優先順位の高い感情を示したプレイヤから順番にロボットディーラ２に応答動作を行わせることが好ましい。

俯瞰情報取得機構７１のカメラ機構７１１・７１２及びプレイヤ情報取得機構５１のカメラ機構５１１・５１２からの映像動画に基づいて、所定値以上の変化量があった全てのプレイヤが抽出される（Ｓ３０）。変化量が感情動作とされ、図５の感情と感情動作とを対応付けたデータテーブルに基づいて、プレイヤの感情が分析される（Ｓ３１）。尚、感情は微表情から分析されてもよい。抽出された各プレイヤに対して、感情に対応した応答動作が行われる（Ｓ３２）。これにより、例えば、プレイヤが「喜び」の感情を示している場合は、このプレイヤに対向するようにロボットディーラ２が胴体２３を動かし、祝福する言葉を発話する等の動作を行うことになる。

（ゲーミングマシン１：セーフティーカメラ認識機構６）
図１に示すように、ゲーミングマシン１は、遊技に使用される遊技用具の取り扱い動作を含む各種の動作を行うロボットディーラ２（ディーラー代替装置）と、遊技が実行されるゲーム領域の動画を撮影する２種類のカメラ機構６１１・６１２を備えたセーフティー情報取得機構６１と、カメラ機構６１１・６１２により撮影された動画に基づいてゲーム領域における異常の有無を判定し、異常であると判定した場合、この異常に対応する動作をロボットディーラ２に実行させるように制御するメインユニット１０１（制御装置）とを備えている。これにより、ゲーミングマシン１は、ロボットディーラ２が異常に対応する動作を行うことによって、遊技環境を人間のディーラーで操作される雰囲気に近づけることができる。

ここで、「遊技用具」は、ゲームに直接的に及び間接的に使用される用具である。ゲームに直接的に使用される遊技用具は、ゲームの遊技結果を決定する部材であり、ルーレットゲームにおいてはルーレット球３３、カードゲームにおいてはカード、ダイスゲームにおいてはダイスである。間接的に使用される遊技用具としては、ゲームの進行を補助する用具であり、カードを収容するカードシューやダイスを回収する用具等である。

「ゲーム領域」は、図２０に示すように、ゲームが直接的に実行される停止境界領域３１Ａを有している。停止境界領域３１Ａは、ルーレット盤３１の内周側領域に略一致されている。停止境界領域３１Ａにおいて異常が発生すると、ロボットディーラ２が停止境界領域用の異常に対応する動作を行うと共に、ゲームが停止される。ここで、「停止境界領域３１Ａにおける異常」は、遊技用具以外の異物１１０が停止境界領域３１Ａ内に侵入する状態であり、例えばプレイヤや観客がタバコ、メダル等の異物１１０をルーレット盤３１内に投げ込む行為や、プレイヤや観客が回転盤３２を手やステッキ等の器具で触るような行為等である。停止境界領域３１Ａにおける異常の対応によって、ゲーム結果が異常により変化することが防止されると共に、ロボットディーラ２が異常によるゲームの中止をプレイヤや観客に知らせることができる。

また、「ゲーム領域」は、ルーレット盤３１の周辺領域を含むように、停止境界領域３１Ａを内周側に含む警報境界領域３１Ｂを有している。即ち、「ゲーム領域」は、ゲーム停止用の停止境界領域３１Ａと、停止境界領域３１Ａの外周側に配置された警告用の警報境界領域３１Ｂとを有している。尚、警報境界領域３１Ｂは、プレイヤ解析機構５Ａ・５Ｂ・５Ｃを含むことが好ましい。これにより、プレイヤ解析機構５Ａ・５Ｂ・５Ｃに対して異物１１０が衝突する等の異常についても警報も可能になる。

警報境界領域３１Ｂにおいて異常が発生すると、ロボットディーラ２が警報境界領域用の異常に対応する動作を行う。警報境界領域３１Ｂにおける異常は、停止境界領域３１Ａの場合とは異なり、ゲームが継続される。ここで、「警報境界領域３１Ｂにおける異常」は、遊技用具以外の異物１１０が警報境界領域３１Ｂ内に侵入する状態であり、例えばプレイヤや観客がタバコ、メダル等の異物１１０をルーレット盤３１に近づける行為や、プレイヤや観客が手やステッキ等の器具をルーレット盤３１に近づける行為等である。警報境界領域３１Ｂにおける異常の対応によって、ロボットディーラ２が異常によるゲームの中止を未然に防止することができる。

尚、ロボットディーラ２は、警報境界領域３１Ｂにおける異常の継続時間により応答動作を変化させてもよい。即ち、異常の継続時間が長くなるのに従って、ロボットディーラ２のジェスチャーや警告の音声を大きくすることによって、応答動作をプレイヤや観客等に目立つようにしてもよい。

「異常に対応する動作」は、停止境界領域３１Ａの異常の場合、異常によりゲームが中止される旨をプレイヤや観客に知らせる動作であり、例えば、ロボットディーラ２が異物１１０を指差した後、両アーム２１・２２をルーレット盤３１上で水平に搖動させる動作である。

警報境界領域３１Ｂの異常の場合は、異常によるゲーム中止を未然に防止する動作であり、例えば、ロボットディーラ２が異物１１０の侵入を阻止する動作である。即ち、メインユニット１０１は、異常の内容が警報境界領域３１Ｂへの異物１１０の侵入である場合、異物の侵入を阻止する動作をロボットディーラ２に実行させるように制御する。これにより、ゲーミングマシン１１０は、異物１１０の侵入による遊技の中断をロボットディーラ２により未然に防止することができる。

具体的に説明すると、ロボットディーラ２は、遊技用具を取り扱う取扱い部を、三次元空間の任意の位置に位置決め可能に移動させるアーム２１・２２と、アーム２１・２２を支持した胴体２３とを備えており、メインユニット１０１は、異物１１０の侵入を少なくとも一方のアーム２１・２２で阻止する動作をロボットディーラ２に実行させるように制御する。これにより、ロボットディーラ２の動作が人間のディーラの動作に近づいたものになっている。

カメラ機構６１１・６１２備えたセーフティー情報取得機構６１は、少なくともルーレット盤３１を撮影するように配置されている。尚、セーフティー情報取得機構６１は、ルーレット装置３の全体を撮影するように配置されていてもよい。図１に示すように、セーフティー情報取得機構６１における一方のカメラ機構６１１は、高精細度ビデオカメラである。他方のカメラ機構６１２は、赤外線カメラである。尚、カメラ機構６１１・６１２は、何れか一方のカメラ機構であってもよい。セーフティー情報取得機構６１は、プレイヤ情報取得機構５１と同様に、インテル株式会社製の「ＲｅａｌＳｅｎｓｅ」（登録商標）を適用することができる。「ＲｅａｌＳｅｎｓｅ」によりセーフティー情報取得機構６１を構成した場合は、３台のカメラ（１０８０ｐ ＨＤカメラ、赤外線カメラ、赤外線レーザー・プロジェクター）を連動させることによって、人間の目のように見る処理と、奥行きを認識する処理と、プレイヤの動きを追跡する処理とを実行することが可能になる。

セーフティー情報取得機構６１は、ルーレット状態カメラユニット６２に接続されている。セーフティー情報取得機構６１とルーレット状態カメラユニット６２とは、セーフティーカメラ認識機構６を構成している。ルーレット状態カメラユニット６２は、カメラ機構６１１・６１２からの映像動画に基づいてカメラ映像の読み込み処理や画像解析処理を実行するようになっている。尚、これらの処理は、ルーレット状態カメラユニット６２及びメインユニット１０１の何れで実行されてもよい。

（ゲーミングマシン１：セーフティーカメラ認識機構６：動作）
次に、メインユニット１０１が図６のセーフティー処理ルーチンを実行することによって、セーフティーカメラ認識機構６からの映像動画に基づいて、ルーレット盤３１内及びルーレット盤３１の周辺領域における異常の有無を判定し、異常の判定結果に対応付けられた動作をロボットディーラ２に実行させる動作について説明する。

図６及び図２０に示すように、メインユニット１０１がセーフティー処理ルーチンを実行すると、セーフティー情報取得機構６１からの映像動画を含む動画情報が取得される（Ｓ４１）。そして、図示しない映像メモリにおいて、映像動画に停止境界領域３１Ａと警報境界領域３１Ｂとが合成される（Ｓ４２）。尚、映像動画はリアルタイムで更新される。

次に、映像メモリの合成映像に基づいて、警報境界領域３１Ｂ内に異物１１０が侵入したか否かが判定される（Ｓ４３）。異物１１０の侵入がなければ（Ｓ４３：ＮＯ）、Ｓ４３が再実行されることによって、異物１１０の侵入が監視される。

異物１１０の侵入があった場合は（Ｓ４３：ＹＥＳ）、ロボットディーラ２の警報処理が実行される（Ｓ４４）。例えば図２０においては、警報境界領域３１Ｂ内にタバコや腕からなる異物１１０が侵入した場合、ロボットディーラ２が右アーム２１を異物１１０方向に伸ばし、異物１１０の侵入を阻止するように動作する。

この際、異物１１０が警報境界領域３１Ｂに滞在する時間や侵入する距離に応じて、警報処理の態様が変化されることが好ましい。例えば、滞在時間や侵入距離に応じてロボットディーラ２の侵入を阻止する動作が大きくなったり、複数の動作要素（前後方向や左右方向等）の組み合わせになったり、動作速度が速くなったりする等の態様の変化である。

また、滞在時間や侵入距離に応じた態様の変化は、アーム２１・２２の動作に胴体２３や頭部２４の動作が加わることが例示される。さらに、滞在時間や侵入距離に応じた態様の変化は、警告の音声が加わったり、音声が大きくなったり、音声の音程や速度が速くなることが例示される。また、ロボットディーラ２のアーム２１・２２に発光機構を備え、アーム２１・２２による警告用の動作と共に発光機構に警告用の発光をさせてもよい。

次に、停止境界領域３１Ａ内に異物１１０が侵入したか否かが判定される（Ｓ４５）。異物１１０の侵入がなければ（Ｓ４５：ＮＯ）、Ｓ４３が再実行されることによって、停止境界領域３１Ａ内の異物１１０の侵入が解消されたか否かが監視される。

一方、停止境界領域３１Ａ内に異物１１０の侵入があれば（Ｓ４５：ＹＥＳ）、ルーレットゲームの中止処理が実行される（Ｓ４６）。即ち、ルーレットゲームが中止されると共に、ロボットディーラ２がゲームの中止を知らせる動作を行う。そして、ロボットディーラ２が音声で異物１１０によるゲーム中止の説明を行う（Ｓ４７）。

この後、警報境界領域３１Ｂ内及び停止境界領域３１Ａ内の異物１１０が、除去される等により消滅したか否かが判定される（Ｓ４８）。異物１１０が消滅しなければ（Ｓ４８：ＮＯ）、Ｓ４８が再実行されることによって、異物１１０が除去されるまでゲームの中止状態が継続される。異物１１０が消滅した場合は（Ｓ４８：ＹＥＳ）、ゲームが再開され（Ｓ４９）、Ｓ４３から再実行され、警報境界領域３１の監視が行われる。

（ゲーミングマシン１：機械構成）
図７に示すように、ゲーミングマシン１は、ロボットディーラ２と、ロボットディーラ２の前方に配置されたルーレット装置３と、ルーレット装置３の周囲に配置された３台の端末装置４Ａ〜４Ｃとを有している。

（ゲーミングマシン１：機械構成：ロボットディーラ２）
ロボットディーラ２は、ルーレットゲームに使用されるルーレット球３３（図１０参照）を取り扱う動作のように、ルーレットゲームを進行するディーラの一部の動作又は全部の動作を代替するように構成されている。即ち、ロボットディーラ２は、遊技に使用されるルーレット球３３等の遊技用具の取り扱い動作を含む各種の動作を行うように構成されている。

具体的に説明すると、図８に示すように、ロボットディーラ２は、右アーム２１（第１アーム）及び左アーム２２（第２アーム）と、両アーム２１・２２を左右対称に支持した胴体２３と、胴体２３の上端部に設けられ、前後左右に搖動可能な頭部２４とを有している。各アーム２１・２２は、人体の肘や手首に対応する複数の自由度を有していると共に、付け根部分が人体の肩に似た動作となるように胴体２３に対して前後左右の自由度で連結されている。これにより、各アーム２１・２２は、各ハンド部１４・１５を三次元空間の任意の位置にそれぞれ位置決め可能に移動させることが可能になっている。

胴体２３は、下端部において旋回可能及び前後方向に搖動可能な複数の自由度を有している。胴体２３は、これら複数の自由度によりロボットディーラ２の姿勢を変化させることによって、端末装置４Ａ〜４Ｃのプレイヤ、及びプレイヤ以外の通行者や見学者等の人物に対して演出動作を実行可能になっている。これにより、ロボットディーラ２は、三次元空間の任意の位置にハンド部１４・１５を移動可能なアーム２１・２２を用いてルーレット球３３を取り扱うと共に、アーム２１・２２を支持する胴体２３及びアーム２１・２２を用いてプレイヤに対して演出動作を行うことによって、ルーレット球３３を取り扱うディーラの腕や胴体に近い動きになる。この結果、ロボットディーラ２は、ディーラによりルーレット球３３が取り扱われる雰囲気に近い遊技環境をプレイヤやゲーミングマシン１の周辺に存在する人物に提供することができるようになっている。

尚、本実施形態においては、人間のディーラに最も近い体形となるように、ロボットディーラ２が右アーム２１及び左アーム２２の２本のアームを備えた場合について説明するが、これに限定されるものではなく、１本以上のアームを備えていればよい。

ロボットディーラ２のヘッド部１６は、プレイヤと対話する対話機構を内蔵している。対話機構は、プレイヤに対して応答情報を出力する情報出力機構を有している。尚、対話機構は、プレイヤから音声や姿勢、動作、表情等の各種の外部情報を取得する情報取得機構を有していてもよい。情報出力機構としては、音声を出力するスピーカ機構が例示される。スピーカ機構は、音声信号を増幅するデジタルアンプと、デジタルアンプからの電気信号を音波に変換して出力するスピーカとを備えている。情報取得機構としては、映像を取得するカメラ機構や音声を取得するマイク機構が例示される。カメラ機構は、ボイスアングルセンサや３Ｄセンサ、フルＨＤカメラの１以上を備えている。

ロボットディーラ２の胴体２３は、支持台２５の上面に設けられている。支持台２５は、床面に設置された四角形状の底部２５２と、底部２５２のコーナー部から立ち上げられた４本の棒状の脚部２５１と、脚部２５１の上端に設けられ、胴体２３が連結された支持部２５３とを有している。支持台２５の上面の高さ位置は、胴体２３の底部がルーレット装置３の上面位置よりも僅かに低くなるように設定されている。

（ゲーミングマシン１：機械構成：俯瞰情報取得機構７１）
図７及び図９に示すように、ロボットディーラ２の背面側には、壁部材１１が設けられている。壁部材１１は、動画を撮影する俯瞰情報取得機構７１を支持している。俯瞰情報取得機構７１は、ロボットディーラ２の上方に配置されている。俯瞰情報取得機構７１は、少なくとも端末装置４Ａ〜４Ｃの後方を撮影領域とするように設定されている。これにより、俯瞰情報取得機構７１は、ゲーミングマシン１の周囲の状況を認識可能にしている。

（ゲーミングマシン１：機械構成：ルーレット装置３）
ルーレット装置３は、ロボットディーラ２の前方に配置されている。ルーレット装置３は、図１０に示すように、ルーレット台３４と、ルーレット台３４に設けられたルーレット盤３１と、ルーレット盤３１の内周部において回転自在に設けられた回転盤３２とを有している。ルーレット盤３１は、ルーレット台３４の上面壁に固定された円環形状の外周枠３１１と、外周枠３１１の内周端から立ち下げられた内周壁３１２と、内周壁３１２の内周端から中心方向に向かって下方に傾斜された傾斜壁３１３とを有している。内周壁３１２は、下部に溝状の案内壁３１２ａを有している。案内壁３１２ａは、ルーレット球３３を遠心力により接触させながら周回移動させるように形成されていると共に、周回移動するルーレット球３３がルーレット盤３１の外部に飛び出さないように形成されている。

ルーレット盤３１の傾斜壁３１３は、円環形状に形成されている。傾斜壁３１３の内周側には、円盤形状の回転盤３２が設けられている。回転盤３２は、ルーレット台３４の内部に設けられた図示しない駆動モータによって、ルーレット球３３の転動開始直後から所定時間が経過するまでの間、ルーレット盤３１に対して所定方向（例えば時計回り方向）に所定速度で回転される。

回転盤３２は、外周部に複数のポケット３２１を有している。これらのポケット３２１は、外周部の全領域を等間隔で区分するように配置されている。各ポケット３２１は、個別の番号がポケット３２１近傍に記されていると共に、赤色や黒色、緑色に着色されている。このように、ルーレット盤３１は、ルーレット球３３を遠心力により案内壁３１２ａに接触させながら周回移動させた後、遠心力の低下により中央部方向に下降させ、何れかのポケット３２１に停止させるように構成されている。

各ポケット３２１は、ルーレット球３３を収容可能に形成されている。また、各ポケット３２１は、図示しないルーレット球検知センサを有している。ルーレット球検知センサは、ポケット３２１にルーレット球３３が収容されたときに、ルーレット球３３を検知することによって、ルーレット球３３を収容したポケット３２１を特定可能にしている。

尚、ルーレット装置３は、ロボットディーラ２の操作領域を除いたルーレット盤３１の上面が透明アクリル製のカバー部材により覆われていることが望ましい。これにより、ルーレット球３３がルーレット盤３１から外に飛び出す可能性を低減することができる。また、異物等がルーレット盤３１内に侵入したり、不正行為が行われる可能性を低減することができる。

（ゲーミングマシン１：機械構成：ルーレット装置３：送出機構３７）
図１１に示すように、ルーレット装置３は、ルーレット球３３を周回移動させるように送り出す送出機構３７と、送出機構３７によるルーレット球３３の送出位置にルーレット球３３を着脱自在に保持する保持部材３８２を有したルーレット球保持機構３８とを有している。これにより、ルーレット装置３は、ルーレット球３３の送出位置がルーレット球保持機構３８の保持部材３８２により高精度に位置決めされるため、送出機構３７によるルーレット球３３の送り出し動作を安定化させることができる。

具体的に説明すると、送出機構３７は、周囲の空気を取り込むとともに所定圧力に圧縮する図示しないコンプレッサと、コンプレッサにより圧縮した空気を送るエアチューブとを有している。これらのコンプレッサ及びエアチューブは、ルーレット台３４の内部に設けられている。エアチューブは、案内壁３１２ａの複数個所に配置された吐出口３１２ｂに接続されている。各吐出口３１２ｂは、圧縮空気の進行方向が案内壁３１２ａの接線方向よりも僅かに内周側に向かうように、それぞれ形成されている。これにより、ルーレット盤３１は、各吐出口３１２ｂからの圧縮空気が案内壁３１２ａに沿って時計回り方向に進行する空気流の層を作り出すようになっている。

空気流は、ルーレット球保持機構３８により送出位置に保持されたルーレット球３３を空気流の層方向に引き寄せ、ルーレット球３３を空気流の層内に移動させる。空気流は、ルーレット球３３の移動速度を徐々に上昇させ、ルーレット球３３を案内壁３１２ａに沿って時計回り方向に転動させる。一方、圧縮空気の吐出の停止により空気流が消滅すると、ルーレット球３３の回転速度が徐々に弱まり遠心力を失う。その後、ルーレット球３３は、傾斜壁３１３に沿って転がり落ちてルーレット盤３１の内側へと向かい、回転する回転盤３２に至る。ルーレット球３３は、回転盤３２に形成されたポケット３２１のいずれかに収納される。ルーレット装置３による当選番号の決定がなされ、決定された番号と、遊技者がベットしたベット情報とに基づいて配当が払い出される。

（ゲーミングマシン１：機械構成：ルーレット装置３：ルーレット球保持機構３８：保持部材３８２）
図１２にも示すように、ルーレット球保持機構３８は、保持部材３８２を有している。保持部材３８２は、ルーレット球３３の送出位置においてルーレット球３３を着脱自在に保持するように形成されている。保持部材３８２は、案内壁３１２ａを周回移動するルーレット球３３に接触しないように配置されている。即ち、保持部材３８２は、ルーレット球３３の直径よりも大きな距離を隔てて案内壁３１２ａに対向されている。これにより、ルーレット球保持機構３８は、保持部材３８２を送出位置から退避させなくても、ルーレット球３３を案内壁３１２ａに沿って周回移動させることができる。尚、送出位置は、ルーレット球３３の保持位置でもある。

具体的に説明すると、図１３に示すように、保持部材３８２は、針金等の線状部材を折り曲げ加工したものであり、ルーレット球３３を保持可能に湾曲された保持部３８２３と、保持部３８２３を先端部に有した旋回部３８２２と、旋回部３８２２の後部（旋回中心側）が直角方向に曲折された旋回軸部３８２１とを有している。保持部材３８２は、保持部３８２３が保持位置（送出位置）に位置決めされたルーレット球３３の保持状態において、保持部３８２３の底部３８２３ａが傾斜壁３１３の僅かに上方に位置し、湾曲部３８２３ｂが鉛直方向に平行で、且つ案内壁３１２ａの接線方向に対して平行となるように設定される。

これにより、図１１及び図１２に示すように、保持部材３８２は、ルーレット球３３が保持部３８２３の上方位置における傾斜壁３１３に載置されたときに、ルーレット球３３が保持部３８２３方向に重量の作用で傾斜壁３１３に沿って進行し、湾曲状の保持部３８２３に収容されることになる。この際、ルーレット球３３が保持部３８２３の中心部から多少外れた部位に到達した場合でも、ルーレット球３３が保持部３８２３の中心部に重力の作用で移動し、正確に保持位置（送出位置）に位置決めされることになる。これにより、ルーレット球３３をロボットディーラ２により自動でルーレット球保持機構３８にセットする作業が容易になっていると共に、高い信頼性でセット作業を完了することができる。

（ゲーミングマシン１：機械構成：ルーレット装置３：ルーレット球保持機構３８：退避機構３８１）
また、図１３に示すように、ルーレット球保持機構３８は、保持部材３８２を保持姿勢と退避姿勢とに切り替える退避機構３８１を有している。ここで、「保持姿勢」は、保持部３８２３が保持位置（送出位置）に位置するときの保持部材３８２の状態である。「退避姿勢」は、保持部３８２３が退避位置に位置するときの保持部材３８２の状態である。ルーレット球保持機構３８は、ルーレット球３３が案内壁３１２ａを周回移動している期間において保持部材３８２を退避姿勢にする。これにより、ルーレット球保持機構３８は、ルーレット盤３１を移動するルーレット球３３を目視するプレイヤにとって保持部材３８２が邪魔になるという事態を防止することができると共に、ルーレット球３３が傾斜壁３１３を下降するときに保持部材３８２に接触する事態を防止することができる。

退避機構３８１は、ルーレット盤３１の内部に配置されている。退避機構３８１は、保持部材３８２における旋回軸部３８２１の端部を固定状態で支持した回転軸部材３８１４を有している。回転軸部材３８１４の軸心は、保持部材３８２の旋回中心軸に一致されている。これにより、回転軸部材３８１４が正方向及び逆方向に回転すると、保持部材３８２の旋回軸部３８２１が正方向及び逆方向に回転する。この結果、保持部３８２３が旋回部３８２２を介して上下動することによって、保持部３８２３が傾斜壁３１３に対して離隔及び接近することになる。

回転軸部材３８１４は、取付台３８１５の上面に回転自在に支持されている。回転軸部材３８１４の他端部は、棒状の第１連結部材３８１３の上端部に固定状態で連結されている。第１連結部材３８１３は、回転軸部材３８１４の軸心に対して直交するように配置されている。これにより、第１連結部材３８１３の下端部が搖動すると、第１連結部材３８１３の上端部に連結された回転軸部材３８１４が搖動に応じた回転角度で回転することによって、保持部材３８２が搖動に応じた回転角度で傾斜壁３１３に対して上下方向に旋回することになる。

第１連結部材３８１３の下端部は、円柱状の第２連結部材３８１２の一端部に回転自在に連結されている。第２連結部材３８１２の軸心は、回転軸部材３８１４の軸心に対して平行に設定されている。第２連結部材３８１２の他端部は、シリンダ機構３８１１の軸部材３８１１ａに回転自在に連結されている。軸部材３８１１ａの軸心は、第２連結部材３８１２の軸心に対して直交するように設定されている。シリンダ機構３８１１の軸部材３８１１ａは、シリンダ機構３８１１の一端部に配置されている。シリンダ機構３８１１の他端部は、取付台３８１５に連結されている。取付台３８１５は、シリンダ機構３８１１を上下方向に回転自在に支持することによって、第１連結部材３８１３の搖動に対応してシリンダ機構３８１１を搖動させるようになっている。

また、シリンダ機構３８１１は、駆動エアーが流入及び流出する端子部３８１１１・３８１１２を有している。シリンダ機構３８１１は、駆動エアーの流入及び流出の切り替えにより軸部材３８１１ａを進退移動させるようになっている。これにより、シリンダ機構３８１１が軸部材３８１１ａを進出させると、第２連結部材３８１２を介して第１連結部材３８１３の下端部が進出方向に回動されることによって、回転軸部材３８１４を介して保持部材３８２の保持部３８２３が下降し、傾斜壁３１３に対して接近することになる。一方、シリンダ機構３８１１が軸部材３８１１ａを後退させると、第２連結部材３８１２を介して第１連結部材３８１３の下端部が後退方向に回動されることによって、回転軸部材３８１４を介して保持部材３８２の保持部３８２３が上昇し、傾斜壁３１３に対して遠ざかることになる。

シリンダ機構３８１１は、軸部材３８１１ａの進出位置及び後退位置が一定の位置に設定されている。軸部材３８１１ａの進出位置は、保持部材３８２の保持部３８２３がルーレット球３３を送出位置で保持することができるように設定されている。即ち、軸部材３８１１ａの進出位置は、保持部材３８２を保持姿勢にするようになっている。一方、軸部材３８１１ａの後退位置は、保持部材３８２がルーレット球３３の圧縮空気による周回移動を妨害せず、且つ、プレイヤによるルーレット球３３の目視の邪魔にならない退避位置となるように設定されている。即ち、軸部材３８１１ａの後退位置は、保持部材３８２を退避姿勢にするようになっている。

（ゲーミングマシン１：機械構成：ルーレット装置３：ルーレット球保持機構３８：保持部材３８２の変形例）
上記の保持部材３８２は、針金等の線状部材を折り曲げ加工したものであるが、これに限定されるものではなく、板状部材を切削加工して形成されていてもよい。具体的に説明すると、図１４に示すように、保持部材３８３は、ルーレット球３３を保持する保持部３８３１と、ルーレット盤３１の中央部方向に移動するルーレット球３３を保持部３８３１方向に案内する案内部３８３２とを有している。この構成によれば、ルーレット球３３が保持部３８３１から外れた案内部３８３２に移動した場合でも、案内部３８３２によりルーレット球３３が保持部３８３１に移動されて保持されるため、ルーレット球３３を案内部３８３２に保持させる動作を安定して行うことができる。尚、保持部３８３１は、図１５に示すように、ルーレット球３３に対して面状に接触しながら保持するように、ルーレット球３３の接線に一致した傾斜部３８３１ａを有することが好ましい。

保持部３８３１は、保持部材３８３の一端部に配置されている。保持部材３８３の他端部は、退避機構３８１の回転軸部材３８１４に固定状態で支持されている。これにより、退避機構３８１における回転軸部材３８１４が正方向及び逆方向に回転すると、保持部材３８３の他端部を回動中心として、保持部材３８３が上下方向に旋回することにより退避姿勢及び保持姿勢を採ることになる。

また、保持部材３８３は、板状に形成されているため、ルーレット球３３の保持部３８３１への案内壁として機能している。詳細に説明すると、図１６にも示すように、ルーレット球３３が保持部材３８３１から外れた回転軸部材３８１４側の上方位置における傾斜壁３１３に載置されたときに、ルーレット球３３が保持部材３８３２方向に重量の作用で傾斜壁３１３に沿って進行し、案内部３８３２に当接する。そして、ルーレット球３３が保持部材３８３２に接触しながら保持部３８３１方向に移動し、保持部３８３１に保持される。これにより、ルーレット球３３をロボットディーラ２により自動でルーレット球保持機構３８にセットする作業が容易になっていると共に、高い信頼性でセット作業を完了することができる。

また、図１７に示すように、保持部材３８３の一端には、突出部３８４が設けられている。突出部３８４は、案内部３８３２に沿って移動するルーレット球３３のストッパとして機能することによりルーレット球３３の保持部３８３１の保持を補助すると共に、保持部３８３１から離脱したルーレット球３３の空気流内への移動を補助するようになっている。

具体的に説明すると、図１８にも示すように、突出部３８４は、保持部３８３１よりもルーレット球３３の周回移動方向（空気流）の下流側位置に配置されている。即ち、突出部３８４は、保持部材３８３の一端に設けられることによって、保持部材３８３の一端部に形成された保持部３８３１よりも、ルーレット球３３の周回移動方向（空気流）の下流側位置に配置されている。突出部３８４は、ルーレット盤３１の壁面方向に突出されている。

これにより、図１９に示すように、空気流によりルーレット球３３を周回移動させるため、保持部３８３１からルーレット球３３を抜脱させる場合において、空気流の近傍は、ベルヌーイの定理により流速に応じて圧力が低下する。これにより、保持部材３８３を挟んで空気流側の低圧側と大気圧側の高圧側とが出現することによって、ルーレット球３３が圧力差により空気流方向（ルーレット盤３１の壁面方向）に進行する。そして、ルーレット球３３が空気流により下流側に移動するときに、下流側に配置された突出部３８４がルーレット球３３を空気流の内部方向（ルーレット盤３１の壁面方向）に強制的に移動させることによって、ルーレット盤３１の壁面に沿って還流する圧縮空気の空気流内にルーレット球３３を入り込み易くする。

（ゲーミングマシン１：機械構成：セーフティー情報取得機構６１）
図７及び図９に示すように、ルーレット装置３の斜め上方であって、且つロボットディーラ２の側方には、セーフティー情報取得機構６１が配置されている。セーフティー情報取得機構６１は、ルーレット台３４に設けられている。セーフティー情報取得機構６１は、少なくともルーレット盤３１を撮影領域とするように設定されている。これにより、セーフティー情報取得機構６１は、ルーレット装置３に対する外部からの異常動作を検知可能にしている。ここで、「異常動作」としては、プレイヤが回転盤３２やルーレット球３３を触ろうとする行為や、タバコやライター、携帯機器等のルーレットゲームで使用しない部材がルーレット盤３１内に入り込む動作が例示される。

（ゲーミングマシン１：機械構成：端末装置４Ａ〜４Ｃ）
各端末装置４Ａ〜４Ｃは、着席したプレイヤがルーレット装置３を介してロボットディーラ２と対向するように配置されている。即ち、第２の端末装置４Ｂがロボットディーラ２の真正面に対向するように配置されており、第１及び第３の端末装置４Ａ・４Ｃが、第２の端末装置４Ｂを中心とした両側に配置されている。

図１０に示すように、各端末装置４Ａ〜４Ｃは、タッチパネル式のディスプレイ装置４１を有している。ディスプレイ装置４１は、ベット状態を示すルーレットテーブルを表示可能になっている。ディスプレイ装置４１は、各端末装置４Ａ〜４Ｃにおけるベット状態を表示すると共に、プレイヤのタッチ操作によりベットの設定及び変更が可能になっている。

また、各端末装置４Ａ〜４Ｃは、２台のスピーカ装置４２Ａ・４２Ｂを有している。各スピーカ装置４２Ａ・４２Ｂは、ルーレット装置３側の一端部及び他端部にそれぞれ配置されている。これらのスピーカ装置４２Ａ・４２Ｂは、ルーレット装置３の動作音やルーレット球３３の動作音、ベット時の演出音等を出力するようになっている。

（ゲーミングマシン１：機械構成：プレイヤ解析機構５Ａ・５Ｂ・５Ｃ）
各端末装置４Ａ〜４Ｃのスピーカ装置４２Ａ・４２Ｂ間には、プレイヤ情報取得機構５１が配置されている。プレイヤ情報取得機構５１は、カメラ機構５１１・５１２と、マイク機構５１３とを有している。カメラ機構５１１・５１２は、図９に示すように、プレイヤの顔を撮影領域とするように設定されている。これにより、プレイヤ解析機構５Ａ・５Ｂ・５Ｃは、感情の判定処理や性別判定処理、会話の有無の判定処理、アプリケーション映像の形成処理を行うことが可能になっている。

（ゲーミングマシンのシステム構成）
図１に示すように、ゲーミングマシン１は、人間のディーラをロボットにより模擬したロボットディーラ２と、ルーレットゲームを実行するルーレット装置３と、ルーレット装置３の周囲に配置された３台の端末装置４Ａ〜４Ｃ（図７）とを有している。ゲーミングマシン１は、各端末装置４Ａ〜４Ｃに対応してそれぞれ配置され、各プレイヤの音声や映像を取得及び解析するプレイヤ解析機構５Ａ・５Ｂ・５Ｃと、ルーレット装置３に対する外部からの異常動作を検知可能にするセーフティーカメラ認識機構６と、ゲーミングマシン１の周囲の状況を認識可能にする俯瞰カメラ認識機構７と、プレイヤの発話に対する応答を可能にするＣＡＩＷＡサーバ８とを有している。

プレイヤ解析機構５Ａ・５Ｂ・５Ｃは、プレイヤ情報取得機構５１とプレイヤカメラユニット５２とを有している。プレイヤ情報取得機構５１は、２種類のカメラ機構５１１・５１２とマイク機構５１３とを有している。

セーフティーカメラ認識機構６は、セーフティー情報取得機構６１とルーレット状態カメラユニット６２とを有している。セーフティー情報取得機構６１は、２種類のカメラ機構６１１・６１２を有している。これらのカメラ機構６１１・６１２は、ルーレット装置３の上面を撮影するように配置されている。一方のカメラ機構６１１は、高精細度ビデオカメラである。他方のカメラ機構６１２は、赤外線カメラである。ルーレット状態カメラユニット６２は、カメラ機構６１１・６１２からの映像に基づいてルーレット装置３の動画情報を出力するようになっている（映像配信処理）。

俯瞰カメラ認識機構７は、俯瞰情報取得機構７１と俯瞰カメラユニット７２とを有している。俯瞰情報取得機構７１は、２種類のカメラ機構７１１・７１２を有している。これらのカメラ機構７１１・７１２は、ルーレット装置３の全体及び端末装置４Ａ〜４Ｃの背景を撮影するように配置されている。一方のカメラ機構７１１は、高精細度ビデオカメラである。他方のカメラ機構７１２は、赤外線カメラである。俯瞰カメラユニット７２は、カメラ機構７１１・７１２からの映像に基づいてカメラ映像の読み込み処理や画像解析処理、人数・人位置・行動の分析処理、アプリケーションの映像取り込み処理、映像配信処理を実行するようになっている。

また、ゲーミングマシン１は、各種処理を実行するメインユニット１０１を有している。メインユニット１０１は、ハブ１０２を介してプレイヤ解析機構５Ａ・５Ｂ・５Ｃとセーフティーカメラ認識機構６と俯瞰カメラ認識機構７とＣＡＩＷＡサーバ８とに接続されている。ゲーミングマシン１は、メインユニット１０１と各機構５・６・７のカメラユニット５２・６２・７２とＣＡＩＷＡサーバ８とが協働することによって、各種の処理を実行するようになっている。処理の具体的な内容については後述する。

（ゲーミングマシン：管理用表示装置）
図２１に示すように、メインユニット１０１は、管理用表示装置９に接続されている。管理用表示装置９は、プレイヤ解析機構５Ａ・５Ｂ・５Ｃ、セーフティーカメラ認識機構６及び俯瞰カメラ認識機構７からの情報を集約して表示することによって、複数の情報を容易に管理可能にしている。具体的に説明すると、図２２に示すように、管理用表示装置９は、人物詳細領域９１と俯瞰カメラ配信映像領域９２と第１プレイヤ配信映像領域９３と第２プレイヤ配信映像領域９４と第３プレイヤ配信映像領域９５とセーフティーカメラ配信映像領域９６と３Ｄシミュレータ領域９７とを有している。

人物詳細領域９１は、個々の人物を特定するＩＤ領域９１１と、各人物の特徴を示す特徴領域９１２とを有している。ＩＤ領域９１１は、ＩＤ１、ＩＤ２、ＩＤ３等のように表示される。特徴領域９１２は、例えばＩＤ１の人物についての性別、ロボットディーラ２から視た場合のプレイヤが存在する方向、ロボットディーラ２からの距離、人物の身長、プレイヤか否かの表示、怒りや喜び等の感情、ロボットディーラ２との会話の許否の設定状態等の各種の情報を表示する。

セーフティーカメラ配信映像領域９６は、図２１の俯瞰カメラ認識機構７からの映像に基づいて、ルーレット装置３の後方（ロボットディーラ２側とは反対方向）の所定領域内に存在する全ての人物を表示する。さらに、セーフティーカメラ配信映像領域９６は、人物の表示に加えて、各人物の性別や年齢、プレイヤの有無、発話内容を表示する。

第１〜第３プレイヤ配信映像領域９３〜９５は、図２１のプレイヤ解析機構５Ａ・５Ｂ・５Ｃからの映像に基づいて各プレイヤの顔画像を表示すると共に、各プレイヤの性別及び感情を表示する。セーフティーカメラ配信映像領域９６は、図２１のセーフティーカメラ認識機構６からの映像を表示する。３Ｄシミュレータ領域９７は、ロボットディーラ２が仮想空間において動作する状態を表示する。

（ゲーミングマシンの処理動作：状況把握処理）
ゲーミングマシン１における処理の内容を具体的に説明する。図２３Ａに示すように、ゲーミングマシン１は、状況把握処理を実行する（Ａ１）。状況把握処理は、視覚での状況把握処理（Ａ１１）と音声での状況把握処理（Ａ１２）とゲーム状況把握処理（Ａ１３）と音声ターゲット決定処理（Ａ１４）と優先行動決定処理（Ａ１５）とを有している。

視覚での状況把握処理（Ａ１１）は、俯瞰カメラ認識機構７の映像に基づいて対象物を探る処理を含む（Ａ１１１）。この処理において、人物の種類が分析され、画像解析及び赤外線に基づいて人数と位置が把握され、画像解析及びマイク方向により会話対象人物が特定される。

また、視覚での状況把握処理（Ａ１１）は、行動の履歴から対象物の状況を把握する処理を含む（Ａ１１２）。この処理において、対象物の段階的な行動が分析される。ここで、「対象物」とは、ゲーミングマシン１で遊技する人物（プレイヤ）及びゲーミングマシン１の周囲に存在する人物である。「段階的な行動」は、下記の行動１〜５である。行動１：人物が歩いている。行動２：人物がルーレット装置３の前で立ち止まる。行動３：人物がルーレット装置３に近づく。行動４：人物がルーレット装置３を見ている。行動５：人物がロボットディーラ２に話しかける。そして、これらの段階的な行動１〜５により対象物である人物の状況が把握される。

また、視覚での状況把握処理（Ａ１１）は、セーフティーカメラ認識機構６からの情報に基づいてルーレット装置３の状況を把握する処理を含む（Ａ１１３）。さらに、視覚での状況把握処理は（Ａ１１）、プレイヤ解析機構５Ａ・５Ｂ・５Ｃからの情報に基づいてプレイヤの状況を把握する処理を含む（Ａ１１４）。この処理において、プレイヤのゲーム中の心理状態が分析される。心理状態は、プレイヤの表情や体温、リアクション、顔認識に基づいて分析される。

音声での状況把握処理（Ａ１２）は、プレイヤ情報取得機構５１のカメラ機構５１１・５１２の映像に基づいて状況を把握する処理である（Ａ１２１）。ゲーム状況把握処理（Ａ１３）は、プレイヤのゲーム中の状態を分析する処理である。分析は、「勝ち負け」、「連勝」、連敗」に基づいて行われる。

音声ターゲット決定処理（Ａ１４）は、発話したプレイヤを特定する処理である。発話したプレイヤの特定は、発話認識装置５により行われる。優先行動決定処理（Ａ１５）は、オーディットを含めたモード切替処理である。例えば、モードは、ゲーミングモード、会話モード、アドバタイズモード、ショーデモモード、オーディットモード等が存在する。

（ゲーミングマシンの処理動作：会話処理）
状況把握処理（Ａ１）が実行された後、図２３Ｂに示すように、会話処理（Ａ２）が実行される。会話処理（Ａ２）は、会話モード決定処理（Ａ２１）と音声最適化処理（Ａ２２）とＣＡＩＷＡ処理（Ａ２３）と感情決定処理（Ａ２４）と音声合成処理（Ａ２５）と音声発話処理（Ａ２６）とを有している。

会話モード決定処理（Ａ２１）において、フリートークモードとゲーミング会話モードとコンシェルジュモードとが切替可能にされる（Ａ２１１）。音声最適化処理（Ａ２２）において、文字列が分析される（Ａ２２１）。例えば、ＣＡＩＷＡサーバ８が理解できるワードであるか否かが分析される。ＣＡＩＷＡ処理（Ａ２３）において、ＣＡＩＷＡサーバ８にアクセスし、ＣＡＩＷＡサーバ８からの情報に基づいてプレイヤとの会話が行われる（Ａ２３１）。

感情決定処理（Ａ２４）において、プレイヤとの会話に応じた感情が決定される（Ｓ２４）。この後、音声合成処理（Ａ２５）において、音声データの作成（Ａ２５１）と音声データの解析（Ａ２５２）とが行われる。そして、音声発話処理（Ａ２６）において、音声データを用いて発話が行われる（Ａ２６１）。この際、Ａ２４において決定された感情とＡ２５２における音声データ解析結果とＡ２６１における音声発話とに基づいて口ＬＥＤコントロール処理（Ａ２６１１）が実行される。この処理において、ロボットディーラ２の口周辺部を照明する照明光の色や点滅が会話に応じたタイミングで切り替えられることによって、ロボットディーラ２の会話や動作がリアリティを持った状態にされる。

また、口ＬＥＤコントロール処理（Ａ２６１１）とＡ２４で決定された感情とに基づいて目ＬＥＤコントロール処理（Ａ２６１２）が実行される。この処理において、ロボットディーラ２の目周辺部を照明する照明光の色や点滅が感情に応じて切り替えられることによって、ロボットディーラ２の感情が表現される。尚、照明光の色や点滅でロボットディーラ２の感情を表現する構成については後述する。

（ゲーミングマシンの処理動作：行動処理）
状況把握処理（Ａ１）又は会話処理（Ａ２）が実行された後、図２３Ｃに示すように、行動処理（Ａ３）が実行される。行動処理（Ａ３）は、ロボット動作決定処理（Ａ３１）とロボット目線合わせ処理（Ａ３２）と動作Ｂｕｉｌｄ処理（Ａ３３）と動作再生処理（Ａ３４）とを有している。

ロボット動作決定処理（Ａ３１）において、ロボットディーラ２の動作が決定される（Ａ３１１）。ロボット目線合わせ処理（Ａ３２）において、ロボットディーラ２がゲームモードに対応した対象物を見る。例えば、ロボットディーラ２がプレイヤを見る動作（Ａ３２１）やロボットディーラ２が手元を見る動作（Ａ３２２）、ロボットディーラ２が何かを見る動作（Ａ３２３）がゲームモードに対応して行われる。

モーションＢｕｉｌｄ処理（Ａ３３）において、ロボットディーラ２の動作に対応する各要素（アーム２１・２２、胴体２３、頭部２４等）の位置情報が作成される（Ａ３３１）。そして、これらの要素の位置情報が合成される（Ａ３３２）。この後、動作再生処理（Ａ３４）において、３Ｄシミュレータ処理（Ａ３４１）により、仮想空間内でロボットディーラ２が動作される。尚、仮想空間において、ロボットディーラ２の他、ルーレット装置３や俯瞰情報取得機構７１等で取得された障害物となり得る部材が、仮想的に存在している。

この後、ロボット処理（Ａ３４２）により、ロボットディーラ２が実際に動作される。この際、図２４の衝突回避ルーレットゲームが実行されることによって、ロボットディーラ２が実際に動作している最中に、ロボットディーラ２が実際に到達する前の三次元位置を事前に算出し、ルーレット装置３等の各部材に対するロボットディーラ２の衝突の有無が判定される。衝突する場合は、衝突を回避するように各要素の位置情報が再計算されたり、或いは、ロボットディーラ２の動作が停止される。以下に、衝突回避処理について詳細に説明する。

（ゲーミングマシンの処理動作：行動処理：衝突回避処理）
図２５に示すように、衝突回避処理を実行するゲーミングマシン１は、下記の構成を有している。即ち、ゲーミングマシン１は、遊技に使用されるルーレット球３３（遊技用具）の取り扱い動作を含む各種の動作を行うロボットディーラ２（ディーラー代替装置）と、ロボットディーラ２の動作範囲を含む監視領域における人間の腕等の障害物１１１を検知する障害物検知機構（俯瞰カメラ認識機構７やセーフティーカメラ認識機構６、メインユニット１０１等）と、ロボットディーラ２の動作前及び動作中において、ロボットディーラ２の動作経路を事前にシミュレーションし、シミュレーションした動作経路中に障害物が存在する場合に、異常事態に対応した動作をロボットディーラ２に行わせるように制御する図１のメインユニット１０１（制御装置）とを有している。

ここで、「異常事態に対応した動作」は、ロボットディーラ２の障害物１１１への衝突を回避する全ての動作を含む。例えば、動作中のロボットディーラ２が障害物１１１の直前で停止したり、ロボットディーラ２が障害物１１１を回避して動作したり、回避動作に加えて、音声や光等により警報を行う動作も含む。

上記の構成によれば、ロボットディーラ２の動作前及び動作中において、事前にシミュレーションした動作経路中に障害物１１１が存在する場合に、異常事態に対応した動作をロボットディーラ２に行わせることによって、ロボットディーラ２が不測の障害物１１１に衝突することを回避することができる。

具体的に説明すると、図２４に示すように、メインユニット１０１が衝突回避処理ルーチンを実行すると、俯瞰情報取得機構７１のカメラ機構７１１・７１２やセーフティー情報取得機構６１のカメラ機構６１１・６１２、その他の図示しないカメラ機構により撮影された映像動画を取得する（Ｓ５１）。そして、予め、ロボットディーラ２の動作範囲を含むように設定された監視領域域内における構造物の三次元位置データが映像動画に基づいて取得される（Ｓ５２）。尚、構造物は、ルーレット装置３やロボットディーラ２等のゲーミングマシン１の一部であると共に、ゲーミングマシン１以外の人や部材等の障害物１１１である。これらの構造物の三次元データが、メモリに構築された仮想空間に展開される（Ｓ５３）。これにより、監視領域内におけるゲーミングマシン１の一部や障害物１１１が仮想的に再現される。尚、仮想空間の構造物は、管理者により目視可能にするため、管理装置９において表示される。

この後、ロボットディーラ２が動作するか否かが判定される（Ｓ５４）。ロボットディーラ２が動作しない場合は（Ｓ５４：ＮＯ）、Ｓ５１から再実行されることによって、新たな映像動作に基づいた構造物が仮想的に再現される。

ロボットディーラ２が動作する場合は（Ｓ５４：ＹＥＳ）、ロボットディーラ２の動作内容が取得される（Ｓ５５）。動作内容に基づいてロボットディーラ２の動作経路が三次元位置データ化される（Ｓ５６）。動作経路が三次元位置データが仮想空間に展開される（Ｓ５７）。これにより、監視領域の仮想空間において、ロボットディーラ２の動作経路と構造物とが合成されることになる。尚、仮想空間におけるロボットディーラ２の動作経路は、管理者により目視可能にするため、管理装置９において表示される。

次に、動作経路中に障害物１１１となる構造物が存在するか否かが判定される（Ｓ５８）。即ち、動作経路を移動するロボットディーラ２のアーム２１・２２等の各要素が障害物１１１に衝突するか否かが判定される。動作経路中に構造物が存在しない場合は（Ｓ５８：ＮＯ）、ロボットディーラ２が動作され（Ｓ６０）、Ｓ１から再実行される。これにより、ロボットディーラ２が動作経路に従って通常通りに動作することになる。

一方、動作経路中に構造物が存在する場合は（Ｓ５８：ＹＥＳ）、ロボットディーラ２が障害物１１１に衝突するため、異常事態に対応した動作が実行される（Ｓ５９）。例えば、ロボットディーラ２の動作の停止や警報音の発生、衝突回避経路の算出等が行われる。そして、Ｓ５８から再実行されることによって、障害物１１１が除去されるまでロボットディーラ２の動作が停止されることになる。

尚、異常事態に対応した動作は、異常時間の経過に従ってロボットディーラ２の動画が異なるようにされていてもよい。例えば、最初の異常事態の場合は、ロボットディーラ２が停止し、第１時間の経過後に、停止状態のロボットディーラ２が警報を音声や光で出力し、第２時間の経過後に、ロボットディーラ２が初期ポジションに戻る等の復帰動作を行ってもよい。また、異常事態に対応した動作は、障害物１１１の種類に応じて変更されてもよい。例えば、障害物１１１が人間である場合は、ロボットディーラ２の動作停止が最優先され、動作停止と警報音の発生が同時に行われ、障害物１１１が物である場合は、動作停止が先に行われ、所定時間の経過後に警報音が出力されてもよい。

（ロボットディーラ２の感情表現）
次に、ロボットディーラ２の顔面を照明光の色や点滅で変化させることによって、感情を表現する構成について説明する。

図２６に示すように、ロボットディーラ２は、半透明樹脂で顔形状に形成された顔面成形体２４１と、顔面成形体２４１の内側に配置され、複数色の光を切替え可能に顔面成形体２４１の任意の領域に照射可能な発光機構２４２と、光の色及び顔面成形体２４１の照射領域を状況に応じて選択し、選択した色の光を選択した照射領域に照射するように発光機構２４２を制御するメインユニット１０１（発光制御機構）とを有している。発光機構２４２は、各領域に対応して設けられており、フルカラーＬＥＤ等を用いることができる。

これにより、ロボットディーラ２は、顔面成形体２４１を透過する光の色及び透過する領域を状況に応じて選択し、光の色及び領域を用いて感情を表現するとによって、遊技環境を人間のディーラーで操作される雰囲気に近づけることができる。

具体的に説明すると、ロボットディーラ２の顔面成形体は、額領域２４３１と目領域２４３３と鼻領域２４３４と口領域２４３６と頬領域２４３５とを有している。メインユニット１０１は、目領域２４３３を青色の光で照射する通常状態と、目領域２４３３を青色の光で照射し、且つ頬領域２４３５をピンク色の光で照射する喜び状態と、目領域２４３３を赤色の光で照射する怒り状態と、額領域２４３１を青色の光で照射する哀しみ状態とを状況に応じて選択する。これにより、ロボットディーラ２は、光の色及び領域を用いて豊かな感情表現を実現することが可能になっている。尚、メインユニット１０１は、ロボットディーラ２が発話するときに、口領域２４３６を青色の光で点滅させることが好ましい。この場合は、各種の感情表現下における発話の様子を口領域２４３６の青色光で示すことが可能になる。

ここで、「照射領域」は、各種の感情を表現可能に区分されていれば、特に限定されるものではないが、目領域２４３３と眉領域２４３２と鼻領域２４３４と頬領域２４３５と口領域２４３６と顎領域２４３７とに区分されていることが好ましい。また、発光機構２４２は、各領域２４３３・２４３２・２４３４・２４３５・２４３６・２４３７の略中央部に、それぞれ個別に発光機構２４２１・２４２２・２４２３・２４２４・２４２５・２４２６・２４２７が配置されていることが好ましい。これらの領域２４３２〜２４３７に区分した場合は、領域２４３１〜２４３７の組み合わせにより感情の種類に対応した表情や微表情をロボットディーラ２に持たせることができる。

尚、微表情は、上述のように、感情の種類により顔の一部領域が０．２５秒等の一定時間内において瞬間的に変化する表情である。従って、ロボットディーラ２が微表情を出力する場合は、領域２４３１〜２４３７の組み合わせからなる照射領域を０．２５秒等の一定時間内だけ照明したり、照明光の色を変化させることになる。

（表情・微表情と感情の種類との関係）
図２７に示すように、表情や微表情は、感情の種類により顔の一部領域が変化する表情である。そして、微表情は、０．２５秒等の一定時間内において瞬間的に一部領域を変化させる表情である。例えば、「嫌悪」の表情や微表情は、鼻にしわを寄せる動作である。「恐怖」の表情や微表情は、両眉を上げる動作と、両眉を中央に引き寄せる動作と、目を見開く動作と、まぶたに力を入れる動作と、口角を横に引く動作との組み合わせである。「怒り」の表情や微表情は、両まゆ毛を中央に引き寄せる動作と、目を見開く動作と、まぶたに力を入れる動作と、唇を固く閉じる動作と、口を開ける動作との組み合わせである。

「幸福」の表情や微表情は、頬を上げる動作と、口角を上げる動作と、口角のみを上げる動作との組み合わせである。「悲しみ」の表情や微表情は、眉の内側を上げる動作と、両眉を中央に引き寄せる動作と、口角を下げる動作と、下唇を上げる動作との組み合わせである。「軽蔑」の表情や微表情は、片方の口角を上げる動作である。「驚き」の表情や微表情は、両眉を上げる動作と、目を見開く動作と、口を開ける動作との組み合わせである。

本実施形態おいては、メインユニット１０１が図２７の感情の種類と表情の各領域の動作とを関係付けたデータテーブルを格納している。さらに、メインユニット１０１は、表情や微表情の各動作と照射光の光量や光色、照射面積とを関係付けており、発光機構２４２を制御することによって、外部から照射状態を視た観察者に各動作を連想させるようになっている。例えば、「目を見開く」動作の場合は、目領域２４３３の照明光の面積が拡大される。

また、メインユニット１０１は、表情や微表情の各動作を連想させる照射光の光量や光色、照射面積をゲーム状況に応じて変化させることが好ましい。例えば、図２０の警報境界領域３１Ｂに異物１１０が存在する場合と、停止境界領域３１Ａに異物１１０が存在する場合とにおいて、同じ「驚き」の表情や微表情を示す場合であっても、停止境界領域３１Ａの方が警報境界領域３１Ｂよりも重大事象であるとして、発光機構２４２の光強度を大きくしたり、光色を変化させてもよい。

さらに、メインユニット１０１は、ゲーム状況に応じて、発光機構２４２の制御に加えて、感情の種類に対応した図５の動作をロボットディーラ２に行わせてもよい。例えば、警報境界領域３１Ｂに異物１１０が存在する場合は、「驚き」の表情や微表情を示すように発光機構２４２を制御し、停止境界領域３１Ａに異物１１０が存在する場合は、「驚き」の表情や微表情を示すように発光機構２４２を制御することに加えて、ロボットディーラ２に肩を引き上げる動作や深呼吸を行う動作を行わせてもよい。また、表情と微表情とは、条件に応じて切り替え可能にされていることが好ましい。例えば、ルーレット球３３がポケットに収容される等のゲーム結果が出た直後においては、微表情を出現させ、その後、通常の表情を出現させるようにロボットディーラ２を制御し、プレイヤ等の通常の会話時においては表情を出現させるようにロボットディーラ２を制御してもよい。

（応対装置）
以上の説明においては、ロボットディーラ２及びゲーミングマシン１を用いて本発明を説明したが、これに限定されるものではない。即ち、本発明は、応対装置であって、各種の動作を行う動作装置と、前記動作装置の周辺領域の動画を撮影するカメラ機構と、前記カメラ機構で撮影された前記周辺領域の動画に基づいて、前記周辺領域に存在する人物の動作を分析し、分析結果に対応付けられた動作を前記動作装置に実行させるように制御する制御装置とを備えていてもよい。

ここで、「応対装置」は、遊技場で使用される上述のゲーミングマシンの他、ホテルやモール、店舗、郵便局、銀行、チケット販売所等で使用される接客装置、病院で使用される看護装置、介護施設で使用される介護装置等を例示することができる。即ち、本発明は、各種の施設に適用することができる。また、「動作装置」は、ロボットディーラの他、接客ロボット、看護ロボット、介護ロボットを例示することができる。

上記の構成によれば、動作装置の周辺領域に存在する人物に対して、動作装置が分析結果に対応した各種の動作を行うため、応対装置の環境を人間で動作される雰囲気に近づけることができる。

また、本発明は、応対装置であって、各種の動作を行う動作装置と、前記動作装置の作動領域の動画を撮影するカメラ機構と、前記カメラ機構により撮影された前記動画に基づいて前記作動領域における異常の有無を判定し、異常であると判定した場合、当該異常に対応する動作を前記動作装置に実行させるように制御する制御装置とを備えていてもよい。

上記の構成によれば、動作装置が異常に対応する動作を行うことによって、応対装置の環境を人間で動作される雰囲気に近づけることができる。

また、本発明は、応対装置であって、各種の動作を行う動作装置と、前記動作装置の動作範囲を含む監視領域における障害物を検知する障害物検知機構と、前記動作装置の動作前及び動作中において、前記動作装置の動作経路を事前にシミュレーションし、シミュレーションした動作経路中に前記障害物が存在する場合に、異常事態に対応した動作を前記動作装置に行わせるように制御する制御装置とを有してもよい。

上記の構成によれば、動作装置の動作前及び動作中において、事前にシミュレーションした動作経路中に障害物が存在する場合に、異常事態に対応した動作を動作装置に行わせることによって、動作装置が障害物に衝突することを回避することができる。

また、本発明は、動作装置であって、半透明樹脂で顔形状に形成された顔面成形体と、前記顔面成形体の内側に配置され、複数色の光を切替え可能に前記顔面成形体の任意の領域に照射可能な発光機構と、前記光の色及び前記顔面成形体の照射領域を状況に応じて選択し、選択した色の光を選択した照射領域に照射するように前記発光機構を制御する発光制御機構とを有していてもよい。

上記の構成によれば、顔面成形体を透過する光の色及び透過する領域を状況に応じて選択し、光の色及び領域を用いて感情を表現することによって、環境を人間で動作される雰囲気に近づけることができる。

（実施形態２）
以下、本発明の実施形態２を図面に基づいて説明する

以下の詳細な説明では、単なる例示として本発明の一実施形態のみについて説明する。当業者であれば、以下の実施形態が本発明の精神又は範囲を逸脱すること無く、様々な変更を加えられることを理解するであろう。従って、図面及び説明は本質的に限定では無く例示として考えられるべきである。本明細書を通して、類似する要素には類似する参照符号を付す。

図２８〜図３６を参照して、本発明の実施形態によるゲーミングマシンを説明する。

図２８は、本発明の実施形態におけるゲーミングマシンの概略斜視図である。図２９は、図２８に示すゲーミングマシンの部分拡大図である。図３０は、本発明の実施形態におけるゲーミングマシンの右手側を示す概略斜視図である。図３１は、本発明の実施形態におけるゲーミングマシンの左手側を示す概略斜視図である。図３２は、本発明の実施形態におけるゲーミングマシンの右手側を示す概略正面図である。図３３は、本発明の実施形態におけるゲーミングマシンの右手側を示す概略後面図である。図３４は、本発明の実施形態におけるゲーミングマシン左手側のオブジェクトホルダを示す概略断面図である。図３５は、本発明の実施形態におけるゲームディーラー装置の表情を示す図である。

図２８に示すように、本発明の実施形態におけるゲーミングマシンＭ１には、ゲームディーラー装置Ｍ１０と、ルーレット装置等のゲーム装置Ｍ３と、複数のプレイヤステーションＰＳとが設けられている。

図２９に示すように、前記ルーレット装置Ｍ３は、回転レール付近に配置されたボールホルダＭ１７を備えている。前記ボールホルダＭ１７は、ピアノ線を曲げたもので作成してもよく、モータＭに当該モータＭの回転軸を中心に回転して位置を変更できるように接続されていてもよい。また、前記ボールホルダＭ１７は、当該ボールホルダＭ１７上のボールが前記回転レールから、ルーレットボールＭ２の直径より大きい距離ｄだけ隔離されるよう構成されていてもよい。

更に図２８に示すように、前記ゲームディーラー装置Ｍ１０は、ルーレット等のゲームで使用するゲームオブジェクトＭ２を操作する。つまり、前記ゲームディーラー装置Ｍ１０は、人間のディーラーの代わりである。

前記ゲームディーラー装置Ｍ１０は、右アームＭ１２と、左アームＭ１３と、胴部Ｍ１１を有する。アームＭ１２及びＭ１３は、人体の肘及び手首に対応した自由度を有する。また、アームＭ１２及びＭ１３は、前記胴部Ｍ１１の人体の肩に該当する位置に取り付けられている。

前記右アームＭ１２は、複数の指Ｍ１４１を有する例えば手のような機構である処理部Ｍ１４を有しており、隣接する指Ｍ１４１の各対はモータＭ１４３によって駆動される。前記左アームＭ１３もまた、複数の指Ｍ１５１を有する例えば手のような機構である処理部Ｍ１５を有しており、この処理部Ｍ１５によってゲームオブジェクトＭ２を処理する。また前記左アームＭ１３の処理部Ｍ１５は、減圧によってゲームオブジェクトＭ２を保持するオブジェクト保持部Ｍ１８を備えている。前記オブジェクト保持部Ｍ１８は、前記手Ｍ１５の指Ｍ１５１の先端に配置されていても良い。また、オブジェクト保持部Ｍ１８は、円筒状部材Ｍ１８２と、前記円筒状部材Ｍ１８２の先端に配置され、前記ルーレットボールＭ２Ａに接触する吸着部Ｍ１８１とを有している。前記円筒状部材Ｍ１８２は空気圧縮機（図示せず）に接続されている。前記吸着部Ｍ１８１は、前記ボールＭ２に接触する吸着面Ｍ１８１ｂと、前記吸着面Ｍ１８１ｂに開口する吸入孔Ｍ１８１ａを有している。前記吸入孔Ｍ１８１ａは、前記円筒状部材Ｍ１８２を介して、前記空気圧縮機に通気可能となっている。前記ボールＭ２Ａに接触する吸着部Ｍ１８１の一部には弾性材料が使用されている。前記ゲームディーラー装置Ｍ１０は、ボール保持部Ｍ１８に付着したボールＭ２を前記ルーレット装置Ｍ３のボールホルダＭ１７まで移動し、空気の吸入を停止させることにより、前記ボールＭ２をボールホルダＭ１７に載置する。尚、前記ゲームディーラー装置Ｍ１０は、前記ルーレット装置Ｍ３のボールホルダＭ１７上のボールＭ２を回転レールに打ち出すことにより、前記ボールＭ２を回転レールに沿って回転させてもよい。別の実施形態において、前記ボールホルダＭ１７上のボールＭ２は、ボールホルダＭ１７を移動又は回転させることによって、回転レールに押し出されてもよい。

前記アームＭ１２及びＭ１３は、処理部Ｍ１４及びＭ１５を三次元空間内で移動させるように構成されている。また前記胴部Ｍ１１には、頭部Ｍ１６が設けられており、前記頭部Ｍ１６は左右に可動性を有していてもよい。また、前記胴部Ｍ１１は、回転及び／又は前後に動くことにより姿勢を変更可能に構成してもよい。

図３５に示すように、前記頭部Ｍ１６には半透明の顔部が設けられていてもよく、顔部の中に発光体を設けて感情表現が可能となるように構成されていてもよい。前記発光体は複数色の光源を有しており、異なる状況に応じて異なる色の光を発してもよい。例えば、前記光源を眼、頬、額の部分に配置してもよい。普通の状況下では、前記頭部Ｍ１６の眼は空色であってもよい。喜びを表現する際には頬を赤くしたり、悲哀を表現する際に額を濃い青色にしてもよい。また、怒りを表現する際には眼を橙色にしたり、額を赤色にしてもよい。

図３６に示すように、前記ゲーミングマシンＭ１は、声、姿勢、動き、顔の表情等の各種外部情報を取得する複数の情報取得部ＭＩＡ１、ＭＩＡ２、ＭＩＡ３をさらに備えている。また、前記ゲーミングマシンＭ１は、会話サーバーＭＣＳと、コントローラＭ６と、情報取得部ＭＩＡ１、ＭＩＡ２、ＭＩＡ３とをさらに備えており、前記会話サーバーＭＣＳ及び前記コントローラＭ６とは、ハブＨＵＢを介して接続されている。また、前記ゲーミングマシンＭ１は、プレイヤの状態や状況、ゲーム領域の画像、３Ｄシミュレーター等を表示するモニターＭＳＣを更に備えている。前記モニターＭＳＣはコントローラＭ６に接続されている。

本発明の実施形態によれば、前記情報取得部ＭＩＡ１、ＭＩＡ２、ＭＩＡ３には、オーバービューカメラ機構（又はカイトカメラ機構）ＭＣ１、ゲーム領域カメラ機構ＭＣ２、及び、複数のプレイヤカメラ機構ＭＣ３のうちの少なくとも一つのカメラ機構が設けられていてもよい。

前記オーバービューカメラ機構ＭＣ１は、ゲームディーラー装置Ｍ１０より上に配置されていてもよく、ステーションエリアを撮影してもよい（図３９）。撮影された画像に基づいて、オーバービューカメラ機構ＭＣ１は、客の人数、位置、及び、挙動を判断する。また、前記オーバービューカメラ機構ＭＣ１は、アプリケーション画像を撮影し、コントローラＭ６へ送信する。また、オーバービューカメラ機構ＭＣ１には、ＲＧＢカメラＭＣ１１及び赤外線カメラＭＣ１２が備えられていてもよい。

前記ゲーム領域カメラ機構ＭＣ２は、ゲームディーラー装置Ｍ１０の額に配置されていてもよく、例えばルーレットテーブル等のゲーム領域を撮影してもよい。また、前記ゲーム領域カメラ機構ＭＣ２には、ＲＧＢカメラＭＣ２１及び赤外線カメラＭＣ２２が備えられていてもよい。

前記プレイヤカメラ機構ＭＣ３は、プレイヤに対向するように前記プレイヤステーションに配置されていてもよく、プレイヤの顔を撮影してもよい（図４１）。撮影された画像に基づいて、プレイヤカメラ機構ＭＣ３は、プレイヤの感情、性別、及び、会話を判断する。また、前記プレイヤカメラ機構ＭＣ３は、アプリケーション画像を撮影し、コントローラＭ６へ送信する。また、プレイヤカメラ機構ＭＣ３には、ＲＧＢカメラＭＣ３１及び赤外線カメラＭＣ３２が備えられていてもよい。

前記情報取得部ＭＩＡ３には、各ステーションから発せられる音声を取得するマイクが備えられ、プレイヤの音声を取得してもよい。前記マイクは音声を認識して、当該音声を送信用のテキストに変換する。

また、前記ゲーミングマシンには、音声信号を増幅させるデジタルアンプと前記音声信号を音に変換するスピーカ５１２とを含むスピーカ部が備えられていてもよい。

前記コントローラＭ６は、前記カメラ機構ＭＣ１、ＭＣ２、ＭＣ３によって撮影されたプレイヤの画像、及び、前記マイクによって取得されたプレイヤの音声に基づいてプレイヤ情報を取得して、当該プレイヤ情報をモニター及びディーラー装置Ｍ１０に出力してもよい。

前記コントローラＭ６は、前記ディーラー装置とシリアル通信を行うことにより、アームＭ１２及びＭ１３、及び胴部Ｍ１１の動きを制御するように構成されている。
前記コントローラＭ６は、入力部と出力部を有するＩ／Ｏボックス（図示せず）に接続されている。前記Ｉ／Ｏボックスは、空気制御バルブ等を有する空気圧縮機（図示せず）に接続されている。前記空気圧縮機は、空気管Ｍ１８２を介して前記処理部Ｍ１５の保持部Ｍ１８に接続されており、空気を吸入するように構成されている。前記コントローラＭ６が、前記空気圧縮機の空気制御バルブを制御することにより、保持部Ｍ１８が適切なタイミングで操作される。具体的には、ゲームオブジェクト（ルーレットボール）Ｍ２が停止すると、処理部Ｍ１５がゲームオブジェクトＭ２へ移動し、保持部Ｍ１８が当該ゲームオブジェクトＭ２に接触する。その後、空気圧縮機が空気管を介して空気の吸入を開始することにより、ゲームオブジェクトＭ２を保持部Ｍ１８に吸着させる。

以下に、図４２〜図４６を参照して、ゲーミングマシンの動作を説明する。

本発明の一実施形態において、前記コントローラＭ６は、図４２に示すように、状態判定、会話モード、行動決定、３Ｄシミュレーション、及び、プレイを行う。

前記状態判定において、コントローラＭ６は、図４３に示すように、カメラユニットによって撮影された画像から、オブジェクトの状態を判断する。具体的には、前記コントローラＭ６は、オーバービューカメラ機構ＭＣ１によって撮影された画像から、客のタイプを判断する。例えば、ＲＧＢカメラＭＣ１１及び赤外線カメラＭＣ１２を用いて撮影された画像を解析することにより客の数や位置を判断し、ＲＧＢカメラＭＣ１１を用いて撮影した画像を解析してマイクの方向を考慮して会話の相手を判断する。

その後、コントローラＭ６は、行動履歴に基づいてオブジェクトの状態を判断する。例えば、客の動作は段階毎に解析する。コントローラは、客が歩いているのか、ディーラー装置の前で止まっているのか、近づいてきてるのか、見ているのか、話しているのかなどを判断し、その後客の状況を判断する。

また、コントローラＭ６は、プレイヤカメラ機構ＭＣ３によって撮影された画像を基に状況を判断してもよい。例えば、前記コントローラＭ６は、ＲＧＢカメラＭＣ２１によって撮影された画像から判断される顔の表情や、赤外線カメラＭＣ２２によって撮影された赤外線画像の解析により得られる体温や、画像における状態の変化を解析することにより得られる反応を基にプレイヤの感情状態を判断する。

また、コントローラＭ６は、ゲーム領域カメラ機構ＭＣ２によって撮影された画像を基に状況を判断してもよい。

また、コントローラＭ６は、前記マイクに入力される音や音声から、オブジェクトの状態を判断する。入力された音声は文字に変換されてもよい。
また、コントローラＭ６は、例えば勝敗、連続する勝利、連続する敗北の数等のプレイヤのゲーム状況を判断するように構成されていてもよい。

前記コントローラＭ６は、音声ターゲットを判断し、優先行動を判断してもよい。優先行動を判断する際に、図４４に示すオーディットを含む画面に変更してもよい。

図４５に示すように、会話モードにおいて、コントローラＭ６は会話モードの種類を判断してもよい。前記種類としては、フリートーク、ゲームトーク、及び、情報についてのトークモードが挙げられる。また、コントローラＭ６は、文字を解析し音声を会話モードに合わせて最適化してもよい。その後、コントローラＭ６は、会話データベースを用いて会話を検索し、感情の種類を判断してもよい。続いて、コントローラＭ６は、音声を合成して、音声データの書き込み及び解釈を行う。最後に、コントローラＭ６は音声の出力、つまり、発話を行う。

図４６に示す行動決定において、コントローラＭ６は前記ゲームディーラー装置又はロボットＭ１０の動作を決定する。コントローラＭ６は、音声データの解析及び動きの判定に基づいてロボットＭ１０の動作を決定してもよい。また、コントローラＭ６は、ロボットＭ１０の眼をプレイヤ、ゲームエリア、又は、その他のオブジェクトに合わせてもよい。その後コントローラＭ６は、衝突の可能性を考慮した動きの合成、当該動きの書き込み、及び、動きの構築を行ってもよい。また、コントローラＭ６は、ロボットＭ１０に、割り当てられたプレイヤの動きに対応した動作を行わせてもよい。

前記会話モードにおける動作とともに音声データを合成してもよい。

以上、本発明の現段階で可能と思われる実施形態について説明をしたが、本発明は開示される実施形態に限定されず、付随する請求項の精神及び範囲ないで可能な種々の変形や同等の構成を包含すると理解されるべきである。

以上、本発明の実施形態を説明したが、具体例を例示したに過ぎず、特に本発明を限定するものではなく、各手段等の具体的構成は、適宜設計変更可能である。また、本発明の実施形態に記載された効果は、本発明から生じる最も好適な効果を列挙したに過ぎず、本発明による効果は、本発明の実施形態に記載されたものに限定されるものではない。

また、上述した詳細な説明では、本発明をより容易に理解できるように、特徴的部分を中心に説明した。本発明は、上述した詳細な説明に記載する実施形態に限定されず、その他の実施形態にも適用することができ、その適用範囲は多様である。また、本明細書において用いた用語及び語法は、本発明を的確に説明するために用いたものであり、本発明の解釈を制限するために用いたものではない。また、当業者であれば、本明細書に記載された発明の概念から、本発明の概念に含まれる他の構成、システム、方法等を推考することは容易であると思われる。従って、請求の範囲の記載は、本発明の技術的思想の範囲を逸脱しない範囲で均等な構成を含むものであるとみなされなければならない。また、要約書の目的は、特許庁及び一般的公共機関や、特許、法律用語又は専門用語に精通していない本技術分野に属する技術者等が本出願の技術的な内容及びその本質を簡易な調査で速やかに判定し得るようにするものである。従って、要約書は、請求の範囲の記載により評価されるべき発明の範囲を限定することを意図したものではない。また、本発明の目的及び本発明の特有の効果を十分に理解するために、すでに開示されている文献等を充分に参酌して解釈されることが望まれる。

上述した詳細な説明は、コンピュータで実行される処理を含むものである。以上での説明及び表現は、当業者が最も効率的に理解することを目的として記載している。本明細書では、１の結果を導き出すために用いられる各処理は、自己矛盾がない処理として理解されるべきである。また、各処理では、電気的又は磁気的な信号の送受信、記録等が行われる。各処理における処理では、このような信号を、ビット、値、シンボル、文字、用語、数字等で表現しているが、これらは単に説明上便利であるために用いたものであることに留意する必要がある。また、各処理における処理は、人間の行動と共通する表現で記載される場合があるが、本明細書で説明する処理は、原則的に各種の装置により実行されるものである。また、各処理を行うために要求されるその他の構成は、以上の説明から自明になるものである。

１ ゲーミングマシン
２ ロボットディーラ
３ ルーレット装置
４Ａ〜４Ｃ 端末装置
５ 発話認識装置
５Ａ・５Ｂ・５Ｃ プレイヤ解析機構
６ セーフティーカメラ認識機構
７ 俯瞰カメラ認識機構
８ ＣＡＩＷＡサーバ
９ 管理装置
６１ セーフティー情報取得機構
６２ ルーレット状態カメラユニット
７１ 俯瞰情報取得機構

Claims (7)

1. 複数の人物について、各人物の口元を含む動画を撮影するカメラ機構と、
   前記各人物の発話による音声を取得するマイク機構と、
   前記マイク機構が音声を取得したときにおける前記カメラ機構により撮影された各人物の口元の動きに基づいて、発話した人物を前記複数の人物の中から特定する発話認識制御装置と
   を有することを特徴とする発話認識装置。
2. 前記カメラ機構は、前記各人物を個別に撮影するように、複数のカメラ装置を有しており、
   前記マイク機構は、前記各人物の発話による音声を個別に取得するように、複数のマイク装置を有していることを特徴とする請求項１に記載の発話認識装置。
3. 前記カメラ機構により撮影された前記動画と、当該動画の撮影時間とを記憶する動画記憶装置を有し、
   前記発話認識制御装置は、前記音声を取得したときの撮影時間を含む動画を前記動画記憶装置から読み出し、前記撮影時間の動画を用いて発話した人物を特定することを特徴とする請求項１に記載の発話認識装置。
4. 請求項１に記載の発話認識装置を備えたことを特徴とするゲーミングマシン。
5. 請求項１に記載の発話認識装置と、
   遊技に使用される遊技用具の取り扱い動作と、前記人物であるプレイヤに対する演出動作とを行うディーラー代替装置と、
   を備えたことを特徴とするゲーミングマシン。
6. 前記発話認識制御装置で特定されたプレイヤの発話内容に対応する動作を前記ディーラー代替装置に実行させるように制御する制御装置を備えたことを特徴とする請求項５に記載のゲーミングマシン。
7. 遊技に使用される遊技用具を取り扱う取扱い部を、三次元空間の任意の位置に位置決め可能に移動させるアームと、
   前記アームを支持し、プレイヤに対して演出動作を行う胴体を備えたディーラー代替装置と、
   プレイヤがゲームを遂行する複数のステーションと、
   当該ステーションのプレイヤの映像を取得して記録する複数のカメラ機構と、
   当該ステーションのプレイヤの音声を取得する複数のマイク機構と、
   前記ステーションのうちの一つのマイク機構で発話がある場合、前記複数のカメラに記録された動画から発話時点の各プレイヤの表情を分析して発話したプレイヤを特定し、前記発話内容に対応する動作を前記ディーラー代替装置が遂行するようにする制御装置と
   を備えたことを特徴とするゲーミングマシン。