JP6560375B2 - シミュレータ用知能型サービスシステムと装置および方法 - Google Patents

Description

本発明はシミュレーション参加者および観覧客に多様なアナウンスメントサービスが提供できるシミュレータ用知能型サービスシステムと装置および方法に関するものである。

シミュレータ（特に、モーションシミュレータ）は、コンピュータによって制御される仮想の環境に合うように動的変化を再現することによって、参加者に仮想現実の動きを現実のように感じさせる装置を指す。シミュレータは、シミュレーション画面、操作レバー、参加者が着席した状態で２次元または３次元で移動する椅子を含むことができる。
また、シミュレータはシミュレータの回転運動および直線運動のための構成を含み、前後方向（Ｚ軸）、左右方向（Ｘ軸）および上下方向（Ｙ軸）への直線運動と、Ｚ軸を回転中心とするローリング（Ｒｏｌｌｉｎｇ）、Ｘ軸を回転中心とするピッチング（Ｐｉｔｃｈｉｎｇ）およびＹ軸を回転中心とするヨーイング（Ｙａｗｉｎｇ）回転運動の組み合わせで動くことができる。これによって、参加者がシミュレータで操作レバーを操作すると、シミュレータは参加者の操作に沿って動くことができるため、シミュレータを通じて動作するシミュレーションを進める参加者の没入度を高めることができる長所がある。

このような特徴に起因して、シミュレータは飛行シミュレーションや運転シミュレーションなどに適用されており、最近では３次元が体感できるようにゲーム用または劇場用シミュレータなどに広く活用されている。

このような体感型仮想現実装備であるシミュレータを活用した仮想現実テーマパーク事業は、初期市場が形成されているものの、投資対比運営費用が高いため、収益構造が悪い問題点を有している。

このように運営費用が高い理由は、サービスのための人件費の比重が高いためである。

また、体感型シミュレータに利用者が搭乗するためには、シミュレータへの搭乗を補助するための人員が必要であるが、熟練した人員による搭乗サービス（顧客の感情を読んで必要に応じて適切な案内および会話をするサービス）によって売り上げが大きく左右される。そのため、搭乗補助の人員を通じて周辺の観覧客の関心度を高め、現場の雰囲気がよくなるように多様なアナウンスメントを遂行する方式を採択している。
しかし、補助要員の費用は売り上げに対して相対的に高く、一般の短期アルバイトの人員では周辺の観覧客の関心度を高めるのに限界があるため、持続的な高い水準の搭乗サービスの提供は非常に難しい。

また、シミュレーションゲーム参加者には、ゲームの途中で発生し得る多様な状況に対する適切なアナウンスメントサービスを提供する必要がある。例えば、レーシングゲームをする参加者にハンドルの操作性、現在の車両の位置と速度など、進行中のゲームで必要な情報を提供する必要がある。

このようなアナウンスメントを人が直接行う場合には、複数のゲーム参加者に同時に遂行することができない。また、シミュレーションゲームに参加している複数の参加者に、同時に互いに異なるアナウンスメントを遂行することができない。

仮想現実（ＶＲ）テーマパークの普及に決定的な役割をするであろう未来核心技術は、人の代わりに高い水準の多様なアナウンスメントサービスを提供する人工知能技術である。したがって、このようなアナウンスメントサービスを提供する知能型サービスシステムの開発が要求される。

このようなシミュレータ用知能型サービスロボットは、シミュレータの周辺で活動しながら知能型サービスを提供する必要性があり、シミュレータ参加者に必要な適切な案内サービスを提供する必要性がある。

このような知能型案内ロボットシステムに対する従来技術として、大韓民国実用新案登録第２０−０４３５９８０号が開示されている。

本発明は、前述した問題点を解決するために案出されたものであって、人の代わりに高い水準のアナウンスメントサービスを提供する、シミュレータ用知能型サービスシステムと装置および方法を提供することにその目的がある。

また、複数のシミュレーション参加者または観覧客に互いに異なるアナウンスメントを同時に遂行することができる、シミュレータ用知能型サービスシステムと装置および方法を提供することにその目的がある。

また、シミュレーション参加者または観覧客に適切な案内サービスが提供できる、シミュレータ用知能型サービスシステムと装置および方法を提供することにその目的がある。

前述した問題点を解決するための本発明のシミュレータ用知能型サービスシステムは、情報収集器からシミュレーション参加者または観覧客の情報を収集する情報収集部、前記情報収集部で収集した前記情報から前記シミュレーション参加者または観覧客に提供するアナウンスメントを生成するアナウンスメント生成部、を含む。

前記情報は、前記情報収集器から受信した映像情報と音声情報および脳波情報のうち少なくとも一つで構成され得る。

前記情報収集器は、シミュレータの周辺を取り囲むフェンスに沿って走行するロボットと天井とシミュレータのうち少なくとも一つに設置され、前記情報収集部は前記情報収集器から前記アナウンスメント生成情報を収集することができる。

前記情報収集部で収集した情報から前記参加者または観覧客が会員であるか否かを判断する識別部をさらに含み、前記アナウンスメント生成部は前記識別部の判断結果を利用して前記アナウンスメントを生成することができる。

前記アナウンスメント生成部は、前記参加者が複数である場合、前記参加者のそれぞれに提供するために前記複数の参加者別に互いに異なるアナウンスメントを生成するか、前記参加者と観覧客のそれぞれに提供するために互いに異なるアナウンスメントを生成するか、前記観覧客に提供するために現在進行中のシミュレーションの状況に対するアナウンスメントを生成することができる。

複数の会員情報を保存するデータ管理部をさらに含み、前記アナウンスメント生成部は前記データ管理部に保存された会員情報を利用して前記参加者に提供するアナウンスメントを生成することができる。

この場合、前記参加者が複数であり、前記アナウンスメント生成部は前記複数の参加者に対する会員情報を前記データ管理部から提供を受けて前記複数の参加者間に対する社会的関係を判断し、前記社会的関係があると判断された場合、前記社会的関係に対応するアナウンスメントを生成することができる。

前記アナウンスメント生成のためのデータを管理するデータ管理部をさらに含み、前記参加者がデータ管理部に保存された会員ではない場合には、前記アナウンスメント生成部は前記データ管理部に既に保存されたデータを利用して前記参加者に提供するアナウンスメントを生成することができる。

本発明のシミュレータ用知能型サービス装置は、前記に記載された情報収集部とアナウンスメント生成部とを含む。

本発明のシミュレータ用知能型サービス方法は、ａ）情報収集器からシミュレーション参加者または観覧客の情報を収集する段階、ｂ）前記収集した情報から前記シミュレーション参加者または観覧客に提供するアナウンスメントを生成する段階、ｃ）前記生成したアナウンスメントを前記参加者または観覧客に提供する段階、を含む。

前記ａ）段階で収集する情報は、シミュレータの周辺を走行するロボットと天井およびシミュレータのうち少なくとも一つに設置された前記情報収集器から収集した情報を含むことができる。

前記参加者が複数であり、前記複数の参加者に対する会員情報から前記複数の参加者間に対する社会的関係を判断し、前記社会的関係があると判断された場合、前記社会的関係に対応するアナウンスメントを生成して前記社会的関係があると判断された複数の参加者に同時に提供することができる。

前記参加者が複数である場合、前記複数の参加者別に互いに異なるアナウンスメントを生成して前記参加者に前記シミュレーションが進行される間それぞれ提供するか、前記複数の参加者に互いに異なるアナウンスメントを同時に提供することができる。

前記参加者と観覧客に互いに異なるアナウンスメントを生成して前記参加者と観覧客にそれぞれ提供することができる。

前記シミュレーション参加者がシミュレータに搭乗することを案内するアナウンスメントを生成して、前記シミュレーション参加者の搭乗過程を案内することができる。

本発明によると、低い維持費用で顧客に高い水準の搭乗サービスを持続的に提供することができるため、顧客満足度を高めることができる。

また、複数のゲーム参加者に互いに異なるアナウンスメントを同時に遂行することができ、ゲームの途中で発生する状況に対する適切なアナウンスメントを遂行することができるため、ゲーム参加者のゲームに対する興味度と没入度を増加させることができる。

また、シミュレーション参加者またはフェンス外部の観覧客にも適切な案内サービスを提供することができる。

本発明によるシミュレータ用知能型サービスシステムの概略的な構成を示すブロック図。 本発明によるシミュレータ用知能型サービスシステムでフェンスを走行するロボットを示す斜視図。 本発明によるシミュレータ用知能型サービス方法に対するフローチャート。

以下、本発明のシミュレータ用知能型サービスシステムについて詳細に説明する。

図１を参照する。本発明のシミュレータ用知能型サービスシステム１は、情報収集器からシミュレーション参加者または観覧客の情報を収集する情報収集部１１０、前記情報収集部１１０で収集した情報から前記シミュレーション参加者または観覧客に提供するアナウンスメントを生成するアナウンスメント生成部１４０を含む。

本発明のシミュレーションが遂行されるシミュレータは、前後方向（Ｚ軸）、左右方向（Ｘ軸）および上下方向（Ｙ軸）への直線運動と、Ｚ軸を回転中心とするローリング（Ｒｏｌｌｉｎｇ）、Ｘ軸を回転中心とするピッチング（Ｐｉｔｃｈｉｎｇ）およびＹ軸を回転中心とするヨーイング（Ｙａｗｉｎｇ）回転運動の組み合わせで動くもので構成され得る。

前記情報収集部１１０に収集される情報は、映像情報、音声情報、脳波情報、感性情報、五感情報のうち一つ以上の情報で構成され得る。

前記情報収集器は、カメラ１１、マイク１２および脳波測定機１３のうち一つ以上で構成され得る。

前記情報収集部１１０は、前記情報収集器であるカメラ１１とマイク１２および脳波測定機１３のうち一つ以上から情報を収集する機能を有する。具体的には、情報収集部１１０はカメラ１１から撮影された複数の映像情報（例えば、写真または動画）と、マイク１２を通じて受信した音声情報、脳波測定機１３から測定された脳波情報を収集する機能を有する。

また、前記情報収集器は参加者がシミュレータの操縦レバーを手で把持してシミュレーションを遂行する場合、手の汗を感知する水分感知センサーで構成するか、操縦レバーを手で把持する時の圧力を感知する圧力感知センサーで構成することができる。すなわち、手の汗を感知することで参加者の緊張状態を判断することができ、操縦レバーを手で把持する圧力が大きいか小さくなる変化から参加者の緊張状態または没入度を判断することができる。
前記センサーによって感知した値を現在の参加者の感性または五感に関する情報として情報収集部１１０で収集することができる。前記では感性または五感に関する情報を測定するための手段として、水分感知センサーと圧力感知センサーを例示したが、これに限定されず、多様なセンサーを利用して参加者の感性または五感を判断することができる。

前記カメラ１１は複数個で構成され得る。例えば、カメラのうち少なくとも一つである第１の情報収集器はシミュレータの中からシミュレータに搭乗している参加者を眺める方向に設置されて参加者を撮影し、第２の情報収集器である他のカメラはシミュレータの近くなどに配置されて観覧客を撮影することができる。もちろん、観覧客が集まるのを感知するために、シミュレータとその周辺のすべてが撮影されるように天井のような位置にカメラが設置されてもよい。

また、カメラ１１は図２に示した通り、シミュレータを取り囲むフェンス２００の上端のレール２１０に沿って走行するロボット２２０に設置され得、前記ロボット２２０がレール２１０に沿って走行しながら前記ロボット２２０に設置されたカメラ１１でシミュレータ参加者または観覧客を撮影することができる。

前記カメラ１１では参加者または観覧客の表情を読み込むことができ、表情と共にマイク１２を通じて参加者または観覧客の音声も受信することができる。また、前記参加者または観覧客の音声を受信するための他のセンサーをさらに構成してもよい。また、シミュレーションゲームに参加している参加者が複数である場合には、複数の参加者が搭乗しているシミュレータのそれぞれにカメラ１１が設置され得る。

前記脳波測定機１３はシミュレーション参加者がシミュレータに搭乗した場合、参加者の脳波を測定することができるように備えられ得る。

このように収集した情報は、有線または無線通信を通じて情報収集部１１０で獲得可能である。そして、前記の説明において、用語「カメラ」は、対象を撮影する装備をすべて含む。すなわち、カメラは一般的なカメラ、深度カメラ、広角カメラ（例えば、広角レンズ または魚眼レンズを含むカメラ）等だけでなく、センサータイプも含むことができる。ひいては、カメラを含めて撮影イメージにイメージ処理を遂行するイメージセンサーの概念も含むものと理解されるべきである。

前記アナウンスメント生成部１４０は、前記情報収集部１１０で収集した映像情報、音声情報、脳波情報、感性情報、五感情報のうち少なくとも一つから前記シミュレーション参加者または観覧客に提供するアナウンスメントを生成する。

前記アナウンスメント生成部１４０は、人工知能（Ａｒｔｉｆｉｃｉａｌ Ｉｎｔｅｌｌｉｇｅｎｃｅ）の学習アルゴリズムを利用してアナウンスメントを生成することができる。

このような学習アルゴリズムとしては、意思決定規則（Ｄｅｃｉｓｉｏｎ Ｒｕｌｅ）を木構造で図表化して分類と予測を遂行する分析方法である意思決定木（Ｄｅｃｉｓｉｏｎ Ｔｒｅｅ）、多数の変数間の確率的関係（条件付き独立性：ｃｏｎｄｉｔｉｏｎａｌ ｉｎｄｅｐｅｎｄｅｎｃｅ）をグラフ構造で表現するモデルであるベイジアンネットワーク（Ｂａｙｅｓｉａｎ ｎｅｔｗｏｒｋ）、パターンの認識と資料分析のための指導（監督／教師）学習（ｓｕｐｅｒｖｉｓｅｄ ｌｅａｒｎｉｎｇ）のモデルであるサポートベクターマシン（ｓｕｐｐｏｒｔ ｖｅｃｔｏｒ ｍａｃｈｉｎｅ、ＳＶＭ）、生物学的ニューロンの動作原理とニューロン間の連結関係をモデリングしたものであって、ｎｏｄｅまたはｐｒｏｃｅｓｓｉｎｇ ｅｌｅｍｅｎｔという多数のニューロンが層（Ｌａｙｅｒ）構造の形態で連結された情報処理システムである人工神経網（Ａｒｔｉｆｉｃｉａｌ ｎｅｕｒａｌ ｎｅｔｗｏｒｋ）等が知られている。

また、人工神経網を利用してデータを群集化するか分類することに用いられる技術であるディープラーニング（Ｄｅｅｐ Ｌｅａｒｎｉｎｇ）が知られている。機械学習と認知科学における人工神経網は、生物学の神経網（動物の中枢神経系、特に脳）からインスピレーションを得た統計学的学習アルゴリズムである。
人工神経網は、シナプス（ｓｙｎａｐｓｅ）の結合でネットワークを形成した人工ニューロン（ｎｏｄｅ）が学習を通じてシナプスの結合強度を変化させて、問題の解決能力を有するモデル全般を指し示す。人工神経網を利用するディープラーニングの核心は分類を通じての予測である。数多くのデータの中からパターンを見つけ出して人間が事物を区分するようにコンピュータがデータを分ける。

前記アナウンスメント生成部１４０は、前記収集した情報を利用して人工知能の学習アルゴリズムによって、参加者または観覧客に状況に合う適切なアナウンスメントを生成することができる。また、人工知能の学習データが蓄積されるほどさらに適合するアナウンスメントを生成することができるようになる。

前記アナウンスメント生成部１４０は、参加者がシミュレータに搭乗する過程で案内機能を提供することができる。このような案内機能は、参加者の表情と音声に反応してそれに適切な音声サービスを参加者に提供することができる。

また、前記アナウンスメント生成部１４０には、識別部１２０により識別された情報とデータ管理部１３０から会員情報が受信され得る。

前記識別部１２０は、複数の映像情報と音声情報を分析することによって、参加者または観覧客を識別する機能を有する。具体的には、識別部１２０は例えば、シミュレータの内部に配置されたカメラから撮影された映像情報は参加者に関連するものに、そしてシミュレータの外部に配置されたカメラから撮影された映像情報は観覧客に関連するものに区分することができる。
識別部１２０は、映像情報を分析することによって、識別部１２０を通じて識別した参加者または観覧客が登録された会員であるかを判断する過程をさらに遂行することができる。例えば、識別部１２０は、複数の映像情報から参加者または観覧客の顔を識別し、識別した顔と保存部（図示されず）に保存された会員の顔情報とを比較することによって、参加者または観覧客が会員であるか否かを判断することができる。

この場合、会員と識別された参加者にはデータ管理部１３０に保存されている会員情報と情報収集部１１０から収集した映像情報と音声情報および脳波情報のうち一つ以上を組み合わせて、その参加者に適合するアナウンスメントを生成することもできる。

前記参加者が会員であるか否かは、識別部１２０により判断せず、参加者がシミュレータに搭乗する過程で入力部１４を通じて入力された情報を利用して判断してもよい。

前記データ管理部１３０は、複数の会員情報を保存部（図示されず）に保存し、会員情報と関連したアナウンスメントを生成するように前記会員情報をアナウンスメント生成部１４０に提供する機能を有する。
また、データ管理部１３０は、参加者がシミュレータに搭乗する時に前記入力部１４を通じて入力される情報を保存してもよい。前記入力部１４では、参加者の携帯電話番号、名前、ＩＤのうちいずれか一つを入力するように構成することができる。また、前記入力部１４では、写真、メールアドレス、虹彩、指紋のうちいずれか一つを入力するように構成することができる。前記入力部１４を通じて入力された情報と前記データ管理部１３０に保存されている会員情報とを比較して参加者がシミュレータに搭乗する時に会員であるか否かを判断することができる。

また、前記データ管理部１３０は会員の搭乗記録を保存することができ、前記搭乗記録に基づいて参加者の状況に合うアナウンスメントを生成することができるように、アナウンスメント生成部１４０に関連情報を提供することもできる。

また、前記データ管理部１３０は、複数の参加者がいる場合、参加者間の社会的関係を判断して複数の参加者間の関係と関連したアナウンスメントを生成することができるように、アナウンスメント生成部１４０に関連情報を提供することもできる。ここで参加者間の社会的関係とは、友達関係、恋人関係、家族関係などを含むことができる。

また、前記データ管理部１３０には前記した情報の他にアナウンスメントを生成するための多様な情報が保存され、この保存された情報をアナウンスメント生成部１４０に提供して多様なアナウンスメントを生成することができるようにする。一例として、前記参加者が会員ではない場合には、データ管理部１３０にすでに保存されているデータを利用して会員ではない参加者に適合するアナウンスメントを生成することができるように、アナウンスメント生成部１４０に関連データを提供することができる。
また、データ管理部１３０にすでに保存されているデータは、アナウンスメント提供のために前記人工知能の学習アルゴリズムによって生成されたデータであり得る。

前記アナウンスメント出力部２０は、参加者に音声でアナウンスメントを提供するためのスピーカー、参加者が着用しているＨＭＤ（Ｈｅａｄ Ｍｏｕｎｔｅｄ Ｄｉｓｐｌａｙ）、その他の映像表示装置となり得る。また、前記アナウンスメント出力部２０は、観覧客にも映像または音声でアナウンスメントを提供するためのスピーカー、映像表示装置をさらに含むことができる。

図２を参照して本発明のシミュレータ用知能型サービス装置でフェンスを走行するロボットについて説明する。

シミュレータの周辺を取り囲むフェンス２００が設置されている。前記フェンス２００が取り囲まれた内部にシミュレータが設置され、前記フェンス２００の外側に観覧客が立って観覧できるようになっている。図２では、シミュレータの四方を取り囲む四角形のフェンス２００の一辺のみを示している。前記フェンス２００は四角形を含む多角形、円形などの多様な形状に形成され得る。

前記フェンス２００の上部にはレール２１０が結合されており、前記レール２１０に沿ってロボット２２０が走行することができる。

前記ロボット２２０には電源を供給する電源供給部が連結されている。また、前記ロボット２２０には、前記レール２１０に沿って走行できるように駆動部が備えられている。

前記ロボット２２０の据え置き部２２１には、カメラ１１またはマイク１２が一体に結合され得る。前記カメラ１１は前記フェンス２００の内側または外側の映像を撮影し、参加者または観覧客の位置を把握し、参加者または観覧客の表情を映像情報で受信する。
また、前記マイク１２は参加者または観覧客が出す音声を音声情報で受信する。この場合、前記カメラ１１はフェンス２００の内側と外側の映像をそれぞれ受信するために２個が備えられ得、前記マイク１２もフェンス２００の内側と外側の音声がそれぞれ受信できるように２個が備えられ得る。

このような構造によって、ロボット２２０がレール２１０に沿ってフェンス２００を走行しながらフェンス２００の内側と外側の参加者と観覧客の表情および音声のうち少なくとも一つを受信することができる。

前記カメラ１１およびマイク１２により受信した映像および音声のうち少なくとも一つの情報はアナウンスメント生成部１４０に受信され、アナウンスメント生成部１４０では前記受信した映像および音声のうち少なくとも一つの情報から参加者または観覧客にどのような音声または文字メッセージを送るかを判断することになる。

前記フェンス２００の内側または外側には、アナウンスメント出力部２０のスピーカーまたはディスプレイが備えられ得る。前記スピーカーはアナウンスメント生成部１４０で生成したアナウンスメントを観覧客に音声で提供するものであり、前記ディスプレイは前記アナウンスメント出力部２０で生成したアナウンスメントを文字で観覧客に案内サービスを提供するためのものである。

図２の実施例と関連して、ロボット２２０がレール２１０に沿ってフェンス２００を走行する場合について説明したが、ロボット２２０がフェンス２００に固定され、前記固定されたロボット２２０にカメラ１１またはマイク１２が設置されるように構成されてもよい。

前記情報収集部１１０と識別部１２０とデータ管理部１３０およびアナウンスメント生成部１４０を含むシミュレータ用知能型サービス装置１００が備えられ得る。前記シミュレータ用知能型サービス装置１００は、シミュレータが設置された場所に備えられるサーバー（Ｓｅｒｖｅｒ）で構成され得る。また、シミュレータ用知能型サービス装置１００は、インターネットに連結されたクラウドサーバー（Ｃｌｏｕｄ Ｓｅｒｖｅｒ）で構成され得る。前記シミュレータ用知能型サービス装置１００には、前記情報収集部１１０と識別部１２０とデータ管理部１３０およびアナウンスメント生成部１４０を利用して生成した前記アナウンスメントを参加者または観覧客に提供するためのコンピュータプログラムが保存され得る。

このような構成からなるシミュレータ用知能型サービスシステムによると、シミュレータの参加者または観覧客の映像情報、音声情報、脳波情報、感性情報、五感情報のうち少なくとも一つに反応して、前記参加者または観覧客の表情、音声、脳波、感性、五感のうち少なくとも一つに対応する適切な音声サービスまたは文字サービスを提供することができる。

前記のアナウンスメントは、シミュレーション参加者が複数である場合だけでなく、１人である場合にも提供することができる。

図３を参照して本発明によるシミュレータ用知能型サービス方法について説明する。

段階Ｓ１０１は、参加者がシミュレータに搭乗する過程で搭乗案内が行われる段階である。

前記搭乗案内機能は、会員情報入力、搭乗誘導、顧客認識、案内などの機能を含むことができる。

まず、シミュレーションに参加しようとする参加者の会員情報が入力部１４に入力される。会員に加入していない場合には、会員加入を誘導する過程が進行され得る。
前記入力部１４では、参加者の携帯電話番号、名前、ＩＤ、写真、メールアドレス、虹彩、指紋のうち一つ以上を入力することができる。前記入力部１４を通じて入力された情報と前記データ管理部１３０に保存されている会員情報とを比較して、参加者が会員であるか否かを判断することができる。また、前記会員情報には参加者の性別、年齢などのような個人情報がさらに含まれ得る。

この場合、シミュレーション参加者が複数である場合、複数の参加者の会員情報が入力され、前記複数の参加者間の社会的関係に対する情報を入力するように誘導することができ、前記入力された情報により参加者間の社会的関係に対する情報を生成することができる。

一例として、恋人または友達関係である複数の参加者がシミュレーションに参加する場合には、恋人または友達関係であるその複数の参加者に彼らの社会的関係と関連したアナウンスメントを生成するために、データ管理部１３０は前記社会的関係に対する情報を生成してアナウンスメント生成部１４０に提供することができる。

このような会員情報の入力を含む案内機能がデータ管理部１３０から受けた情報によってアナウンスメント生成部１４０に提供され得、前記案内機能によってシミュレーション参加者に必要な情報を提供し交感できるアナウンスメントサービスを提供することができる。

前記搭乗誘導は、情報収集部１１０を通じて収集した映像または声情報を利用してシミュレータの周辺の観覧客の感情を読み込んで、搭乗誘導音声または文字を利用したアナウンスメントをアナウンスメント生成部１４０で生成し、この生成した搭乗誘導アナウンスメントをアナウンスメント出力部２０を通じて観覧客に提供するサービスである。

前記顧客認識は、アナウンスメント生成部１４０でデータ管理部１３０の情報を利用して会員のＩＤを認識して名前を呼び、過去搭乗記録を活用したアナウンスメントを遂行することである。

前記案内は、シミュレータへの進入および搭乗を誘導し、安全ベルトの着用方法について案内し、シミュレータの操作方法などのゲームコンテンツの遂行を案内するアナウンスメントが含まれたものである。

前記のような搭乗案内が行われ、参加者がシミュレータに搭乗すると、シミュレーションゲームが進行する。

段階Ｓ１０２は、参加者がシミュレーションに参加してゲームを進行し、情報収集部１１０で映像情報、音声情報、脳波情報、感性情報、五感情報のうち少なくとも一つを収集する段階である。

複数のシミュレータにそれぞれ参加者が搭乗してシミュレーションゲームが進行すると、参加者はシミュレータを操作して他の参加者とレーシングゲームのようなシミュレーションゲームを遂行する。

この場合、それぞれのシミュレータに設置されたカメラ１１とマイク１２および脳波測定機１３のうち少なくとも一つを含む情報収集部１１０は、それぞれのシミュレータ参加者の映像情報、音声情報、脳波情報、感性情報、五感情報のうち少なくとも一つを収集し、前記収集した情報をアナウンスメント生成部１４０に送信する。

また、データ管理部１３０は、参加者の過去の搭乗記録、複数の参加者間の社会的関係についての情報などをアナウンスメント生成部１４０に提供することができる。

また、フェンス２００に設置されたロボット２２０が、レール２１０に沿って走行しながらロボット２２０に設置されたカメラ１１またはマイク１２から観覧客の映像または音声情報を収集して、アナウンスメント生成部１４０に提供することができる。

段階Ｓ１０３は、情報収集部１１０で収集した情報を利用してアナウンスメント生成部１４０で参加者または観覧客に提供するアナウンスメントを生成する段階である。

前記参加者または観覧客に提供するアナウンスメントは、称賛、慰め、情報伝達を含むことができる。称賛は、参加者が立派な体験成果を出す場合、褒めるアナウンスメントを遂行することである。慰めは、参加者が良くない体験成果を出す場合に慰めのアナウンスメントを遂行することである。情報伝達は、シミュレーションゲームのスコア、イベント、新しいコンテンツなどの情報伝達のアナウンスメントを遂行することである。
また、前記アナウンスメントには、レーシングのようなシミュレーションゲームの途中で発生する様々な状況に対する対処方法（特定の区間で速度を変化させたり、ハンドリング方法など）に対するアナウンスメントが含まれ得る。

前記アナウンスメント生成部１４０は、前記収集した映像情報、音声情報、脳波情報、感性情報、五感情報のうち少なくとも一つに反応して、前記参加者の映像、音声、脳波、感性、五感のうち少なくとも一つに対応するアナウンスメントを生成する。この場合、人工知能の学習アルゴリズムを利用して前記アナウンスメントを生成することができる。

前記人工知能学習アルゴリズムは、データ管理部１３０から提供された参加者の過去の搭乗記録と複数の参加者間の社会的関係情報、カメラ１１とマイク１２および脳波測定機１３のうち少なくとも一つから提供された参加者の映像情報、音声情報、脳波情報、感性情報、五感情報のうち少なくとも一つの情報、現在進行中のシミュレーションゲームで参加者が遂行している進行の状況情報を受信して、これらの情報を総合的に分析し、過去のデータを学習して複数の参加者のそれぞれに適合するアナウンスメント、複数の参加者のうち社会的関係がある参加者に適合するアナウンスメントを生成することができる。

また、ロボット２２０に設置されたカメラ１１またはマイク１２から受信した観覧客の映像または音声情報を分析し、これを現在進行中のシミュレーションゲームの進行状況と関連させて、観覧客の興味を呼び起こし、シミュレーションゲームに対する集中度を高め得るアナウンスメントを生成することができる。

この場合、観覧客に提供するアナウンスメントの種類は、現在シミュレーション参加者の状況に対する解説、シミュレーションゲームの進行現況などがあり、このようなアナウンスメントはアナウンスメント生成部１４０が状況を判断して観覧客にシミュレーションゲームを中継する形式となり得る。

本発明のシミュレーションが遂行されるシミュレータは、３軸方向の直線運動と、ローリング（Ｒｏｌｌｉｎｇ）とピッチング（Ｐｉｔｃｈｉｎｇ）およびヨーイング（Ｙａｗｉｎｇ）回転運動の組み合わせによって動作が行われるため、シミュレータの動きが大きく、かつ躍動的である。したがって、動きが小さいか動きのないゲームを参加者がする場合に感じる感情と比べ、本発明のように動きが大きくかつ躍動的なシミュレーションを遂行する時に、速度感、緊張感などの多様な感情を感じる。このような参加者の感情は、参加者の表情、参加者の音声、参加者の手から感知された汗、操縦レバーに加えられる圧力などの情報から、参加者がシミュレーションを遂行する時に感じる多様な感情状態を判断することができる。このような感情状態に適合するアナウンスメントを提供することによって、シミュレーション遂行時の参加者の没入度および満足度を向上させることができる。

段階Ｓ１０４は、アナウンスメント生成部１４０で生成したアナウンスメントを参加者または観覧客にアナウンスメント出力部２０を通じて提供する段階である。

前記アナウンスメント生成部１４０で生成したアナウンスメントは、アナウンスメント出力部２０を通じてそれぞれの参加者に個人別に互いに異なるアナウンスメントを個別的に提供することができる。また、全参加者に同じアナウンスメントを同時に提供することもでき、全参加者のうち特定の人または一部の社会的関係がある複数の参加者にのみ同じ内容のアナウンスメントをし、残りの参加者にはそれとは異なる内容のアナウンスメントを提供することもできる。合わせて、観覧客には参加者とは異なる内容のアナウンスメントを提供することができる。

段階Ｓ１０５は、シミュレーションゲームが終了して参加者に終了案内アナウンスメントを提供する段階である。終了案内アナウンスメントでは、終了の挨拶として、また会おうという挨拶をすることができる。

前記のようなアナウンスメントサービスを提供することによって、シミュレーション参加者の楽しみを倍加させることができる。また、人工知能サービスが遂行する多様なアナウンスメント（声の性別、言葉遣い、イントネーション、感嘆詞、内容など）に対する参加者または観覧客の反応をビックデータで構築し、一般的な選好度および個人別の選好度に合うサービスを遂行することによって、顧客の満足度の向上に寄与する知能型データベースシステムを構築することができる。

もし、このようなアナウンスメントを人がするのであれば、一つの声でしかアナウンスメントできないため、複数の参加者別に個別的なアナウンスメントは提供することができない。一方、前記のようなシミュレータ用知能型サービスシステムを利用すると、参加者に個人別に適合するアナウンスメントを提供することができ、複数の参加者または観覧客の状況に合う適切なアナウンスメントを提供することができる。

本発明の実施例に係るシミュレータ用知能型サービス方法を遂行させるためのプログラムを記録したコンピュータ可読記録媒体は、一例として、ＲＯＭ、ＲＡＭ、ＣＤ−ＲＯＭ、磁気テープ、フロッピーディスク、光メディア保存装置などがある。また、本発明の実施例に係る競争ゲームの提供方法を遂行させるためのプログラムであるアプリケーションを記録したコンピュータ可読記録媒体は、アプリケーションストア サーバー（Ａｐｐｌｉｃａｔｉｏｎ Ｓｔｏｒｅ Ｓｅｒｖｅｒ）、アプリケーションまたは該当サービスと関連したウェブサーバー（Ｗｅｂ Ｓｅｒｖｅｒ）等を含むアプリケーション提供サーバー（Ａｐｐｌｉｃａｔｉｏｎ ＰｒｏｖｉｄｅｒＳｅｒｖｅｒ）に含まれた保存媒体（例：ハードディスクなど）であるか、アプリケーション提供サーバーそのものであり得、プログラムを記録した他のコンピュータまたはその保存媒体でもよい。

本発明の実施例に係るシミュレータ用知能型サービス方法を遂行させるためのプログラムであるアプリケーションを記録した記録媒体を読み込みできるシミュレータ用知能型サービス装置は、一般的なデスクトップやノートパソコンなどの一般のＰＣだけでなく、スマートフォン、タブレットＰＣおよび移動通信端末などのモバイル端末を含むことができる。

以上、本発明について好ましい実施例を挙げて詳細に説明したが、本発明は前述した実施例に限定されず、特許請求の範囲と発明の詳細な説明および添付した図面の範囲内で多様に変形して実施することが可能であり、これもまた本発明に属する。

１ シミュレータ用知能型サービスシステム
１１ カメラ
１２ マイク
１３ 脳波測定機
１４ 入力部
２０ アナウンスメント出力部
１００ シミュレータ用知能型サービス装置
１１０ 情報収集部
１２０ 識別部
１３０ データ管理部
１４０ アナウンスメント生成部

Claims (14)

1. フェンスで囲まれたシミュレータを操作してシミュレーションゲームに参加しているシミュレーション参加者の情報を収集する第１の情報収集器、
   フェンスの外側で前記シミュレーションゲームを観覧する観覧客の情報を収集する第２の情報収集器、
   前記第１の情報収集器または第２の情報収集器からシミュレーション参加者または観覧客の情報を収集する情報収集部、
   前記情報収集部で収集した前記情報から前記シミュレーション参加者または観覧客に提供するアナウンスメントを生成するアナウンスメント生成部、を含み、
   前記第１の情報収集器と第２の情報収集器のうち少なくとも一つは前記シミュレータの周辺に設置されたフェンスに沿って走行するロボットに設置されたシミュレータ用知能型サービスシステム。
2. 前記情報は、前記第１の情報収集器と第２の情報収集器から受信した映像情報、音声情報のうち少なくとも一つからなることを特徴とする、請求項１に記載のシミュレータ用知能型サービスシステム。
3. フェンスで囲まれたシミュレータを操作してシミュレーションゲームに参加しているシミュレーション参加者の情報を収集する第１の情報収集器、
   フェンスの外側で前記シミュレーションゲームを観覧する観覧客の情報を収集する第２の情報収集器、
   前記第１の情報収集器または第２の情報収集器からシミュレーション参加者または観覧客の情報を収集する情報収集部、
   前記情報収集部で収集した前記情報から前記シミュレーション参加者または観覧客に提供するアナウンスメントを生成するアナウンスメント生成部、を含み、
   前記第１の情報収集器は前記シミュレーション参加者の感性情報、五感情報および脳波情報のうち少なくとも一つを収集し、
   前記第２の情報収集器は前記シミュレータの周辺に設置されたフェンスに沿って走行するロボットに設置され、前記観覧客の映像情報、音声情報のうち少なくとも一つを収集するシミュレータ用知能型サービスシステム。
4. 前記情報収集部で収集した情報から前記参加者または観覧客が会員であるか否かを判断する識別部をさらに含み、前記アナウンスメント生成部は、前記識別部の判断結果を利用して前記アナウンスメントを生成することを特徴とする、請求項１又は３に記載のシミュレータ用知能型サービスシステム。
5. 前記アナウンスメント生成部は、前記参加者が複数である場合、前記参加者のそれぞれに提供するために前記複数の参加者別に互いに異なるアナウンスメントを生成するか、前記参加者と観覧客のそれぞれに提供するために互いに異なるアナウンスメントを生成するか、前記観覧客に提供するために現在進行中のシミュレーションの状況に対するアナウンスメントを生成することを特徴とする、請求項１又は３に記載のシミュレータ用知能型サービスシステム。
6. 複数の会員情報を保存するデータ管理部をさらに含み、前記アナウンスメント生成部は、前記データ管理部に保存された会員情報を利用して前記参加者に提供するアナウンスメントを生成することを特徴とする、請求項１又は３に記載のシミュレータ用知能型サービスシステム。
7. 前記参加者が複数であり、前記アナウンスメント生成部は、前記複数の参加者に対する会員情報を前記データ管理部から提供を受けて前記複数の参加者間に対する社会的関係を判断し、前記社会的関係があると判断された場合、前記社会的関係に対応するアナウンスメントを生成することを特徴とする、請求項６に記載のシミュレータ用知能型サービスシステム。
8. 前記アナウンスメント生成のためのデータを管理するデータ管理部をさらに含み、前記参加者がデータ管理部に保存された会員ではない場合には、前記アナウンスメント生成部は、前記データ管理部に既に保存されたデータを利用して前記参加者に提供するアナウンスメントを生成することを特徴とする、請求項１又は３に記載のシミュレータ用知能型サービスシステム。
9. ａ）フェンスで囲まれたシミュレータを操作してシミュレーションゲームに参加しているシミュレーション参加者の情報を収集する第１の情報収集器と、フェンスの外側で前記シミュレーションゲームを観覧する観覧客の情報を収集する第２の情報収集器からシミュレーション参加者または観覧客の情報を有線または無線通信を通じてサーバーまたはクラウドサーバーに備えられた情報収集部に収集される段階、
   ｂ）前記情報収集部に収集した情報から前記シミュレーション参加者または観覧客に提供するアナウンスメントを前記サーバーまたはクラウドサーバーに備えられたアナウンスメント生成部に生成される段階、
   ｃ）前記アナウンスメント生成部に生成したアナウンスメントがアナウンスメント出力部を通じて前記参加者または観覧客に提供される段階、を含み、
   前記ａ）段階で前記情報収集部に収集した情報は前記シミュレータの周辺に設置されたフェンスに沿って走行するロボットに設置された前記第１の情報収集器と第２の情報収集器のうち少なくとも一つから収集される情報を含む、
   シミュレータ用知能型サービス方法。
10. ａ）フェンスで囲まれたシミュレータを操作してシミュレーションゲームに参加しているシミュレーション参加者の情報を収集する第１の情報収集器と、フェンスの外側で前記シミュレーションゲームを観覧する観覧客の情報を収集する第２の情報収集器からシミュレーション参加者または観覧客の情報を有線または無線通信を通じてサーバーまたはクラウドサーバーに備えられた情報収集部に収集される段階、
    ｂ）前記情報収集部に収集した情報から前記シミュレーション参加者または観覧客に提供するアナウンスメントを前記サーバーまたはクラウドサーバーに備えられたアナウンスメント生成部に生成される段階、
    ｃ）前記アナウンスメント生成部に生成したアナウンスメントがアナウンスメント出力部を通じて前記参加者または観覧客に提供される段階、を含み、
    前記第１の情報収集器は前記シミュレーション参加者の感性情報、五感情報および脳波情報のうち少なくとも一つを収集し、
    前記第２の情報収集器は前記シミュレータの周辺に設置されたフェンスに沿って走行するロボットに設置され、前記観覧客の映像情報、音声情報のうち少なくとも一つを収集する、
    シミュレータ用知能型サービス方法。
11. 前記参加者が複数である場合、前記アナウンスメント生成部は前記複数の参加者に対する会員情報から前記複数の参加者間に対する社会的関係を判断し、前記社会的関係があると判断された場合、前記社会的関係に対応するアナウンスメントを生成して前記アナウンスメント出力部を通じて前記社会的関係があると判断された複数の参加者に同時に提供することを特徴とする、請求項９又は１０に記載のシミュレータ用知能型サービス方法。
12. 前記参加者が複数である場合、前記アナウンスメント生成部は前記複数の参加者別に互いに異なるアナウンスメントを生成して前記アナウンスメント出力部を通じて前記参加者に前記シミュレーションが進行される間それぞれ提供するか、前記複数の参加者に互いに異なるアナウンスメントを同時に提供することを特徴とする、請求項９又は１０に記載のシミュレータ用知能型サービス方法。
13. 前記アナウンスメント生成部は前記参加者と観覧客に互いに異なるアナウンスメントを生成して前記アナウンスメント出力部を通じて前記参加者と観覧客にそれぞれ提供することを特徴とする、請求項９又は１０に記載のシミュレータ用知能型サービス方法。
14. 前記アナウンスメント生成部は前記シミュレーション参加者がシミュレータに搭乗することを案内するアナウンスメントを生成して前記アナウンスメント出力部を通じて前記シミュレーション参加者の搭乗過程を案内することを特徴とする、請求項９又は１０に記載のシミュレータ用知能型サービス方法。

Images