CN108416618A - 用于模拟器的智能型服务系统、装置与方法 - Google Patents

用于模拟器的智能型服务系统、装置与方法 Download PDF

Info

Publication number
CN108416618A
CN108416618A CN201810128982.0A CN201810128982A CN108416618A CN 108416618 A CN108416618 A CN 108416618A CN 201810128982 A CN201810128982 A CN 201810128982A CN 108416618 A CN108416618 A CN 108416618A
Authority
CN
China
Prior art keywords
prompt
participant
information
simulator
spectators
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN201810128982.0A
Other languages
English (en)
Inventor
李锺瓒
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MOTION DEVICE Inc
Original Assignee
MOTION DEVICE Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020170167529A external-priority patent/KR102063581B1/ko
Application filed by MOTION DEVICE Inc filed Critical MOTION DEVICE Inc
Publication of CN108416618A publication Critical patent/CN108416618A/zh
Withdrawn legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0281—Customer communication at a business location, e.g. providing product or service information, consulting
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25—Output arrangements for video game devices
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25—Output arrangements for video game devices
    • A63F13/27—Output arrangements for video game devices characterised by a large display in a public venue, e.g. in a movie theatre, stadium or game arena
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/015—Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/10—Office automation; Time management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B9/00—Simulators for teaching or training purposes
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00—Electrically-operated educational appliances
    • G09B5/06—Electrically-operated educational appliances with both visual and audible presentation of the material to be studied

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Strategic Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Human Resources & Organizations (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Human Computer Interaction (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Data Mining & Analysis (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Tourism & Hospitality (AREA)
  • General Health & Medical Sciences (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Health & Medical Sciences (AREA)
  • Development Economics (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Biomedical Technology (AREA)
  • Dermatology (AREA)
  • Neurology (AREA)
  • Neurosurgery (AREA)
  • Game Theory and Decision Science (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明的目的在于提供一种代替人提供高水准的提示服务的用于模拟器的智能型服务系统、装置与方法。用于实现此目的的用于模拟器的智能型服务系统包括：信息收集部，从信息收集器收集模拟参与者和/或观众的信息；提示生成部，从所述信息收集部收集的信息生成将向所述模拟参与者和/或观众提供的提示。

Description

用于模拟器的智能型服务系统、装置与方法
技术领域
本发明涉及一种能够为模拟参与者及观众提供多种提示(announcement)服务的用于模拟器的智能型服务系统、装置与方法。
背景技术
模拟器(尤其是运动模拟器)是通过再现动作变化，使其与通过计算机控制的虚拟环境吻合，从而使参与者能够如现实一般地感受虚拟现实的运动的装置。模拟器可以包括模拟屏幕，操作杆以及参与者在就座的状态下以二维或三维方式移动的椅子。并且，模拟器可以包括用于使模拟器进行旋转运动及直线运动的构成，且以如下运动的组合的方式活动：沿前后方向(Z轴)、左右方向(X轴)及上下方向(Y轴)的直线运动；以Z轴为旋转中心的侧倾(Rolling)旋转运动；以X轴为旋转中心的俯仰(Pitching)旋转运动；以及以Y轴为旋转中心的横摆(Yawing)旋转运动。因此，当参与者在模拟器操作操作杆时，模拟器能够根据参与者的操作而活动，从而具有能够提高参与者进行通过模拟器操作的模拟的投入度的优点。
由于上述特征，模拟器应用于飞行模拟或驾驶模拟等，近来被广泛地应用于游戏用或剧场用模拟器，以使用户能够得到三维体感。
应用这种作为体感型虚拟现实设备的模拟器的虚拟现实主题公园事业已形成初期市场，但存在对比投资成本，运营费用高，收益结构不佳的问题。
如上所述，运营费用高是由于用于服务的人工费比重高。
并且，为了使用户搭乘体感型模拟器，需要用于辅助搭乘模拟器的人力，而根据熟练的人力提供的搭乘服务(解读顾客的情绪，根据需要提供适当的介绍及对话的服务)，很大地影响销售量。即，通过搭乘辅助人力采用执行多种提示的方式，以提高周围观众的关心度，并使现场的氛围变好。然而，辅助人力费用相比于销售量高，并且通过普通短期打工人力提高周围观众的关心度存在限制，很难持续地提供高水准的搭乘服务。
并且，需要对模拟游戏参与者提供针对在游戏过程中可能发生的多种状况的适当的提示服务。例如，需要对进行赛车游戏的参与者提供手柄操作性、当前车辆的位置与速度等在进行中的游戏中必要的信息。
在由人直接进行这些提示的情况下，无法同时对多名游戏参与者执行。并且，无法同时对正在参与模拟游戏的多名参与者执行互不相同的提示。
将对虚拟现实(VR)主题公园的普及起决定性作用的未来核心技术是代替人提供高水准的多种提示服务的人工智能技术。因此，需要开发提供这种提示服务的智能型服务系统。
这种用于模拟器的智能型服务机器人需要在模拟器周围活动的同时提供智能型服务，并且需要向模拟器参与者提供必要的适当的介绍服务。
在韩国实用新型授权第20-0435980号中公开了针对这种智能型介绍机器人系统的现有技术。
发明内容
本发明是为解决上述各种问题而提出的，其目的在于提供一种代替人提供高水准的提示服务的用于模拟器的智能型服务系统、装置与方法。
并且，本发明的目的是提供一种能够同时向多名模拟参与者和/或观众提供互不相同的提示的用于模拟器的智能型服务系统、装置与方法。
并且，本发明的目的是提供一种能够向模拟参与者和/或观众提供适当的介绍服务的用于模拟器的智能型服务系统、装置与方法。
用于解决上述问题的本发明的用于模拟器的智能型服务系统包括：信息收集部，从信息收集器收集模拟参与者和/或观众的信息；提示生成部，从所述信息收集部收集的信息生成将向所述模拟参与者和/或观众提供的提示。
所述信息可以利用从所述信息收集器收集的影像信息、语音信息及脑电波信息中的至少一种构成。
所述信息收集器可以设置于沿包围模拟器周围的围栏运行的机器人、顶棚及模拟器中的至少一个；所述信息收集部可以从所述信息收集器收集用于生成所述提示的信息。
所述用于模拟器的智能型服务系统还可以包括从所述信息收集部收集的信息判断所述参与者和/或观众是否为会员的识别部，其中，所述提示生成部利用所述识别部的判断结果而生成所述提示。
在所述参与者对多名的情况下，所述提示生成部可以按每名上述参与者生成互不相同的提示，以分别向所述参与者提供，或者所述提示生成部可以生成互不相同的提示，以分别向所述参与者及观众提供，或者所述提示生成部可以生成针对当前进行中的模拟的状况的提示，以向所述观众提供。
所述用于模拟器的智能型服务系统还可以包括存储多名会员的信息的数据管理部，其中，所述提示生成部利用存储于所述数据管理部的会员信息生成将向所述参与者提供的提示。
在这种情况下所述参与者为多名，所述提示生成部可以从所述数据管理部接收关于所述多名参与者的会员信息而判断所述多名参与者之间的社会关系，在判断为存在所述社会关系的情况下，生成与所述社会关系对应的提示。
所述用于模拟器的智能型服务系统还可以包括管理用于生成所述提示的数据的数据管理部，在所述参与者并非存储于数据管理部的会员的情况下，所述提示生成部利用已存储于所述数据管理部的数据而生成将向所述参与者提供的提示。
本发明的用于模拟器的智能型服务装置包括以上所记载的信息收集部和提示生成部。
本发明的用于模拟器的智能型服务方法包括如下步骤：a)从信息收集器收集模拟参与者和/或观众的信息；b)从收集的所述信息生成将向所述模拟参与者和/或观众提供的提示；c)向所述参与者和/或观众提供生成的所述提示。
在所述a)步骤中收集的信息可以包括从设置于在模拟器周围活动的机器人、顶棚及模拟器中的至少一个的所述信息收集器收集的信息。
所述参与者为多名，可以关于所述多名参与者的会员信息判断所述多名参与者之间的社会关系，在判断为存在所述社会关系的情况下，生成与所述社会关系对应的提示，同时向判断为存在所述社会关系的多名参与者提供所述提示。
在所述参与者为多名的情况下，可以按每名所述参与者生成互不相同的提示，而在模拟进行期间向所述参与者分别提供，或者同时向所述多名参与者提供互不相同的提示。
可以针对于所述参与者和观众生成互不相同的提示而分别向所述参与者和观众提供。
生成介绍所述模拟参与者搭乘模拟器的提示而介绍所述模拟参与者的搭乘过程。
根据本发明，能够以较低的维护费用持续地向顾客提供高水准的搭乘服务，从而能够提高顾客满意度。
并且，能够同时向多名游戏参与者执行互不相同的提示，并且针对于游戏过程中发生的状况执行适当的提示，从而能够增加游戏参与者对游戏的乐趣及投入度。
并且，能够向模拟参与者及围栏外部的观众提供适当的介绍服务。
附图说明
图1是图示根据本发明的用于模拟器的智能型服务系统的示意性构成的框图。
图2是图示在根据本发明的用于模拟器的智能型服务系统中运行于围栏的机器人的立体图。
图3是根据本发明的用于模拟器的智能型服务方法的流程图。
符号说明
1：用于模拟器的智能型服务系统
11：相机 12：麦克风
13：脑电波测定器 14：输入部
20：提示输出部
100：用于模拟器的智能型服务装置
110：信息收集部 120：识别部
130：数据管理部 140：提示生成部
具体实施方式
以下，针对本发明的用于模拟器的智能型服务系统进行详细的说明。
参照图1，本发明的用于模拟器的智能型服务系统1包括：信息收集部110，从信息收集器收集模拟参与者和/或观众的信息；提示生成部140，从在所述信息收集部110收集的信息生成将向所述模拟参与者和/或观众提供的提示。
执行本发明的模拟的模拟器，可以构成为以如下运动的组合的方式活动：沿前后方向(Z轴)、左右方向(X轴)及上下方向(Y轴)的直线运动；以Z轴为旋转中心的侧倾(Rolling)旋转运动；以X轴为旋转中心的俯仰(Pitching)旋转移动；以及以Y轴为旋转中心的横摆(Yawing)旋转运动。
所述信息收集部110收集的信息可以通过影像信息、语音信息、脑电波信息、情绪信息、五感信息中的一种以上的信息构成。
所述信息收集器可以由相机11、麦克风12及脑电波测定器13中的一个以上构成。
所述信息收集部110执行从作为所述信息收集器的相机11、麦克风12及脑电波测定器13中的一个以上收集信息的功能。具体而言，信息收集部110执行收集相机11拍摄的多个影像信息(例如，照片或者视频)、通过麦克风12接收的语音信息、脑电波测定器13测定的脑电波信息的功能。
并且，在参与者用手握住模拟器的操作杆执行模拟的情况下，所述信息收集器可以通过感测手汗的水分感测传感器构成，或者通过感测手握住操作杆时的压力的压力感测传感器构成。即，通过感测手汗能够判断参与者的紧张状态，从手握住操作杆的压力变大或变小的变化能够判断参与者的紧张状态或投入度。信息收集部110可以将通过所述传感器感测的值作为与当前参与者的情绪及五感相关的信息收集。虽然在上文中举例说明了将水分感测传感器及压力感测传感器作为用于测定与情绪及五感相关的信息的单元的情形，但是并不限定于此，可以利用多种传感器判断参与者的情绪及五感。
所述相机11可以构成为多个。例如，相机中的至少一个可以在模拟器内朝向正在搭乘模拟器的参与者的方向设置而拍摄参与者，其他相机可以布置于模拟器附近等而拍摄观众。当然，为了感测观众聚集的情况，相机也可以布置于诸如顶棚等的位置，使模拟器与其周围全部被拍摄。
并且，相机11可以如图2所示地设置于沿着包围模拟器的围栏200上端的轨道210运行的机器人220，所述机器人220沿着轨道210运行的同时设置于所示机器人220的相机11可以拍摄模拟参与者和/或观众。
所述相机11可以识别参与者和/或观众的表情，并且参与者和/或观众的语音也可以与表情一同地通过麦克风12被接收。并且，也可以附加地配置用于接收所述参与者和/或观众的语音的其他传感器。并且，正在参与模拟游戏的参与者为多名的情况下，在多名参与者正在搭乘的模拟器可以分别设置有相机11。
所述脑电波测定器13可以配备为模拟参与者搭乘模拟器时能够测定参与者的脑电波。
这样收集的信息通过有线或无线通信可以由信息收集部110获取。并且，在以上的说明中术语“相机”包括拍摄对象的所有的设备。即，相机不仅可以包括普通相机、深度相机、广角相机(例如，包括广角镜头或鱼眼镜头的相机)，还可以包括传感器类型。进而，应该理解为还包括包含相机而对拍摄图像执行图像处理的图像传感器的概念。
所述提示生成部140从所述信息收集部110收集的影像信息、语音信息、脑电波信息、情绪信息、五感信息中的至少一种信息生成将向所述模拟参与者和/或观众提供的提示。
所述提示生成部140可以利用人工智能(ArtificialIntelligence)的学习算法而生成提示。
这种学习算法公知的有：将决策规则(Decision Rule)图表化为树状结构而执行分类与预测的分析方法的决策树(Decision Tree)；将多个变量之间的概率关系(条件独立性：conditionalindependence)用图表结构表现的模型的贝叶斯网(Bayesian network)；用于模式识别与资料分析的指导(监督/教育)学习(supervised learning)的模型的支持向量机(SVM：support vector machine)；对生物神经元的工作原理与神经元之间的连接关系建模的系统，即，称为节点(node)或处理单元(processing element)的多个神经元以层(Layer)结构的形态连接的信息处理系统的人工神经网(Artificial neural network)等。
并且，公知的有作为在利用人工神经网而将数据聚类化或分类时使用的技术的深度学习(Deep Learning)。机器学习与认知科学中的人工神经网是指从生物学的神经网络(动物的中枢神经系统，尤其是大脑)获得灵感的统计学习算法。人工神经网是指利用突触(synapse)的结合形成网络的人造神经元(node)通过学习使突触的结合强度变化，从而具有问题解决能力的整个模型。利用人工神经网的深度学习的核心是通过分类进行的预测。从大量的数据中发现模式，进而计算机像人类区分事物一样地划分数据。
所述提示生成部140可以利用上述收集的信息，通过人工智能的学习算法针对参与者和/或观众生成与状况吻合的适当的提示。并且，随着人工智能的学习数据积累，可以生成更恰当的提示。
所述提示生成部140在参与者搭乘模拟器的过程中可以提供介绍功能。这种介绍功能可以响应参与者的表情与语言而向参与者提供适当的语言服务。
并且，所述提示生成部140可以接收通过识别部120识别的信息和来自数据管理部130的会员信息。
所述识别部120执行通过分析多个影像信息与语音信息，从而识别参与者和/或观众的功能。具体而言，识别部120例如可以区分为由布置于模拟器内部的相机拍摄的影像信息对应的是参与者，由布置于模拟器外部的相机拍摄的影像信息对应的是观众。识别部120还可以通过分析影像信息，执行判断通过识别部120识别的参与者和/或观众是否为已注册的会员的过程。例如，识别部120可以从多个影像信息中识别参与者和/或观众的面部，并比较所识别的面部与存储于存储部(未图示)的会员的面部信息，从而判断参与者和/或观众是否为会员。
在这种情况下，针对识别为会员的参与者，也可以通过组合存储于数据管理部130的会员信息与从信息收集部110收集的影像信息、语音信息及脑电波信息中的一种以上，从而生成对于该参与者恰当的提示。
对于所述参与者是否为会员，也可以不通过识别部120进行判断，而是在参与者搭乘模拟器的过程中利用通过输入部14输入的信息进行判断。
所述数据管理部130将多个会员信息存储于存储部(未图示)，并执行向提示生成部140提供所述会员信息的功能，以生成与会员信息相关的提示。并且，数据管理部130也可以存储在参与者搭乘模拟器时通过所述输入部14输入的信息。所述输入部14可以构成为能够输入参与者的手机号码、姓名、ID中的任意一个。并且，所述输入部14可以构成为能够输入照片、邮箱地址、虹膜、指纹中的任意一个。通过比较通过所述输入部14输入的信息与存储于所述数据管理部130的会员信息，在参与者搭乘模拟器时能够判断参与者是否为会员。
并且，所述数据管理部130可以存储会员的搭乘记录，也可以向提示生成部140提供相关信息，使其能够基于所述搭乘记录生成与参与者的状况吻合的提示。
并且，在存在多名参与者的情况下，所述数据管理部130也可以向提示生成部140提供相关信息，使其能够判断参与者之间的社会关系而形成与多名参与者之间的关系相关的提示。在此，参与者之间的社会关系可以包括朋友关系、恋人关系、家族关系等。
并且，在所述数据管理部130存储有所述信息以外的用于生成提示的多种信息，并且将这些存储的信息提供给提示生成部140，使其能够生成多种提示。作为一例，在所述参与者并非会员的情况下，可以向提示生成部140提供相关数据，使其能够利用已存储于数据管理部130的数据生成对于非会员的参与者恰当的提示。并且，已存储于数据管理部130的数据可以是为了提供提示而通过所述人工智能的学习算法生成的数据。
提示输出部20可以是用于以语音的形式向参与者提供提示的扬声器、参与者穿戴的头戴式显示器(HMD：Head Mounted Display)、此外的影像显示装置。并且，所述提示输出部20还可以包括用于以影像及语音的形式向观众提供提示的扬声器、影像显示装置。
参照图2，对在本发明的用于模拟器的智能型服务系统中运行于围栏的机器人进行说明。
设置有包围模拟器周围的围栏200。在所述围栏200包围的内部设置有模拟器，并使观众能够站立在所述围栏200的外侧观看。在图2中仅图示了包围模拟器的四周的四边形的围栏200的一边。所述围栏200可以通过包括四边形的多边形、圆形等多种形状构成。
在所述围栏200的上部结合有轨道210，并且机器人220可以沿着所述轨道210运行。
所述机器人220连接有供应电源的电源供应部。并且，所述机器人220配备有驱动部，使其能够沿着所述轨道210运行。
相机11及麦克风12可以一体地结合于所述机器人220的安置部221。所述相机11拍摄所述围栏200的内侧及外侧影像，把握参与者和/或观众的位置，并将参与者和/或观众的表情以影像信息形式接收。并且，所述麦克风12将参与者和/或观众所发出的语音以语音信息形式接收。在这种情况下，所述相机11为了分别接收围栏200的内侧及外侧影像信息可以配备为两个，所述麦克风12也可以配备为两个，以能够接收围栏200的内侧及外侧语音。
根据这种结构，机器人220可以沿着轨道210运行于围栏200，同时接收围栏200的内侧及外侧的参与者及观众的表情及语音中的至少一种。
通过所述相机11及麦克风12接收的影像及语音中的至少一种信息被提示生成部140接收，并且在提示生成部140判断从所述接收的影像及语音中的至少一种信息向参与者和/或观众发送怎样的语音或文字消息。
在所述围栏200的内侧或外侧可以配备有作为提示输出部20的扬声器或显示器。所述扬声器将在提示生成部140生成的提示以语音的形式向观众提供，所述显示器用于将在提示生成部140生成的提示以文字的形式向观众提供介绍服务。
与图2的实施例相关而对机器人220沿着轨道210运行于围栏200的情形进行了说明，但是，机器人220也可以构成为固定于围栏200，并且在所述固定的机器人220设置有相机11或麦克风12。
可以配备有包括所述信息收集部110、识别部120、数据管理部130及提示生成部140的用于模拟器的智能型服务装置100。所述用于模拟器的智能型服务装置100可以由配备于设置有模拟器的场所的服务器(Server)构成。并且，用于模拟器的智能型服务装置100可以由与网络连接的云服务器(Cloud Server)构成。在所述用于模拟器的智能型服务装置100可以存储有用于向参与者及观众提供利用所述信息收集部110、识别部120、数据管理部130及提示生成部140而生成的所述提示的计算机程序。
根据由如上构成形成的用于模拟器的智能型服务系统，可以响应于模拟器的参与者和/或观众的影像信息、语音信息、脑电波信息、情绪信息、五感信息中的至少一种而提供对应于所述参与者和/或观众的表情、语音、脑电波、情绪、五感中的至少一种的适当的语音服务或文字服务。
所述提示不仅可以在模拟参与者为多名的情况下提供，在一名参与者的情况下也可以提供。
参照图3，对根据本发明的用于模拟器的智能型服务方法进行说明。
步骤S101是在参与者搭乘模拟器的过程中进行搭乘介绍的步骤。
所述搭乘介绍功能可以包括会员信息输入、搭乘引导、顾客识别，介绍等的功能。
首先，欲参与模拟的参与者的会员信息输入至输入部14。在所述参与者为非模拟服务会员的情况下，可以进行引导加入模拟服务会员的过程。在所述输入部14可以输入参与者的手机号码、姓名、ID、照片、邮箱地址、虹膜、指纹中的一种以上。可以比较通过所述输入部14输入的信息与存诸于所述数据管理部130的会员信息而判断参与者是否为会员。并且，所述会员信息还可以包括参与者的性别、年龄等个人资料。
在这种情况下，模拟参与者为多名的情况下输入多名参与者会员信息，并且可以引导输入与所述多名参与者之间的社会关系相关的信息，根据所述输入的信息可以生成与参与者之间的社会关系相关的信息。
作为一例，恋人或朋友关系的多名参与者参与模拟的情况下，为了向恋人或朋友关系的多名参与者生成与他们的社会关系相关的提示，数据管理部130生成与所述社会关系相关的信息，进而向提示生成部140提供。
包括这种会员信息的输入的介绍功能可以通过从数据管理部130接收的信息提供至提示生成部140，通过所述介绍功能可以提供能够向模拟参与者提供必要的信息并进行交流的提示服务。
所述搭乘引导是利用通过信息收集部110收集的影像或声音信息而解读模拟器周围的观众的情绪并在提示生成部140生成利用搭乘引导语音或文字的提示，并且通过提示输出部20向观众提供该生成的搭乘引导提示的服务。
所述顾客识别执行如下提示：在提示生成部140利用数据管理部130的信息而识别会员的ID而呼出姓名，并应用历史搭乘记录。
所述介绍包括引导进入及搭乘模拟器、介绍安全带佩带方法，并且介绍模拟器操作方法等游戏内容的进行的提示。
若执行同上所述的搭乘介绍，进而参与者搭乘模拟器，则进行模拟游戏。
步骤S102是参与者参与模拟而进行游戏，在信息收集部110收集影像信息、语音信息、脑电波信息、情绪信息、五感信息中的至少一种的步骤。
当各个参与者分别搭乘多个模拟器而进行模拟游戏时，参与者操作模拟器而与其他参与者进行诸如赛车游戏等模拟游戏。
在这种情况下，包括设置于各个模拟器的相机11、麦克风12及脑电波测定器13中的至少一个的信息收集部110收集各个模拟器参与者的影像信息、语音信息、脑电波信息、情绪信息、五感信息中的至少一种，并将所述收集的信息向提示生成部140发送。
并且，数据管理部130可以向提示生成部140提供参与者的历史搭乘记录、与多名参与者之间的社会关系相关的信息等。
并且，设置于围栏200的机器人220沿轨道210运行，同时可以从设置于机器人220的相机11及麦克风12收集观众的影像及语音信息而向提示生成部140提供。
步骤S103是利用信息收集部110收集的信息而由提示生成部140生成将向参与者和/或观众提供的提示的步骤。
所述向参与者和/或观众提供的提示可以包括称赞、安慰、信息传递。称赞是指在参与者得到优秀的体感成果的情况下进行称赞提示。安慰是指在参与者得到不佳的体感成果的情况下进行安慰提示。信息传达是指执行模拟游戏的得分、事件、新内容等的信息传递的提示。并且，所述提示可以包括针对诸如赛车等模拟游戏期间发生的各种情况的对策方法(在特定区间改变速度，或操作(handling)方法等)的提示。
所述提示生成部140响应于所述收集的影像信息、语音信息、脑电波信息、情绪信息、五感信息中的至少一种而生成对应于所述参与者的影像、语音、脑电波、情绪、五感中的至少一种的提示。在这种情况下，可以利用人工智能的学习算法生成所述提示。
所述人工智能学习算法可以接收从数据管理部130提供而接收的参与者的历史搭乘记录和多名参与者之间的社会关系信息、从相机11和麦克风12及脑电波测定器13中的至少一个提供的参与者的影像信息、语音信息、脑电波信息、情绪信息、五感信息中的至少一种信息、在当前进行的模拟游戏中参与者正在执行的进行状况信息，进而综合地分析这些信息，并学习历史数据而针对多名参与者可分别生成适当的提示，针对多名参与者中存在社会关系的参与者可生成适当的提示。
并且，可以分析从设置于机器人220的相机11或麦克风12接收的观众的影像或语音信息，并且将其与当前进行中的模拟游戏的进行状况相关联，从而引起观众的兴趣，并生成一个能够提高对模拟游戏的集中度的提示。
在这种情况下，向观众提供的提示的种类可以是对当前模拟参与者的状况的解说、模拟游戏进行现况等，这种提示可以是提示生成部140判断状况而向观众转播模拟游戏的形式。
由于本发明的执行模拟的模拟器可以通过三轴方向的前后运动与侧倾(Rolling)、俯仰(Pitching)及横摆(Yawing)旋转运动的组合而实现动作，因此模拟器的活动幅度大并且灵活。因此，相比于参与者进行活动幅度小或没有活动的游戏的情况所感受的情绪，执行如同本发明的活动幅度大并且灵活的模拟时能够感受到速度感、紧张感等多种情绪，并且其参与者的情绪能够从参与者的表情、参与者的语音、从参与者的手感测到的汗、施加于操作杆的压力等信息判断参与者执行模拟时感受到的多种情绪状态，通过针对这种情绪状态提供适当的提示，能够提高执行模拟时参与者的投入度及满足度。
步骤S104是通过提示输出部20向参与者和/或观众提供在提示生成部140生成的提示的步骤。
在所述提示生成部140生成的提示可以通过提示输出部20向各个参与者单独地提供互不相同的提示。并且，也可以向全体参与者同时提供相同的提示，也可以仅向全体参与者中特定的参与者或一部分存在社会关系的多名参与者提供相同内容的提示，并向其余的参与者提供与其不同内容的提示。并且，可以向观众提供与参与者不同内容的提示。
步骤S105是模拟游戏结束而向参与者提供结束介绍提示的步骤。结束介绍提示可以问候下次再见作为结束问候。
通过提供同上所述的提示服务，可以使模拟参与者的乐趣倍加。并且，通过将针对执行人工智能服务的多种提示(声音的性别、语气、语调、感叹词、内容等)的参与者和/或观众的反应构建为大数据，并且执行与一般偏好及个人偏好吻合的服务，从而可以构建有助于提高客户满意度的智能型数据库系统。
若由人执行这种提示，则无法向多名参与者分别提供个性化的提示。若利用同上所述的用于模拟器的智能型服务系统，则可以向参与者分别地提供适当的提示，并且能够提供与多名参与者和/或观众的状况吻合的适当的提示。
记录有用于实行根据本发明的实施例的用于模拟器的智能型服务方法的程序的计算机可读记录介质，作为一例，有ROM、RAM、CD-ROM、磁带、软盘、光学媒体存储装置等。并且，记录作为用于实行根据本发明的实施例的用于模拟器的智能型服务方法的程序的应用的计算机可读记录介质，可以是应用商店服务器(Application Store Server)、包括应用程序或与相关服务关联的Web服务器等的应用程序提供服务器(Application ProviderServer)所包括的存储介质(例如，硬盘等)，或者也可以是应用程序提供服务器本身，也可以是记录程序的其他计算机或者其存储介质本身。
能够读取记录有作为用于实行根据本发明的实施例的用于模拟器的智能型服务方法的程序的应用的记录介质的用于模拟器的智能型服务装置不仅可以包括普通台式电脑或笔记本电脑等普通PC，而且包括智能手机、平板PC以及移动通信终端等移动终端。
虽然同上所述针对本发明的优选的实施例进行了详细的说明，但本发明并不限定于上述的实施例，可以在权利要求书、本发明的详细说明及附图范围内实施各种变形，这也属于本发明。

Claims (15)

1.一种用于模拟器的智能型服务系统，其特征在于，包括：
信息收集部，从信息收集器收集模拟参与者和/或观众的信息；
提示生成部，从所述信息收集部收集的信息生成将向所述模拟参与者和/或观众提供的提示。
2.如权利要求1所述的用于模拟器的智能型服务系统，其特征在于，
所述信息利用从所述信息收集器收集的影像信息、语音信息、情绪信息、五感信息及脑电波信息中的至少一种构成。
3.如权利要求1所述的用于模拟器的智能型服务系统，其特征在于，
所述信息收集器设置于沿包围模拟器周围的围栏运行的机器人、顶棚及模拟器中的至少一个，
所述信息收集部从所述信息收集器收集用于生成所述提示的信息。
4.如权利要求1所述的用于模拟器的智能型服务系统，其特征在于，
还包括从所述信息收集部收集的信息判断所述参与者和/或观众是否为会员的识别部，
其中，所述提示生成部利用所述识别部的判断结果而生成所述提示。
5.如权利要求1所述的用于模拟器的智能型服务系统，其特征在于，
在所述参与者为多名的情况下，所述提示生成部按每名所述参与者生成互不相同的提示，以分别向所述参与者提供，
或者所述提示生成部生成互不相同的提示，以分别向所述参与者及观众提供，
或者所述提示生成部生成针对当前进行中的模拟的状况的提示，以向所述观众提供。
6.如权利要求1所述的用于模拟器的智能型服务系统，其特征在于，
还包括存储多名会员的信息的数据管理部，
其中，所述提示生成部利用存储于所述数据管理部的会员信息生成将向所述参与者提供的提示。
7.如权利要求6所述的用于模拟器的智能型服务系统，其特征在于，
所述参与者为多名，所述提示生成部从所述数据管理部接收关于所述多名参与者的会员信息而判断所述多名参与者之间的社会关系，在判断为存在所述社会关系的情况下，生成与所述社会关系对应的提示。
8.如权利要求1所述的用于模拟器的智能型服务系统，其特征在于，
还包括管理用于生成所述提示的数据的数据管理部，
其中，所述参与者并非存储于数据管理部的会员的情况下，所述提示生成部利用已存储于所述数据管理部的数据而生成将向所述参与者提供的提示。
9.一种用于模拟器的智能型服务装置，其特征在于，
包括权利要求1至权利要求8中任意一项所记载的信息收集部和提示生成部。
10.一种用于模拟器的智能型服务方法，其特征在于，包括如下步骤：
a)从信息收集器收集模拟参与者和/或观众的信息；
b)从收集的所述信息生成将向所述模拟参与者和/或观众提供的提示；
c)向所述参与者和/或观众提供生成的所述提示。
11.如权利要求10所述的用于模拟器的智能型服务方法，其特征在于，
在所述a)步骤中收集的信息包括从设置于在模拟器周围活动的机器人、顶棚及模拟器中的至少一个的所述信息收集器收集的信息。
12.如权利要求10所述的用于模拟器的智能型服务方法，其特征在于，
所述参与者为多名，从关于所述多名参与者的会员信息而判断所述多名参与者之间的社会关系，在判断为存在所述社会关系的情况下，生成与所述社会关系对应的提示，同时向判断为存在所述社会关系的多名参与者提供所述提示。
13.如权利要求10所述的用于模拟器的智能型服务方法，其特征在于，
在所述参与者为多名的情况下，按每名所述参与者生成互不相同的提示而在模拟进行期间向所述参与者分别提供，或者同时向所述多名参与者提供互不相同的提示。
14.如权利要求10所述的用于模拟器的智能型服务方法，其特征在于，
针对于所述参与者和观众生成互不相同的提示而分别向所述参与者和观众提供。
15.如权利要求10所述的用于模拟器的智能型服务方法，其特征在于，
生成介绍所述模拟参与者搭乘模拟器的提示而介绍所述模拟参与者的搭乘过程。
CN201810128982.0A 2017-02-10 2018-02-08 用于模拟器的智能型服务系统、装置与方法 Withdrawn CN108416618A (zh)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
KR10-2017-0018495 2017-02-10
KR10-2017-0018487 2017-02-10
KR20170018487 2017-02-10
KR20170018495 2017-02-10
KR1020170167529A KR102063581B1 (ko) 2017-02-10 2017-12-07 시뮬레이터용 지능형 서비스 시스템과 장치와 방법 및 기록매체
KR10-2017-0167529 2017-12-07

Publications (1)

Publication Number Publication Date
CN108416618A true CN108416618A (zh) 2018-08-17

Family

ID=63106011

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810128982.0A Withdrawn CN108416618A (zh) 2017-02-10 2018-02-08 用于模拟器的智能型服务系统、装置与方法

Country Status (3)

Country Link
US (1) US10596458B2 (zh)
JP (1) JP6560375B2 (zh)
CN (1) CN108416618A (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10933317B2 (en) 2019-03-15 2021-03-02 Sony Interactive Entertainment LLC. Near real-time augmented reality video gaming system
CN110737335B (zh) * 2019-10-11 2021-03-23 深圳追一科技有限公司 机器人的交互方法、装置、电子设备及存储介质
US20240082743A1 (en) * 2022-09-12 2024-03-14 Universal City Studios Llc Attraction control system and method using multilayer perceptron neural networks and machine learning

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020018982A1 (en) * 2000-05-12 2002-02-14 Conroy Steven J. Dynamometer racing simulator
CN1454307A (zh) * 2000-09-29 2003-11-05 安得列·维拉德米诺维奇·诺格耶夫 战争游戏综合体及游戏方法
US20060058103A1 (en) * 2004-09-15 2006-03-16 Microsoft Corporation Online gaming spectator system
US20110119099A1 (en) * 1997-04-24 2011-05-19 William Waytena Assigning and managing patron reservations for distributed services using wireless personal communication devices
US20160042648A1 (en) * 2014-08-07 2016-02-11 Ravikanth V. Kothuri Emotion feedback based training and personalization system for aiding user performance in interactive presentations
CN105396279A (zh) * 2015-04-29 2016-03-16 解瑛 用于实现团体运动成果的系统和方法
CN105700682A (zh) * 2016-01-08 2016-06-22 北京乐驾科技有限公司 基于视觉和语音的智能性别、情绪识别检测系统及方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004033298A (ja) * 2002-06-28 2004-02-05 Mitsubishi Electric Corp アクティビティ支援装置、運用支援装置及びアクティビティ支援システム
JP2008058459A (ja) * 2006-08-30 2008-03-13 Toyota Motor Corp 運転評価装置
KR200435980Y1 (ko) 2006-09-13 2007-03-30 주식회사 케이엠씨 지능형 안내로봇 시스템
JP5203630B2 (ja) * 2007-05-08 2013-06-05 株式会社タイトー ゲーム装置、ゲーム装置の制御方法、及びサーバ
CA2751419C (en) * 2009-03-13 2014-05-20 Golfzon Co., Ltd. Virtual golf simulation device and method for the same

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110119099A1 (en) * 1997-04-24 2011-05-19 William Waytena Assigning and managing patron reservations for distributed services using wireless personal communication devices
US20020018982A1 (en) * 2000-05-12 2002-02-14 Conroy Steven J. Dynamometer racing simulator
CN1454307A (zh) * 2000-09-29 2003-11-05 安得列·维拉德米诺维奇·诺格耶夫 战争游戏综合体及游戏方法
US20060058103A1 (en) * 2004-09-15 2006-03-16 Microsoft Corporation Online gaming spectator system
US20160042648A1 (en) * 2014-08-07 2016-02-11 Ravikanth V. Kothuri Emotion feedback based training and personalization system for aiding user performance in interactive presentations
CN105396279A (zh) * 2015-04-29 2016-03-16 解瑛 用于实现团体运动成果的系统和方法
CN105700682A (zh) * 2016-01-08 2016-06-22 北京乐驾科技有限公司 基于视觉和语音的智能性别、情绪识别检测系统及方法

Also Published As

Publication number Publication date
JP6560375B2 (ja) 2019-08-14
US20180229115A1 (en) 2018-08-16
JP2018126507A (ja) 2018-08-16
US10596458B2 (en) 2020-03-24

Similar Documents

Publication Publication Date Title
US11291919B2 (en) Development of virtual character in a learning game
US20190337157A1 (en) Robot, server, and human-machine interaction method
CN1692341B (zh) 信息处理设备和信息处理方法
US20130257876A1 (en) Systems and Methods for Providing An Interactive Avatar
CN110931111A (zh) 基于虚拟现实及多模态信息的孤独症辅助干预系统及方法
Saldien et al. A motion system for social and animated robots
CN108416618A (zh) 用于模拟器的智能型服务系统、装置与方法
Bagheri et al. An autonomous cognitive empathy model responsive to users’ facial emotion expressions
CN115951786B (zh) 一种利用aigc技术的多结局创意社交游戏的创作方法
Hare et al. Player modeling and adaptation methods within adaptive serious games
Salehi et al. Synthesizing a talking child avatar to train interviewers working with maltreated children
Doma EEG as an input for virtual reality
Nishida et al. Synthetic evidential study as augmented collective thought process–preliminary report
JP4525712B2 (ja) 情報処理装置および方法、プログラム、並びに記録媒体
US20210241648A1 (en) Systems and methods to provide mental distress therapy through subject interaction with an interactive space
Garner et al. Everyday virtual reality
KR102063581B1 (ko) 시뮬레이터용 지능형 서비스 시스템과 장치와 방법 및 기록매체
Schimmel et al. MP-BGAAD: multi-person board game affect analysis dataset
Kurosu Human-Computer Interaction. Interaction Contexts: 19th International Conference, HCI International 2017, Vancouver, BC, Canada, July 9-14, 2017, Proceedings, Part II
Gonzalez et al. Talk to Kotaro: a web crowdsourcing study on the impact of phone and prosody choice for synthesized speech on human impression
Bahreini et al. FILTWAM and voice emotion recognition
Chamola et al. Metaverse for Education: Developments, Challenges and Future Direction
CN112634684B (zh) 智能教学方法和装置
Huang et al. A voice-assisted intelligent software architecture based on deep game network
Torre et al. To smile or not to smile: The effect of mismatched emotional expressions in a Human-Robot cooperative task

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication

Application publication date: 20180817

WW01 Invention patent application withdrawn after publication