KR102063581B1 - Intelligent service system, apparatus, method and computer readable medium for simulator - Google Patents

Intelligent service system, apparatus, method and computer readable medium for simulator Download PDF

Info

Publication number
KR102063581B1
KR102063581B1 KR1020170167529A KR20170167529A KR102063581B1 KR 102063581 B1 KR102063581 B1 KR 102063581B1 KR 1020170167529 A KR1020170167529 A KR 1020170167529A KR 20170167529 A KR20170167529 A KR 20170167529A KR 102063581 B1 KR102063581 B1 KR 102063581B1
Authority
KR
South Korea
Prior art keywords
information
comment
participant
simulator
simulation
Prior art date
Application number
KR1020170167529A
Other languages
Korean (ko)
Other versions
KR20180092805A (en
Inventor
이종찬
Original Assignee
주식회사 모션디바이스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 모션디바이스 filed Critical 주식회사 모션디바이스
Priority to JP2018015159A priority Critical patent/JP6560375B2/en
Priority to US15/886,377 priority patent/US10596458B2/en
Priority to CN201810128982.0A priority patent/CN108416618A/en
Publication of KR20180092805A publication Critical patent/KR20180092805A/en
Application granted granted Critical
Publication of KR102063581B1 publication Critical patent/KR102063581B1/en

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J11/00Manipulators not otherwise provided for
    • B25J11/0005Manipulators having means for high-level communication with users, e.g. speech generator, face recognition means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J19/00Accessories fitted to manipulators, e.g. for monitoring, for viewing; Safety devices combined with or specially adapted for use in connection with manipulators
    • B25J19/0025Means for supplying energy to the end effector
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J19/00Accessories fitted to manipulators, e.g. for monitoring, for viewing; Safety devices combined with or specially adapted for use in connection with manipulators
    • B25J19/02Sensing devices
    • B25J19/021Optical sensing devices
    • B25J19/023Optical sensing devices including video camera means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J5/00Manipulators mounted on wheels or on carriages
    • B25J5/02Manipulators mounted on wheels or on carriages travelling along a guideway
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Robotics (AREA)
  • Health & Medical Sciences (AREA)
  • Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Human Computer Interaction (AREA)
  • General Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Human Resources & Organizations (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Primary Health Care (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Computational Linguistics (AREA)
  • Acoustics & Sound (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Processing Or Creating Images (AREA)

Abstract

사람 대신 높은 수준의 멘트 서비스를 제공하는 시뮬레이터용 지능형 서비스 시스템과 장치와 방법 및 기록매체를 제공하는 것을 목적으로 한다. 이를 구현하기 위한 시뮬레이터용 지능형 서비스 시스템은, 정보수집기로부터 시뮬레이션 참가자 또는 관람객의 정보를 수집하는 정보 수집부; 상기 정보 수집부에서 수집된 상기 정보로부터 상기 시뮬레이션 참가자 또는 관람객에게 제공할 멘트를 생성하는 멘트 생성부;를 포함한다.It is an object of the present invention to provide an intelligent service system, an apparatus, a method, and a recording medium for a simulator that provide a high level of service for a person instead of a person. Intelligent service system for a simulator for implementing this, the information collecting unit for collecting the information of the simulation participants or visitors from the information collector; And a comment generator for generating a comment to be provided to the simulation participant or the viewer from the information collected by the information collector.

Description

시뮬레이터용 지능형 서비스 시스템과 장치와 방법 및 기록매체{INTELLIGENT SERVICE SYSTEM, APPARATUS, METHOD AND COMPUTER READABLE MEDIUM FOR SIMULATOR}INTELLIGENT SERVICE SYSTEM, APPARATUS, METHOD AND COMPUTER READABLE MEDIUM FOR SIMULATOR}

본 발명은 시뮬레이션 참가자 및 관람객에게 다양한 멘트 서비스를 제공할 수 있는 시뮬레이터용 지능형 서비스 시스템과 장치와 방법 및 기록매체에 관한 것이다.The present invention relates to an intelligent service system, an apparatus, a method, and a recording medium for a simulator that can provide various participants services to simulation participants and visitors.

시뮬레이터(특히, 모션 시뮬레이터)는 컴퓨터에 의해 제어되는 가상환경에 맞도록 동적 변화를 재현함으로써, 참가자에게 가상 현실의 움직임을 현실처럼 느낄 수 있게 하는 장치를 나타낸다. 시뮬레이터는 시뮬레이션 화면, 조작 레버, 참가자가 착석한 상태에서 2차원 또는 3차원에서 이동하는 의자를 포함할 수 있다. 또한, 시뮬레이터는 시뮬레이터의 회전 운동 및 직선 운동을 위한 구성을 포함하여, 전후 방향(Z축), 좌우 방향(X축) 및 상하 방향(Y축)으로의 직선운동과, Z축을 회전중심으로 하는 롤링(Rolling), X축을 회전 중심으로 하는 피칭(Pitching) 및 Y축을 회전 중심으로 하는 요잉(Yawing) 회전운동의 조합으로 움직일 수 있다. 이에 따라, 참가자가 시뮬레이터에서 조작 레버를 조작하면, 시뮬레이터는 참가자의 조작에 따라 움직일 수 있어서, 시뮬레이터를 통해 동작되는 시뮬레이션을 진행하는 참가자의 몰입도를 높일 수 있는 장점이 있다. A simulator (particularly a motion simulator) represents a device that allows participants to feel the motion of virtual reality as if it were to reproduce the dynamic changes to fit the virtual environment controlled by the computer. The simulator may include a simulation screen, a manipulation lever, and a chair moving in two or three dimensions while the participant is seated. In addition, the simulator includes a configuration for rotating and linear motion of the simulator, and includes a linear motion in the front-rear direction (Z axis), the left-right direction (X axis), and the vertical direction (Y axis), and the Z axis as the rotation center. It can be moved by a combination of rolling, pitching with the X-axis as the center of rotation, and yawing rotational movement with the Y-axis as the center of rotation. Accordingly, when the participant manipulates the operation lever in the simulator, the simulator can move according to the participant's operation, thereby increasing the immersion of the participant in the simulation that is operated through the simulator.

이러한 특징에 기인하여, 시뮬레이터는 비행 시뮬레이션이나 운전시뮬레이션 등에 적용되고 있고, 최근에는 3차원을 체감할 수 있도록 게임용이나 극장용 시뮬레이터 등으로 널리 활용되고 있다.Due to these characteristics, the simulator is applied to flight simulation, driving simulation, and the like, and recently, it has been widely used as a simulator for games or theaters so that 3D can be experienced.

이러한 체감형 가상현실 장비인 시뮬레이터를 활용한 가상현실 테마파크 사업은 초기 시장이 형성되고 있으나, 투자대비 운영비용이 높아 수익구조가 나쁜 문제점을 갖고 있다.The virtual reality theme park business using the simulator, which is a tangible virtual reality equipment, is being formed in the early market, but has a problem of poor profit structure due to high operating cost compared to investment.

이와 같이 운영비용이 높은 이유는 서비스를 위한 인건비 비중이 높기 때문이다. This high operating cost is due to the high proportion of labor costs for services.

또한, 체감형 시뮬레이터에 이용자가 탑승하기 위해서는 시뮬레이터의 탑승을 보조하기 위한 인력이 필요한데, 숙련된 인력에 의한 탑승 서비스(고객의 감정을 읽고 필요에 따라 적절한 안내 및 대화를 하는 서비스)에 따라 매출이 크게 좌우된다. 즉, 탑승 보조 인력을 통해 주변 관람객들의 관심도를 높이고, 현장 분위기가 좋아지도록 다양한 멘트를 수행하는 방식을 채택하였다. 그러나, 보조인력 비용이 매출 대비 상대적으로 높고, 일반적인 단기 아르바이트 인력으로는 주변 관람객들의 관심도를 높이는데 한계가 있고, 지속적으로 높은 수준의 탑승 서비스를 제공하기가 매우 어렵다.In addition, in order for the user to ride on the haptic simulator, a manpower for assisting the simulator's ride is required, and sales are generated according to the boarding service (a service that reads the customer's feelings and provides appropriate guidance and dialogue as necessary). It depends greatly. In other words, it adopts a method of carrying out various comments to increase the interest of the surrounding visitors through the boarding assistant personnel and improve the on-site atmosphere. However, the cost of assistant personnel is relatively high compared to sales, and the general short-term part-time workforce has a limit in increasing the interest of nearby visitors, and it is very difficult to provide a consistently high level of boarding service.

또한, 시뮬레이션 게임 참가자들에게는 게임 도중에 발생할 수 있는 다양한 상황에 대한 적절한 멘트 서비스를 제공할 필요가 있다. 예를 들면, 레이싱 게임을 하는 참가자에게 핸들 조작성, 현재 차량의 위치와 속도 등 진행중인 게임에서 필요한 정보를 제공할 필요가 있다.In addition, the simulation game participants need to provide appropriate commentary services for various situations that may occur during the game. For example, it is necessary to provide a participant in a racing game with information necessary for the game in progress, such as steering wheel maneuverability, current vehicle position and speed.

이러한 멘트를 사람이 직접 하는 경우에는 복수의 게임 참가자에게 동시에 수행할 수가 없다. 또한, 시뮬레이션 게임에 참가하고 있는 복수의 참가자에게 동시에 서로 다른 멘트를 수행할 수가 없다.When a person makes such a comment directly, it cannot be performed simultaneously by a plurality of game participants. In addition, it is not possible to simultaneously perform different comments on a plurality of participants participating in the simulation game.

가상현실(VR) 테마파크의 보급에 결정적인 역할을 하게 될 미래 핵심기술은 사람 대신 높은 수준의 다양한 멘트 서비스를 제공하는 인공지능 기술이다. 따라서 이러한 멘트 서비스를 제공하는 지능형 서비스 시스템의 개발이 요구된다.The core technology of the future, which will play a decisive role in the dissemination of VR theme parks, is artificial intelligence technology that provides a variety of high-level service services for people. Therefore, the development of an intelligent service system that provides these services.

이러한 시뮬레이터용 지능형 서비스 로봇은 시뮬레이터 주변에서 활동하면서 지능형 서비스를 제공할 필요성이 있고, 시뮬레이터 참가자에게 필요한 적절한 안내 서비스를 제공할 필요성이 있다.The intelligent service robot for the simulator needs to provide intelligent services while working around the simulator, and to provide appropriate guidance services for the simulator participants.

이러한 지능형 안내 로봇 시스템에 대한 종래기술로서 대한민국 실용신안등록 제20-0435980호가 개시되어 있다.Korean Utility Model Registration No. 20-0435980 is disclosed as a conventional technology for such an intelligent guide robot system.

본 발명은 상술한 제반 문제점을 해결하기 위해 안출된 것으로, 사람 대신 높은 수준의 멘트 서비스를 제공하는 시뮬레이터용 지능형 서비스 시스템과 장치와 방법 및 기록매체를 제공하고자 함에 그 목적이 있다.SUMMARY OF THE INVENTION The present invention has been made to solve the above-mentioned problems, and an object thereof is to provide an intelligent service system, apparatus, method, and recording medium for a simulator that provides a high level of service for a person instead of a person.

또한, 복수의 시뮬레이션 참가자 또는 관람객에게 서로 다른 멘트를 동시에 수행할 수 있는 시뮬레이터용 지능형 서비스 시스템과 장치와 방법 및 기록매체를 제공하고자 함에 그 목적이 있다.Another object of the present invention is to provide an intelligent service system, apparatus, method, and recording medium for a simulator that can simultaneously perform a different message to a plurality of simulation participants or visitors.

또한, 시뮬레이션 참가자 또는 관람객에게 적절한 안내 서비스를 제공할 수 있는 시뮬레이터용 지능형 서비스 시스템과 장치와 방법 및 기록매체를 제공하고자 함에 그 목적이 있다.In addition, an object of the present invention is to provide an intelligent service system, apparatus, method, and recording medium for a simulator that can provide an appropriate guide service to a simulation participant or a visitor.

상술한 문제점을 해결하기 위한 본 발명의 시뮬레이터용 지능형 서비스 시스템은, 정보수집기로부터 시뮬레이션 참가자 또는 관람객의 정보를 수집하는 정보 수집부; 상기 정보 수집부에서 수집된 상기 정보로부터 상기 시뮬레이션 참가자 또는 관람객에게 제공할 멘트를 생성하는 멘트 생성부;를 포함한다.Intelligent service system for a simulator of the present invention for solving the above problems, the information collecting unit for collecting the information of the simulation participants or visitors from the information collector; And a comment generator for generating a comment to be provided to the simulation participant or the viewer from the information collected by the information collector.

상기 정보는, 상기 정보수집기부터 수신된 영상정보와 음성정보 및 뇌파정보 중 적어도 하나로 이루어질 수 있다.The information may include at least one of image information, audio information, and brain wave information received from the information collector.

상기 정보수집기는 시뮬레이터 주변을 둘러싸는 펜스를 따라 주행하는 로봇과 천장과 시뮬레이터 중 적어도 하나에 설치되고; 상기 정보 수집부는 상기 정보수집기로부터 상기 멘트생성정보를 수집할 수 있다. The information collector is installed on at least one of a robot running along a fence surrounding a simulator, a ceiling, and a simulator; The information collecting unit may collect the comment generation information from the information collector.

상기 정보 수집부에서 수집된 정보로부터 상기 참가자 또는 관람객이 회원인지 여부를 판단하는 식별부를 더 포함하고, 상기 멘트 생성부는 상기 식별부의 판단 결과를 이용하여 상기 멘트를 생성할 수 있다.The information collecting unit may further include an identification unit that determines whether the participant or the visitor is a member, and the comment generation unit may generate the comment using the determination result of the identification unit.

상기 멘트 생성부는, 상기 참가자가 복수인 경우 상기 참가자 각각에게 제공하기 위해 상기 복수의 참가자별로 서로 다른 멘트를 생성하거나, 상기 참가자와 관람객 각각에게 제공하기 위해 서로 다른 멘트를 생성하거나, 상기 관람객에게 제공하기 위해 현재 진행중인 시뮬레이션의 상황에 대한 멘트를 생성할 수 있다.The comment generator may generate a different comment for each of the plurality of participants to provide each participant when there are a plurality of participants, or generate a different comment for each participant and the visitor, or provide the same to the visitor. To do this, you can create a comment about the situation of the current simulation.

복수의 회원 정보를 저장하는 데이터 관리부를 더 포함하고; 상기 멘트 생성부는 상기 데이터 관리부에 저장된 회원 정보를 이용하여 상기 참가자에게 제공할 멘트를 생성할 수 있다.A data manager which stores a plurality of member information; The comment generator may generate a comment to be provided to the participant using member information stored in the data manager.

이 경우 상기 참가자가 복수이고, 상기 멘트 생성부는 상기 복수의 참가자에 대한 회원 정보를 상기 데이터 관리부 로부터 제공받아 상기 복수의 참가자 사이에 대한 사회적 관계를 판단하여, 상기 사회적 관계가 있는 것으로 판단된 경우 상기 사회적 관계에 대응하는 멘트를 생성할 수 있다.In this case, when there are a plurality of participants and the comment generator receives member information about the plurality of participants from the data manager, it determines a social relationship between the plurality of participants and determines that there is the social relationship. You can create comments that correspond to social relationships.

상기 멘트 생성을 위한 데이터를 관리하는 데이터 관리부를 더 포함하고; 상기 참가자가 데이터 관리부에 저장된 회원이 아닌 경우에는, 상기 멘트생성부는 상기 데이터 관리부에 이미 저장되어 데이터를 이용하여 상기 참가자에게 제공할 멘트를 생성할 수 있다.A data manager for managing data for generating the comment; If the participant is not a member stored in the data manager, the comment generator may generate a comment to be provided to the participant by using data already stored in the data manager.

본 발명의 시뮬레이터용 지능형 서비스 장치는, 상기에 기재된 정보 수집부와 멘트 생성부를 포함한다.The intelligent service apparatus for a simulator of the present invention includes the information collecting unit and the comment generating unit described above.

본 발명의 시뮬레이터용 지능형 서비스 방법은, a) 정보수집기로부터 시뮬레이션 참가자 또는 관람객의 정보를 수집하는 단계; b) 상기 수집된 정보로부터 상기 시뮬레이션 참가자 또는 관람객에게 제공할 멘트를 생성하는 단계; c) 상기 생성된 멘트를 상기 참가자 또는 관람객에게 제공하는 단계;를 포함한다. The intelligent service method for a simulator of the present invention includes: a) collecting information of a simulation participant or a visitor from an information collector; b) generating a comment to provide to the simulation participant or viewer from the collected information; c) providing the generated comment to the participant or spectator.

상기 a) 단계에서 수집하는 정보는, 시뮬레이터 주변을 움직이는 로봇과 천장 및 시뮬레이터 중 적어도 하나에 설치된 상기 정보수집기로부터 수집된 정보를 포함할 수 있다.The information collected in step a) may include information collected from the information collector installed on at least one of a robot, a ceiling, and a simulator moving around the simulator.

상기 참가자가 복수이고, 상기 복수의 참가자에 대한 회원 정보로부터 상기 복수의 참가자 사이에 대한 사회적 관계를 판단하여, 상기 사회적 관계가 있는 것으로 판단된 경우 상기 사회적 관계에 대응하는 멘트를 생성하여 상기 사회적 관계가 있는 것으로 판단된 복수의 참가자에게 동시에 제공할 수 있다.The social relationship between the plurality of participants is determined based on the plurality of participants and the member information of the plurality of participants, and when it is determined that there is the social relationship, a comment corresponding to the social relationship is generated to generate the social relationship. It can be provided simultaneously to a plurality of participants determined to be.

상기 참가자가 복수인 경우 상기 복수의 참가자별로 서로 다른 멘트를 생성하여 상기 참가자에게 상기 시뮬레이션이 진행되는 동안 각각 제공하거나, 상기 복수의 참가자에게 서로 다른 멘트를 동시에 제공할 수 있다.When there are a plurality of participants, different comments may be generated for each of the plurality of participants and provided to the participants during the simulation, or different comments may be simultaneously provided to the plurality of participants.

상기 참가자와 관람객에게 서로 다른 멘트를 생성하여 상기 참가자와 관람객에게 각각 제공할 수 있다.Different comments may be generated for the participant and the viewer and provided to the participant and the visitor, respectively.

상기 시뮬레이션 참가자가 시뮬레이터에 탑승을 안내하는 멘트를 생성하여 상기 시뮬레이션 참가자의 탑승과정을 안내할 수 있다.The simulation participant may create a comment guiding the boarding of the simulator to guide the boarding process of the simulation participant.

본 발명의 기록매체에는 상술한 시뮬레이터용 지능형 서비스 방법을 수행하는 컴퓨터 프로그램이 저장될 수 있다.The recording medium of the present invention may store a computer program for performing the above-described simulator intelligent service method.

본 발명에 의하면, 낮은 유지 비용으로 고객에게 높은 수준의 탑승서비스를 지속적으로 제공할 수 있어 고객 만족도를 높일 수 있다.According to the present invention, it is possible to continuously provide a high level of boarding services to customers at low maintenance costs, thereby increasing customer satisfaction.

또한, 복수의 게임 참가자들에게 서로 다른 멘트를 동시에 수행할 수 있고, 게임 도중 발생하는 상황에 대한 적절한 멘트를 수행함으로써 게임 참가자들의 게임에 대한 흥미도와 몰입도를 증가시킬 수 있다.In addition, it is possible to simultaneously perform a different comment on a plurality of game participants, and to increase the interest and immersion of the game participants by performing an appropriate comment on a situation occurring during the game.

또한, 시뮬레이션 참가자 또는 펜스 외부 관람객에게도 적절한 안내 서비스를 제공할 수 있다.In addition, it is possible to provide appropriate guidance services to the simulation participants or visitors outside the fence.

도 1은 본 발명에 의한 시뮬레이터용 지능형 서비스 시스템의 개략적인 구성을 보여주는 블록도이다.
도 2는 본 발명에 의한 시뮬레이터용 지능형 서비스 시스템에서 펜스를 주행하는 로봇을 보여주는 사시도이다.
도 3은 본 발명에 의한 시뮬레이터용 지능형 서비스 방법에 대한 흐름도이다.
1 is a block diagram showing a schematic configuration of an intelligent service system for a simulator according to the present invention.
2 is a perspective view showing a robot driving a fence in the intelligent service system for a simulator according to the present invention.
3 is a flowchart illustrating an intelligent service method for a simulator according to the present invention.

이하 본 발명의 시뮬레이터용 지능형 서비스 시스템에 대하여 상세히 설명한다.Hereinafter, the intelligent service system for a simulator of the present invention will be described in detail.

도 1을 참조하면, 본 발명의 시뮬레이터용 지능형 서비스 시스템(1)은, 정보수집기로부터 시뮬레이션 참가자 또는 관람객의 정보를 수집하는 정보 수집부(110), 상기 정보 수집부(110)에서 수집된 정보로부터 상기 시뮬레이션 참가자 또는 관람객에게 제공할 멘트를 생성하는 멘트 생성부(140)를 포함한다.Referring to FIG. 1, the intelligent service system 1 for a simulator of the present invention includes an information collector 110 for collecting information of a simulation participant or a visitor from an information collector, from information collected by the information collector 110. It includes a comment generating unit 140 for generating a comment to be provided to the simulation participants or visitors.

본 발명의 시뮬레이션이 수행되는 시뮬레이터는, 전후 방향(Z축), 좌우 방향(X축) 및 상하 방향(Y축)으로의 직선운동과, Z축을 회전중심으로 하는 롤링(Rolling), X축을 회전 중심으로 하는 피칭(Pitching) 및 Y축을 회전 중심으로 하는 요잉(Yawing) 회전운동의 조합으로 움직이는 것으로 구성될 수 있다.In the simulator in which the simulation of the present invention is performed, linear motion in the front-rear direction (Z axis), the left-right direction (X axis) and the vertical direction (Y axis), rolling (Rolling) with the Z axis as the rotation center, and rotation of the X axis It may consist of moving in a combination of pitching centered and yawing rotational movement centered on the Y axis.

상기 정보수집부(110)에 수집되는 정보는 영상 정보, 음성 정보, 뇌파 정보, 감성 정보, 오감 정보 중 하나 이상의 정보로 이루어질 수 있다.The information collected by the information collector 110 may include at least one of image information, audio information, brain wave information, emotion information, and five sense information.

상기 정보수집기는, 카메라(11), 마이크(12) 및 뇌파측정기(13) 중 하나 이상으로 구성될 수 있다.The information collector may be composed of one or more of a camera 11, a microphone 12, and an EEG 13.

상기 정보 수집부(110)는 상기 정보수집기인 카메라(11)와 마이크(12) 및 뇌파측정기(13) 중 하나 이상으로부터 정보를 수집하는 기능을 한다. 구체적으로, 정보 수집부(110)는 카메라(11)로부터 촬영된 복수의 영상 정보(예를 들어, 사진 또는 동영상)들과, 마이크(12)를 통해 수신된 음성정보, 뇌파측정기(13)로부터 측정된 뇌파정보를 수집하는 기능을 한다. The information collecting unit 110 functions to collect information from at least one of the camera 11, the microphone 12, and the EEG 13, which are the information collectors. In detail, the information collecting unit 110 includes a plurality of image information (for example, a picture or a video) photographed from the camera 11, voice information received through the microphone 12, and the EEG 13. It collects the measured EEG information.

또한, 상기 정보수집기는 참가자가 시뮬레이터의 조종간을 손으로 잡고 시뮬레이션을 수행하는 경우 손의 땀을 감지하는 수분감지센서로 구성하거나, 조종간을 손으로 잡을 때의 압력을 감지하는 압력감지센서로 구성할 수 있다. 즉, 손의 땀을 감지함으로써 참가자의 긴장 상태를 판단할 수 있고, 조종간을 손으로 잡는 압력이 크거나 작게 되는 변화로부터 참가자의 긴장 상태 또는 몰입도를 판단할 수 있다. 상기 센서에 의해 감지된 값을 현재 참가자의 감성 또는 오감에 관한 정보로서 정보 수집부(110)에서 수집할 수 있다. 상기에서는 감성 또는 오감에 관한 정보를 측정하기 위한 수단으로서 수분감지센서와 압력감지센서를 예시하였으나, 이에 한정되지 않고 다양한 센서를 이용하여 참가자의 감성 또는 오감을 판단할 수 있다.In addition, the information collector may be configured as a moisture sensor to detect the sweat of the hand when the participant is holding the steering wheel of the simulator by hand, or a pressure sensor to detect the pressure when the hand holding the steering wheel. Can be. That is, it is possible to determine the tension state of the participant by detecting the sweat of the hand, and the tension state or immersion degree of the participant can be determined from the change that the pressure holding the steering wheel with the hand is large or small. The value detected by the sensor may be collected by the information collecting unit 110 as information on the emotion or the five senses of the current participant. In the above, the moisture sensor and the pressure sensor are exemplified as a means for measuring information on the emotion or the five senses. However, the present invention is not limited thereto, and the participant's emotion or the five senses can be determined using various sensors.

상기 카메라(11)는 복수 개로 이루어질 수 있다. 예를 들어, 카메라들 중 적어도 하나는 시뮬레이터 내에서 시뮬레이터에 탑승하고 있는 참가자를 바라보는 방향으로 설치되어 참가자를 촬영하고, 다른 카메라들은 시뮬레이터 근처 등에 배치되어 관람객들을 촬영할 수 있다. 물론, 관람객들이 모이는 것을 감지하기 위해, 시뮬레이터와 그 주변 모두가 촬영되도록 천장과 같은 위치에 카메라가 설치되는 것도 가능하다. The camera 11 may be formed in plurality. For example, at least one of the cameras may be installed in a direction of looking at the participant in the simulator to photograph the participant, and other cameras may be arranged near the simulator to photograph the viewers. Of course, in order to detect the spectators gathering, it is also possible that the camera is installed in a ceiling-like location so that the simulator and all of its surroundings are photographed.

또한, 카메라(11)는 도 2에 나타난 바와 같이 시뮬레이터를 둘러싸는 펜스(200) 상단의 레일(210)을 따라 주행하는 로봇(220)에 설치될 수 있고, 상기 로봇(220)이 레일(210)을 따라 주행하면서 상기 로봇(220)에 설치된 카메라(11)에서 시뮬레이터 참가자 또는 관람객을 촬영할 수 있다.In addition, the camera 11 may be installed on the robot 220 traveling along the rail 210 on the top of the fence 200 surrounding the simulator as shown in FIG. 2, and the robot 220 may be installed on the rail 210. While driving along the), the camera 11 installed in the robot 220 may photograph a simulator participant or a visitor.

상기 카메라(11)에서는 참가자 또는 관람객의 표정을 읽어들일 수 있고, 표정과 함께 마이크(12)를 통해 참가자 또는 관람객의 음성도 수신될 수 있다. 또한, 상기 참가자 또는 관람객의 음성을 수신하기 위한 다른 센서를 추가로 구성할 수도 있다. 또한, 시뮬레이션 게임에 참가하고 있는 참가자가 복수인 경우에는 복수의 참가자가 탑승하고 있는 시뮬레이터 각각에 카메라(11)가 설치될 수 있다.The camera 11 may read an expression of a participant or a visitor, and a voice of a participant or a visitor may also be received through the microphone 12 together with the expression. In addition, another sensor for receiving a voice of the participant or the viewer may be further configured. In addition, when there are a plurality of participants participating in the simulation game, the camera 11 may be installed in each of the simulators in which the plurality of participants ride.

상기 뇌파측정기(13)는 시뮬레이션 참가자가 시뮬레이터에 탑승한 경우 참가자의 뇌파를 측정할 수 있도록 구비될 수 있다.The EEG 13 may be provided to measure the EEG of the participant when the simulation participant boarded the simulator.

이렇게 수집된 정보는 유선 또는 무신 통신을 통해 정보 수집부(110)에서 획득 가능하다. 그리고, 위의 설명에서 용어, '카메라'는 대상을 촬영하는 장비 모두를 포함한다. 즉, 카메라는 일반적인 카메라, 깊이 카메라, 광각 카메라(예를 들어, 광각 렌즈 또는 어안 렌즈를 포함하는 카메라) 등뿐만 아니라, 센서 타입도 포함할 수 있다. 나아가, 카메라를 포함하여 촬영 이미지에 이미지 처리를 수행하는 이미지 센서의 개념도 포함하는 것으로 이해되어야 한다. The collected information may be obtained from the information collecting unit 110 through wired or wireless communication. In addition, in the above description, the term 'camera' includes all equipment for photographing an object. That is, the camera may include not only a general camera, a depth camera, a wide angle camera (for example, a camera including a wide angle lens or a fisheye lens), but also a sensor type. Furthermore, it should be understood to include the concept of an image sensor that performs image processing on the captured image, including the camera.

상기 멘트 생성부(140)는 상기 정보 수집부(110)에서 수집된 영상 정보, 음성 정보, 뇌파 정보, 감성 정보, 오감 정보 중 적어도 하나로부터 상기 시뮬레이션 참가자 또는 관람객에게 제공할 멘트를 생성한다. The comment generating unit 140 generates a comment to be provided to the simulation participant or the viewer from at least one of the image information, the audio information, the brain wave information, the emotion information, and the five sense information collected by the information collecting unit 110.

상기 멘트 생성부(140)는 인공지능(Artificial Intelligence)의 학습 알고리즘을 이용하여 멘트를 생성할 수 있다. The comment generator 140 may generate a comment using a learning algorithm of artificial intelligence.

이러한 학습 알고리즘으로는 의사결정규칙(Decision Rule)을 나무구조로 도표화하여 분류와 예측을 수행하는 분석방법인 의사결정나무(Decision Tree), 다수의 변수들 사이의 확률적 관계(조건부독립성:conditional independence)를 그래프 구조로 표현하는 모델인 베이지안 망(Bayesian network), 패턴인식과 자료분석을 위한 지도(감독/교사) 학습(supervised learning)의 모델인 서포트벡터머신(support vector machine, SVM), 생물학적 뉴런의 동작원리와 뉴런간의 연결 관계를 모델링한 것으로 node 또는 processing element라고 하는 다수의 뉴런들이 층(層, Layer) 구조의 형태로 연결된 정보처리 시스템인 인공신경망(Artificial neural network) 등이 알려져 있다.Such learning algorithms include Decision Tree, an analytical method for classifying and predicting Decision Rules in a tree structure, and probabilistic relationships between multiple variables (conditional independence). ) a model of Bayesian networks (Bayesian network), pattern recognition and guidance for data analysis (director / teacher) learning (model of Support Vector machine in supervised learning) (support vector machine, SVM), the biological neurons that express a graph structure the operating principle is known, such as a plurality of neurons that that node or processing element for modeling a connection relationship among the neurons in that layer (層, layer) the ANN (artificial neural network) connected to the information processing system in the form of a structure.

또한, 인공신경망을 이용하여 데이터를 군집화하거나 분류하는데 사용하는 기술인 딥러닝(Deep Learning)이 알려져 있다. 기계학습과 인지과학에서의 인공신경망은 생물학의 신경망(동물의 중추신경계, 특히 뇌)에서 영감을 얻은 통계학적 학습알고리즘이다. 인공신경망은 시냅스(synapse)의 결합으로 네트워크를 형성한 인공뉴런(node)이 학습을 통해 시냅스의 결합세기를 변화시켜, 문제해결 능력을 가지는 모델전반을 가리킨다. 인공신경망을 이용하는 딥러닝의 핵심은 분류를 통한 예측이다. 수많은 데이터 속에서 패턴을 발견해 인간이 사물을 구분하듯 컴퓨터가 데이터를 나눈다. Also, deep learning, which is a technique used to cluster or classify data using an artificial neural network, is known. Artificial neural networks in machine learning and cognitive science are statistical learning algorithms inspired by biological neural networks (the central nervous system of animals, especially the brain). Artificial neural network refers to the whole model having a problem solving ability by changing the strength of synapses through the learning of artificial neurons (nodes) that form a network by combining synapses. The key to deep learning using neural networks is classification prediction. Computers divide data as humans distinguish things by finding patterns in a lot of data.

상기 멘트 생성부(140)는 상기 수집된 정보를 이용하여 인공지능의 학습 알고리즘에 의해 참가자 또는 관람객에게 상황에 맞는 적절한 멘트를 생성할 수 있다. 또한, 인공지능의 학습 데이터가 축적될수록 더욱 적합한 멘트를 생성할 수 있게 된다.The comment generator 140 may generate an appropriate comment for a participant or a visitor by using an artificial intelligence learning algorithm using the collected information. In addition, as the learning data of the artificial intelligence is accumulated, it is possible to generate more suitable comments.

상기 멘트 생성부(140)는 참가자가 시뮬레이터에 탑승하는 과정에서 안내 기능을 제공할 수 있다. 이러한 안내 기능은 참가자의 표정과 음성에 반응하여 그에 적절한 음성서비스를 참가자에게 제공할 수 있다.The comment generator 140 may provide a guide function in the process of the participant boarding the simulator. The guide function may provide a participant with appropriate voice service in response to the participant's facial expression and voice.

또한, 상기 멘트 생성부(140)에는 식별부(120)에 의해 식별된 정보와 데이터 관리부(130)로부터 회원 정보가 수신될 수 있다.In addition, the comment generation unit 140 may receive information identified by the identification unit 120 and member information from the data management unit 130.

상기 식별부(120)는 복수의 영상 정보들과 음성 정보를 분석함으로써, 참가자 또는 관람객을 식별하는 기능을 한다. 구체적으로, 식별부(120)는 예를 들어, 시뮬레이터 내부에 배치된 카메라로부터 촬영된 영상 정보는 참가자에 대한 것으로, 그리고 시뮬레이터 외부에 배치된 카메라로부터 촬영된 영상 정보는 관람객에 대한 것으로 구분할 수 있다. 식별부(120)는 영상 정보들을 분석함으로써, 식별부(120)를 통해 식별한 참가자 또는 관람객이 등록된 회원인지 판단하는 과정을 더 수행할 수 있다. 예를 들어, 식별부(120)는 복수의 영상 정보들에서 참가자 또는 관람객의 얼굴을 식별하고, 식별한 얼굴과 저장부(미도시)에 저장된 회원들의 얼굴 정보를 비교함으로써, 참가자 또는 관람객의 회원 여부를 판단할 수 있다. The identification unit 120 functions to identify a participant or a visitor by analyzing a plurality of image information and audio information. Specifically, for example, the identification unit 120 may classify the image information photographed from the camera disposed inside the simulator for the participant, and the image information photographed from the camera disposed outside the simulator for the visitor. . The identification unit 120 may further perform a process of determining whether a participant or a visitor identified through the identification unit 120 is a registered member by analyzing the image information. For example, the identification unit 120 identifies the face of the participant or the visitor from the plurality of image information, and compares the identified face with face information of the members stored in the storage unit (not shown), so that the member of the participant or the visitor It can be determined.

이 경우 회원으로 식별된 참가자에게는 데이터 관리부(130)에 저장되어 있는 회원 정보와 정보 수집부(110)로부터 수집된 영상 정보와 음성 정보 및 뇌파 정보 중 하나 이상을 조합하여, 그 참가자에 적합한 멘트를 생성할 수도 있다. In this case, the participant identified as a member is combined with at least one of the member information stored in the data management unit 130 and the video information, the audio information, and the EEG information collected from the information collecting unit 110, and a comment suitable for the participant is obtained. You can also create

상기 참가자가 회원인지 여부는 식별부(120)에 의해 판단하지 않고 참가자가 시뮬레이터에 탑승하는 과정에서 입력부(14)를 통해 입력된 정보를 이용하여 판단할 수도 있다. Whether the participant is a member may be determined using the information input through the input unit 14 in the process of the participant boarding the simulator without determining by the identification unit 120.

상기 데이터 관리부(130)는 복수의 회원 정보를 저장부(미도시)에 저장하고, 회원 정보와 관련된 멘트를 생성하도록 상기 회원 정보를 멘트 생성부(140)에 제공하는 기능을 한다. 또한, 데이터 관리부(130)는 참가자가 시뮬레이터에 탑승시 상기 입력부(14)를 통해 입력되는 정보를 저장할 수도 있다. 상기 입력부(14)에서는 참가자의 휴대 전화 번호, 이름, ID 중 어느 하나를 입력하도록 구성할 수 있다. 또한, 상기 입력부(14)에서는 사진, 이메일 주소, 홍채, 지문 중 어느 하나를 입력하도록 구성할 수 있다. 상기 입력부(14)를 통해 입력된 정보와 상기 데이터 관리부(130)에 저장되어 있는 회원 정보를 비교하여 참가자가 시뮬레이터에 탑승시 회원인지 여부를 판단할 수 있다. The data manager 130 stores a plurality of pieces of member information in a storage unit (not shown), and provides the member information to the comment generator 140 to generate a comment related to the member information. In addition, the data manager 130 may store information input through the input unit 14 when the participant boards the simulator. The input unit 14 may be configured to input any one of a participant's mobile phone number, name, and ID. In addition, the input unit 14 may be configured to input any one of a photo, an email address, an iris, and a fingerprint. The information input through the input unit 14 and the member information stored in the data manager 130 may be compared to determine whether the participant is a member when boarding the simulator.

또한, 상기 데이터 관리부(130)는 회원의 탑승 기록을 저장할 수 있고, 상기 탑승 기록을 바탕으로 참가자의 상황에 맞는 멘트를 생성할 수 있도록 멘트 생성부(140)에 관련 정보를 제공할 수도 있다. In addition, the data manager 130 may store a boarding record of the member, and may provide related information to the ment generating unit 140 to generate a ment suitable for the participant's situation based on the boarding record.

또한, 상기 데이터 관리부(130)는 복수의 참가자가 있는 경우 참가자들 사이의 사회적 관계를 판단하여 복수의 참가자들 사이의 관계와 관련된 멘트를 생성할 수 있도록 멘트 생성부(140)에 관련 정보를 제공할 수도 있다. 여기서 참가자들 사이의 사회적 관계란 친구 관계, 애인 관계, 가족 관계 등을 포함할 수 있다.In addition, when there are a plurality of participants, the data manager 130 may provide related information to the comment generator 140 to determine a social relationship between the participants and generate a comment related to the relationship between the plurality of participants. You may. Herein, the social relationship between the participants may include a friend relationship, a lover relationship, a family relationship, and the like.

또한, 상기 데이터 관리부(130)에는 상기한 정보 이외에 멘트를 생성하기 위한 다양한 정보가 저장되고, 이 저장된 정보를 멘트 생성부(140)에 제공하여 다양한 멘트를 생성할 수 있도록 한다. 일례로, 상기 참가자가 회원이 아닌 경우에는 데이터 관리부(130)에 이미 저장되어 있는 데이터를 이용하여 회원이 아닌 참가자에 적합한 멘트를 생성할 수 있도록 멘트 생성부(140)에 관련 데이터를 제공할 수 있다. 또한, 데이터 관리부(130)에 이미 저장되어 있는 데이터는 멘트 제공을 위해 상기 인공지능의 학습 알고리즘에 의해 생성된 데이터일 수 있다.In addition, the data manager 130 stores various information for creating a comment in addition to the above information, and provides the stored information to the comment generator 140 to generate various comments. For example, when the participant is not a member, related data may be provided to the part generator 140 so that a participant suitable for a participant who is not a member may be created using data already stored in the data manager 130. have. In addition, the data already stored in the data management unit 130 may be data generated by the learning algorithm of the artificial intelligence to provide a comment.

상기 멘트 출력부(20)는 참가자에게 음성으로 멘트를 제공하기 위한 스피커, 참가자가 착용하고 있는 HMD(Head Mounted Display), 그 밖의 영상표시장치가 될 수 있다. 또한, 상기 멘트 출력부(20)는 관람객에게도 영상 또는 음성으로 멘트를 제공하기 위한 스피커, 영상표시장치를 더 포함할 수 있다.The comment output unit 20 may be a speaker for providing a comment by voice to a participant, a head mounted display (HMD) worn by the participant, or another image display device. In addition, the comment output unit 20 may further include a speaker, an image display device for providing a comment to the viewer as an image or voice.

도 2를 참조하여 본 발명의 시뮬레이터용 지능형 서비스 장치에서 펜스를 주행하는 로봇에 대해 설명한다.A robot driving a fence in the intelligent service device for a simulator of the present invention will be described with reference to FIG. 2.

시뮬레이터의 주변을 둘러싸는 펜스(200)가 설치되어 있다. 상기 펜스(200)가 둘러쳐진 내부에 시뮬레이터가 설치되고, 상기 펜스(200)의 외측에 관람객이 서서 관람할 수 있도록 되어 있다. 도 2에서는 시뮬레이터의 사방을 둘러싸는 사각형의 펜스(200)의 한 변만이 나타나 있다. 상기 펜스(200)는 사각형을 포함하는 다각형, 원형 등 다양한 형상으로 이루어질 수 있다.A fence 200 surrounding the periphery of the simulator is provided. The simulator is installed inside the fence 200, and the viewer can stand outside the fence 200. In FIG. 2, only one side of the rectangular fence 200 surrounding all four sides of the simulator is shown. The fence 200 may be formed in various shapes such as polygons, circles, and the like including quadrangles.

상기 펜스(200)의 상부에는 레일(210)이 결합되어 있고, 상기 레일(210)을 따라 로봇(220)이 주행할 수 있다.The rail 210 is coupled to the upper portion of the fence 200, and the robot 220 may travel along the rail 210.

상기 로봇(220)에는 전원을 공급하는 전원공급부가 연결되어 있다. 또한, 상기 로봇(220)에는 상기 레일(210)을 따라 주행할 수 있도록 구동부가 구비되어 있다. The robot 220 is connected to a power supply for supplying power. In addition, the robot 220 is provided with a driving unit to travel along the rail (210).

상기 로봇(220)의 거치부(221)에는 카메라(11) 또는 마이크(12)가 일체로 결합될 수 있다. 상기 카메라(11)는 상기 펜스(200)의 안쪽 또는 바깥쪽 영상을 촬영하되, 참가자 또는 관람객의 위치를 파악하고, 참가자 또는 관람객의 표정을 영상정보로 수신하게 된다. 또한, 상기 마이크(12)는 참가자 또는 관람객이 내는 음성을 음성정보로 수신하게 된다. 이 경우 상기 카메라(11)는 펜스(200)의 안쪽과 바깥쪽 영상을 각각 수신하기 위해 2개가 구비될 수 있고, 상기 마이크(12)도 펜스(200)의 안쪽과 바깥쪽 음성을 각각 수신할 수 있도록 2개가 구비될 수 있다.The camera 11 or the microphone 12 may be integrally coupled to the mounting part 221 of the robot 220. The camera 11 captures an image of the inside or the outside of the fence 200, determines the position of the participant or the visitor, and receives the expression of the participant or the visitor as image information. In addition, the microphone 12 receives the voice of the participant or the viewer as voice information. In this case, two cameras 11 may be provided to receive the inner and outer images of the fence 200, respectively, and the microphone 12 may also receive the inner and outer voices of the fence 200, respectively. Two may be provided to be able to.

이러한 구조에 의해 로봇(220)이 레일(210)을 따라 펜스(200)를 주행하면서 펜스(200)의 안쪽과 바깥쪽의 참가자와 관람객의 표정 및 음성 중 적어도 하나를 수신할 수 있다.With this structure, the robot 220 may receive at least one of an expression and a voice of a participant and a viewer inside and outside the fence 200 while driving the fence 200 along the rail 210.

상기 카메라(11) 및 마이크(12)에 의해 수신된 영상 및 음성 중 적어도 하나의 정보는 멘트 생성부(140)에 수신되고, 멘트 생성부(140)에서는 상기 수신된 영상 및 음성 중 적어도 하나의 정보로부터 참가자 또는 관람객에게 어떤 음성 또는 문자 메시지를 보낼 것인지 판단하게 된다. Information of at least one of the video and audio received by the camera 11 and the microphone 12 is received by the comment generator 140, and the comment generator 140 includes at least one of the received video and audio. From the information, it is determined which voice or text message to send to the participant or spectator.

상기 펜스(200)의 안쪽 또는 바깥쪽에는 멘트 출력부(20)인 스피커 또는 디스플레이가 구비될 수 있다. 상기 스피커는 멘트 생성부(140)에서 생성된 멘트를 관람객에게 음성으로 제공하는 것이고, 상기 디스플레이는 상기 멘트 출력부(20)에서 생성된 멘트를 문자로 관람객에게 안내 서비스를 제공하기 위한 것이다. Inside or outside the fence 200 may be provided with a speaker or a display that is a cement output unit 20. The speaker is to provide a ment generated by the ment generating unit 140 to the viewer as a voice, the display is to provide a guide service to the spectator in the text generated by the ment output unit 20.

도 2의 실시예와 관련하여 로봇(220)이 레일(210)을 따라 펜스(200)를 주행하는 경우에 대해 설명하였으나, 로봇(220)이 펜스(220)에 고정되고, 상기 고정된 로봇(220)에 카메라(11) 또는 마이크(12)가 설치되도록 구성할 수도 있다.Although the case in which the robot 220 travels the fence 200 along the rails 210 has been described with reference to the embodiment of FIG. 2, the robot 220 is fixed to the fence 220 and the fixed robot ( The camera 11 or the microphone 12 may be installed in the 220.

상기 정보수집부(110)와 식별부(120)와 데이터 관리부(130) 및 멘트 생성부(140)를 포함하는 시뮬레이터용 지능형 서비스 장치(100)가 구비될 수 있다. 상기 시뮬레이터용 지능형 서비스 장치(100)는 시뮬레이터가 설치된 장소에 구비되는 서버(Server)로 이루어질 수 있다. 또한, 시뮬레이터용 지능형 서비스 장치(100)는 인터넷에 연결된 클라우드 서버(Cloud Server)로 이루어질 수 있다. 상기 시뮬레이터용 지능형 서비스 장치(100)에는 상기 정보수집부(110)와 식별부(120)와 데이터 관리부(130) 및 멘트 생성부(140)를 이용하여 생성된 상기 멘트를 참가자 또는 관람객에게 제공하기 위한 컴퓨터 프로그램이 저장될 수 있다.The intelligent service device 100 for a simulator including the information collecting unit 110, the identifying unit 120, the data managing unit 130, and the comment generating unit 140 may be provided. The simulator intelligent service device 100 may be configured as a server provided at a location where a simulator is installed. In addition, the intelligent service apparatus 100 for a simulator may be configured as a cloud server connected to the Internet. The simulator intelligent service device 100 provides the participants with the comment generated by using the information collecting unit 110, the identification unit 120, the data management unit 130, and the comment generator 140. Computer programs for the computer may be stored.

이와 같은 구성으로 이루어진 시뮬레이터용 지능형 서비스 시스템에 의하면, 시뮬레이터의 참가자 또는 관람객의 영상 정보, 음성 정보, 뇌파 정보, 감성 정보, 오감 정보 중 적어도 하나에 반응하여 상기 참가자 또는 관람객의 표정, 음성, 뇌파, 감성, 오감 중 적어도 하나에 대응하는 적절한 음성서비스 또는 문자서비스를 제공할 수 있다.According to the intelligent service system for a simulator having such a configuration, in response to at least one of video information, voice information, brain wave information, emotional information, and five sense information of a participant or a visitor of the simulator, the expression, voice, brain wave, An appropriate voice service or text service corresponding to at least one of emotion and five senses may be provided.

상기한 멘트는 시뮬레이션 참가자가 복수인 경우 뿐만 아니라 1인인 경우에도 제공할 수 있다.The comment may be provided even when there are a plurality of participants in the simulation.

도 3을 참조하여 본 발명에 의한 시뮬레이터용 지능형 서비스 방법에 대해 설명한다.An intelligent service method for a simulator according to the present invention will be described with reference to FIG. 3.

단계 S101은 참가자가 시뮬레이터에 탑승하는 과정에서 탑승 안내가 이루어지는 단계이다.Step S101 is a step in which the boarding guide is performed while the participant boards the simulator.

상기 탑승 안내 기능은 회원정보 입력, 탑승유도, 고객인식, 안내 등의 기능을 포함할 수 있다.The boarding guide function may include functions such as member information input, boarding induction, customer recognition, and guidance.

먼저, 시뮬레이션에 참가하고자 하는 참가자의 회원 정보가 입력부(14)에 입력된다. 회원 가입이 되어 있지 않은 경우에는 회원 가입을 유도하는 과정이 진행될 수 있다. 상기 입력부(14)에서는 참가자의 휴대 전화 번호, 이름, ID, 사진, 이메일 주소, 홍채, 지문 중 하나 이상을 입력할 수 있다. 상기 입력부(14)를 통해 입력된 정보와 상기 데이터 관리부(130)에 저장되어 있는 회원 정보를 비교하여 참가자가 회원인지 여부를 판단할 수 있다. 또한, 상기 회원 정보에는 참가자의 성별, 연령 등과 같은 인적사항이 더 포함될 수 있다.First, member information of a participant who wants to participate in the simulation is input to the input unit 14. If membership is not registered, a process of inducing membership may be performed. The input unit 14 may input one or more of a participant's mobile phone number, name, ID, photo, email address, iris, and fingerprint. The information input through the input unit 14 and the member information stored in the data manager 130 may be compared to determine whether the participant is a member. In addition, the member information may further include personal information such as gender, age, etc. of the participant.

이 경우 시뮬레이션 참가자가 복수인 경우 복수의 참가자 회원 정보가 입력되고, 상기 복수의 참가자 사이의 사회적 관계에 대한 정보를 입력하도록 유도할 수 있고, 상기 입력된 정보에 따라 참가자 사이의 사회적 관계에 대한 정보를 생성할 수 있다.In this case, when there are a plurality of simulation participants, a plurality of participant member information may be input, and information about social relations between the plurality of participants may be induced, and information about social relations between the participants may be induced according to the input information. Can be generated.

일례로, 애인 또는 친구 관계인 복수의 참가자가 시뮬레이션에 참가하는 경우에는 애인 또는 친구 관계인 그 복수의 참가자들에게 그들의 사회적 관계와 관련된 멘트를 생성하기 위하여 데이터 관리부(130)는 상기 사회적 관계에 대한 정보를 생성하여 멘트 생성부(140)에 제공할 수 있다.For example, when a plurality of participants who are lovers or friends participate in the simulation, the data manager 130 may provide information about the social relationships to the plurality of participants who are lovers or friends in order to create a comment related to their social relationships. It may be generated and provided to the comment generator 140.

이러한 회원 정보의 입력을 포함하는 안내기능이 데이터 관리부(130)로부터 받은 정보에 의해 멘트 생성부(140)에 제공될 수 있고, 상기 안내기능에 의해 시뮬레이션 참가자에게 필요한 정보를 제공하고 교감할 수 있는 멘트 서비스를 제공할 수 있다. A guide function including input of such member information may be provided to the comment generator 140 by the information received from the data manager 130, and the guide function may provide and interact with information necessary for the simulation participant. It can provide comment service.

상기 탑승유도는 정보 수집부(110)를 통해 수집된 영상 또는 소리 정보를 이용하여 시뮬레이터 주변의 관람객의 감정을 읽고 탑승유도 음성 또는 문자를 이용한 멘트를 멘트 생성부(140)에서 생성하고, 이 생성된 탑승유도 멘트를 멘트 출력부(20)를 통해 관람객에게 제공하는 서비스이다. The boarding induction reads the emotions of the spectators around the simulator by using the image or sound information collected through the information collecting unit 110, and generates a comment using the boarding induction voice or text in the comment generating unit 140, and this generation The boarding guidance is a service that provides the viewers through the cement output unit 20.

상기 고객인식은 멘트 생성부(140)에서 데이터 관리부(130)의 정보를 이용하여 회원의 아이디를 인식하여 이름을 불러주고, 과거 탑승기록을 활용한 멘트를 수행하는 것이다. The customer recognition is to use the information of the data management unit 130 in the comment generation unit 140 to recognize the ID of the member to call the name, and to perform the comment using the past boarding record.

상기 안내는 시뮬레이터에의 진입 및 탑승을 유도하고, 안전벨트 착용 방법에 대한 안내를 하며, 시뮬레이터 조작방법 등 게임 콘텐츠 수행을 안내하는 멘트가 포함된 것이다. The guide includes a comment for inducing entry into and a ride into the simulator, a guide on how to wear a seat belt, and a guide for performing game content such as a simulator operation method.

상기와 같은 탑승 안내가 이루어져 참가자들이 시뮬레이터에 탑승하면, 시뮬레이션 게임이 진행된다. When the boarding guidance is made as described above and the participants board the simulator, the simulation game proceeds.

단계 S102는 참가자들이 시뮬레이션에 참가하여 게임을 진행하고, 정보수집부(110)에서 영상 정보, 음성 정보, 뇌파 정보, 감성 정보, 오감 정보 중 적어도 하나를 수집하는 단계이다.In step S102, participants participate in a simulation to play a game, and the information collecting unit 110 collects at least one of image information, audio information, brain wave information, emotional information, and five sense information.

복수의 시뮬레이터에 각각 참가자가 탑승하여 시뮬레이션 게임이 진행되면, 참가자는 시뮬레이터를 조작하여 다른 참가자와 레이싱 게임과 같은 시뮬레이션 게임을 수행한다. When a participant rides each of the plurality of simulators and a simulation game is performed, the participant manipulates the simulator to perform a simulation game such as a racing game with other participants.

이 경우 각각의 시뮬레이터에 설치된 카메라(11)와 마이크(12) 및 뇌파측정기(13) 중 적어도 하나를 포함하는 정보 수집부(110)는 각각의 시뮬레이터 참가자의 영상 정보, 음성 정보, 뇌파 정보, 감성 정보, 오감 정보 중 적어도 하나를 수집하고, 상기 수집된 정보를 멘트 생성부(140)에 송신한다. In this case, the information collecting unit 110 including at least one of the camera 11, the microphone 12, and the electroencephalogram 13 installed in each simulator includes image information, voice information, brain wave information, and emotion of each simulator participant. Collect at least one of the information, the five senses information, and transmits the collected information to the comment generator 140.

또한, 데이터 관리부(130)는 참가자의 과거 탑승기록, 복수의 참가자들 사이의 사회적 관계에 대한 정보 등을 멘트 생성부(140)에 제공할 수 있다.In addition, the data manager 130 may provide the comment generator 140 with information about a past boarding record of a participant, information about a social relationship among the plurality of participants, and the like.

또한, 펜스(200)에 설치된 로봇(220)이 레일(210)을 따라 주행하면서 로봇(220)에 설치된 카메라(11) 또는 마이크(12)로부터 관람객들의 영상 또는 음성 정보를 수집하여 멘트 생성부(140)에 제공할 수 있다.In addition, while the robot 220 installed in the fence 200 travels along the rails 210, the viewer 220 collects the video or audio information of the viewers from the camera 11 or the microphone 12 installed in the robot 220. 140).

단계 S103는 정보수집부(110)에서 수집된 정보를 이용하여 멘트 생성부(140)에서 참가자 또는 관람객에게 제공할 멘트를 생성하는 단계이다. Step S103 is a step of generating a comment to be provided to a participant or a visitor by the comment generator 140 using the information collected by the information collecting unit 110.

상기 참가자 또는 관람객에게 제공하는 멘트는 칭찬, 위로, 정보전달을 포함할 수 있다. 칭찬은 참가자가 훌륭한 체험 성과를 낼 경우 칭찬 멘트를 수행하는 것이다. 위로는 참가자가 좋지 않은 체험 성과를 낼 경우 위로 멘트를 수행하는 것이다. 정보전달은 시뮬레이션 게임의 스코어, 이벤트, 새로운 콘텐츠 등의 정보전달 멘트를 수행하는 것이다. 또한, 상기 멘트에는 레이싱과 같은 시뮬레이션 게임 도중 벌어지는 여러가지 상황에 대한 대처 방법(특정 구간에서 속도를 변화시키거나, 핸들링 방법 등)에 대한 멘트가 포함될 수 있다.The comment provided to the participant or spectator may include praise, consolation, and information transmission. A compliment is a complimentary comment if a participant achieves a great experience. Comfort is to perform a comment if a participant produces poor experiences. Information delivery involves the delivery of information, such as scores, events and new content in simulation games. In addition, the comment may include a comment on how to cope with various situations occurring during a simulation game such as racing, such as changing a speed in a specific section or handling method.

상기 멘트 생성부(140)는 상기 수집된 영상 정보, 음성 정보, 뇌파 정보, 감성 정보, 오감 정보 중 적어도 하나에 반응하여 상기 참가자의 영상, 음성, 뇌파, 감성, 오감 중 적어도 하나에 대응하는 멘트를 생성한다. 이 경우 인공지능의 학습 알고리즘을 이용하여 상기 멘트를 생성할 수 있다. The comment generating unit 140 may respond to at least one of the participant's image, voice, brain wave, emotion, and five senses in response to at least one of the collected image information, voice information, brain wave information, emotion information, and five sense information. Create In this case, the comment may be generated using a learning algorithm of artificial intelligence.

상기 인공지능 학습 알고리즘은, 데이터 관리부(130)로부터 제공받은 참가자의 과거 탑승기록과 복수의 참가자들 사이의 사회적 관계 정보, 카메라(11)와 마이크(12) 및 뇌파측정기(13) 중 적어도 하나로부터 제공받은 참가자의 영상 정보, 음성 정보, 뇌파 정보, 감성 정보, 오감 정보 중 적어도 하나의 정보, 현재 진행 중인 시뮬레이션 게임에서 참가자가 수행하고 있는 진행상황 정보를 수신받아, 이들 정보를 종합적으로 분석하고, 과거의 데이터를 학습하여 복수의 참가자 각각에게 적합한 멘트, 복수의 참가자들 중 사회적 관계가 있는 참가자들에게 적합한 멘트를 생성할 수 있다.The AI learning algorithm may include at least one of a participant's past boarding record and social relation information between the plurality of participants, the camera 11, the microphone 12, and the EEG 13 provided from the data manager 130. Receives the participants' video information, audio information, brain wave information, emotional information, five sense information, at least one information, progress information of the participant performing in the current simulation game, and comprehensively analyzes these information, The past data may be learned to create a comment suitable for each of a plurality of participants and a comment suitable for socially related participants among the plurality of participants.

또한, 로봇(220)에 설치된 카메라(11) 또는 마이크(12)로부터 수신받은 관람객들의 영상 또는 음성 정보를 분석하고, 이를 현재 진행 중인 시뮬레이션 게임의 진행상황과 연관시켜 관람객들의 흥미를 불러일으키고, 시뮬레이션 게임에 대한 집중도를 높일 수 있는 멘트를 생성할 수 있다. In addition, by analyzing the video or audio information of the viewers received from the camera 11 or the microphone 12 installed in the robot 220, and associated with the progress of the simulation game currently in progress, arouses the interest of the visitors, the simulation You can create a comment to increase your concentration on the game.

이 경우 관람객들에게 제공하는 멘트의 종류는 현재 시뮬레이션 참가자의 상황에 대한 해설, 시뮬레이션 게임 진행 현황 등이 있고, 이러한 멘트는 멘트 생성부(140)가 상황을 판단하여 관람객에게 시뮬레이션 게임을 중계하는 형식이 될 수 있다.In this case, the types of comments that are provided to the viewers include a description of the current situation of the simulation participants, the progress of the simulation game, and the like, in which the comment generator 140 determines the situation and relays the simulation game to the viewers. This can be

본 발명의 시뮬레이션이 수행되는 시뮬레이터는 3축 방향의 직선운동과, 롤링(Rolling)과 피칭(Pitching) 및 요잉(Yawing) 회전운동의 조합에 의해 동작이 이루어지므로, 시뮬레이터의 움직임이 크고 역동적이다. 따라서 움직임이 작거나 움직임이 없는 게임을 참가자가 하는 경우 느끼는 감정에 비해 본 발명과 같이 움직임이 크고 역동적인 시뮬레이션을 수행할 때 속도감, 긴장감 등 다양한 감정을 느끼게 되고, 이러한 참가자의 감정은 참가자의 표정, 참가자의 음성, 참가자의 손에서 감지된 땀, 조종간에 가해지는 압력 등의 정보로부터 참가자가 시뮬레이션의 수행시 느끼는 다양한 감정 상태를 판단할 수 있고, 이러한 감정 상태에 적합한 멘트를 제공함으로써 시뮬레이션 수행시 참가자의 몰입도 및 만족도를 향상시킬 수 있다.The simulator in which the simulation of the present invention is performed is operated by a combination of three-axis linear motion, rolling, pitching, and yawing rotational motion, so that the motion of the simulator is large and dynamic. Therefore, compared to the emotions felt by the participant when playing the game with small or no motion, the user feels a variety of emotions such as speed and tension when performing a large and dynamic simulation as in the present invention. From the information of the participant's voice, the sweat sensed by the participant's hand, and the pressure applied to the steering wheel, it is possible to determine various emotional states felt by the participant during the simulation. Enhance participants' engagement and satisfaction.

단계 S104는 멘트 생성부(140)에서 생성한 멘트를 참가자 또는 관람객에게 멘트 출력부(20)를 통해 제공하는 단계이다.Step S104 is a step of providing the comment generated by the comment generator 140 to the participant or the visitor through the comment output unit 20.

상기 멘트 생성부(140)에서 생성한 멘트는 멘트 출력부(20)를 통해 각각의 참가자 개인별로 서로 다른 멘트를 개별적으로 제공할 수 있다. 또한, 전체 참가자에게 동일한 멘트를 동시에 제공할 수도 있고, 전체 참가자 중 특정인 또는 일부 사회적 관계가 있는 복수의 참가자에게만 동일한 내용의 멘트를 하고 나머지 참가자에게는 그와 다른 내용의 멘트를 제공할 수도 있다. 아울러, 관람객들에게는 참가자와 다른 내용의 멘트를 제공할 수 있다.The comment generated by the comment generator 140 may provide a different comment individually for each participant through the comment output unit 20. In addition, the same comment may be simultaneously provided to all participants, or the same content may be provided only to a plurality of participants having a specific person or some social relationship among all participants, and a different content to other participants. In addition, visitors can be provided with a different content than the participants.

단계 S105는 시뮬레이션 게임이 종료하여 참가자에게 종료 안내 멘트를 제공하는 단계이다. 종료 안내 멘트로는 종료 인사로서 다시 만나자는 인사를 할 수 있다.Step S105 is a step in which the simulation game ends and provides the participants with an end announcement. The end announcement may greet you to meet again as the end greeting.

상기와 같은 멘트 서비스를 제공함으로써 시뮬레이션 참가자의 즐거움을 배가시킬 수 있다. 또한, 인공지능 서비스가 수행하는 다양한 멘트(목소리의 성별, 말투, 억양, 감탄사, 내용 등)에 대한 참가자 또는 관람객의 반응을 빅데이터로 구축하고, 일반적 선호도 및 개인별 선호도에 맞는 서비스를 수행함으로써 고객의 만족도 향상에 기여하는 지능형 데이터 베이스 시스템을 구축할 수 있다.By providing the above mentioned service, the enjoyment of the simulation participant can be doubled. In addition, it builds the response of participants or visitors to various comments (voice gender, tone, intonation, exclamation, content, etc.) performed by AI service as big data, and performs services that meet the general preferences and individual preferences. Can build intelligent database systems that contribute to improved satisfaction.

만약 이러한 멘트를 사람이 하게 되면, 1개의 목소리로만 멘트를 할 수가 있으므로, 복수의 참가자별로 개별적인 멘트는 제공할 수가 없다. 상기와 같은 시뮬레이터용 지능형 서비스 시스템을 이용하게 되면, 참가자 개인별로 적합한 멘트를 제공할 수 있고, 복수의 참가자 또는 관람객의 상황에 맞는 적절한 멘트를 제공할 수 있다. If a person makes such a comment, he or she can make a comment using only one voice, and thus individual comments for a plurality of participants cannot be provided. When using the simulator intelligent service system as described above, it is possible to provide an appropriate comment for each participant, and to provide an appropriate comment for a situation of a plurality of participants or spectators.

본 발명의 실시예에 따른 시뮬레이터용 지능형 서비스 방법을 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽힐 수 있는 기록매체는, 일 예로, ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 미디어 저장장치 등이 있다. 또한, 본 발명의 실시예에 따른 경쟁게임 제공 방법을 실행시키기 위한 프로그램인 애플리케이션을 기록한 컴퓨터로 읽을 수 있는 기록매체는, 애플리케이션 스토어 서버(Application Store Server), 애플리케이션 또는 해당 서비스와 관련된 웹 서버(Web Server) 등을 포함하는 애플리케이션 제공 서버(Application ProviderServer)에 포함된 저장매체(예: 하드디스크 등)이거나, 애플리케이션 제공 서버 그 자체일 수도 있으며, 프로그램을 기록한 다른 컴퓨터 또는 그 저장매체일 수도 있다.The computer-readable recording medium recording a program for executing the intelligent service method for a simulator according to an embodiment of the present invention may be, for example, a ROM, a RAM, a CD-ROM, a magnetic tape, a floppy disk, an optical media storage device, or the like. There is this. In addition, a computer-readable recording medium recording an application, which is a program for executing a method of providing a competitive game, according to an embodiment of the present invention, may be an application store server, an application, or a web server associated with a corresponding service. It may be a storage medium (eg, a hard disk, etc.) included in an application provider server including a server, or the like, or may be an application providing server itself, or another computer recording a program or a storage medium thereof.

본 발명의 실시예에 따른 시뮬레이터용 지능형 서비스 방법을 실행시키기 위한 프로그램인 애플리케이션을 기록한 기록매체를 읽을 수 있는 시뮬레이터용 지능형 서비스 장치는, 일반적인 데스크 탑이나 노트북 등의 일반 PC 뿐만 아니라, 스마트 폰, 태블릿 PC 및 이동통신 단말기 등의 모바일 단말기를 포함할 수 있다.The intelligent service apparatus for a simulator capable of reading a recording medium recording an application which is a program for executing the intelligent service method for a simulator according to an embodiment of the present invention is not only a general PC such as a general desktop or a laptop, but also a smart phone and a tablet. It may include a mobile terminal such as a PC and a mobile communication terminal.

전술한 바와 같이 본 발명에 대하여 바람직한 실시예를 들어 상세히 설명하였지만, 본 발명은 전술한 실시예들에 한정되는 것이 아니고, 특허청구범위와 발명의 상세한 설명 및 첨부한 도면의 범위 안에서 여러 가지로 변형하여 실시하는 것이 가능하고 이 또한 본 발명에 속한다.As described above, the present invention has been described in detail with reference to preferred embodiments, but the present invention is not limited to the above-described embodiments, and various modifications are made within the scope of the claims and the detailed description of the invention and the accompanying drawings. It is possible to carry out by this and this also belongs to the present invention.

1 : 시뮬레이터용 지능형 서비스 시스템
11 : 카메라 12 : 마이크
13 : 뇌파측정기 14 : 입력부
20 : 멘트 출력부 100 : 시뮬레이터용 지능형 서비스 장치
110 : 정보 수집부 120 : 식별부
130 : 데이터 관리부 140 : 멘트 생성부
1: Intelligent service system for simulator
11: camera 12: microphone
13: electroencephalogram 14: input unit
20: cement output unit 100: intelligent service device for the simulator
110: information collecting unit 120: identification unit
130: data management unit 140: comment generation unit

Claims (16)

시뮬레이터를 조작하여 시뮬레이션 게임에 참가하는 시뮬레이션 참가자의 정보를 수집하는 제1정보수집기;
상기 시뮬레이션 게임을 관람하는 관람객의 정보를 수집하는 제2정보수집기;
상기 제1정보수집기 또는 상기 제2정보수집기로부터 시뮬레이션 참가자 또는 관람객의 정보를 수집하는 정보 수집부;
상기 정보 수집부에서 수집된 상기 정보로부터 상기 시뮬레이션 참가자 또는 관람객에게 제공할 멘트를 생성하는 멘트 생성부;
를 포함하고,
상기 제1정보수집기와 제2정보수집기 중 적어도 하나는 상기 시뮬레이터 주변에 설치된 펜스를 따라 주행하는 로봇에 설치된 시뮬레이터용 지능형 서비스 시스템
A first information collector for manipulating a simulator to collect information of a simulation participant participating in a simulation game;
A second information collector for collecting information of the viewers who watch the simulation game;
An information collector configured to collect information of a simulation participant or a visitor from the first information collector or the second information collector;
A comment generator for generating a comment to be provided to the simulation participant or the viewer from the information collected by the information collector;
Including,
At least one of the first information collector and the second information collector is an intelligent service system for a simulator installed in a robot traveling along a fence installed around the simulator.
제1항에 있어서,
상기 정보는, 상기 제1정보수집기와 제2정보수집기로부터 수신된 영상정보, 음성정보 중 적어도 하나로 이루어진 것을 특징으로 하는 시뮬레이터용 지능형 서비스 시스템
The method of claim 1,
The information, the intelligent service system for a simulator, characterized in that made of at least one of the image information, audio information received from the first information collector and the second information collector.
시뮬레이터를 조작하여 시뮬레이션 게임에 참가하는 시뮬레이션 참가자의 정보를 수집하는 제1정보수집기;
상기 시뮬레이션 게임을 관람하는 관람객의 정보를 수집하는 제2정보수집기;
상기 제1정보수집기 또는 상기 제2정보수집기로부터 시뮬레이션 참가자 또는 관람객의 정보를 수집하는 정보 수집부;
상기 정보 수집부에서 수집된 상기 정보로부터 상기 시뮬레이션 참가자 또는 관람객에게 제공할 멘트를 생성하는 멘트 생성부;
를 포함하고,
상기 제1정보수집기는 상기 시뮬레이션 참가자의 감성정보와 오감정보 및 뇌파정보 중 적어도 하나를 수집하고,
상기 제2정보수집기는 상기 시뮬레이터 주변에 설치된 펜스를 따라 주행하는 로봇에 설치되어 상기 관람객의 영상정보와 음성정보 중 적어도 하나를 수집하도록 이루어진 시뮬레이터용 지능형 서비스 시스템
A first information collector for manipulating a simulator to collect information of a simulation participant participating in a simulation game;
A second information collector for collecting information of the viewers who watch the simulation game;
An information collector configured to collect information of a simulation participant or a visitor from the first information collector or the second information collector;
A comment generator for generating a comment to be provided to the simulation participant or the viewer from the information collected by the information collector;
Including,
The first information collector collects at least one of emotion information, five sense information, and brain wave information of the simulation participant,
The second information collector is installed in a robot running along a fence installed around the simulator, the intelligent service system for a simulator configured to collect at least one of the viewer's image information and audio information.
제1항 또는 제3항에 있어서,
상기 정보 수집부에서 수집된 정보로부터 상기 참가자 또는 관람객이 회원인지 여부를 판단하는 식별부를 더 포함하고, 상기 멘트 생성부는 상기 식별부의 판단 결과를 이용하여 상기 멘트를 생성하는 것을 특징으로 하는 시뮬레이터용 지능형 서비스 시스템
The method according to claim 1 or 3,
And an identification unit for determining whether the participant or the visitor is a member from the information collected by the information collection unit, and the comment generation unit generates the comment using the determination result of the identification unit. Service system
제1항 또는 제3항에 있어서,
상기 멘트 생성부는,
상기 참가자가 복수인 경우 상기 참가자 각각에게 제공하기 위해 상기 복수의 참가자별로 서로 다른 멘트를 생성하거나,
상기 참가자와 관람객 각각에게 제공하기 위해 서로 다른 멘트를 생성하거나,
상기 관람객에게 제공하기 위해 현재 진행중인 시뮬레이션의 상황에 대한 멘트를 생성하는 것을 특징으로 하는 시뮬레이터용 지능형 서비스 시스템
The method according to claim 1 or 3,
The comment generating unit,
In the case of a plurality of participants, different comments are generated for each of the plurality of participants to provide to each of the participants,
Create a different comment for each of the participants and visitors,
Intelligent service system for a simulator, characterized in that to generate a comment on the situation of the current simulation to provide to the audience
제1항 또는 제3항에 있어서,
복수의 회원 정보를 저장하는 데이터 관리부를 더 포함하고;
상기 멘트 생성부는 상기 데이터 관리부에 저장된 회원 정보를 이용하여 상기 참가자에게 제공할 멘트를 생성하는 것을 특징으로 하는 시뮬레이터용 지능형 서비스 시스템
The method according to claim 1 or 3,
A data manager which stores a plurality of member information;
The comment generator generates a comment to be provided to the participant by using the member information stored in the data manager.
제6항에 있어서,
상기 참가자가 복수이고, 상기 멘트 생성부는 상기 복수의 참가자에 대한 회원 정보를 상기 데이터 관리부로부터 제공받아 상기 복수의 참가자 사이에 대한 사회적 관계를 판단하여, 상기 사회적 관계가 있는 것으로 판단된 경우 상기 사회적 관계에 대응하는 멘트를 생성하는 것을 특징으로 하는 시뮬레이터용 지능형 서비스 시스템
The method of claim 6,
When the participant is plural, and the comment generator receives member information of the plurality of participants from the data manager, the social relationship is determined between the plurality of participants. Intelligent service system for a simulator, characterized in that for generating a comment corresponding to
제1항 또는 제3항에 있어서,
상기 멘트 생성을 위한 데이터를 관리하는 데이터 관리부를 더 포함하고;
상기 참가자가 데이터 관리부에 저장된 회원이 아닌 경우에는, 상기 멘트생성부는 상기 데이터 관리부에 이미 저장되어 데이터를 이용하여 상기 참가자에게 제공할 멘트를 생성하는 것을 특징으로 하는 시뮬레이터용 지능형 서비스 시스템
The method according to claim 1 or 3,
A data manager for managing data for generating the comment;
If the participant is not a member stored in the data management unit, the comment generation unit generates a comment to be provided to the participant using data already stored in the data management unit.
삭제delete a) 시뮬레이터를 조작하여 시뮬레이션 게임에 참가하는 시뮬레이션 참가자의 정보를 수집하는 제1정보수집기와 상기 시뮬레이션 게임을 관람하는 관람객의 정보를 수집하는 제2정보수집기로부터 시뮬레이션 참가자 또는 관람객의 정보가 유선 또는 무선통신을 통해 서버 또는 클라우드 서버에 구비된 정보수집부에 수집되는 단계;
b) 상기 정보수집부에 수집된 정보로부터 상기 시뮬레이션 참가자 또는 관람객에게 제공할 멘트를 상기 서버 또는 클라우드 서버에 구비된 멘트 생성부에서 생성되는 단계;
c) 상기 멘트 생성부에서 생성된 멘트가 멘트 출력부를 통해 상기 참가자 또는 관람객에게 제공되는 단계;
를 포함하고,
상기 a) 단계에서 상기 정보수집부에 의해 수집되는 정보는, 상기 시뮬레이터 주변에 설치된 펜스를 따라 주행하는 로봇에 설치된 상기 제1정보수집기와 제2정보수집기로부터 수집된 정보를 포함하는 시뮬레이터용 지능형 서비스 방법
a) The information of a simulation participant or a visitor is wired or wireless from a first information collector which collects information of a simulation participant who participates in a simulation game by operating a simulator and a second information collector that collects information of a visitor who views the simulation game. Collecting through the communication information collection unit provided in the server or cloud server;
b) generating a comment to be provided to the simulation participant or spectator from the information collected by the information collecting unit in a comment generator provided in the server or cloud server;
c) providing the comment generated by the comment generator to the participant or the visitor through a comment output unit;
Including,
The information collected by the information collecting unit in step a) includes information collected from the first information collector and the second information collector installed in the robot running along the fence installed around the simulator. Way
a) 시뮬레이터를 조작하여 시뮬레이션 게임에 참가하는 시뮬레이션 참가자의 정보를 수집하는 제1정보수집기와 상기 시뮬레이션 게임을 관람하는 관람객의 정보를 수집하는 제2정보수집기로부터 시뮬레이션 참가자 또는 관람객의 정보가 유선 또는 무선통신을 통해 서버 또는 클라우드 서버에 구비된 정보수집부에 수집되는 단계;
b) 상기 정보수집부에 수집된 정보로부터 상기 시뮬레이션 참가자 또는 관람객에게 제공할 멘트를 상기 서버 또는 클라우드 서버에 구비된 멘트 생성부에서 생성되는 단계;
c) 상기 멘트 생성부에서 생성된 멘트를 멘트 출력부를 통해 상기 참가자 또는 관람객에게 제공되는 단계;
를 포함하고,
상기 제1정보수집기는 상기 시뮬레이션 참가자의 감성정보와 오감정보 및 뇌파정보 중 적어도 하나를 수집하고,
상기 제2정보수집기는 상기 시뮬레이터 주변에 설치된 펜스를 따라 주행하는 로봇에 설치되어 상기 관람객의 영상정보와 음성정보 중 적어도 하나를 수집하도록 이루어진 시뮬레이터용 지능형 서비스 방법
a) The information of a simulation participant or a visitor is wired or wireless from a first information collector which collects information of a simulation participant participating in a simulation game by operating a simulator and a second information collector that collects information of a visitor who views the simulation game. Collecting through the communication information collection unit provided in the server or cloud server;
b) generating a comment to be provided to the simulation participant or spectator from the information collected by the information collecting unit in a comment generator provided in the server or cloud server;
c) providing the comment generated by the comment generator to the participant or the visitor through a comment output unit;
Including,
The first information collector collects at least one of emotion information, five sense information, and brain wave information of the simulation participant,
The second information collector is installed on a robot running along a fence installed around the simulator, the intelligent service method for a simulator configured to collect at least one of the image information and audio information of the visitor
제10항 또는 제11항에 있어서,
상기 참가자가 복수인 경우, 상기 멘트 생성부는 상기 복수의 참가자에 대한 회원 정보로부터 상기 복수의 참가자 사이에 대한 사회적 관계를 판단하여, 상기 사회적 관계가 있는 것으로 판단된 경우 상기 사회적 관계에 대응하는 멘트를 생성하여 상기 멘트 출력부를 통해 상기 사회적 관계가 있는 것으로 판단된 복수의 참가자에게 동시에 제공하는 것을 특징으로 하는 시뮬레이터용 지능형 서비스 방법
The method according to claim 10 or 11, wherein
When there are a plurality of participants, the comment generator determines a social relationship between the plurality of participants from the member information of the plurality of participants, and when it is determined that the social relationship exists, the comment corresponding to the social relationship is determined. Intelligent service method for a simulator, characterized in that by simultaneously generating and providing to the plurality of participants determined to have the social relationship through the comment output unit
제10항 또는 제11항에 있어서,
상기 참가자가 복수인 경우, 상기 멘트 생성부는 상기 복수의 참가자별로 서로 다른 멘트를 생성하여 상기 멘트 출력부를 통해 상기 참가자에게 상기 시뮬레이션이 진행되는 동안 각각 제공하거나, 상기 복수의 참가자에게 서로 다른 멘트를 동시에 제공하는 것을 특징으로 하는 시뮬레이터용 지능형 서비스 방법
The method according to claim 10 or 11, wherein
When there are a plurality of participants, the comment generating unit generates different comments for each of the plurality of participants and provides them to the participants through the comment output unit during the simulation, or simultaneously provides different comments to the plurality of participants. Intelligent service method for simulators, characterized in that provided
제10항 또는 제11항에 있어서,
상기 멘트 생성부는 상기 참가자와 관람객에게 서로 다른 멘트를 생성하여 상기 멘트 출력부를 통해 상기 참가자와 관람객에게 각각 제공하는 것을 특징으로 시뮬레이터용 지능형 서비스 방법
The method according to claim 10 or 11, wherein
The ment generating unit generates a different ment to the participant and the spectator to provide the participant and the spectator through the ment output unit, respectively, characterized in that the intelligent service method
제10항 또는 제11항에 있어서,
상기 멘트 생성부는 상기 시뮬레이션 참가자가 시뮬레이터에 탑승을 안내하는 멘트를 생성하여 상기 멘트 출력부를 통해 상기 시뮬레이션 참가자의 탑승과정을 안내하는 것을 특징으로 하는 시뮬레이터용 지능형 서비스 방법
The method according to claim 10 or 11, wherein
The ment generating unit generates a ment for guiding the simulation participant to board the simulator and guides the boarding process of the simulation participant through the ment output unit.
제10항 내지 제15항 중 어느 하나의 항에 기재된 시뮬레이터용 지능형 서비스 방법을 수행하는 컴퓨터 프로그램이 기록된 기록매체A recording medium on which a computer program for performing the intelligent service method for a simulator according to any one of claims 10 to 15 is recorded.
KR1020170167529A 2017-02-10 2017-12-07 Intelligent service system, apparatus, method and computer readable medium for simulator KR102063581B1 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2018015159A JP6560375B2 (en) 2017-02-10 2018-01-31 Intelligent service system, apparatus and method for simulator
US15/886,377 US10596458B2 (en) 2017-02-10 2018-02-01 Intelligent service system, apparatus, and method for simulators
CN201810128982.0A CN108416618A (en) 2017-02-10 2018-02-08 Intelligent service system, apparatus and method for simulator

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR20170018487 2017-02-10
KR20170018495 2017-02-10
KR1020170018487 2017-02-10
KR1020170018495 2017-02-10

Publications (2)

Publication Number Publication Date
KR20180092805A KR20180092805A (en) 2018-08-20
KR102063581B1 true KR102063581B1 (en) 2020-01-09

Family

ID=63443329

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170167529A KR102063581B1 (en) 2017-02-10 2017-12-07 Intelligent service system, apparatus, method and computer readable medium for simulator

Country Status (1)

Country Link
KR (1) KR102063581B1 (en)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100927656B1 (en) * 2009-03-13 2009-11-20 (주) 골프존 Simulator for realistic golf and control method for the same

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100927656B1 (en) * 2009-03-13 2009-11-20 (주) 골프존 Simulator for realistic golf and control method for the same

Also Published As

Publication number Publication date
KR20180092805A (en) 2018-08-20

Similar Documents

Publication Publication Date Title
Jalal et al. Students’ behavior mining in e-learning environment using cognitive processes with information technologies
JP6888096B2 (en) Robot, server and human-machine interaction methods
US11700420B2 (en) Media manipulation using cognitive state metric analysis
Foster et al. The MuMMER project: Engaging human-robot interaction in real-world public spaces
Gligorić et al. Smart classroom: real-time feedback on lecture quality
US9159362B2 (en) Method and system for detecting and recognizing social interactions in a video
JP7321437B2 (en) Information processing device, information processing method, and program
JP6560375B2 (en) Intelligent service system, apparatus and method for simulator
US20200074154A1 (en) Image analysis using a semiconductor processor for facial evaluation in vehicles
US20210134146A1 (en) Tracking and alerting traffic management system using iot for smart city
Komatsubara et al. Estimating children’s social status through their interaction activities in classrooms with a social robot
KR102063581B1 (en) Intelligent service system, apparatus, method and computer readable medium for simulator
US20190050881A1 (en) Method and apparatus for rewarding reaction of simulation participant
Jianwattanapaisarn et al. Emotional characteristic analysis of human gait while real-time movie viewing
Yu et al. Speaking style based apparent personality recognition
Nilugonda et al. A survey on big five personality traits prediction using tensorflow
Hou Deep learning-based human emotion detection framework using facial expressions
Masmoudi et al. Meltdowncrisis: Dataset of autistic children during meltdown crisis
Huang et al. Research on learning state based on students’ attitude and emotion in class learning
O’Connor Black agency and the ongoing struggle for Black educational opportunity
Eng et al. An investigation of collective human behavior in large-scale mixed reality spaces
Matsufuji et al. A System of Associated Intelligent Integration for Human State Estimation
Jianwattanapaisarn et al. Investigation of real-time emotional data collection of human gaits using smart glasses
Akash et al. Monitoring and Analysis of Students’ Live Behaviour using Machine Learning
KR20180090224A (en) Model Practice System Comprising Audition Function

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant