WO2020027531A1 - 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 방법 및 시스템 - Google Patents

실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 방법 및 시스템 Download PDF

Info

Publication number
WO2020027531A1
WO2020027531A1 PCT/KR2019/009438 KR2019009438W WO2020027531A1 WO 2020027531 A1 WO2020027531 A1 WO 2020027531A1 KR 2019009438 W KR2019009438 W KR 2019009438W WO 2020027531 A1 WO2020027531 A1 WO 2020027531A1
Authority
WO
WIPO (PCT)
Prior art keywords
attraction
content
user
virtual experience
live
Prior art date
Application number
PCT/KR2019/009438
Other languages
English (en)
French (fr)
Inventor
강두환
Original Assignee
브이알카버 주식회사
강두환
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 브이알카버 주식회사, 강두환 filed Critical 브이알카버 주식회사
Publication of WO2020027531A1 publication Critical patent/WO2020027531A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00—Animation
    • G06T13/20—3D [Three Dimensional] animation
    • G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B9/00—Simulators for teaching or training purposes
    • G09B9/02—Simulators for teaching or training purposes for teaching control of vehicles or other craft
    • G09B9/04—Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles

Definitions

  • the present invention relates to a virtual experience technology using the attraction, more specifically, to provide a display image of the attraction by inputting the live content on-site provided by the remote provider through a content server in a download or streaming manner, the user of the attraction It controls the mechanical component and the user avatar in the image based on the input, and outputs an interaction message according to the result of comparing the image trajectory and the user avatar trajectory during the virtual experience, thereby participating in a remote racing scene in real time.
  • the present invention relates to an attraction racing virtual experience method and system based on new photorealistic content capable of providing an active virtual experience.
  • attraction is a term that refers to a play equipment installed in an amusement park, etc.
  • the attraction is provided to the supplier by providing various combinations of rotational motion, tilt motion, constant velocity motion, and acceleration movement while the supplier is on board. It is a term referring to a mechanism for providing.
  • a virtual reality attraction has been developed that enables a supplier to drive a vehicle in a mechanical manner and at the same time provides an image according to a predetermined scenario to a supplier through a display device to experience immersive virtual reality.
  • HMD head mount display
  • VR virtual reality
  • the machine driving data for operating the machine portion of the attraction and the virtual experience background data for displaying on the display portion are programmed separately in response to the supplier operation.
  • the virtual experience background data is usually generated based on computer graphics (CG), even if it includes a live image.
  • the attraction users need to adjust the movements of the mechanical components to match and match the motion of the image. have.
  • the personal due diligence content includes the unpredictable movement of the individual who produced the video, it is very difficult for the attraction user to have the attraction users actively adjust and match the attraction according to the unpredictable movement of the personal due diligence image. High coordination skills are required. Therefore, there is a problem that it is difficult for the ordinary public to experience the field experience by actively adjusting the attraction.
  • Patent Document 0001 Republic of Korea Patent No. 10-1748401 (June 16, 2017 announcement)
  • Patent Document 0002 Republic of Korea Patent Publication No. 10-2017-0115170 (published 17 October 2017)
  • Patent Document 0003 Republic of Korea Patent No. 10-1501632 (announced on March 12, 2015)
  • Patent Document 0004 Republic of Korea Patent Publication No. 10-2018-0068123 (Published June 21, 2018)
  • the inventors of the present invention solve the problems of the conventional attraction racing virtual experience technology described above, and seek a technology that can easily provide an active virtual experience such as participating directly in the field by allowing the attraction user to actively adjust the attraction.
  • the scene is taken and the live broadcast or upload is provided via a remote content server.
  • the scene is downloaded or streamed from the attraction to provide a display image of the attraction.
  • the attraction user can feel very similar to a participant who directly participates in a racing competition such as a remote cycle race or a car race.
  • the idea was to be able to experience an active virtual experience.
  • the present invention which is provided based on this concept, provides a display image of an attraction by inputting live-action content of a site provided by a remote provider through a content server in a download or streaming manner, and provides a mechanical component based on the user input of the attraction. And control the user's avatar in the image, and output the interaction message according to the result of comparing the image trajectory and the user's avatar trajectory during the virtual experience, thereby enabling an active virtual experience such as actually participating in a remote racing scene.
  • the purpose of the present invention is to provide an attraction racing virtual experience method and system based on new photo-realistic content.
  • the present invention provides a video provider for shooting a scene while driving according to a scenario that is predicted together in advance along a racing path in a racing competition scene such as a cycle or a car race, and broadcasting the content through a content server in real time.
  • the user can remotely experience a cycle race scene in Europe, such as Korea, in real time. It is aimed to provide an attraction racing virtual experience method and system based on new photo-realistic content that can provide an active virtual experience such as participating in a remote racing site in real time.
  • This object is achieved by an attraction racing virtual experience method and system based on live action content provided in accordance with the present invention.
  • the attraction racing virtual experience method based on the photo-realistic content provided according to an aspect of the present invention is a attraction racing virtual experience method, which includes meta-images including real-time image data and time, position, and attitude information of the point-in-time image data by a mobile terminal.
  • Due diligence content generating step for generating due diligence content including data; An actual content uploading step of the mobile terminal uploading the actual content to a remote content server; An actual content input step in which an attraction downloads or streams the actual content from the content server;
  • the attraction displays the image data of the live-action content as a virtual experience background image, simultaneously controlling the mechanical component for mechanically moving the part of the user in accordance with the user's input to the attraction.
  • the user avatar controlled according to the user's input on the attraction is synthesized and displayed on the virtual experience background image, and the viewpoint trajectory of the background image is compared with the viewpoint trajectory of the user avatar according to the metadata of the live-action content. And a virtual experience play step of outputting a predetermined interaction message according to the method.
  • the generating of the due diligence content may include generating the due diligence content while the mobile terminal travels according to a predetermined driving scenario along a predetermined route.
  • the uploading of the live-action content may include uploading and broadcasting the live-action content generated by the mobile terminal to a remote content server in real time, and the inputting of the live-action content may include at least one attraction. And accessing the content server to live stream the live content that is being broadcast.
  • the uploading of the live-action content may include: searching and registering the uploaded live-action content based on a classification item including a type of a passenger of an attraction and a route and scenario information included in the live-action content. It may further comprise providing to.
  • Attraction racing virtual experience attraction based on the live-action content is an attraction racing virtual experience attraction, the vehicle for the user to enter the user command boarding;
  • a user is outputted to display the image data of the input live-action content as a virtual experience background image, converts the user command into a control command according to a predetermined conversion algorithm, and outputs the result;
  • An attraction controller for adjusting an avatar and comparing the viewpoint trajectory of the background image according to the metadata of the live-action content with the viewpoint trajectory of the avatar, and outputting an interaction message predetermined according to the result;
  • a mechanical component for operating in accordance with a control command output from the attraction controller to mechanically move the passenger boarding the user;
  • a display for displaying a composite image of the background image and the user avatar output from the attraction controller.
  • the occupant may include a boarding unit on which the user boards and an operation unit for inputting a virtual experience command for the user to adjust speed and direction;
  • the mechanical component may include a turn component, a pitching component and a rolling component that vibrate the vehicle mechanically in three dimensions, and a vibration component that applies vibration.
  • the mechanical component may further include a blower capable of blowing wind to the vehicle.
  • the passenger vehicle is preferably in a form that mimics at least a part of any one of the riding device that the user can move by manpower or electric power.
  • the display may include a head mount display (HMD).
  • HMD head mount display
  • the live-action content may be input by real-time streaming that the image provider is generated while traveling according to a predetermined driving scenario along a predetermined route and is being broadcast in real time through the content server.
  • the live-action content may include a 3D image or a 360 degree VR (virtual reality) image.
  • the attraction racing virtual experience system based on the live action content is an attraction racing virtual experience system, which is configured to generate live action content while driving according to a predetermined driving scenario along a predetermined route.
  • a content server that provides the mobile terminal to upload the live-action content and registers the uploaded-real-time content to provide a search;
  • a passenger vehicle in which the user boards and inputs a virtual experience manipulation command, wherein the passenger vehicle receives the virtual experience content and displays the virtual experience image based on the virtual experience content to the user in response to the input virtual experience manipulation command.
  • an attraction configured to mechanically move the attraction, wherein the attraction is configured to mechanically display a portion of the user's boarding according to a user's input to the attraction while displaying the image data of the live-action content as a virtual experience background image.
  • the user avatar controlled according to the input of the user in the attraction is synthesized and displayed on the virtual experience background image, and the viewpoint trajectory of the background image according to the metadata of the live-action content is displayed.
  • the live-action content input to the attraction may be real-time broadcast content generated by the mobile terminal and uploaded and broadcasted to the content server in real time.
  • the content server input the actual content of the site provided by the remote provider in a download or streaming manner to provide a display image of the attraction, and based on the user input of the attraction, the machine component and the user avatar in the image Controls and outputs an interaction message according to the result of comparing the image trajectory and the user's avatar trajectory during the virtual experience, thereby creating an active virtual experience in which the attraction user actually participates as a participant in the remote racing scene. Can provide.
  • the image provider may photograph the scene while driving the scene participants along a racing route along a racing route in a racing competition scene such as a cycle or a motor vehicle race, and broadcast it through a content server in real time.
  • Provide the display image of the attraction by inputting the broadcasted real-time action content in at least one attraction in a streaming manner, and adjust the machine part of the attraction and the displayed user avatar based on the user input of the attraction,
  • the image By configuring the image to output the interaction message according to the result of comparing the image trajectory and the user's avatar trajectory during the process, for example, a plurality of users in various places, such as Korea, can be remotely controlled in real time. In such a way that it can be experienced, it is possible to provide an active virtual experience such as participating in real time as a participant in the racing scene of.
  • the image provider edits the photographed images of live-action contents produced by a general public or a video relay expert using a mobile terminal such as a smartphone or a handheld camera device while driving a car or driving a bicycle. After that, or uploaded to a remote content server in real time or broadcast in real time, as a result, due to the fact that the actual content is downloaded or streamed through the content server, a predetermined profit may be provided to the image provider.
  • an operator operating a virtual experience store for example, by installing a plurality of attractions and providing them for use by a general customer, can secure the content for attraction racing virtual experience simply by downloading or streaming from a content server. Therefore, various kinds of attraction racing virtual experience contents can be provided at low cost and easily.
  • the content server may be configured for, for example, vehicle types such as cars, skis, cycles, bobsleighs, and / or racing types such as mountains, seas, cities, stadiums, or the like, for live-action content uploaded or streamed by a video provider.
  • vehicle types such as cars, skis, cycles, bobsleighs, and / or racing types such as mountains, seas, cities, stadiums, or the like
  • the attraction is categorized into a predetermined item such as a region, registered and provided to a search, and accordingly, the attraction user can conveniently search, select, download, or stream live-action content according to the type of attraction and according to his or her taste.
  • Content can be shared in a variety of ways.
  • FIG. 1 is a schematic diagram showing the configuration of an attraction racing virtual experience system based on photorealistic content according to an embodiment of the present invention.
  • Figure 2 is a schematic block diagram for explaining in detail the function of the attraction controller of the attraction racing virtual experience attraction based on the actual content according to an embodiment of the present invention.
  • FIG. 3 is a schematic block diagram for explaining in detail the control of a vehicle and a mechanical component during the construction of an attraction racing virtual experience attraction based on live action content according to an embodiment of the present invention
  • FIG. 4 is a schematic diagram illustrating the appearance of a vehicle steering wheel-type passenger vehicle and a mechanical component for mechanically moving the attraction in the attraction racing virtual experience attraction based on the actual content according to an embodiment of the present invention.
  • FIG. 5 is a schematic diagram for explaining the three-dimensional movement of the mechanical components of the attraction illustrated in FIG.
  • FIG. 6 is a schematic block diagram illustrating a configuration of a mobile terminal for generating live action content in an attraction racing virtual experience system based on live action content according to an embodiment of the present invention.
  • FIG. 7 is a schematic flowchart illustrating a process of generating due diligence content in the mobile terminal illustrated in FIG. 6.
  • FIG. 8 is a schematic block diagram illustrating a configuration of a content server in an attraction racing virtual experience system based on photorealistic content according to an embodiment of the present invention.
  • FIG. 9 is a schematic flowchart illustrating a process of generating, uploading to a content server and providing a search to the content server in the attraction racing virtual experience method based on the actual content according to an embodiment of the present invention
  • FIG. 10 is a schematic flowchart illustrating an operation of attraction in an attraction racing virtual experience method based on photorealistic content according to an embodiment of the present invention.
  • 11A and 11B are schematic flowcharts illustrating a speed adjustment process in an attraction according to an embodiment of the present invention.
  • FIG. 12 is a schematic flowchart illustrating a pitching adjustment process in an attraction according to an embodiment of the present invention.
  • FIG. 13 is a schematic flowchart illustrating a change of direction process in an attraction according to an embodiment of the present invention.
  • 14A to 14C are schematic flow charts illustrating a flow rate adjusting process in an attraction according to an embodiment of the present invention.
  • 15 is a schematic flowchart illustrating a vibration motor operation process in an attraction according to an embodiment of the present invention.
  • 16 is a schematic flowchart illustrating a motor-based turning operation process in an attraction according to an embodiment of the present invention.
  • 17A and 17B are schematic flowcharts illustrating a drift driving control process in an attraction according to an embodiment of the present invention.
  • FIG. 1 is a schematic diagram showing the configuration of an attraction racing virtual experience system based on live-action content according to an embodiment of the present invention.
  • the attraction racing virtual experience system 100 based on the actual content includes a mobile terminal 120, a content server 140, and an attraction 160.
  • 'attraction racing virtual experience' refers to a virtual experience in the form of racing, driving, or racing performed by attraction. Attractions, on the other hand, include a part of the mechanism that the user is riding in the real world (ie, a passenger plane) and a hardware part for mechanically moving the passenger vehicle in order to allow a virtual experience participant, ie, the user, to experience the virtual reality as closely as possible. And a video component (eg, a display device such as an HMD, a sound output device, etc.) for displaying a video / sound of an interaction process between a virtual experience scenario and a user.
  • a video component eg, a display device such as an HMD, a sound output device, etc.
  • the term 'racing' as used herein refers to not only automobile racing, but also a variety of fields, such as rides, boats, cycles, skis, snowboards or bobsleds, in which a user rides wheels on a road, road, water, On a sliding surface such as ice, snow, etc., it can be interpreted as a wide range that includes the racing of devices that can move with attraction, gravity and / or power.
  • the mobile terminal 120 is an apparatus for generating live-action content in a form that can be used as virtual experience content in the attraction 160.
  • the mobile terminal 120 is, for example, a computing device that can be carried or carried by an image provider, and can be implemented, for example, including a general-purpose computing device such as a smartphone, a tablet PC (personal computer), and a camera device connected thereto. That is, the supplier installs an application that implements the function of generating photorealistic content as virtual experience content for attraction racing virtual experience on his smartphone or tablet PC, and for example, while driving a car, the smartphone's built-in camera or smartphone Photorealistic images may be generated by using an external camera connected to a wired or wireless network to generate live photo content while traveling along a predetermined travel route.
  • mobile terminal 120 may be a dedicated device configured for purposes of the present invention.
  • the actual content includes, in particular, live image data including a moving viewpoint and metadata based on time, position, and attitude information of the viewpoint.
  • 'viewpoint' is generally used in a similar meaning to a viewpoint, that is, a viewpoint, of a character or an object adjusted according to a command input by a user in a virtual experience image, such as a first-person view or a third-person view.
  • the live-action content according to the present invention includes a feature such that the viewpoint, that is, the point of view, is continuously moved according to time.
  • the moving point of view is obtained by capturing a live-action image in the live-action content generated using the mobile terminal 120. It may mean the viewpoint of the camera.
  • the supplier's viewpoint or the viewpoint of the cycle is due diligence. It may correspond to the viewpoint of the image.
  • the due diligence content is characterized in that the mobile terminal 120 is generated while traveling according to a predetermined driving scenario along a predetermined route.
  • This feature makes it possible to provide foreseeable routes and driving scenarios for the user coordinating the attraction.
  • the image provider may generate live action content by designating 'a specific path of the European cycle competition, which takes place from August 1 to August 7, 2018'.
  • Image providers can also generate photorealistic content based on pre-expected and planned scenarios to run at certain speeds, for example, in the top 1-20 top athletes, at certain intervals of the cycle.
  • Such a predetermined route and a predetermined driving scenario may be provided as a classification criterion when classifying due diligence content in the content server. Accordingly, the attraction user can search and select live-action content having a route and a driving scenario according to his or her taste and level.
  • the mobile terminal 120 may be configured of at least one terminal, and the mobile terminal 120 may generate photorealistic content photographed while driving at different speeds according to a predetermined driving scenario along a predetermined path.
  • the mobile terminal 120 may generate due diligence content including a plurality of groups based on the speed.
  • the plurality of mobile terminals 120 may generate due diligence content including a higher group, a median group, a lower group, etc. for each speed, and each group (the upper group, the middle group, the lower group, etc.) Content of the mobile terminal (player) may be included.
  • the content server 140 is implemented as a server device to which the mobile terminal 120 and the attraction 160 can connect, for example in a web environment of the Internet.
  • the content server 140 provides a service for uploading live-action content to the mobile terminal 120, and on the other hand, the attraction 160 provides a service to search for, select, download, or stream desired live-action content.
  • the content server 140 may generate a revenue by charging an attraction user or adding an advertisement according to a download or a streaming, for example, and provide a part of the revenue to the image provider.
  • the attraction 160 includes a passenger vehicle in which a user boards a virtual experience manipulation command.
  • the attraction 160 may receive the live content by accessing the content server 140 to search for, select and download desired live content or stream in real time.
  • Attraction 160 controls a mechanical component to display a background image based on input photorealistic content, for example, on an HMD worn by the user while simultaneously mechanically moving the lying, sitting or standing vehicle in response to the input user command.
  • the user avatar controlled according to the user command may be combined with the displayed image and output.
  • the attraction 160 may download or use live streaming content from the remote content server 140 through a communication network such as a wired or wireless Internet.
  • the live-action content includes metadata that defines the viewpoint of the image together with the captured image data and / or sound data.
  • the attraction 160 uses the image data of the photo-realistic content as the displayed virtual experience background image, and compares the viewpoint trajectory of the background image based on the metadata of the photo-realistic content with the viewpoint trajectory of the user avatar based on the user input.
  • the virtual experience proceeds by outputting one of the interaction messages stored in advance. For example, when the speed of the avatar according to the user command is smaller than the speed of the viewpoint of the video background, an interaction message "behind. Speed up!” May be output to the user through the display or the speaker.
  • the attraction 160 selects one of a plurality of groups included in the due diligence content based on the viewpoint trajectory of the user avatar, and views and traces the viewpoint of the user avatar among the speeds of the at least one mobile terminal 120 included in the selected group.
  • the user avatar is synthesized and displayed on the viewpoint trajectory of the background image according to the metadata of the photographed content captured by the mobile terminal 120 having less difference.
  • the attraction 160 may operate in the user assistance mode.
  • the user assistance mode refers to a mode in which the user avatar is assisted by a user's request when the user does not include the actual content generated in the mobile terminal 120 according to the speed, the upper group, the middle group, or the lower group. .
  • the attraction 160 may control the mechanical component to assist the speed of the user avatar when operating in the user assistance mode. Specifically, the attraction 160 compares the average value of the speeds of the at least one mobile terminal included in the selected group among the plurality of groups with the speed value of the user avatar according to the user input to assist the calculated speed difference value. Can be controlled.
  • the attraction 160 may control the mechanical component to assist the adjustment angle of the user avatar when operating in the user assistance mode.
  • the attraction 160 compares an average value of each of turn, pitching and rolling angles of at least one mobile terminal included in a selected group among the plurality of groups with each turn, pitching, and rolling angle of the user avatar according to a user input.
  • the mechanical component can be controlled to assist the calculated angle difference value.
  • FIG. 2 is a schematic block diagram for explaining in detail the function of the attraction controller during the construction of the attraction racing virtual experience attraction based on the actual content according to an embodiment of the present invention.
  • the attraction 200 may include a passenger vehicle 210, a communication module 220, an attraction controller 230, a mechanical component 240, an HMD, and the like. It includes a sound output unit 260 that may include.
  • the passenger plane 210 is a mechanical part for a user to enter a virtual experience operation command by boarding, and will be described in more detail with reference to FIGS. 3 to 5 below.
  • the boarding device 210 includes a boarding means, such as a chair on which the user boards, and in particular, a manipulation means for inputting a user command for adjusting the speed and direction when the virtual experience player adjusts the viewpoint of the user avatar of the virtual experience image. , Steering wheel, accelerator pedal, brake pedal, etc.).
  • the overall shape of the vehicle 210 or the form of the operation means may be configured similar to the specific vehicle type, for example, car, skiing, cycling, bobsled, airplane It may have a form that mimics at least a portion of any one of a variety of manpower or electric power movable vehicle including.
  • the communication module 220 includes, for example, a communication means capable of accessing a remote content server through a wired or wireless Internet and downloading or real-time streaming of the actual content to the attraction controller 230.
  • the attraction controller 230 converts the user command input by the passenger vehicle 210 into a control command for controlling the mechanical component, and outputs the converted command. Furthermore, the attraction controller 230 is based on the actual content input from the remote content server and the user command input by the user. And a processing unit configured to output an image and a sound to the image output unit 250 and the audio output unit 260.
  • the attraction controller 230 separates image data and metadata from the live-action content input through the communication module 220, and the image data is displayed on the image output unit 250 as a virtual experience background image 252.
  • the metadata is referred to as a viewpoint of the background image.
  • the attraction controller 230 may perform a mechanical input (for example, depressing an accelerator pedal, depressing a brake pedal, turning a steering wheel, etc.) operated by a user through the passenger vehicle 210 according to a pre-programmed algorithm.
  • Command e.g., start, stop, speed increase command, speed deceleration command, left turn command, right turn command, etc.
  • control command speed
  • the machine component 250 Command for increasing / deceleration motor operation control, actuator operation control for tilting the vehicle to the left, and the like.
  • the passenger vehicle 210 may include a chair-shaped seat in which a user may sit, an accelerator pedal and a brake pedal configured to adjust the speed of the user, and a steering wheel in which the user may adjust the direction. It may be provided with an operation unit including a.
  • the user may enter a command to adjust the speed by placing the foot on the accelerator pedal or brake pedal and stepping or releasing, and at the same time, a command to adjust the direction of travel by moving the handle. You can enter Such an input command may be generated as a control command for controlling the operation of the electric motor causing a three-dimensional motion or vibration of the vehicle according to a hardware control algorithm that is preprogrammed by the attraction controller 230.
  • the attraction controller 230 may generate user viewpoint data based on the generated control command data, and compare the generated user viewpoint data with the image viewpoint data generated based on the actual content. The comparison result is used to output the interaction message. It also compares the speed of the background view based on the actual content with the speed of the avatar based on the user's command. If the result does not occur, an interactive message such as "I am doing well, great" is output to the user. Can be.
  • the attraction controller 230 synthesizes the image of the user avatar 254 generated based on the trajectory data of the user's viewpoint calculated based on the user command for each frame on the background 254 frame derived from the input photorealistic content.
  • the synthesized frames may be output to be displayed on the image output unit 250.
  • the mechanical component 240 is a means for mechanically moving the occupant 210 by operating in accordance with a control command output from the attraction controller 230 and further described below with reference to FIG. 3.
  • the mechanical component 250 can comprise drive means such as a plurality of motors to cause the occupant 210 to be mechanically rotated in three dimensions.
  • the mechanical component 240 may further include a blower that outputs wind at a higher speed as the speed increases to increase the user's feeling level.
  • the image output unit 250 may include, for example, a display that can be worn by a user, such as an HMD, and the audio output unit 260 may be a speaker device such as an earphone or a 7.1 channel.
  • FIG. 3 is a schematic block diagram illustrating in detail the control of the vehicle and the mechanical component during the construction of the attraction racing virtual experience attraction based on the actual content according to an embodiment of the present invention.
  • the attraction 300 includes a passenger plane 301-307, an attraction controller 311 and a mechanical component 321-327, among which components described in FIG. 2 for simplicity of explanation. Some are omitted.
  • the rides 301-307 include a ride 301, which may be in the form of a chair where a user can sit, for example, as illustrated in FIG. 4, and input a user command to adjust speed, direction, and the like.
  • a ride 301 which may be in the form of a chair where a user can sit, for example, as illustrated in FIG. 4, and input a user command to adjust speed, direction, and the like.
  • an accelerator pedal 303, a deceleration or brake pedal 305, and a direction change handle 307 are included.
  • the user commands input by these operation sections 303-307 can be converted into control commands for controlling the mechanical components 321-327 by the attraction controller 311.
  • Mechanical components 321-327 include turn component 321, pitching component 323, rolling component 325, vibration component 327, blower 329 in the illustrated example.
  • the turn component 321 may be configured such that, for example, the vehicle 301 is in a horizontal direction, for example, in a range of 0 to 30 degrees with respect to the up and down direction (see Z axis in FIG. 5) based on the user who boards the vehicle 301.
  • the turn component 321 may be controlled to rotate the vehicle 301 in response to the user turning the steering wheel 307 when it is necessary to change a direction to drive the curve trajectory during the racing virtual experience.
  • the rolling component 323 is a component that operates to reciprocate by, for example, 0-5 degrees about the front and rear direction (see X axis in FIG. 5). Such a rolling motion can be made to feel a sense of rapid rotation by tilting the boarding unit 301 in which the user sits in the rapid rotation section.
  • the pitching component 325 is a component that operates to reciprocate by, for example, 0-5 degrees about the left and right direction (see Y-axis of 5), which is used to back and forth to give a sense of sensation in case of a sudden or collision. Can operate to tilt 301.
  • the vibratory component 327 can be controlled to give a corresponding feeling in starting or stopping, crunching or crashing.
  • the blower 329 may be controlled to output a weak wind when the speed is small, and to output a strong wind when the speed is large, in order to give a sense according to the magnitude of the running speed.
  • FIG. 4 is a schematic diagram illustrating the appearance of a vehicle steering wheel-type passenger vehicle and a mechanical component for mechanically moving the attraction in the attraction racing virtual experience attraction based on the actual content according to an embodiment of the present invention.
  • FIG. 4 an example of an attraction 400 for a car racing virtual experience is shown. This includes a passenger box 401-409 and a hardware box 410 incorporating the attraction gaming controller and mechanical components.
  • the vehicle 401-409 is a chair 401 in which a user can sit, and an accelerator pedal 403 and a brake pedal 405 as an operation unit for inputting a user command by the user.
  • Handle 407. are all fixed on the rotating plate 409 and are configured to move together as the rotary plate 409 moves.
  • the rotating plate 409 and the components fixed thereto can be mechanically moved by the hardware box 410 disposed thereunder.
  • the hardware box 410 may include mechanical components such as a turn component, a rolling component, a pitching component, a vibration component, and a printed circuit board mounted with an attraction gaming controller for controlling them, as shown in FIG. 3. Can be.
  • the hardware box 410 can be moved in three dimensions by the operation of the built-in electric motor, such that the rotating plate 409 is moved in three dimensions, and finally the passenger compartment moving with the rotating plate 409
  • the user sitting at 401 may feel that they are actually driving a car with the help of images and sound during the virtual experience.
  • FIG. 5 is a schematic diagram for explaining the three-dimensional movement of the mechanical components of the attraction illustrated in FIG. 4.
  • the hardware box 500 may include a turn plate 511, a main box 513, an intermediate plate 515, an elastic support 517, and a base plate 519 in order from above.
  • the turn plate 511 may be configured to be rotatable left and right, for example, in a range of 0-5 degrees with respect to the vertical axis A with respect to the main box 513 and the intermediate plate 515.
  • the main box 513 houses various elements such as a plurality of drive motors constituting a mechanical component therein, and the intermediate plate 515 or the base plate (about the vertical axis A as a whole together with the intermediate plate 515). 519 may be configured to rotate left and right.
  • the range of left and right rotation about the vertical axis may provide various rotation effects by including the primary rotation range by the turn plate 511 and the secondary rotation range by the main box 513.
  • the range inclined left and right about the X axis is defined by the height of the elastic support 517 disposed between the base plate 519 and the intermediate plate 515, for example, to the user when traveling in a curved section. It can provide a tilting effect.
  • the pitching motion oscillating back and forth as a result by rotating about the axis (Y axis) in the left and rear direction around the user is illustrated.
  • the turn plate 511, the main box 513 and the intermediate plate 515 can be tilted back and forth around the Y axis as a whole, and this pitching motion is similar to the base plate 519 and the intermediate plate (when rolling motion). It may be elastically supported by an elastic support 517 disposed between the 515.
  • the range inclined back and forth about the Y axis is defined by the height of the elastic support 517 disposed between the base plate 519 and the intermediate plate 515, such as sudden start, stop or collision It can provide the user with a realistic feeling in the case of a smooth speed change.
  • FIG. 6 is a schematic block diagram illustrating a configuration of a mobile terminal for generating live action content in an attraction racing virtual experience system based on live action content according to an embodiment of the present invention.
  • a mobile terminal 610 which may be a smartphone, for example, is a computing device including a processor, a memory, and the like, and may have a built-in camera or an external camera such as a 360-degree camera 630.
  • the electronic device may include a timer 615 for detecting time, a GPS sensor 613 for detecting a position, and a gyro sensor 617 for detecting a posture.
  • the mobile terminal 610 is installed with an application (or referred to as an 'app') 611 configured to generate photorealistic content according to the present invention, and uploading the generated photorealistic content to a remote content server through, for example, wired or wireless Internet. It includes a communication module 619 for.
  • FIG. 7 is a schematic flowchart illustrating a process of generating due diligence content in the mobile terminal illustrated in FIG. 6.
  • FIG. 7 a process in which an application 710 corresponding to the app 611 of FIG. 6 generates live action content 720 for attraction racing virtual experience is illustrated. While the live video data 707 is generated by the camera, the time data 701 and the viewpoint (viewpoint) of the corresponding video frame, that is, the position data 703 and the posture data of the mobile terminal, are generated by the corresponding sensors. 705 may be generated. The application 710 may use the data to generate the velocity data 712 and generate metadata 714 representing the viewpoint of the finally captured real-time image data.
  • the image data 707, metadata 714 defining the viewpoint of the image data, and classification information 716 which can be referred to when classifying the actual photo content 720 to be finally generated are used. Due diligence content 720 may be generated.
  • the classification information 716 may be made of text data that can be stored before the user generates the image data or input when editing the photographed image. For example, route information and / or driving scenario in which live-action content is generated. And the like.
  • FIG. 8 is a schematic block diagram illustrating a configuration of a content server in an attraction racing virtual experience system based on photorealistic content according to an embodiment of the present invention.
  • the content server 800 may include a receiver 810, a first storage 820, a register 830, a second storage 840, and a provider 850.
  • the receiver 810 receives the live content uploaded from the mobile terminal.
  • the first storage unit 820 stores the actual content uploaded through the receiver 810.
  • the registration unit 830 filters the actual content and classifies and registers the categorized content into a predetermined category including a driving route or a scenario.
  • the second storage unit 840 stores the registered live-action content.
  • the provider 850 provides the registered live-action content to a search and can be downloaded or streamed as an attraction.
  • the content server 800 may upload the uploaded live-action content to the type of passengers of the attraction (e.g., cars, skis, cycles, bobsleighs, etc.), and / or driving environment information (e.g., a vehicle-only road) Can be configured to provide a search after classifying and registering based on a category or a classification item including a cycle stadium, a mountain trail, a ski resort, a bobsled stadium, a car racing road, etc.), a driving scenario (a top right, a middle right, a bottom right, etc.).
  • a category or a classification item including a cycle stadium, a mountain trail, a ski resort, a bobsled stadium, a car racing road, etc.
  • a driving scenario a top right, a middle right, a bottom right, etc.
  • FIG. 9 is a schematic flowchart illustrating a process of generating, uploading to a content server and providing a search to the content server in the attraction racing virtual experience method based on the actual content according to an embodiment of the present invention.
  • the attraction racing virtual experience method 900 based on the photo-realistic content may include generating photo-realistic content in a mobile terminal (901), wherein the mobile terminal connects to a content server and uploads the photo-realistic content to a content server.
  • the content server filters the uploaded actual content, classifies and registers the content according to a predetermined category (905), and the content server provides the registered actual content to a search (907), and accesses the content server. Searching for, selecting, and downloading or streaming the actual live content, which is classified as having a category and feature desired by the user using the attraction racing virtual experience device (909), and the attraction racing virtual using the live content that is downloaded or streamed. Playing the experience (911).
  • FIG. 10 is a schematic flowchart illustrating an operation process of an attraction in the attraction racing virtual experience method based on the actual content according to an embodiment of the present invention.
  • the attraction racing virtual experience method 1000 based on the live action content includes the steps of starting a virtual experience play in an attraction ( 1001); Attraction (1003) separating the image data and the metadata of the live-action content; Displaying the separated image data as a virtual experience background image (1005); Based on the input of the user who rides the attraction, it controls the mechanical components for moving the part of the ride mechanically and simultaneously creates a user avatar controlled according to the input of the user who rides the attraction and displays it by synthesizing it with the virtual experience background image.
  • the video background is output while the user inputs a user command using the steering wheel or the pedal to adjust the mechanical component and the user's avatar.
  • FIGS. 9 and 10 the steps are described as being sequentially executed, but is not necessarily limited thereto. In other words, since the steps described in FIGS. 9 and 10 may be applied by changing the steps or executing one or more steps in parallel, FIGS. 9 and 10 are not limited to the time series order.
  • the attraction racing virtual experience method according to the present embodiment may be implemented in an application (or program) and recorded on a recording medium readable by a terminal device (or computer).
  • An application (or program) for implementing the attraction racing virtual experience method according to the present embodiment is recorded, and a recording medium readable by a terminal device (or computer) records all kinds of data in which data that can be read by a computing system is stored.
  • Device or media
  • 11A and 11B are schematic flowcharts illustrating a speed adjustment process in an attraction according to an embodiment of the present invention.
  • FIG. 11A illustrates a speed adjustment process by adjusting an accelerator pedal (accelerator)
  • FIG. 11B illustrates a speed adjustment process by a rolling phenomenon.
  • the attraction 160 moves the motor to a low speed (step 1) to move the user avatar. It operates (S1120), provides a low speed operation and RPM rotation corresponding to the first stage (S1122, S1124).
  • the attraction 160 operates the motor at a medium speed (2-4 steps) when the accelerator pedal is continuously pressed after the low speed (step 1) (S1130). Attraction 160 provides a medium speed operation corresponding to the medium speed (steps 2-4) (S1132).
  • Attraction 160 corresponds to RPM corresponding to two stages according to the medium speed driving speed (S1134) and provides a preset two-stage RPM rotation (S1135). Meanwhile, the attraction 160 provides a preset three-step RPM rotation when the RPM corresponds to three stages at the medium speed driving speed (S1136), and when it corresponds to the RPM corresponding to the fourth stage (S1138), the attraction 160 is preset. It provides a four-step RPM rotation (S1139).
  • Attraction 160 operates the motor at a high speed (5 steps) when the accelerator pedal is continuously pressed after the medium speed (2-4 steps) (S1140).
  • the attraction 160 provides high speed driving and RPM rotation corresponding to five steps (S1142 and S1144).
  • the attraction 160 may vibrate according to the rolling angle. Or control RPM rotation.
  • Attraction 160 provides the RPM rotation corresponding to the first stage while performing a low-speed secondary turning (S1170) when the rolling angle is 0 to 2 degrees while driving (S1170) (S1174).
  • the attraction 160 provides a RPM rotation corresponding to steps 2 to 4 while performing a medium speed secondary turning (S1182) when the rolling angle is 3 to 5 degrees while driving (S1180).
  • Attraction 160 provides a preset two-step RPM rotation when the medium speed second turning speed corresponds to the RPM corresponding to the second step (S1183). Meanwhile, the attraction 160 provides a preset three-step RPM rotation when the medium speed secondary turning speed corresponds to the RPM corresponding to the third step (S1185). On the other hand, the attraction 160 provides a preset four-step RPM rotation when the medium speed secondary turning speed corresponds to the RPM corresponding to four steps (S1187) (S1188).
  • the attraction 160 performs the high-speed secondary turning (S1192), and provides RPM rotation corresponding to five steps (S1194).
  • the attraction 160 stops the rotation of the RPM (S1198) when the secondary turning angle due to the rolling phenomenon during the rotation of the RPM corresponding to steps 2 to 5 occurs more than 15 degrees (S1197).
  • FIG. 12 is a schematic flowchart illustrating a pitching adjustment process in an attraction according to an embodiment of the present invention.
  • FIG. 12A illustrates the operation control of the attraction 160 when the rear fitting occurs
  • FIG. 12B illustrates the operation control of the attraction 160 when the front fitting occurs.
  • the attraction 160 checks the front tilt angle (S1220).
  • step S1220 As a result of checking in step S1220, if the front tilt angle is less than 5 degrees, the attraction 160 maintains the rear pitching phenomenon of step S1210. On the other hand, as a result of checking in step S1220, when the forward tilt angle is 5 degrees or more, a high-speed start is performed (S1222), and at the start, 5 step RPM is used (S1224).
  • the attraction 160 checks the rear tilt angle (S1240).
  • step S1240 if the rear tilt angle is less than 5 degrees, the attraction 160 maintains the front pitching phenomenon of step S1230.
  • the attraction 160 provides a stop while driving (S1250) or a high speed stop (S1260).
  • the attraction 160 stops by reducing the RPM in two steps if the RPM corresponding to the two steps during the driving is performed (S1252).
  • the attraction 160 performs a stop during driving according to step S1250, if the RPM corresponding to the three stages of the driving (S1254), and stops by reducing the RPM in three stages (S1255).
  • the attraction 160 performs a stop during driving according to step S1250, if the RPM corresponding to the four stages of driving (S1256), and stops by reducing the RPM in four stages (S1257).
  • the attraction 160 stops by reducing the RPM in five steps when performing the high speed stop according to step S1250 (S1270), and stops the user avatar while operating the vibration motor (S1280).
  • FIG. 13 is a schematic flowchart illustrating a change of direction process in an attraction according to an embodiment of the present invention.
  • the attraction 160 checks the turning rotation angle when the primary turning is performed by the user's handle manipulation (S1310).
  • the secondary turning is performed (S1330). On the other hand, by checking the turning rotation angle in step S1320, if the rotation angle is 30 degrees or more to stop the handle rotation (S1334).
  • step S1340 If the rotation angle is 15 degrees or more in the second turning of step S1330 (S1340), the attraction 160 stops the secondary turning (S1350). On the other hand, if the turning angle is checked in step S1340 by using a vibration motor when the rotation angle is 30 degrees or more (S1390), the safety sensor is checked (S1370). Attraction 160 stops the secondary turning normally when it is confirmed in the safety sensor that the rotation angle of the secondary turning is within a safe reference range (S1350). On the other hand, the attraction 160, if it is confirmed in the safety sensor that the rotation angle of the secondary turning is outside the safe reference range, forcibly stops the direction change according to the attraction operation (S1380).
  • 14A to 14C are schematic flow charts illustrating a flow rate adjusting process in an attraction according to an embodiment of the present invention.
  • FIG. 14A shows the airflow adjustment process according to the acceleration pedal (accelerator) adjustment of the attraction 160
  • FIG. 14B shows the airflow adjustment process according to rolling
  • FIG. 14C shows the airflow adjustment process according to the pitching.
  • the attraction 160 moves the motor to a low speed (step 1) to move the user avatar. It operates (S1412), provides a low speed operation and air blowing corresponding to one step (S1413, S1414).
  • the attraction 160 operates the motor at a medium speed (2-4 steps) when the accelerator pedal is continuously pressed after the low speed (step 1) (S1420). Attraction 160 provides a medium speed operation corresponding to the medium speed (steps 2-4) (S1422).
  • the attraction 160 corresponds to the RPM corresponding to the second stage according to the medium speed driving speed (S1423), the attraction 160 provides a preset two-stage blowing (S1424).
  • the attraction 160 provides a preset three-stage air blowing (S1425) if it corresponds to the RPM corresponding to three stages at the medium speed running speed (S1425), and if it corresponds to the RPM corresponding to four stages (S1427) the preset four Step air blowing is provided (S1428).
  • Attraction 160 operates the motor at high speed (5 steps) when the accelerator pedal is continuously pressed after the medium speed (2-4 steps) (S1430).
  • the attraction 160 provides high speed driving and air blowing corresponding to five levels (S1432 and S1434).
  • the attraction 160 may be a vibration motor or the like according to the rolling angle. Control RPM rotation.
  • Attraction 160 provides a blowing operation corresponding to step 1 while performing a low-speed secondary turning at step S1442 when the rolling angle is 0 to 2 degrees while driving (S1444).
  • the attraction 160 provides a RPM rotation corresponding to steps 2 to 4 while the rolling angle is 3 to 5 degrees when driving (S1450) and the medium speed secondary turning (S1452).
  • the attraction 160 provides a preset two-stage blowing when the medium speed secondary turning speed corresponds to the RPM corresponding to the two stages (S1453). On the other hand, the attraction 160 provides a preset three-stage blowing if the medium speed secondary turning speed corresponds to the RPM corresponding to the three stages (S1455) (S1456). On the other hand, the attraction 160 provides a predetermined four-step air blowing (S1458) when the medium speed secondary turning speed corresponds to the RPM corresponding to four steps (S1457).
  • the attraction 160 performs blowing corresponding to the five steps while performing high-speed secondary turning (S1462) (S1464).
  • FIG. 14C shows the airflow adjustment process for the case where the rear fitting occurs
  • (b) of FIG. 14C shows the airflow adjustment process for the case where the front fitting occurs.
  • step S1472 As a result of checking in step S1472, if the front tilt angle is less than 5 degrees, the attraction 160 maintains the rear pitching phenomenon in step S1470. On the other hand, as a result of the check in step S1472, when the forward tilt angle is 5 degrees or more, a high speed start is performed (S1473), and at the start, 5 step air blowing is provided (S1474).
  • step S1482 when the rear tilt angle is less than 5 degrees, the attraction 160 maintains the front pitching phenomenon in step S1481.
  • step S1482 when the rear tilt angle is 5 degrees or more, the attraction 160 provides a stop while driving (S1490) or a high speed stop (S1484). If the attraction 160 performs the driving stop according to the step S1490, if the RPM corresponding to the two steps during the driving (S1491), the air blowing provided in the second step is stopped (S1492). On the other hand, if the attraction 160 performs the stop during driving according to step S1490, if the RPM corresponding to the three stages of driving (S1493), the air blowing provided in the three stages is stopped (S1494). On the other hand, if the attraction 160 performs a stop during driving according to step S1490, if the RPM corresponding to four stages of driving (S1495), the air blowing provided in the fourth stage stops (S1496).
  • step S1484 the attraction 160 stops the blowing provided in step 5 (S1486).
  • 15 is a schematic flowchart illustrating a vibration motor operation process in an attraction according to an embodiment of the present invention.
  • the attraction 160 when a collision occurs during the game by the user's manipulation (S1510), the attraction 160 operates the motor at low speed (step 1) to move the user avatar (S1512), and performs the low speed collision. It performs (S1514).
  • the attraction 160 drives the vibration motor to provide one-step vibration (S1516).
  • the attraction 160 operates the motor at a medium speed (2-4 steps) when the accelerator pedal is continuously pressed after the low speed (step 1) (S1520).
  • the attraction 160 performs a medium speed collision corresponding to the medium speed (steps 2-4) (S1522).
  • the attraction motor drives the vibration motor to provide the second stage vibration (S1524).
  • the attraction 160 corresponds to the RPM corresponding to the three stages in the middle speed collision (S1525) provides a three-phase vibration by driving the vibration motor (S1526), if the vibration corresponding to the four stages (S1527) The motor is driven to provide four levels of vibration (S1528).
  • Attraction 160 operates the motor at a high speed (5 steps) when the accelerator pedal is continuously pressed after the medium speed (2-4 steps) (S1530).
  • the attraction 160 performs a high speed medium speed collision (S1540), and provides a five-stage vibration by driving the vibration motor (S1542).
  • 16 is a schematic flowchart illustrating a motor-based turning operation process in an attraction according to an embodiment of the present invention.
  • FIG. 16 illustrates a motor-based turning operation process of the attraction 160 according to a user's manipulation in a course for a specific situation.
  • the attraction 160 starts the evaluation mode while driving (S1610) and checks the state of the road on which the user avatar travels.
  • the attraction 160 performs an increase in speed by operating an accelerator pedal (accelerator) (S1614). If the speed increased in step S1614 corresponds to the track belt speed (S1620), the rotation is performed by determining a random rotation amount of the user avatar corresponding to the specific situation (S1652).
  • the random rotation amount of the user avatar may be a rotation amount randomly determined among a plurality of rotation amounts preset for each specific situation.
  • the attraction 160 checks whether or not the course is for a specific situation (S1640).
  • the course for a particular situation may be one of watering road course, ice road course, vehicle cutting road course, wildlife cutting road course.
  • the attraction 160 performs passive turning by rotating the motor (S1650) and determines the random rotation amount of the user avatar corresponding to the specific situation (S1652). .
  • the attraction 160 performs actively controlled turning by the handle (S1660), and increases the speed (S1614) by the operation of the accelerator pedal (accelerator) and Deceleration by the brake (S1616) is performed.
  • the attraction 160 checks the state of the user avatar and the proficiency of the user adjustment (S1672), and checks the driving time (S1674) to determine whether an evaluation grade is calculated. Check (S1676).
  • step S1676 When the evaluation grade is calculated in step S1676, the evaluation result is displayed on the display or the terminal (S1678). On the other hand, if the evaluation grade is not calculated in step S1676, the step of starting the evaluation is repeated.
  • 17A and 17B are schematic flowcharts illustrating a drift driving control process in an attraction according to an embodiment of the present invention.
  • FIG. 17A illustrates a drift driving control process according to user manipulation training
  • FIG. 17B illustrates a process of performing a rating evaluation for drift driving control.
  • the attraction 160 starts the drift driving mode to check whether the user's avatar is the rear wheel (S1710), and stops the drift experience when the user avatar is not the rear wheel (S1712).
  • step S1710 When the user avatar is the rear wheel in step S1710, the drift driving mode is entered (S1720), and the rotation speed of the motor (track belt) is compared with a preset reference value to check whether the high speed rotation is performed (S1722).
  • step S1722 if it is determined that the rotation speed of the motor (track belt) is not high speed, the attraction 160 performs an operation of re-entering the drift driving mode of step S1720.
  • the attraction 160 determines the forward speed to control the acceleration pedal (S1732).
  • Attraction 160 returns to step S1724 to check the rotation angle of the user avatar if the amount of acceleration according to the operation of the acceleration pedal does not exist (S1734).
  • the attraction 160 determines whether the center of rotation of the user avatar is centered (S1736).
  • the attraction 160 If the attraction 160 is centered on the rotation of the user avatar, the attraction 160 stops the user avatar (S1740). On the other hand, if the attraction 160 does not center on the rotation of the user avatar, the attraction 160 checks again whether the rotation speed of the motor (track belt) is a high speed.
  • the attraction 160 starts the grading mode (S1760), and evaluates the drift time by comparing the drift time of the user avatar with a preset evaluation standard (S1762, S1764).
  • the attraction 160 checks the state of the drift by comparing with the preset evaluation standard (S1770), and calculates a stable grade evaluation result (S1772). Attraction 160 evaluates the user's proficiency according to the calculated stable grading result (S1780). Attraction 160 performs a user's proficiency evaluation in comparison with a predetermined evaluation standard, calculates a safety evaluation result (S1780), and determines a final rating evaluation of the user based on the calculated safety evaluation result (S1784). .
  • FIGS. 11 to 17 are described as sequentially executing each step, but is not necessarily limited thereto. In other words, since the steps described in FIGS. 11 to 17 may be applied by changing the steps or executing one or more steps in parallel, FIGS. 11 to 17 are not limited to the time series order.
  • the attraction racing virtual experience method according to the present embodiment described with reference to FIGS. 11 to 17 may be implemented as an application (or a program) and recorded on a recording medium readable by a terminal device (or a computer).
  • An application (or program) for implementing the attraction racing virtual experience method according to the present embodiment is recorded, and a recording medium readable by a terminal device (or computer) records all kinds of data in which data that can be read by a computing system is stored.
  • Device or media

Abstract

본 발명은 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 방법 및 시스템에 관한 것이다. 이는 어트랙션 레이싱 가상체험 방법으로서, 이동단말기에 의해 실사 영상데이터 및 상기 실사 영상데이터 시점의 시간, 위치 및 자세 정보를 포함한 메타데이터를 포함하는 실사 컨텐츠를 생성하는 실사 컨텐츠 생성 단계; 상기 이동단말기가 상기 실사 컨텐츠를 원격의 컨텐츠 서버에 업로드하는 실사 컨텐츠 업로드 단계; 어트랙션이 상기 컨텐츠 서버로부터 상기 실사 컨텐츠를 다운로드 또는 스트리밍하는 실사 컨텐츠 입력 단계; 및 상기 어트랙션이, 상기 실사 컨텐츠의 영상데이터를 가상체험 배경 영상으로서 디스플레이하는 동안, 상기 어트랙션에 탑승한 사용자의 입력에 따라 상기 사용자가 탑승한 부분을 기계적으로 움직이기 위한 기계 컴포넌트를 제어하면서 동시에 상기 어트랙션에 탑승한 사용자의 입력에 따라 제어되는 사용자 아바타를 상기 가상체험 배경 영상에 합성하여 디스플레이하며, 또한 상기 실사 컨텐츠의 메타데이터에 따른 배경 영상의 시점 궤적과 사용자 아바타의 시점 궤적을 비교하고 그 결과에 따라 미리 결정되어 있는 인터랙션 메시지를 출력하는 가상체험 플레이 단계를 포함한다.

Description

실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 방법 및 시스템
본 발명은 어트랙션을 이용한 가상 체험 기술에 관한 것으로서, 더 상세하게는 컨텐츠 서버를 통해 원격의 공급자가 제공한 현장의 실사 컨텐츠를 다운로드 또는 스트리밍 방식으로 입력하여 어트랙션의 디스플레이 영상을 제공하고, 어트랙션의 사용자 입력에 기초하여 기계 컴포넌트와 영상 내 사용자 아바타를 제어하며, 가상체험이 진행되는 동안 영상 궤적과 사용자 아바타 궤적을 비교한 결과에 따라 인터랙션 메시지를 출력하도록 구성함으로써, 원격의 레이싱 현장에 실시간으로 참여하는 것과 같은 액티브한 가상 체험을 제공할 수 있도록 한 새로운 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 방법 및 시스템에 관한 것이다.
일반적으로 어트랙션(attraction)은 유원지 등에 설치된 놀이기구를 지칭하는 용어이며, 특히 공급자가 탑승한 상태로 회전운동, 기울기 운동, 등속 운동, 가속이동 등을 다양하게 조합한 움직임을 제공함으로써 공급자에게 즐거움을 제공하는 기구를 지칭하는 용어이다. 근래에는 공급자 탑승부를 기계적인 방식으로 구동하는 것과 동시에, 디스플레이 장치를 통해 소정 시나리오에 따른 영상을 공급자에게 제공함으로써, 몰입감 있는 가상현실을 체험할 수 있게 하는 가상현실 어트랙션이 발전하고 있다. 나아가 이러한 가상현실 어트랙션 관련 기술은 근래에 헤드 마운트 디스플레이(HMD, head mount display), 3차원 영상 기술, 360도 VR(virtual reality) 영상 등의 발전에 따라, 놀이기구뿐만 아니라 시뮬레이터, 운동기구, 가상체험기구 등의 다양한 분야로 확대되고 있기도 하다. 특히 이용자에게 실제와 유사한 경험을 제공하는 것이 가능하기 때문에 어트랙션을 이용하는 가상체험 분야에 대한 소비자 기대가 증대하고 있다.
통상 어트랙션을 이용한 가상체험기구에 있어서, 공급자 조작에 대응하여 어트랙션의 기계 부분을 동작시키기 위한 기계 구동 데이터와, 디스플레이 부분에 표시하기 위한 가상체험 배경 데이터가 별개로 프로그램되는 것이 일반적이다. 이 중, 가상체험 배경 데이터는, 부분적으로 실사 영상을 포함한다고는 하더라도, 대개 컴퓨터 그래픽(CG, Computer Graphics)에 기초하여 생성된다.
그러므로 예컨대 어트랙션을 이용한 레이싱 가상체험을 제공하기 위해서는, 어트랙션 기계 부분의 설계 뿐만 아니라, 어트랙션 기계 부분을 공급자 조작 및 영상과 동기화시켜 동작시키기 위한 인터랙션 제어 프로그래밍, 가상체험 시나리오 기획, 및 CG 제작 등을 위한 많은 전문적인 인력이 필요하여 제작비용이 높다는 문제가 있다.
이러한 문제를 해결하기 위하여, 종래에 예컨대 대한민국 등록특허 제10-1748401호 (2017년 06월 16일 공고)의 공고에는, 일반 사용자가 이동 단말기를 이용하여 생성한 실사 영상 데이터를 컨텐츠 서버에 업로드하도록 하고, 어트랙션이 컨텐츠 서버로부터 실사 영상 데이터를 다운로드하고, 다운로드된 실사 영상 데이터에 기초하여 영상을 디스플레이하고 기계 컨포넌트를 조정하도록 하는 가상현실 어트랙션 제어 기술이 제안된 바 있다. 이에 따라, 어트랙션을 이용하여 가상현실을 제공할 수 있는 다양한 실사 영상이 용이하게 공급될 수 있었다. 상기한 종래 기술에 따르면 실사 영상에 따라 어트랙션의 기계 컴포넌트가 조정되기 때문에, 어트랙션 이용자는 현장에 직접 가보지 않아도 실사 영상을 제작한 개인이 경험하는 현장 체험을 가상 경험할 수 있다는 장점이 제공된다.
그러나, 이러한 실사 영상에 포함된 모든 데이터는 특히 영상의 제작자인 각 개인의 움직임, 즉 특히 예측 불가능한 매우 개인적인 움직임을 포함하는 개인 영상이라는 특징이 있다. 이런 이유로, 어트랙션 이용자에게 수동적인 가상 경험을 제공하는 것은 가능하였지만, 어트랙션 이용자 자신이 능동적으로 현장에 직접 참가하는 것과 같은 액티브한 가상경험을 제공하는 것이 용이하지 않다.
다시 말해서, 어트랙션 이용자에게 이용자 자신이 능동적으로 어트랙션의 기계 컴포넌트를 제어하는 방식의 액티브한 가상 경험을 제공하기 위해서는, 어트랙션 이용자가 영상의 움직임에 적응하여 일치되도록 기계 컴포넌트의 움직임을 조정하여야만 할 필요가 있다. 그런데 개인적인 실사 컨텐츠에는 그 영상을 제작한 개인의 예측할 수 없는 움직임이 포함되고 있으므로, 예측할 수 없는 개인 실사 영상의 움직임에 따라 어트랙션 이용자가 능동적으로 어트랙션을 조정하여 일치시키도록 하는 것은 어트랙션 이용자에게 매우 난이도가 높은 조정 기술이 요구된다. 그러므로 평범한 일반인이 능동적으로 어트랙션을 조정하는 방식으로는 현장 체험을 경험하기 어렵다는 문제가 있다.
[선행기술문헌]
[특허문헌]
(특허문헌 0001) 대한민국등록특허 제10-1748401호(2017년 06월 16일 공고)
(특허문헌 0002) 대한민국공개특허 제10-2017-0115170호(2017년10월17일 공개)
(특허문헌 0003) 대한민국등록특허 제10-1501632호(2015년 03월 12일 공고)
(특허문헌 0004) 대한민국공개특허 제10-2018-0068123호(2018년06월21일 공개)
본 발명자는 상술한 종래의 어트랙션 레이싱 가상체험 기술의 문제점을 해소하고 어트랙션 이용자가 능동적으로 어트랙션을 조정하도록 함으로써 현장에 직접 참가하는 것과 같은 액티브한 가상경험을 용이하게 제공할 수 있는 기술을 찾던 중, 만약 영상 공급자가 예컨대 사이클 또는 자동자 경주와 같은 레이싱 대회 현장에서 레이싱 경로를 따라 현장 참가자들을 함께, 예컨대 상위권 선수의 주행 시나리오, 중위권 선수의 주행 시나리오, 또는 하위권 선수의 주행 시나리오와 같이 미리 예측되어 있는 시나리오에 따라 주행하면서 현장을 촬영하고, 이를 원격의 컨텐츠 서버를 경유하여 실시간 방송 또는 업로드하도록 제공하며, 이러한 현장 영상을 어트랙션에서 다운로드 또는 스트리밍하여 어트랙션의 디스플레이 영상을 제공하면서, 어트랙션 사용자 입력에 기초하여 어트랙션의 기계부분을 조정하면서 디스플레이되는 영상 내의 사용자 아바타를 조정하도록 한다면, 어트랙션 사용자는 원격의 사이클 경주 또는 자동차 경주와 같은 레이싱 대회에 직접 참여하는 참가자와 유사한 실감을 느낄 수 있는 매우 액티브한 가상경험을 체험할 수 있을 것이라는 점에 착안하였다.
이러한 착안에 기초하여 제공되는 본 발명은, 컨텐츠 서버를 통해 원격의 공급자가 제공한 현장의 실사 컨텐츠를 다운로드 또는 스트리밍 방식으로 입력하여 어트랙션의 디스플레이 영상을 제공하고, 어트랙션의 사용자 입력에 기초하여 기계 컴포넌트와 영상 내 사용자 아바타를 제어하며, 가상체험이 진행되는 동안 영상 궤적과 사용자 아바타 궤적을 비교한 결과에 따라, 인터랙션 메시지를 출력하도록 구성함으로써, 원격의 레이싱 현장에 실제로 참여하는 것과 같은 액티브한 가상 체험을 제공할 수 있도록 한 새로운 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 방법 및 시스템의 제공을 목적으로 한다.
나아가 본 발명은, 영상 공급자가 예컨대 사이클 또는 자동자 경주와 같은 레이싱 대회 현장에서 레이싱 경로를 따라 현장 참가자들을 함께 미리 예측되어 있는 시나리오에 따라 주행하면서 현장을 촬영하여, 이를 컨텐츠 서버를 통해 실시간 방송하도록 제공하고, 방송되는 실시간 액션 컨텐츠를 적어도 하나의 어트랙션에서 스트리밍 방식으로 입력하여 어트랙션의 디스플레이 영상을 제공하고, 어트랙션의 사용자 입력에 기초하여 어트랙션의 기계부분 및 디스플레이되는 사용자 아바타를 조정하고, 가상체험이 진행되는 동안 영상 궤적과 사용자 아바타 궤적을 비교한 결과에 따라 인터랙션 메시지를 출력하도록 구성함으로써, 예컨대 유럽에서 진행 중인 사이클 경기 현장을 한국 등 다양한 장소의 복수의 사용자가 동시에 실시간으로 원격 체험할 수 있도록 하는 방식으로, 원격의 레이싱 현장에 실시간으로 참여하는 것과 같은 액티브한 가상 체험을 제공할 수 있도록 한 새로운 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 방법 및 시스템의 제공을 목적으로 한다.
상기 목적은 본 발명에 따라 제공되는 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 방법 및 시스템에 의하여 달성된다.
본 발명의 일 양상에 따라 제공되는 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 방법은, 어트랙션 레이싱 가상체험 방법으로서, 이동단말기에 의해 실사 영상데이터 및 상기 실사 영상데이터 시점의 시간, 위치 및 자세 정보를 포함한 메타데이터를 포함하는 실사 컨텐츠를 생성하는 실사 컨텐츠 생성 단계; 상기 이동단말기가 상기 실사 컨텐츠를 원격의 컨텐츠 서버에 업로드하는 실사 컨텐츠 업로드 단계; 어트랙션이 상기 컨텐츠 서버로부터 상기 실사 컨텐츠를 다운로드 또는 스트리밍하는 실사 컨텐츠 입력 단계; 및 상기 어트랙션이, 상기 실사 컨텐츠의 영상데이터를 가상체험 배경 영상으로서 디스플레이하는 동안, 상기 어트랙션에 탑승한 사용자의 입력에 따라 상기 사용자가 탑승한 부분을 기계적으로 움직이기 위한 기계 컴포넌트를 제어하면서 동시에 상기 어트랙션에 탑승한 사용자의 입력에 따라 제어되는 사용자 아바타를 상기 가상체험 배경 영상에 합성하여 디스플레이하며, 또한 상기 실사 컨텐츠의 메타데이터에 따른 배경 영상의 시점 궤적과 사용자 아바타의 시점 궤적을 비교하고 그 결과에 따라 미리 결정되어 있는 인터랙션 메시지를 출력하는 가상체험 플레이 단계를 포함한다.
실시예에 따라, 상기 실사 컨텐츠 생성 단계는, 상기 이동 단말기가 미리 결정된 경로를 따른 미리 예상된 주행 시나리오에 따라 주행하면서 상기 실사 컨텐츠를 생성하는 단계를 포함할 수 있다.
실시예에 따라, 상기 실사 컨텐츠 업로드 단계는 상기 이동 단말기가 생성되고 있는 실사 컨텐츠를 원격 컨텐츠 서버로 실시간 업로드하여 방송하는 단계를 포함할 수 있고, 또한 상기 실사 컨텐츠 입력단계는, 적어도 하나의 어트랙션이 상기 컨텐츠 서버에 접속하여 방송되고 있는 실사 컨텐츠를 실시간 스트리밍하는 단계를 포함할 수 있다.
실시예에 따라, 상기 실사 컨텐츠 업로드 단계는: 상기 컨텐츠 서버가, 업로드된 실사 컨텐츠를 어트랙션의 탑승기 종류 및 상기 실사 컨텐츠에 포함된 경로와 시나리오 정보를 포함하는 분류 항목에 기초하여 분류하여 등록한 후 검색에 제공하는 단계를 더 포함할 수 있다.
본 발명의 다른 양상에 따라 제공되는 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험용 어트랙션은, 어트랙션 레이싱 가상체험용 어트랙션으로서, 사용자가 탑승하여 사용자 명령을 입력하기 위한 탑승기; 입력된 실사 컨텐츠의 영상데이터를 가상체험 배경 영상으로서 디스플레이하도록 출력하고, 상기 사용자 명령을 소정 변환 알고리즘에 따라 제어 명령으로 변환하여 출력하고, 상기 사용자 명령에 기초하여 상기 배경 영상 내에 합성되어 디스플레이되는 사용자 아바타를 조정하며, 또한 상기 실사 컨텐츠의 메타데이터에 따른 배경 영상의 시점 궤적과 상기 아바타의 시점 궤적을 비교하고 그 결과에 따라 미리 결정되어 있는 인터랙션 메시지를 출력하는 어트랙션 컨트롤러; 상기 어트랙션 컨트롤러에서 출력되는 제어 명령에 따라 동작하여 상기 사용자가 탑승하고 있는 탑승기를 기계적으로 움직이기 위한 기계 컴포넌트; 및 상기 어트랙션 컨트롤러에서 출력되는 배경 영상 및 사용자 아바타의 합성 영상을 디스플레이하는 디스플레이를 포함한다.
실시예에 따라, 상기 탑승기는, 상기 사용자가 탑승하는 탑승부와 상기 사용자가 속도 및 방향을 조절하는 가상체험 명령을 입력하는 조작부를 포함하고; 상기 기계 컴포넌트는, 상기 탑승부를 기계적으로 3차원 상에서 회전되도록 하는 턴 컴포넌트, 피칭 컴포넌트 및 롤링 컴포넌트와 진동을 가하는 진동 컴포넌트를 포함할 수 있다.
실시예에 따라, 상기 기계 컴포넌트는, 상기 탑승부로 바람을 보낼 수 있는 송풍기를 더 포함할 수 있다.
실시예에 따라, 상기 탑승기는 상기 사용자가 인력 또는 전동력으로 이동가능한 탑승 장치 중 어느 하나의 적어도 일부를 모방한 형태인 것이 바람직하다.
실시예에 따라, 상기 디스플레이는 헤드 마운트 디스플레이(HMD, head mount display)를 포함할 수 있다.
실시예에 따라, 상기 실사 컨텐츠는 영상 공급자가 미리 결정된 경로를 따른 미리 예상된 주행 시나리오에 따라 주행하면서 생성되어 상기 컨텐츠 서버를 경유하여 실시간 방송되고 있는 것을 실시간 스트리밍하여 입력될 수 있다.
상기 실사 컨텐츠는 3차원 영상 또는 360도 VR(virtual reality) 영상을 포함할 수 있다.
그리고 본 발명의 또 다른 양상에 따라 제공되는 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 시스템은, 어트랙션 레이싱 가상체험 시스템으로서, 미리 결정된 경로를 따른 미리 예상된 주행 시나리오에 따라 주행하면서 실사 컨텐츠를 생성하는 이동 단말기; 상기 이동 단말기에게 실사 컨텐츠를 업로드하도록 제공하고, 업로드된 실사 컨텐츠를 등록하여 검색에 제공하는 컨텐츠 서버; 및 사용자가 탑승하여 가상체험 조작 명령을 입력하는 탑승기를 포함하며, 가상체험 컨텐츠를 입력받아 상기 가상체험 컨텐츠에 기초한 가상체험 영상을 상기 사용자에게 디스플레이하는 동안 입력된 가상체험 조작 명령에 반응하여 상기 탑승기를 기계적으로 움직이도록 구성된 어트랙션을 포함하고, 상기 어트랙션은, 상기 실사 컨텐츠의 영상데이터를 가상체험 배경 영상으로서 디스플레이하는 동안, 상기 어트랙션에 탑승한 사용자의 입력에 따라 상기 사용자가 탑승한 부분을 기계적으로 움직이기 위한 기계 컴포넌트를 제어하면서 동시에 상기 어트랙션에 탑승한 사용자의 입력에 따라 제어되는 사용자 아바타를 상기 가상체험 배경 영상에 합성하여 디스플레이하며, 또한 상기 실사 컨텐츠의 메타데이터에 따른 배경 영상의 시점 궤적과 사용자 아바타의 시점 궤적을 비교하고 그 결과에 따라 미리 결정되어 있는 인터랙션 메시지를 출력하는 방식으로 가상체험이 진행되도록 구성된다.
실시예에 따라, 상기 어트랙션에 입력되는 실사 컨텐츠는, 상기 이동 단말기에 의하여 생성되면서 실시간으로 상기 컨텐츠 서버로 업로드되어 방송되는 실시간 방송 컨텐츠인 것이 바람직하다.
본 발명에 따르면, 컨텐츠 서버를 통해 원격의 공급자가 제공한 현장의 실사 컨텐츠를 다운로드 또는 스트리밍 방식으로 입력하여 어트랙션의 디스플레이 영상을 제공하고, 어트랙션의 사용자 입력에 기초하여 기계 컴포넌트와 영상 내 사용자 아바타를 제어하며, 가상체험이 진행되는 동안 영상 궤적과 사용자 아바타 궤적을 비교한 결과에 따라, 인터랙션 메시지를 출력하도록 구성함으로써, 어트랙션 사용자가 원격의 레이싱 현장에 참가자로서 실제로 참여하는 것과 같은 액티브한 가상 체험을 제공할 수 있다.
나아가 본 발명에 따르면, 영상 공급자가 예컨대 사이클 또는 자동자 경주와 같은 레이싱 대회 현장에서 레이싱 경로를 따라 현장 참가자들을 함께 미리 예측되어 있는 시나리오에 따라 주행하면서 현장을 촬영하여, 이를 컨텐츠 서버를 통해 실시간 방송하도록 제공하고, 방송되는 실시간 액션 컨텐츠를 적어도 하나의 어트랙션에서 스트리밍 방식으로 입력하여 어트랙션의 디스플레이 영상을 제공하고, 어트랙션의 사용자 입력에 기초하여 어트랙션의 기계부분 및 디스플레이되는 사용자 아바타를 조정하고, 가상체험이 진행되는 동안 영상 궤적과 사용자 아바타 궤적을 비교한 결과에 따라 인터랙션 메시지를 출력하도록 구성함으로써, 예컨대 유럽에서 진행 중인 사이클 경기 현장을 한국 등 다양한 장소의 복수의 사용자가 동시에 실시간으로 원격 체험할 수 있도록 하는 방식으로, 의 레이싱 현장에 참가자로서 실시간으로 참여하는 것과 같은 액티브한 가상 체험을 제공할 수 있다.
더 나아가 본 발명에 따르면 영상 공급자는 일반인 또는 영상 중계 전문가가 예컨대 자동차 운전 중 또는 자전거 주행 중에 자신의 스마트폰 또는 핸드헬드 카메라 장치와 같은 이동 단말기를 이용하여 제작한 실사 컨텐츠를 촬영된 영상의 편집과정을 거친후 또는 실시간으로 원격 컨텐츠 서버로 업로드하거나 실시간 방송할 수 있고, 그 결과 컨텐츠 서버를 통해 실사컨테츠가 다운로드 또는 스트리밍 되는 것에 따라 영상 공급자에게는 소정의 수익이 제공될 수 있다.
더 나아가 본 발명에 따르면, 예컨대 복수의 어트랙션을 설치하고 일반 고객의 이용에 제공하는 방식의 가상체험 매장을 운영하는 사업자는, 컨텐츠 서버로부터 다운로드 또는 스트리밍하는 것만으로 어트랙션 레이싱 가상체험용 컨텐츠를 확보할 수 있으므로, 다양한 종류의 어트랙션 레이싱 가상체험 컨텐츠를 저렴하고도 용이하게 제공할 수 있게 된다.
더 나아가 본 발명에 따르면, 컨텐츠 서버는, 영상 공급자가 업로드 또는 스트리밍 방송하는 실사 컨텐츠에 대하여,예컨대 자동차, 스키, 사이클, 봅슬레이 등과 같은 탑승기 종류 및/또는 예컨대 산, 바다, 도시, 경기장 등과 같은 레이싱 지역과 같은 미리 결정된 항목으로 분류하여 등록한 후 검색에 제공하고, 이에 따라 어트랙션의 사용자가 어트랙션 종류에 적합하고 자신의 취향에 따라 실사 컨텐츠를 편리하게 검색하고 선택하여 다운로드 또는 스트리밍하도록 함으로써, 어트랙션 가상체험용 컨텐츠들이 다양한 방식으로 공유될 수 있게 할 수 있다.
도 1은 본 발명의 실시예에 따른 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 시스템의 구성이 도시된 개략도.
도 2는 본 발명의 실시예에 따른 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험용 어트랙션의 구성 중 어트랙션 컨트롤러의 기능을 상세히 설명하기 위한 개략적인 블록도.
도 3은 본 발명의 실시예에 따른 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험용 어트랙션의 구성 중 중 탑승부 및 기계 컴포넌트의 제어를 상세히 설명하기 위한 개략적인 블록도.
도 4는 본 발명의 실시예에 따른 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험용 어트랙션에 있어서, 차량 운전대 형태의 탑승기와 이를 기계적으로 움직이기 위한 기계 컴포넌트의 외관을 예시하는 개략도.
도 5는 도 4에 예시된 어트랙션의 기계 컴포넌트의 3차원 상의 움직임을 설명하기 위한 개략도.
도 6은 본 발명의 실시예에 따른 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 시스템에서, 실사 컨텐츠를 생성하기 위한 이동 단말기의 구성을 예시하는 개략적인 블록도.
도 7은 도 6에 도시된 이동 단말기에서 실사 컨텐츠가 생성되는 과정을 설명하기 위한 개략적인 흐름도.
도 8은 본 발명의 실시예에 따른 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 시스템에서, 컨텐츠 서버의 구성을 예시하는 개략적인 블록도.
도 9는 본 발명의 실시예에 따른 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 방법 중 실사 컨텐츠를 생성하여 컨텐츠 서버에 업로드하고 검색에 제공하는 과정을 예시하는 개략적인 흐름도.
도 10은 본 발명의 실시예에 따른 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 방법 중 어트랙션의 동작 과정을 예시하는 개략적인 흐름도.
도 11a 및 도 11b는 본 발명의 실시예에 따른 어트랙션에서의 속도 조정 과정을 예시하는 개략적인 흐름도이다.
도 12는 본 발명의 실시예에 따른 어트랙션에서의 피칭 조정 과정을 예시하는 개략적인 흐름도이다.
도 13은 본 발명의 실시예에 따른 어트랙션에서의 방향 전환 과정을 예시하는 개략적인 흐름도이다.
도 14a 내지 도 14c는 본 발명의 실시예에 따른 어트랙션에서의 송풍량 조정 과정을 예시하는 개략적인 흐름도이다.
도 15는 본 발명의 실시예에 따른 어트랙션에서의 진동모터 동작 과정을 예시하는 개략적인 흐름도이다.
도 16은 본 발명의 실시예에 따른 어트랙션에서의 모터 기반 터닝 동작 과정을 예시하는 개략적인 흐름도이다.
도 17a 및 도 17b는 본 발명의 실시예에 따른 어트랙션에서의 드리프트 주행 제어 과정을 예시하는 개략적인 흐름도이다.
이하, 첨부된 도면을 참조하여 본 발명을 구체적인 예를 들어 설명하면 다음과 같다.
도 1은 본 발명의 실시예에 따른 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 시스템의 구성이 도시된 개략도이다.
도 1을 참조하면, 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 시스템(100)은 이동 단말기(120), 컨텐츠 서버(140), 및 어트랙션(160)을 포함한다.
본 명세서에서 사용하고 있는 '어트랙션 레이싱 가상체험'이라는 용어는 어트랙션에 의해 수행되는 경주, 주행, 또는 레이싱(racing) 형태의 가상체험을 지칭한다. 한편 어트랙션은, 가상체험 참여자 즉 사용자가 현실 경험과 최대한 유사한 가상현실을 경험할 수 있도록 하기 위해, 사용자가 현실에서 탑승하고 있는 기구 부분(즉, 탑승기)와, 이 탑승기를 기계적으로 움직여주기 위한 하드웨어 부분, 그리고 가상체험 시나리오와 이용자 사이의 인터랙션 과정을 영상/음향으로 표시하기 위한 비디오 컨포넌트(예컨대 HMD와 같은 디스플레이 장치 및 음향 출력장치 등)를 포함하여 구성되는 장치일 수 있다.
한편 본 명세서에서 사용하는 '레이싱'이라는 용어는 자동차 레이싱 뿐만 아니라, 놀이기구, 보트, 싸이클, 스키, 스노우 보드 또는 봅슬레이와 같은 다양한 분야에서 사용자가 탑승하여 길이나 도로 상에서 바퀴를 이용하거나, 물, 얼음, 눈 등 미끄러질 수 있는 표면 상에서, 인력, 중력 및/또는 전동력으로 움직일 수 있는 기기의 레이싱을 모두 포함하는 넓은 범위로 해석될 수 있다.
도시된 예에서, 이동 단말기(120)는 어트랙션(160)에서 가상체험 컨텐츠로서 사용할 수 있는 형태의 실사 컨텐츠를 생성하는 장치이다. 이러한 이동 단말기(120)는 예컨대 영상 공급자가 소지 또는 휴대할 수 있는 컴퓨팅 장치이며, 예컨대 스마트폰, 태블릿 PC(퍼스널 컴퓨터)와 같은 범용 컴퓨팅 장치와 이에 연결된 카메라 장치를 포함하여 구현될 수 있다. 즉 공급자는 자신의 스마트폰 또는 태블릿 PC에 어트랙션 레이싱 가상체험을 위한 가상체험 컨텐츠로서 실사 컨텐츠를 생성하는 기능을 구현한 애플리케이션을 설치하고, 예컨대 자동차를 운행하는 동안, 스마트폰의 내장 카메라 또는 스마트폰에 유무선으로 연결된 외장 카메라를 이용하여 실사 영상을 촬영함으로써, 소정의 주행 경로를 따라 주행하면서 실사 컨텐츠를 생성할 수 있다. 다른 예로서, 이동 단말기(120)는 본 발명의 목적에 적합하게 구성된 전용의 장치일 수도 있다.
실사 컨텐츠는, 특히 움직이는 시점(moving viewpoint)을 포함하는 실사 영상 데이터 및 상기 시점의 시간, 위치 및 자세 정보에 기초한 메타 데이터를 포함한다. 여기서 '시점'은 예컨대 일인칭 시점 또는 삼인칭 시점과 같이, 통상적으로 가상체험 영상에서 사용자가 입력하는 명령에 따라 조정되는 캐릭터 또는 오브젝트의 시점 즉 뷰포인트(viewpoint)와 유사한 의미로 사용된다. 본 발명에 따른 실사 컨텐츠는 이러한 뷰포인트 즉 시점이 시간에 따라 위치가 연속적으로 이동된다는 특징을 포함하며, 특히 이러한 움직이는 시점은 이동 단말기(120)를 이용하여 생성된 실사 컨텐츠에서는 실사 영상을 촬영한 카메라의 시점을 의미할 수 있다. 예를 들어, 공급자가 사이클 경주 동안 실사 컨텐츠를 제작할 때, 이동 단말기(120) 또는 이것에 연결된 외장 카메라를 공급자의 머리 또는 사이클의 전면에 고정하고 촬영하는 경우, 공급자의 시점 또는 사이클의 시점이 실사 영상의 시점과 대응할 수 있다.
또한 본 발명에 따라 실사 컨텐츠는 특히 이동 단말기(120)가 미리 결정된 경로를 따른 미리 예상된 주행 시나리오에 따라 주행하면서 생성한다는 특징을 가진다. 이러한 특징은 어트랙션을 조정하는 사용자에게 미리 예측가능한 경로와 주행 시나리오를 제공할 수 있게 한다. 예컨대, 영상 공급자는 '2018년 8월 1일부터 8월 7일까지 벌어지는 유럽 사이클 대회의 특정 경로'를 지정하여 실사 컨텐츠를 생성할 수 있다. 또한 영상 공급자는 이 사이클 대회의 특정 구간에서 예컨대 상위 1-20위 범위의 상위권 선수들이 주행할 것으로 예상되는 속도에 맞추어 주행하도록 미리 예상되고 계획된 시나리오에 따라 실사 컨텐츠를 생성할 수 있다. 이러한 미리 결정된 경로 및 미리 예상된 주행 시나리오는 예컨대 컨텐츠 서버에서 실사 컨텐츠를 분류할 때 분류기준으로 제공될 수 있다. 이에 따라 어트랙션 사용자는 자신의 취향과 수준에 맞추어 경로와 주행 시나리오를 가진 실사 컨텐츠를 검색하여 선택할 수 있다.
이동 단말기(120)는 적어도 하나의 단말기로 구성될 수 있으며, 이동 단말기(120)가 미리 결정된 경로를 따른 미리 예상된 주행 시나리오에 따라 서로 다른 속도로 주행하면서 촬영된 실사 컨텐츠를 생성할 수 있다. 여기서, 이동 단말기(120)는 속도를 기준으로 복수의 그룹을 포함하는 실사 컨텐츠를 생성할 수 있다. 예를 들어, 복수의 이동 단말기(120)는 속도별로 상위 그룹, 중위 그룹, 하위 그룹 등을 포함하는 실사 컨텐츠를 생성할 수 있으며, 각각의 그룹(상위 그룹, 중위 그룹, 하위 그룹 등)에는 복수의 이동 단말기(선수)의 컨텐츠가 포함될 수 있다.
컨텐츠 서버(140)는 예컨대 인터넷의 웹 환경에서, 이동 단말기(120) 및 어트랙션(160)이 접속할 수 있는 서버 장치로서 구현된다. 컨텐츠 서버(140)는 한편으로 이동 단말기(120)에게 실사 컨텐츠를 업로드할 수 있는 서비스를 제공하고, 다른 한편으로 어트랙션(160)에게는 원하는 실사 컨텐츠를 검색하여 선택하고 다운로드 또는 스트리밍할 수 있도록 하는 서비스를 제공한다. 컨텐츠 서버(140)는 예컨대 다운로드 또는 스트리밍에 따라 어트랙션 사용자에게 과금을 하거나 또는 광고를 부가하는 방식으로 수익을 얻을 수 있으며, 이러한 수익의 일부를 영상 공급자에게 제공할 수 있다.
한편 어트랙션(160)은 사용자가 탑승하여 가상체험 조작 명령을 입력하는 탑승기를 포함한다. 또한 어트랙션(160)은 컨텐츠 서버(140)에 접속하여 원하는 실사 컨텐츠를 검색하고 선택하여 다운로드하거나 실시간으로 스트리밍함으로써 실사 컨텐츠를 입력받을 수 있다. 어트랙션(160)은 입력된 실사 컨텐츠에 기초한 배경 영상을 예컨대 사용자가 착용한 HMD 상에 디스플레이하면서 동시에 입력된 사용자 명령에 반응하여 사용자가 눕거나 앉아있거나 또는 서있는 탑승기를 기계적으로 움직이도록 기계 컴포넌트를 제어할 수 있고, 이와 통시에 사용자 명령에 따라 제어되는 사용자 아바타를 디스플레이되는 영상에 합성하여 출력할 수 있다.
특히 본 발명에 따라 어트랙션(160)은, 예컨대 유무선 인터넷과 같은 통신망을 통해 원격의 컨텐츠 서버(140)로부터 실사 컨텐츠를 다운로드 또는 실시간 스트리밍하여 이용할 수 있다. 상술한 바와 같이 본 발명에 따라 실사 컨텐츠는 촬영된 영상 데이터 및/또는 음향 데이터와 함께 영상의 시점을 한정하는 메타데이터를 포함한다. 어트랙션(160)은 이러한 실사 컨텐츠의 영상 데이터를 디스플레이되는 가상체험 배경 영상으로 이용하면서, 실사 컨텐츠의 메타 데이터에 기초한 배경 영상의 시점 궤적과 사용자 입력에 기초한 사용자 아바타의 시점 궤적을 비교하는 것에 기초하여 미리 저장되어 있는 인터랙션 메시지들 중 하나를 출력함으로써 가상체험이 진행되도록 한다. 예컨대, 영상 배경의 시점의 속도에 비하여 사용자 명령에 따른 아바타의 속도가 더 작은 경우 "뒤쳐지고 있습니다. 속도를 올리세요!"라는 인터랙션 메시지가 디스플레이 또는 스피커를 통해 사용자에게 출력될 수 있다.
어트랙션(160)은 사용자 아바타의 시점 궤적을 기반으로 실사 컨텐츠에 포함된 복수의 그룹 중 하나를 선택하고, 선택된 그룹 내에 포함된 적어도 하나의 이동 단말기(120)의 속도 중 사용자 아바타의 시점 궤적과 가장 차이값이 적은 이동 단말기(120)에서 촬영된 실사 컨텐츠의 메타데이터에 따른 배경 영상의 시점 궤적에 상기 사용자 아바타를 합성하여 디스플레이한다.
한편, 어트랙션(160)은 사용자 보조 모드로 동작할 수 있다. 여기서, 사용자 보조 모드는 이동 단말기(120)에서 생성된 실사 컨텐츠를 사용자가 속도별로 구분된 상위 그룹, 중위 그룹, 하위 그룹 등에 포함되지 못할 경우 사용자의 요청에 의해 사용자 아바타를 보조하는 모드를 의미한다.
어트랙션(160)은 사용자 보조 모드로 동작하는 경우, 사용자 아바타의 속도를 보조하도록 기계 컴포넌트를 제어할 수 있다. 구체적으로, 어트랙션(160)은 복수의 그룹 중 선택된 그룹 내에 포함된 적어도 하나의 이동 단말기의 속도들의 평균값과 사용자의 입력에 따른 사용자 아바타의 속도값을 비교하여 계산된 속도 차이값을 보조하도록 기계 컴포넌트를 제어할 수 있다.
또한, 어트랙션(160)은 사용자 보조 모드로 동작하는 경우, 사용자 아바타의 조정 각도를 보조하도록 기계 컴포넌트를 제어할 수 있다. 구체적으로, 어트랙션(160)은 복수의 그룹 중 선택된 그룹 내에 포함된 적어도 하나의 이동 단말기의 턴, 피칭 및 롤링 각도 각각의 평균값과 사용자의 입력에 따른 사용자 아바타의 턴, 피칭 및 롤링 각도 각각을 비교하여 계산된 각도 차이값을 보조하도록 기계 컴포넌트를 제어할 수 있다.
도 2는 본 발명의 실시예에 따른 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험용 어트랙션의 구성 중 어트랙션 컨트롤러의 기능을 상세히 설명하기 위한 개략적인 블록도이다.
도 2를 참조하면, 어트랙션(200)은 탑승기(210), 통신모듈(220), 어트랙션 컨트롤러(230), 기계 컴포넌트(240) 및 HMD 등을 포함할 수 있는 영상출력부(250)와 스피커 등을 포함할 수 있는 음향출력부(260)를 포함한다.
탑승기(210)는, 사용자가 탑승하여 가상체험 조작 명령을 입력하기 위한 기구적인 부분이며, 아래에서 도 3 내지 도 5를 참조하여 더 상세히 설명된다. 탑승기(210)는 사용자가 탑승하는 의자 등의 탑승 수단이 포함되고, 특히 가상체험 플에이어가 가상체험 영상의 사용자 아바타의 시점을 조정할 때 속도와 방향을 조정하기 위한 사용자 명령을 입력하는 조작 수단(예컨대, 핸들, 가속페달, 브레이크 페달 등)을 포함한다. 특히 사용자에게 현실과 유사한 실감을 주기 위한 어트랙션의 특성상, 탑승기(210)의 전체적인 형상이나 조작 수단의 형태는 특정 탑승기 종류와 유사하게 구성될 수 있고, 예컨대 자동차, 스키, 사이클, 봅슬레이, 비행기 등을 포함하는 다양한 인력 또는 전동력으로 이동가능한 탑승 장치 중 어느 하나의 적어도 일부를 모방한 형태를 가질 수 있다.
통신모듈(220)은 예컨대 유무선 인터넷을 통하여 원격의 컨텐츠 서버에 접속하여 실사 컨텐츠를 다운로드 또는 실시간 스트리밍하여 어트랙션 컨트롤러(230)로 입력할 수 있는 통신수단을 포함한다.
어트랙션 컨트롤러(230)는 탑승기(210)에 의해 입력되는 사용자 명령을 기계 컴포넌트를 제어하기 위한 제어 명령으로 변환하여 출력하며, 나아가 원격 컨텐츠 서버로부터 입력된 실사 컨텐츠와 사용자가 입력한 사용자 명령에 기초하여 영상출력부(250) 및 음향출력부(260)로 영상과 음향을 출력하도록 구성된 프로세싱 수단을 포함한다.
구체적으로 살펴보면, 어트랙션 컨트롤러(230)는 통신모듈(220)을 통해 입력된 실사 컨텐츠로부터 영상 데이터와 메타데이터를 분리하여, 영상 데이터는 가상체험 배경 영상(252)으로서 영상출력부(250)에서 디스플레이되도록 출력하고, 메타데이터는 배경 영상의 시점(viewpoint)으로서 참조한다.
또한 어트랙션 컨트롤러(230)는 탑승기(210)를 통해 사용자가 조작한 기계적인 입력(예컨대, 가속 페달을 밟는 정도, 브레이크 페달을 밟은 정도, 핸들을 돌리는 정도 등)을 미리 프로그램되어 있는 알고리즘에 따라 사용자 명령(예컨대, 출발, 정지, 속도 증가 명령, 속도 감속 명령, 좌로 방향 전환 명령, 우로 방향 전환 명령 등)으로 1차 변환하고, 이 사용자 명령을 기계 컴포넌트(250)를 제어하기 위한 제어명령(속도 증감속용 모터 동작 제어용 명령, 탑승기를 왼쪽으로 경사지게 하는 액추에이터 동작 제어용 명령 등)으로 2차 변환하여 출력할 수 있다.
다시 말해서, 예컨대 자동차 레이싱 가상체험의 경우, 탑승기(210)는 사용자가 앉을 수 있는 의자 형태의 탑승부와 사용자가 속도를 조절할 수 있도록 구성된 가속 페달과 브레이크 페달, 그리고 사용자가 방향을 조절할 수 있는 핸들을 포함하는 조작부가 구비될 수 있다. 이 예에서, 가상체험이 개시되면, 사용자는 가속 페달 또는 브레이크 페달에 발을 올려놓고 밟거나 떼어 정지함으로써 속도를 조절하는 명령을 입력할 수 있고, 이와 동시에 핸들을 움직여 진행 방향을 조절하는 명령을 입력할 수 있다. 이러한 입력 명령은, 어트랙션 컨트롤러(230)에 의해 미리 프로그래밍되어 있는 하드웨어제어 알고리즘에 따라 탑승부의 3차원 운동 또는 진동을 야기하는 전동모터의 동작을 제어하는 제어 명령으로 생성될 수 있다.
한편 어트랙션 컨트롤러(230)는 생성된 제어 명령 데이터에 기초하여 사용자 시점 데이터를 생성하고, 생성된 사용자 시점 데이터를 실사 컨텐츠에 기초하여 생성된 영상 시점 데이터와 비교할 수 있다. 그 비교 결과는 인터랙션 메시지를 출력하기 위해 사용된다. 또한 실사 컨텐츠에 기초한 배경 영상 시점의 속도와 사용자 명령에 기초한 아바타 시점의 속도를 비교하고, 그 결과 차이가 발생하지 않으면, "잘하고 있네요, 훌륭해요"라는 칭찬 메시지와 같은 인터랙션 메시지를 사용자에게 출력할 수 있다.
어트랙션 컨트롤러(230)는, 입력된 실사 컨텐츠에서 유래하는 배경(254) 프레임에, 각 프레임마다 사용자 명령에 기초하여 계산된 사용자 시점의 궤적 데이터에 기초하여 생성되는 사용자 아바타(254) 이미지를 합성하고, 이 합성된 프레임들을 영상출력부(250)에 디스플레이되도록 출력할 수 있다.
기계 컴포넌트(240)는 어트랙션 컨트롤러(230)에서 출력되는 제어 명령에 따라 동작하여 탑승기(210)를 기계적으로 움직이기 위한 수단이며 도 3을 참조하여 아래에서 더 설명된다. 기계 컴포넌트(250)는 탑승기(210)를 기계적으로 3차원 상에서 회전되도록 하기 위해 복수의 모터와 같은 구동 수단을 포함하여 구성될 수 있다. 또한 기계 컴포넌트(240)에는 사용자의 실감 수준을 높이기 위해 속도가 증가할 수록 더 빠른 속도로 바람을 출력하는 송풍기를 더 포함할 수 있다.
영상출력부(250)는 예컨대 HMD와 같이 사용자가 착용할 수 있는 디스플레이 를 포함할 수 있고, 음향출력부(260)는 이어폰 또는 7.1채널 등의 스피커 장치일 수 있다.
도 3은 본 발명의 실시예에 따른 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험용 어트랙션의 구성 중 중 탑승부 및 기계 컴포넌트의 제어를 상세히 설명하기 위한 개략적인 블록도이다.
도 3을 참조하면, 어트랙션(300)은 탑승기(301-307), 어트랙션 컨트롤러(311) 및 기계 컴포넌트(321-327)를 포함하며, 설명을 단순하게 하기 위하여 도 2에서 설명된 구성요소들 중 일부가 생략되어 있다.
도시된 예에서, 탑승기(301-307)는 예컨대 도 4에 예시된 바와 같이 사용자가 앉을 수 있는 의자 형태일 수 있는 탑승부(301)를 포함하고, 속도 및 방향 등을 조절하는 사용자 명령을 입력하기 위한 조작부로서 가속 페달(303), 감속 또는 브레이크 페달(305), 방향 전환용 핸들(307)을 포함한다. 이들 조작부(303-307)에 의해 입력된 사용자 명령은 어트랙션 컨트롤러(311)에 의해 기계 컴포넌트(321-327)를 제어하기 위한 제어 명령으로 변환될 수 있다.
기계 컴포넌트(321-327)는 도시된 예에서 턴 컴포넌트(321), 피칭 컴포넌트(323), 롤링 컴포넌트(325), 진동 컴포넌트(327), 송풍기(329)를 포함한다. 턴 컴포넌트(321)는, 예컨대 탑승부(301)에 탑승한 사용자를 기준으로, 상하방향(도 5의 Z축 참조)을 중심으로 탑승부(301)가 좌우 방향으로 예컨대 0~30도 범위에서 왕복 회전하도록 동작하는 컴포넌트이다. 턴 컴포넌트(321)는 레이싱 가상체험 중 곡선 궤적을 주행하기 위해서 방향 전환이 필요한 경우 사용자가 핸들(307)을 돌리는 것에 대응하여 탑승부(301)를 회전시키도록 제어될 수 있다. 롤링 컴포넌트(323)는 전후방향(도 5의 X축 참조)을 중심으로 예컨대 0-5도 만큼 왕복 회전하도록 동작하는 컴포넌트이다. 이러한 롤링 운동은 급회전 구간에서 사용자가 앉아있는 탑승부(301)를 좌우로 기울임으로써 급회전 감각을 느낄 수 있도록 할 수 있다. 한편 피칭 컴포넌트(325)는 좌우방향( 5의 Y축 참조)을 중심으로 예컨대 0-5도 만큼 왕복 회전하도록 동작하는 컴포넌트이며, 이는 급정거나 충돌 등의 경우에 대응하는 실감을 주기 위해 전후로 탑승부(301)를 기울이도록 동작할 수 있다. 나아가 진동 컴포넌트(327)는 출발 또는 정지, 급정거나 충돌시 대응하는 실감을 주기 위해 제어될 수 있다. 한편 송풍기(329)는 주행하는 속도의 크기에 따른 실감을 주기 위해, 속도가 작은 경우 약한 바람을 출력하고, 속도가 큰 경우에는 강한 바람을 출력하도록 제어될 수 있다.
도 4는 본 발명의 실시예에 따른 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험용 어트랙션에 있어서, 차량 운전대 형태의 탑승기와 이를 기계적으로 움직이기 위한 기계 컴포넌트의 외관을 예시하는 개략도이다.
도 4를 참조하면, 특히 자동차 레이싱 가상체험용 어트랙션(400)의 예가 도시된다. 이는 탑승기(401-409) 및 어트랙션 게이밍 컨트롤러와 기계 컴포넌트가 내장된 하드웨어 박스(410)를 포함한다.
도시된 예에서, 탑승기(401-409)는 사용자가 앉을 수 있는 의자 형태의 탑승부(401)와, 사용자가 조작하여 사용자 명령을 입력하기 위한 조작부로서 가속 페달(403), 브레이크 페달(405), 핸들(407)을 포함한다. 이들은 모두 회전 플레이트(409) 상에 고정되어, 회전 플레이트(409)의 움직임에 따라 같이 움직이게 구성된다.
회전 플레이트(409)와 여기에 고정되어 있는 부품들은 그 하부에 배치된 하드웨어 박스(410)에 의해 기계적으로 움직일 수 있다. 하드웨어 박스(410) 내에는, 도 3에 도시된 바와 같은 기계적 구성 요소들 즉 턴 컴포넌트, 롤링 컴포넌트, 피칭 컴포넌트 및 진동 컴포턴트와 이들 제어하기 위한 어트랙션 게이밍 컨트롤러가 실장된 인쇄회로기판 등이 구비될 수 있다.
하드웨어 박스(410)는 내장된 전동모터 등의 동작에 의해 3차원적으로 움직일 수 있고, 이에 의해 회전 플레이트(409)가 3차원적으로 움직이게 되며, 최종적으로 회전 플레이트(409)와 함께 움직이는 탑승부(401)에 앉아있는 사용자는 가상체험이 진행되는 동안, 영상과 음향 등의 도움을 받아, 실제로 자동차를 운전하고 있다는 실감을 느낄 수 있게 된다.
도 5는 도 4에 예시된 어트랙션의 기계 컴포넌트의 3차원 상의 움직임을 설명하기 위한 개략도이다.
도 5의 (a)를 참조하면, 사용자를 중심으로 상하방향의 수직축(Z축)을 중심으로 회전하는 턴(또는 요잉) 운동이 예시된다. 하드웨어 박스(500)는 위에서부터 차례로 턴 플레이트(511), 메인 박스(513), 중간 플레이트(515), 탄성지지구(517) 및 베이스 플레이트(519)를 구비할 수 있다.
구체적으로 턴 플레이트(511)는 도시된 바와 같이, 메인 박스(513) 및 중간 플레이트(515)에 대하여 수직축(A)을 중심으로 예컨대 0-5도 범위에서 좌우 회전가능하게 구성될 수 있다. 메인 박스(513)는 내부에 기계 컴포넌트를 구성하는 복수의 구동 모터 등의 다양한 요소들을 내장하며, 중간 플레이트(515)와 함께 전체적으로 수직축(A)을 중심으로, 중간 플레이트(515) 또는 베이스 플레이트(519)에 대하여 좌우 회전가능하게 구성될 수 있다.
이에 따라, 수직축을 중심으로 좌우 회전하는 범위는 턴 플레이트(511)에 의한 1차 회전 범위와 메인 박스(513)에 의한 2차 회전 범위를 포함함으로써 다양한 회전 효과를 제공할 수 있다.
한편 도 5의 (b)를 참조하면, 사용자를 중심으로 전후방향의 축(X축)을 중심으로 회전함으로써, 결과적으로 좌우로 기울어지는 롤링 운동이 예시된다. 구체적으로 턴 플레이트(511), 메인 박스(513)와 중간 플레이트(515)는 전체적으로 X축을 중심으로, 좌우로 기울어질 수 있는데, 이러한 롤링 운동은 베이스 플레이트(519)와 중간 플레이트(515) 사이에 배치된 탄성지지구(517)에 의해 탄성적으로 지지될 수 있다.
이에 따라, X축을 중심으로 좌우로 기울어지는 범위는 베이스 플레이트(519)와 중간 플레이트(515) 사이에 배치된 탄성지지구(517)의 높이에 의해 한정되며, 예컨대 곡선 구간을 주행할 때 사용자에게 기울어지는 효과를 제공할 수 있다.
또 한편 도 5의 (c)를 참조하면, 사용자를 중심으로 좌후방향의 축(Y축)을 중심으로 회전함으로써, 결과적으로 앞뒤로 진동하는 피칭 운동이 예시된다. 구체적으로 턴 플레이트(511), 메인 박스(513)와 중간 플레이트(515)는 전체적으로 Y축을 중심으로, 앞뒤로 기울어질 수 있는데, 이러한 피칭 운동은 롤링 운동시와 마찬가지로 베이스 플레이트(519)와 중간 플레이트(515) 사이에 배치된 탄성지지구(517)에 의해 탄성적으로 지지될 수 있다.
이에 따라, Y축을 중심으로 앞뒤로 기울어지는 범위는 베이스 플레이트(519)와 중간 플레이트(515) 사이에 배치된 탄성지지구(517)의 높이에 의해 한정되며, 예컨대 출발, 정지 또는 충돌시와 같은 급작스러운 속도 변화시에 사용자에게 대응하는 실감을 제공할 수 있다.
도 6은 본 발명의 실시예에 따른 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 시스템에서, 실사 컨텐츠를 생성하기 위한 이동 단말기의 구성을 예시하는 개략적인 블록도이다.
도 6을 참조하면, 예컨대 스마트폰일 수 있는 이동단말기(610)는 프로세서, 메모리 등을 포함하는 컴퓨팅 장치이며, 카메라를 내장하거나 또는 360도 카메라(630)와 같은 외장 카메라를 연결할 수 있다. 또는 시간을 감지하기 위한 타이머(615), 위치를 감지하기 위한 GPS 센서(613) 및 자세를 감지하기 위한 자이로 센서(617)를 포함할 수 있다. 또한 이동단말기(610)에는 본 발명에 따른 실사 컨텐츠를 생성하도록 구성된 애플리케이션(또는 '앱'이라고도 한다)(611)이 설치되며, 생성된 실사 컨텐츠를 예컨대 유무선 인터넷을 통해 원격의 컨텐츠 서버로 업로드하기 위한 통신모듈(619)을 포함한다.
도 7은 도 6에 도시된 이동 단말기에서 실사 컨텐츠가 생성되는 과정을 설명하기 위한 개략적인 흐름도이다.
도 7을 참조하면, 도 6의 앱(611)에 대응하는 애플리케이션(710)이 어트랙션 레이싱 가상체험용 실사 컨텐츠(720)를 생성하는 과정이 예시된다. 카메라에 의해 촬영됨으로써 실사 비디오 데이터(707)가 생성되는 동안, 대응하는 센서들에 의해 대응하는 비디오 프레임의 시간 데이터(701)와 뷰포인트(시점) 즉 이동단말기의 위치 데이터(703)와 자세 데이터(705)가 생성될 수 있다. 애플리케이션(710)은 이들 데이터를 이용하여 속도 데이터(712)를 생성하고, 최종적으로 촬영된 실사 영상 데이터의 시점을 나타내는 메타데이터(714)를 생성할 수 있다.
이러한 과정을 통해, 영상 데이터(707)와 이 영상 데이터의 시점을 정의하는 메타데이터(714), 그리고 최종적으로 생성될 실사 컨텐츠(720)를 분류할 때 참조할 수 있는 분류정보(716) 등을 포함하여 실사 컨텐츠(720)가 생성될 수 있다.
여기서 분류정보(716)는 사용자가 영상데이터를 생성하기 전에 미리 저장하거나 또는 촬영된 영상을 편집할 때 입력할 수 있는 텍스트 데이터로 이루어질 수 있고, 예컨대 실사 컨텐츠가 생성되는 경로 정보 및/또는 주행 시나리오 등이 포함될 수 있다.
도 8은 본 발명의 실시예에 따른 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 시스템에서, 컨텐츠 서버의 구성을 예시하는 개략적인 블록도이다.
도 8을 참조하면, 컨텐츠 서버(800)는 수신부(810), 제1저장부(820), 등록부(830), 제2저장부(840) 및 제공부(850)를 포함하여 구성될 수 있다. 수신부(810)는 이동 단말기로부터 업로드되는 실사 컨텐츠를 수신한다. 제1저장부(820)는 수신부(810)를 통해 업로드된 실사 컨텐츠를 저장한다. 등록부(830)는 실사 컨텐츠를 필터링하고, 예컨대 주행 경로나 시나리오를 포함하는 소정의 카테고리로 분류하여 등록한다. 제2저장부(840)는 등록된 실사 컨텐츠를 저장한다. 제공부(850)는 등록된 실사 컨텐츠를 검색에 제공하고, 어트랙션으로 다운로드되거나 스트리밍될 수 있도록 한다.
실시예에 있어서, 컨텐츠 서버(800)는 업로드된 실사 컨텐츠를 어트랙션의 탑승기 종류(예컨대, 자동차, 스키, 사이클, 봅슬레이 등), 및/또는 실사 컨텐츠에 포함된 주행 환경 정보(예컨대, 자동차 전용도로, 사이클 경기장, 산길, 스키장, 봅슬레이 경기장, 자동차 경주용 도로 등), 주행 시나리오(상위권, 중위권, 하위권 등)를 포함하는 카테고리 또는 분류 항목에 기초하여 분류하여 등록한 후 검색에 제공하도록 구성될 수 있다.
도 9는 본 발명의 실시예에 따른 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 방법 중 실사 컨텐츠를 생성하여 컨텐츠 서버에 업로드하고 검색에 제공하는 과정을 예시하는 개략적인 흐름도이다.
도 9를 참조하면, 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 방법(900)은, 이동 단말기에서 실사 컨텐츠를 생성하는 단계(901), 이동 단말기가 컨텐츠 서버에 접속하고, 컨텐츠 서버로 실사 컨텐츠를 업로드하는 단계(903), 컨텐츠 서버가 업로드된 실사 컨텐츠를 필터링하고 소정 카테고리에 따라 분류하여 등록하는 단계(905), 컨텐츠 서버가 등록된 실사 컨텐츠를 검색에 제공하는 단계(907), 컨텐츠 서버에 접속한 어트랙션 레이싱 가상체험장치를 이용하여 사용자가 원하는 카테고리와 특징을 가지는 것으로 분류되어 등록된 실사 컨텐츠를 검색하고 선택하여 다운로드 또는 스트리밍하는 단계(909), 및 다운로드 또는 스트리밍하는 실사 컨텐츠를 이용하여 어트랙션 레이싱 가상체험을 플레이하는 단계(911)를 포함한다.
도 10은 본 발명의 실시예에 따른 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 방법 중 어트랙션의 동작 과정을 예시하는 개략적인 흐름도이다.
도 10을 참조하면, 도 9에 도시된 단계들에 이어서 진행되는 단계들이 도시되며, 도시된 예에서 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 방법(1000)은, 어트랙션에서 가상체험 플레이가 시작되는 단계(1001); 어트랙션이, 실사 컨텐츠의 영상데이터와 메타데이터를 분리하는 단계(1003); 분리된 영상데이터를 가상체험 배경 영상으로서 디스플레이하는 단계(1005); 어트랙션에 탑승한 사용자의 입력에 따라 사용자가 탑승한 부분을 기계적으로 움직이기 위한 기계 컴포넌트를 제어하면서 동시에 어트랙션에 탑승한 사용자의 입력에 따라 제어되는 사용자 아바타를 생성하여 가상체험 배경 영상과 합성하여 디스플레이하는 단계(1007); 및 사용자가 사용자 명령을 입력하기 시작하면, 배경 영상의 시점과 사용자 아바타의 시점을 시간적으로 동기화하는 초기화 단계(1009); 사용자가 핸들이나 페달을 이용하여 사용자 명령을 입력하여 기계 컴포넌트와 사용자 아바타를 조정하는 동안 영상 배경이 같이 출력되면서 가상체험이 진행되는 동안, 어트랙션에서 배경 영상의 시점 궤적(예컨대 영상 시점의 속도)과 사용자 아바타의 시점 궤적(예컨대 사용자 아바타의 속도)를 비교하는 비교 단계(1011); 및 그 결과 미리 저장되어 있는 인터랙션 메시지를 사용자에게 출력하는 단계(1013)를 포함한다.
도 9 및 도 10에서는 각 단계를 순차적으로 실행하는 것으로 기재하고 있으나, 반드시 이에 한정되는 것은 아니다. 다시 말해, 도 9 및 도 10에 기재된 단계를 변경하여 실행하거나 하나 이상의 단계를 병렬적으로 실행하는 것으로 적용 가능할 것이므로, 도 9 및 도 10은 시계열적인 순서로 한정되는 것은 아니다.
도 9 및 도 10에 기재된 본 실시예에 따른 어트랙션 레이싱 가상체험 방법은 애플리케이션(또는 프로그램)으로 구현되고 단말장치(또는 컴퓨터)로 읽을 수 있는 기록매체에 기록될 수 있다. 본 실시예에 따른 어트랙션 레이싱 가상체험 방법을 구현하기 위한 애플리케이션(또는 프로그램)이 기록되고 단말장치(또는 컴퓨터)가 읽을 수 있는 기록매체는 컴퓨팅 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치 또는 매체를 포함한다.
도 11a 및 도 11b는 본 발명의 실시예에 따른 어트랙션에서의 속도 조정 과정을 예시하는 개략적인 흐름도이다.
도 11a는 가속 페달(악세러레이터) 조정에 따른 속도 조정 과정을 나타내고, 도 11b는 롤링 현상에 의한 속도 조정 과정을 나타낸다.
도 11a를 참조하면, 어트랙션(160)에서 사용자의 조작을 통해 가속 페달(악세러레이터)이 밟아지면(S1110), 사용자 아바타의 이동을 위하여 어트랙션(160)은 모터 회전을 저속(1 단계)으로 동작시키고(S1120), 저속 운행 및 1 단계에 대응하는 RPM 회전을 제공한다(S1122, S1124).
어트랙션(160)은 저속(1 단계) 이후 가속 페달이 지속적으로 밟아진 경우, 모터 회전을 중속(2 - 4 단계)으로 동작시킨다(S1130). 어트랙션(160)은 중속(2 - 4 단계)에 대응하는 중속 운행을 제공한다(S1132).
어트랙션(160)은 중속 운행 속도에 따라 2 단계에 대응하는 RPM에 해당하면(S1134) 기 설정된 2 단계 RPM 회전을 제공한다(S1135). 한편, 어트랙션(160)은 중속 운행 속도에서 3 단계에 대응하는 RPM에 해당하면(S1136) 기 설정된 3 단계 RPM 회전을 제공하며(S1137), 4 단계에 대응하는 RPM에 해당하면(S1138) 기 설정된 4 단계 RPM 회전을 제공한다(S1139).
어트랙션(160)은 중속(2 - 4 단계) 이후 가속 페달이 지속적으로 밟아진 경우, 모터 회전을 고속(5 단계)으로 동작시킨다(S1140). 여기서, 어트랙션(160)은 고속 운행 및 5 단계에 대응하는 RPM 회전을 제공한다(S1142, S1144).
어트랙션(160)에서 사용자의 조작을 통해 가속 페달을 밟는 동작이 정지되면(S1150), 어트랙션(160)은 진동 모터를 동작시키면서(S1152), 사용자 아바타를 정지시킨다.
도 11b를 참조하면, 어트랙션(160)에서 사용자의 조작을 통해 가속 페달(악세러레이터)이 밟아진 상태에서 주행 중 롤링 현상이 발생하면(S1160), 어트랙션(160)은 롤링 각도에 따라 진동 모터 또는 RPM 회전을 제어한다.
어트랙션(160)은 주행 중 롤링 각도가 O 내지 2 도 이면(S1170), 저속 2차 터닝을 수행하면서(S1172), 1 단계에 대응하는 RPM 회전을 제공한다(S1174).
한편, 어트랙션(160)은 주행 중 롤링 각도가 3 내지 5 도 이면(S1180), 중속 2차 터닝을 수행하면서(S1182), 2 내지 4 단계에 대응하는 RPM 회전을 제공한다.
어트랙션(160)은 중속 2차 터닝 속도가 2 단계에 대응하는 RPM에 해당하면(S1183) 기 설정된 2 단계 RPM 회전을 제공한다(S1184). 한편, 어트랙션(160)은 중속 2차 터닝 속도가 3 단계에 대응하는 RPM에 해당하면(S1185) 기 설정된 3 단계 RPM 회전을 제공한다(S1186). 한편, 어트랙션(160)은 중속 2차 터닝 속도가 4 단계에 대응하는 RPM에 해당하면(S1187) 기 설정된 4 단계 RPM 회전을 제공한다(S1188).
어트랙션(160)은 주행 중 롤링 각도가 5 도 이상이면(S1190), 고속 2차 터닝을 수행하면서(S1192), 5 단계에 대응하는 RPM 회전을 제공한다(S1194). 여기서, 5 단계에 대응하는 RPM 회전 시 진동 모터를 동작시키는 것이 바람직하다(S1196)
어트랙션(160)은 2 내지 5 단계에 대응하는 RPM 회전 중 롤링 현상으로 인한 2차 터닝 각도가 15 도 이상으로 발생하는 경우(S1197), RPM의 회전을 정지한다(S1198).
도 12는 본 발명의 실시예에 따른 어트랙션에서의 피칭 조정 과정을 예시하는 개략적인 흐름도이다.
도 12의 (a)는 후방 피팅이 발생한 경우에 대한 어트랙션(160)의 동작제어를 나타내며, 도 12의 (b)는 전방 피팅이 발생한 경우에 대한 어트랙션(160)의 동작제어를 나타낸다.
도 12의 (a)를 참조하면, 어트랙션(160)은 후방 피칭이 발생하는 경우(S1210), 전방 기울림 각도를 확인한다(S1220).
단계 S1220의 확인 결과, 전방 기울림 각도가 5도 미만인 경우 어트랙션(160)은 단계 S1210의 후방 피칭 현상을 유지한다. 한편, 단계 S1220의 확인 결과, 전방 기울림 각도가 5도 이상인 경우 고속 출발을 수행하며(S1222), 출발시 5 단계 RPM을 이용한다(S1224).
도 12의 (b)를 참조하면, 어트랙션(160)은 주행 중 전방 피칭이 발생하는 경우(S1230), 후방 기울림 각도를 확인한다(S1240).
단계 S1240의 확인 결과, 후방 기울림 각도가 5도 미만인 경우 어트랙션(160)은 단계 S1230의 전방 피칭 현상을 유지한다.
단계 S1240의 확인 결과, 후방 기울림 각도가 5도 이상인 경우 어트랙션(160)은 주행중 정지(S1250) 또는 고속 정지(S1260)를 제공한다. 어트랙션(160)은 단계 S1250에 따른 주행중 정지를 수행하는 경우, 주행중 2 단계에 대응하는 RPM이면(S1252), 2 단계로 RPM을 감소시켜 정지한다(S1253). 한편, 어트랙션(160)은 단계 S1250에 따른 주행중 정지를 수행하는 경우, 주행중 3 단계에 대응하는 RPM이면(S1254), 3 단계로 RPM을 감소시켜 정지한다(S1255). 한편, 어트랙션(160)은 단계 S1250에 따른 주행중 정지를 수행하는 경우, 주행중 4 단계에 대응하는 RPM이면(S1256), 4 단계로 RPM을 감소시켜 정지한다(S1257).
어트랙션(160)은 단계 S1250에 따른 고속 정지를 수행하는 경우, 5 단계로 RPM을 감소시켜 정지하며(S1270), 진동 모터를 동작시키면서 사용자 아바타를 정지시킨다(S1280).
도 13은 본 발명의 실시예에 따른 어트랙션에서의 방향 전환 과정을 예시하는 개략적인 흐름도이다.
어트랙션(160)은 사용자의 핸들 조작에 의해 1 차 터닝이 수행되면(S1310), 터닝 회전각을 확인한다.
어트랙션(160)은 터닝 회전각이 15도 이상이면(S1320) 2차 터닝이 수행된다(S1330). 한편, 단계 S1320에서 터닝 회전각을 확인하여 회전각이 30도 이상인 경우 핸들 회전을 정지시킨다(S1334).
어트랙션(160)은 단계 S1330의 2차 터닝에서 회전각이 15도 이상이면(S1340), 2차 터닝을 정지시킨다(S1350). 한편, 단계 S1340에서 터닝 회전각을 확인하여 회전각이 30도 이상인 경우 진동 모터를 사용하면서(S1390), 안전 센서를 확인한다(S1370). 어트랙션(160)은 안전센서에서 2차 터닝의 회전각이 안전한 기준범위 내인 것으로 확인되면, 정상적으로 2차 터닝을 정지시킨다(S1350). 한편, 어트랙션(160)은 안전센서에서 2차 터닝의 회전각이 안전한 기준범위를 벗어난 것으로 확인되면, 강제로 어트랙션 동작에 따른 방향 전환을 정지시킨다(S1380).
도 14a 내지 도 14c는 본 발명의 실시예에 따른 어트랙션에서의 송풍량 조정 과정을 예시하는 개략적인 흐름도이다.
도 14a는 어트랙션(160)의 가속 페달(악세러레이터) 조정에 따른 송풍량 조정 과정을 나타내고, 도 14b는 롤링에 따른 송풍량 조정 과정을 나타내고, 도 14c는 피칭에 따른 송풍량 조정 과정을 나타낸다.
도 14a를 참조하면, 어트랙션(160)에서 사용자의 조작을 통해 가속 페달(악세러레이터)이 밟아지면(S1410), 사용자 아바타의 이동을 위하여 어트랙션(160)은 모터 회전을 저속(1 단계)으로 동작시키고(S1412), 저속 운행 및 1 단계에 대응하는 송풍을 제공한다(S1413, S1414).
어트랙션(160)은 저속(1 단계) 이후 가속 페달이 지속적으로 밟아진 경우, 모터 회전을 중속(2 - 4 단계)으로 동작시킨다(S1420). 어트랙션(160)은 중속(2 - 4 단계)에 대응하는 중속 운행을 제공한다(S1422).
어트랙션(160)은 중속 운행 속도에 따라 2 단계에 대응하는 RPM에 해당하면(S1423) 기 설정된 2 단계 송풍을 제공한다(S1424). 한편, 어트랙션(160)은 중속 운행 속도에서 3 단계에 대응하는 RPM에 해당하면(S1425) 기 설정된 3 단계 송풍을 제공하며(S1426), 4 단계에 대응하는 RPM에 해당하면(S1427) 기 설정된 4 단계 송풍을 제공한다(S1428).
어트랙션(160)은 중속(2 - 4 단계) 이후 가속 페달이 지속적으로 밟아진 경우, 모터 회전을 고속(5 단계)으로 동작시킨다(S1430). 여기서, 어트랙션(160)은 고속 운행 및 5 단계에 대응하는 송풍을 제공한다(S1432, S1434).
어트랙션(160)에서 사용자의 조작을 통해 가속 페달을 밟는 동작이 정지되면(S1436), 어트랙션(160)은 송풍을 정지시킨다(S1438).
도 14b를 참조하면, 어트랙션(160)에서 사용자의 조작을 통해 가속 페달(세러레이터)이 밟아진 상태에서 주행 중 롤링 현상이 발생하면(S140), 어트랙션(160)은 롤링 각도에 따라 진동 모터 또는 RPM 회전을 제어한다.
어트랙션(160)은 주행 중 롤링 각도가 O 내지 2 도 이면(S1442), 저속 2차 터닝을 수행하면서(S1443), 1 단계에 대응하는 송풍을 제공한다(S1444).
한편, 어트랙션(160)은 주행 중 롤링 각도가 3 내지 5 도 이면(S1450), 중속 2차 터닝을 수행하면서(S1452), 2 내지 4 단계에 대응하는 RPM 회전을 제공한다.
어트랙션(160)은 중속 2차 터닝 속도가 2 단계에 대응하는 RPM에 해당하면(S1453) 기 설정된 2 단계 송풍을 제공한다(S1454). 한편, 어트랙션(160)은 중속 2차 터닝 속도가 3 단계에 대응하는 RPM에 해당하면(S1455) 기 설정된 3 단계 송풍을 제공한다(S1456). 한편, 어트랙션(160)은 중속 2차 터닝 속도가 4 단계에 대응하는 RPM에 해당하면(S1457) 기 설정된 4 단계 송풍을 제공한다(S1458).
어트랙션(160)은 주행 중 롤링 각도가 5 도 이상이면(S1460), 고속 2차 터닝을 수행하면서(S1462), 5 단계에 대응하는 송풍을 제공한다(S1464).
도 14c의 (a)는 후방 피팅이 발생한 경우에 대한 송풍량 조정 과정을 나타내며, 도 14c의 (b)는 전방 피팅이 발생한 경우에 대한 송풍량 조정 과정을 나타낸다.
도 14c의 (a)를 참조하면, 어트랙션(160)은 후방 피칭이 발생하는 경우(S1470), 전방 기울림 각도를 확인한다(S1472).
단계 S1472의 확인 결과, 전방 기울림 각도가 5도 미만인 경우 어트랙션(160)은 단계 S1470의 후방 피칭 현상을 유지한다. 한편, 단계 S1472의 확인 결과, 전방 기울림 각도가 5도 이상인 경우 고속 출발을 수행하며(S1473), 출발시 5 단계 송풍을 제공한다(S1474).
도 14의 (b)를 참조하면, 어트랙션(160)은 주행 중 전방 피칭이 발생하는 경우(S1481), 후방 기울림 각도를 확인한다(S1482).
단계 S1482의 확인 결과, 후방 기울림 각도가 5도 미만인 경우 어트랙션(160)은 단계 S1481의 전방 피칭 현상을 유지한다.
단계 S1482의 확인 결과, 후방 기울림 각도가 5도 이상인 경우 어트랙션(160)은 주행중 정지(S1490) 또는 고속 정지(S1484)를 제공한다. 어트랙션(160)은 단계 S1490에 따른 주행중 정지를 수행하는 경우, 주행중 2 단계에 대응하는 RPM이면(S1491), 2 단계로 제공되던 송풍을 정지한다(S1492). 한편, 어트랙션(160)은 단계 S1490에 따른 주행중 정지를 수행하는 경우, 주행중 3 단계에 대응하는 RPM이면(S1493), 3 단계로 제공되던 송풍을 정지한다(S1494). 한편, 어트랙션(160)은 단계 S1490에 따른 주행중 정지를 수행하는 경우, 주행중 4 단계에 대응하는 RPM이면(S1495), 4 단계로 제공되던 송풍을 정지한다(S1496).
한편, 어트랙션(160)은 단계 S1484에 따른 고속 정지를 수행하는 경우, 5 단계로 제공되던 송풍을 정지한다(S1486).
도 15는 본 발명의 실시예에 따른 어트랙션에서의 진동모터 동작 과정을 예시하는 개략적인 흐름도이다.
도 15를 참조하면, 사용자의 조작에 의해 게임시 충돌이 발생하면(S1510), 사용자 아바타의 이동을 위하여 어트랙션(160)은 모터 회전을 저속(1 단계)으로 동작시키고(S1512), 저속 충돌을 수행한다(S1514). 여기서, 어트랙션(160)은 진동 모터를 구동시켜 1 단계 진동을 제공한다(S1516).
어트랙션(160)은 저속(1 단계) 이후 가속 페달이 지속적으로 밟아진 경우, 모터 회전을 중속(2 - 4 단계)으로 동작시킨다(S1520). 어트랙션(160)은 중속(2 - 4 단계)에 대응하는 중속 충돌을 수행한다(S1522).
어트랙션(160)은 중속 충돌시 2 단계에 대응하는 RPM에 해당하면(S1523), 진동 모터를 구동시켜 2 단계 진동을 제공한다(S1524). 한편, 어트랙션(160)은 중속 충돌시 3 단계에 대응하는 RPM에 해당하면(S1525) 진동 모터를 구동시켜 3 단계 진동을 제공하며(S1526), 4 단계에 대응하는 RPM에 해당하면(S1527) 진동 모터를 구동시켜 4 단계 진동을 제공한다(S1528).
어트랙션(160)은 중속(2 - 4 단계) 이후 가속 페달이 지속적으로 밟아진 경우, 모터 회전을 고속(5 단계)으로 동작시킨다(S1530). 여기서, 어트랙션(160)은 고속 중속 충돌을 수행하고(S1540), 진동 모터를 구동시켜 5 단계 진동을 제공한다(S1542).
어트랙션(160)에서 사용자의 조작을 통해 가속 페달을 밟는 동작이 정지되면(S1532), 어트랙션(160)은 사용자 아바타를 정지시킨다(S1534).
도 16은 본 발명의 실시예에 따른 어트랙션에서의 모터 기반 터닝 동작 과정을 예시하는 개략적인 흐름도이다.
도 16은 특정 상황에 대한 코스에서 사용자의 조작에 따른 어트랙션(160)의 모터 기반 터닝 동작 과정을 나타낸다.
어트랙션(160)은 주행 중 평가 모드를 시작하고(S1610), 사용자 아바타가 주행하는 도로의 상태를 확인한다.
어트랙션(160)은 사용자 아바타가 주행 중인 도로가 일반도로인 경우(S1630), 가속 페달(악세러레이터)의 조작에 의한 증속을 수행한다(S1614). 단계 S1614에서 증속된 속도가 트랙 벨트 속도에 해당하는 경우(S1620), 특정 상황에 대응하는 사용자 아바타의 랜덤 회전량을 결정하여 회전을 수행한다(S1652). 여기서, 사용자 아바타의 랜덤 회전량은 특정 상황 각각에 대해 기 설정된 복수의 회전량 중 랜덤으로 결정된 회전량일 수 있다.
어트랙션(160)은 사용자 아바타가 주행 중인 도로가 일반도로가 아닌 경우(S1630), 특정 상황에 대한 코스인지 여부를 확인한다(S1640). 여기서, 특정 상황에 대한 코스는 물 뿌린 도로 코스, 빙판 도로 코스, 차량 끼어들기 도로 코스, 야생동물 끼어들기 도로 코스 등 중 하나일 수 있다.
단계 S1640에서 특정 상황에 대한 코스인 경우, 어트랙션(160)은 모터 회전에 의한 수동적 터닝을 수행하며(S1650), 특정 상황에 대응하는 사용자 아바타의 랜덤 회전량을 결정하여 회전을 수행한다(S1652).
사용자 아바타의 회전에 대해 중심을 잡지 못한 경우(S1670), 어트랙션(160)은 핸들에 의한 적극 제어된 터닝을 수행하고(S1660), 가속 페달(악세러레이터)의 조작에 의한 증속(S1614) 및 브레이크에 의한 감속(S1616)을 수행한다.
사용자 아바타의 회전에 대해 중심을 잡은 경우(S1670), 어트랙션(160)은 사용자 아바타의 상태 및 사용자 조정에 대한 숙련도를 확인하고(S1672), 주행 시간을 체크하여(S1674) 평가 등급을 산출 여부를 확인한다(S1676).
단계 S1676에서 평가 등급이 산출된 경우, 평가 결과를 구비된 디스플레이 또는 단말기를 통해 표시한다(S1678). 한편, 단계 S1676에서 평가 등급이 산출되지 않은 경우, 평가를 시작하는 단계를 반복하여 수행한다.
도 17a 및 도 17b는 본 발명의 실시예에 따른 어트랙션에서의 드리프트 주행 제어 과정을 예시하는 개략적인 흐름도이다.
도 17a는 사용자 조작 훈련에 따른 드리프트 주행 제어 과정을 나타내고, 도 17b는 드리프트 주행 제어에 대한 등급 평가를 수행하는 과정을 나타낸다.
도 17a을 참조하면, 어트랙션(160)은 드리프트 주행 모드를 시작하여 사용자 아바타의 후륜 여부를 확인하고(S1710), 사용자 아바타가 후륜이 아닌 경우 드리프트 체험을 중지한다(S1712).
단계 S1710에서 사용자 아바타가 후륜인 경우 드리프트 주행 모드를 진입하고(S1720), 모터(트랙벨트)의 회전속도를 기 설정된 기준값과 비교하여 고속 회전 여부를 확인한다(S1722).
단계 S1722에서, 어트랙션(160)은 모터(트랙벨트)의 회전속도가 고속이 아닌 것으로 확인되면, 단계 S1720의 드리프트 주행 모드로 다시 진입하는 동작을 수행한다.
단계 S1722에서, 어트랙션(160)은 모터(트랙벨트)의 회전속도가 고속인 것으로 확인되면, 사용자 아바타의 회전각을 체크하여(S1724), 회전속도를 결정한다(S1726).
어트랙션(160)은 드리프트 회전 중 브레이크 조작에 따른 감속량이 존재하는 경우(S1730), 전진속도를 결정하여 가속 패달의 제어가 이루어지도록 한다(S1732).
어트랙션(160)은 가속 패달의 조작에 따른 증속량이 존재하지 않으면(S1734), 사용자 아바타의 회전각을 체크하는 단계 S1724로 돌아간다.
한편, 어트랙션(160)은 가속 패달의 조작에 따른 증속량이 존재하면(S1734), 사용자 아바타의 회전에 대해 중심을 잡았는지 여부를 판단한다(S1736).
어트랙션(160)은 사용자 아바타의 회전에 대해 중심을 잡은 경우, 사용자 아바타를 정지시킨다(S1740). 한편, 어트랙션(160)은 사용자 아바타의 회전에 대해 중심을 잡지 못한 경우, 모터(트랙벨트)의 회전속도가 고속인지 여부를 다시 확인한다.
도 17b을 참조하면, 어트랙션(160)은 등급평가 모드를 시작하고(S1760), 사용자 아바타의 드리프트 시간을 기 설정된 평가 기준서와 비교하여 드리프트 시간을 평가한다(S1762, S1764).
이후, 어트랙션(160)은 기 설정된 평가 기준서와 비교하여 드리프트의 상태를 확인하고(S1770), 이에 대하 안정 등급평가 결과를 산출한다(S1772). 어트랙션(160)은 산출된 안정 등급평가 결과에 따라 사용자의 숙련도 평가를 수행한다(S1780). 어트랙션(160)은 기 설정된 평가 기준서와 비교하여 사용자의 숙련도 평가를 수행하여 안전도 평가 결과를 산출하고(S1780), 산출된 안전도 평가 결과를 기반으로 사용자의 최종 등급 평가를 결정한다(S1784).
도 11 내지 도 17에서는 각 단계를 순차적으로 실행하는 것으로 기재하고 있으나, 반드시 이에 한정되는 것은 아니다. 다시 말해, 도 11 내지 도 17에 기재된 단계를 변경하여 실행하거나 하나 이상의 단계를 병렬적으로 실행하는 것으로 적용 가능할 것이므로, 도 11 내지 도 17은 시계열적인 순서로 한정되는 것은 아니다.
도 11 내지 도 17에 기재된 본 실시예에 따른 어트랙션 레이싱 가상체험 방법은 애플리케이션(또는 프로그램)으로 구현되고 단말장치(또는 컴퓨터)로 읽을 수 있는 기록매체에 기록될 수 있다. 본 실시예에 따른 어트랙션 레이싱 가상체험 방법을 구현하기 위한 애플리케이션(또는 프로그램)이 기록되고 단말장치(또는 컴퓨터)가 읽을 수 있는 기록매체는 컴퓨팅 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치 또는 매체를 포함한다.
이상의 설명은 본 발명의 실시예의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명의 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 실시예의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명의 실시예들은 본 발명의 실시예의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 실시예의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 실시예의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 실시예의 권리범위에 포함되는 것으로 해석되어야 할 것이다.

Claims (16)

  1. 어트랙션 레이싱 가상체험 방법으로서,
    이동단말기에 의해 실사 영상데이터 및 상기 실사 영상데이터 시점의 시간, 위치 및 자세 정보를 포함한 메타데이터를 포함하는 실사 컨텐츠를 생성하는 실사 컨텐츠 생성 단계;
    상기 이동단말기가 상기 실사 컨텐츠를 원격의 컨텐츠 서버에 업로드하는 실사 컨텐츠 업로드 단계;
    어트랙션이 상기 컨텐츠 서버로부터 상기 실사 컨텐츠를 다운로드 또는 스트리밍하는 실사 컨텐츠 입력 단계; 및
    상기 어트랙션이, 상기 실사 컨텐츠의 영상데이터를 가상체험 배경 영상으로서 디스플레이하는 동안, 상기 어트랙션에 탑승한 사용자의 입력에 따라 상기 사용자가 탑승한 부분을 기계적으로 움직이기 위한 기계 컴포넌트를 제어하면서 동시에 상기 어트랙션에 탑승한 사용자의 입력에 따라 제어되는 사용자 아바타를 상기 가상체험 배경 영상에 합성하여 디스플레이하며, 또한 상기 실사 컨텐츠의 메타데이터에 따른 배경 영상의 시점 궤적과 사용자 아바타의 시점 궤적을 비교하고 그 결과에 따라 미리 결정되어 있는 인터랙션 메시지를 출력하는 가상체험 플레이 단계를
    포함하는 것을 특징으로 하는 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 방법.
  2. 제 1항에 있어서,
    상기 실사 컨텐츠 생성 단계는, 적어도 하나의 상기 이동 단말기가 미리 결정된 경로를 따른 미리 예상된 주행 시나리오에 따라 서로 다른 속도로 주행하면서 속도별 복수의 그룹을 가지는 상기 실사 컨텐츠를 생성하는 단계를 포함하는 것을 특징으로 하는 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 방법.
  3. 제2항에 있어서,
    상기 가상체험 플레이 단계는,
    상기 사용자 아바타의 시점 궤적을 기반으로 상기 실사 컨텐츠에 포함된 상기 복수의 그룹 중 하나를 선택하고, 선택된 그룹 내에 포함된 적어도 하나의 이동 단말기의 속도 중 상기 사용자 아바타의 시점 궤적과 가장 차이값이 적은 이동 단말기에서 촬영된 상기 실사 컨텐츠의 메타데이터에 따른 배경 영상의 시점 궤적에 상기 사용자 아바타를 합성하여 디스플레이 하는 것을 특징으로 하는 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 방법.
  4. 제3항에 있어서,
    상기 가상체험 플레이 단계는,
    사용자 보조 모드로 동작하는 경우, 상기 복수의 그룹 중 선택된 그룹 내에 포함된 적어도 하나의 이동 단말기의 속도들의 평균값과 사용자의 입력에 따른 사용자 아바타의 속도값을 비교하여 계산된 속도 차이값을 보조하여 상기 기계 컴포넌트를 제어하는 것을 특징으로 하는 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 방법.
  5. 제3항에 있어서,
    상기 가상체험 플레이 단계는,
    사용자 보조 모드로 동작하는 경우, 상기 복수의 그룹 중 선택된 그룹 내에 포함된 적어도 하나의 이동 단말기의 턴, 피칭 및 롤링 각도 각각의 평균값과 사용자의 입력에 따른 사용자 아바타의 턴, 피칭 및 롤링 각도 각각을 비교하여 계산된 각도차이값을 보조하여 상기 기계 컴포넌트를 제어하는 것을 특징으로 하는 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 방법.
  6. 제 1항에 있어서,
    상기 실사 컨텐츠 업로드 단계는 상기 이동 단말기가 생성되고 있는 실사 컨텐츠를 원격 컨텐츠 서버로 실시간 업로드하고,
    상기 실사 컨텐츠 입력단계는, 적어도 하나의 어트랙션이 상기 컨텐츠 서버에 접속되면, 실시간 업로드된 실사 컨텐츠를 실시간 스트리밍을 통해 입력받고, 상기 어트랙션은 상기 실시간 스트리밍을 통해 입력된 상기 실사 컨텐츠에 상기 사용자 아바타를 합성하여 출력하는 것을 특징으로 하는 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 방법.
  7. 제 1항에 있어서,
    상기 실사 컨텐츠 업로드 단계는,
    상기 컨텐츠 서버가, 업로드된 실사 컨텐츠를 어트랙션의 탑승기 종류 및 상기 실사 컨텐츠에 포함된 경로와 시나리오 정보를 포함하는 분류 항목에 기초하여 분류하여 등록한 후 검색에 제공하는 단계를 더 포함하는 것을 특징으로 하는 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 방법.
  8. 어트랙션 레이싱 가상체험용 어트랙션으로서,
    사용자가 탑승하여 사용자 명령을 입력하기 위한 탑승기;
    입력된 실사 컨텐츠의 영상데이터를 가상체험 배경 영상으로서 디스플레이하도록 출력하고, 상기 사용자 명령을 소정 변환 알고리즘에 따라 제어 명령으로 변환하여 출력하고, 상기 사용자 명령에 기초하여 상기 배경 영상 내에 합성되어 디스플레이되는 사용자 아바타를 조정하며, 또한 상기 실사 컨텐츠의 메타데이터에 따른 배경 영상의 시점 궤적과 상기 아바타의 시점 궤적을 비교하고 그 결과에 따라 미리 결정되어 있는 인터랙션 메시지를 출력하는 어트랙션 컨트롤러;
    상기 어트랙션 컨트롤러에서 출력되는 제어 명령에 따라 동작하여 상기 사용자가 탑승하고 있는 탑승기를 기계적으로 움직이기 위한 기계 컴포넌트; 및
    상기 어트랙션 컨트롤러에서 출력되는 배경 영상 및 사용자 아바타의 합성 영상을 디스플레이하는 디스플레이를
    포함하는 것을 특징으로 하는 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험용 어트랙션.
  9. 제 8항에 있어서,
    상기 탑승기는, 상기 사용자가 탑승하는 탑승부와 상기 사용자가 속도 및 방향을 조절하는 가상체험 명령을 입력하는 조작부를 포함하고; 상기 기계 컴포넌트는, 상기 탑승부를 기계적으로 3차원 상에서 회전되도록 하는 턴 컴포넌트, 피칭 컴포넌트 및 롤링 컴포넌트와 진동을 가하는 진동 컴포넌트를 포함하는 것을 특징으로 하는 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험용 어트랙션.
  10. 제 9항에 있어서,
    상기 기계 컴포넌트는, 상기 탑승부로 바람을 보낼 수 있는 송풍기를 더 포함하는 것을 특징으로 하는 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험용 어트랙션.
  11. 제 8항에 있어서,
    상기 탑승기는 상기 사용자가 인력 또는 전동력으로 이동가능한 탑승 장치 중 어느 하나의 적어도 일부를 모방한 형태인 것을 특징으로 하는 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험용 어트랙션.
  12. 제 8항에 있어서,
    상기 디스플레이는 헤드 마운트 디스플레이(HMD, head mount display)를 포함하는 것을 특징으로 하는 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험용 어트랙션.
  13. 제 8항에 있어서,
    상기 실사 컨텐츠는 영상 공급자가 미리 결정된 경로를 따른 미리 예상된 주행 시나리오에 따라 주행하면서 생성되어 상기 컨텐츠 서버를 경유하여 실시간 방송되고 있는 것을 실시간 스트리밍하여 입력되는 것을 특징으로 하는 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험용 어트랙션.
  14. 제 13항에 있어서,
    상기 실사 컨텐츠는 3차원 영상 또는 360도 VR(virtual reality) 영상을 포함하는 것을 특징으로 하는 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험용 어트랙션.
  15. 어트랙션 레이싱 가상체험 시스템으로서,
    미리 결정된 경로를 따른 미리 예상된 주행 시나리오에 따라 주행하면서 실사 컨텐츠를 생성하는 이동 단말기;
    상기 이동 단말기에게 실사 컨텐츠를 업로드하도록 제공하고, 업로드된 실사 컨텐츠를 등록하여 검색에 제공하는 컨텐츠 서버; 및
    사용자가 탑승하여 가상체험 조작 명령을 입력하는 탑승기를 포함하며, 가상체험 컨텐츠를 입력받아 상기 가상체험 컨텐츠에 기초한 가상체험 영상을 상기 사용자에게 디스플레이하는 동안 입력된 가상체험 조작 명령에 반응하여 상기 탑승기를 기계적으로 움직이도록 구성된 어트랙션을 포함하고,
    상기 어트랙션은, 상기 실사 컨텐츠의 영상데이터를 가상체험 배경 영상으로서 디스플레이하는 동안, 상기 어트랙션에 탑승한 사용자의 입력에 따라 상기 사용자가 탑승한 부분을 기계적으로 움직이기 위한 기계 컴포넌트를 제어하면서 동시에 상기 어트랙션에 탑승한 사용자의 입력에 따라 제어되는 사용자 아바타를 상기 가상체험 배경 영상에 합성하여 디스플레이하며, 또한 상기 실사 컨텐츠의 메타데이터에 따른 배경 영상의 시점 궤적과 사용자 아바타의 시점 궤적을 비교하고 그 결과에 따라 미리 결정되어 있는 인터랙션 메시지를 출력하는 방식으로 가상체험이 진행되도록 구성되는 것을 특징으로 하는 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 시스템.
  16. 제 15항에 있어서,
    상기 어트랙션에 입력되는 실사 컨텐츠는, 상기 이동 단말기에 의하여 생성되면서 실시간으로 상기 컨텐츠 서버로 업로드되어 방송되는 실시간 방송 컨텐츠인 것을 특징으로 하는 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 시스템.
PCT/KR2019/009438 2018-07-31 2019-07-29 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 방법 및 시스템 WO2020027531A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2018-0089460 2018-07-31
KR20180089460 2018-07-31

Publications (1)

Publication Number Publication Date
WO2020027531A1 true WO2020027531A1 (ko) 2020-02-06

Family

ID=69232603

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2019/009438 WO2020027531A1 (ko) 2018-07-31 2019-07-29 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 방법 및 시스템

Country Status (1)

Country Link
WO (1) WO2020027531A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113409638A (zh) * 2021-05-27 2021-09-17 唐山师范学院 一种基于虚拟现实技术的动画实景体验装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160113491A (ko) * 2015-03-20 2016-09-29 한국전자통신연구원 모션 플랫폼 시스템
KR101698560B1 (ko) * 2016-01-15 2017-02-01 주식회사 인스퀘어 다리건너기용 가상 체험 시스템
KR101739485B1 (ko) * 2015-12-04 2017-05-24 주식회사 이제갬 가상 현실 체험 시스템
KR101748401B1 (ko) * 2016-08-22 2017-06-16 강두환 가상현실 어트랙션 제어 방법 및 시스템
KR101826472B1 (ko) * 2017-04-27 2018-03-22 강두환 봅슬레이 가상 체험장치

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160113491A (ko) * 2015-03-20 2016-09-29 한국전자통신연구원 모션 플랫폼 시스템
KR101739485B1 (ko) * 2015-12-04 2017-05-24 주식회사 이제갬 가상 현실 체험 시스템
KR101698560B1 (ko) * 2016-01-15 2017-02-01 주식회사 인스퀘어 다리건너기용 가상 체험 시스템
KR101748401B1 (ko) * 2016-08-22 2017-06-16 강두환 가상현실 어트랙션 제어 방법 및 시스템
KR101826472B1 (ko) * 2017-04-27 2018-03-22 강두환 봅슬레이 가상 체험장치

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113409638A (zh) * 2021-05-27 2021-09-17 唐山师范学院 一种基于虚拟现实技术的动画实景体验装置

Similar Documents

Publication Publication Date Title
JP4694141B2 (ja) ゲームプレイの状態に基づいてカメラのパラメータを動的に制御する方法および装置
WO2021066269A1 (ko) 사용자 게임 연계 자율주행 방법 및 시스템
KR101748401B1 (ko) 가상현실 어트랙션 제어 방법 및 시스템
US5669821A (en) Video augmented amusement rides
CN201308742Y (zh) 一种真人场景跑步机
JP2010123128A (ja) 拡張現実感体験を提供するシステムおよび方法
WO2020027531A1 (ko) 실사 컨텐츠에 기초한 어트랙션 레이싱 가상체험 방법 및 시스템
US20220280857A1 (en) Video workout programs
CN101711913A (zh) 一种仿真实景旅行的游戏健身设备
KR20190063883A (ko) 드론을 이용한 증강현실 인터렉티브 게임 컨텐츠의 제공 시스템
KR20170085869A (ko) 수직 중력 방향으로 가속력을 스키선수의 산에서의 낙하, 회전, 감속의 주력 하중을 발생하는 엘리베이터형 모션 시뮬레이터 장치와 정밀 스키 제어 하중 및 움직임을 만들어내는 스키 반력 다이나모 장치에 의한 가상 스키 시뮬레이터 기술과 가상스키의 네트웍 경주 스포츠를 위한 가상 스튜디오 vr 스키 인터넷 방송, 인터넷 관중의 경기 관람 서비스의 vr 가상현실 스포츠 플랫폼 기술
WO2021015393A1 (ko) 자율주행장치 레이싱게임 제공방법과 레이싱장치 및 시스템
EP4152267A1 (en) Information processing device, information processing method, and display device
JP2019128721A (ja) ユーザの動きをアバタに反映するためのプログラム、当該プログラムを実行するための情報処理装置、およびアバタを含む映像を配信するための方法
JP2019067222A (ja) 仮想現実を提供するためにコンピュータで実行されるプログラムおよび情報処理装置
WO2015033446A1 (ja) ランニング支援システムおよびこれに用いるヘッドマウントディスプレイ装置
WO2019124655A1 (ko) 체험장치
Chesher Robots and the moving camera in cinema, television and digital media
WO2018105839A1 (ko) 체험장치
WO2018038337A1 (ko) Hmd 유저와 복수의 일반인들 간에 상호작용이 가능한 가상현실 컨텐츠 시스템 및 그 제어방법
KR102328405B1 (ko) 날으는 체감이 증대된 4d vr시뮬레이터
JP2010026865A (ja) 加速度感覚呈示装置、加速度感覚呈示システム、情報処理装置、加速度感覚呈示方法
KR102203371B1 (ko) 놀이공원에서 놀이기구를 가동하는 동안 이미지를 시각화하는 장치, 방법 및 이미지 시각화 장치를 관리하는 장치 및 방법
CN108055523A (zh) 一种基于图像传输和姿态感应的模拟主视角控制游乐系统
JPH1021425A (ja) 画像処理装置、画像処理方法及びゲーム装置並びに遊戯装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19843287

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

32PN Ep: public notification in the ep bulletin as address of the adressee cannot be established

Free format text: NOTING OF LOSS OF RIGHTS PURSUANT TO RULE 112(1) EPC (EPO FORM 1205A DATED 08/07/2021)

122 Ep: pct application non-entry in european phase

Ref document number: 19843287

Country of ref document: EP

Kind code of ref document: A1