WO2015133667A1 - Online virtual stage system for mixed reality performance service - Google Patents
Online virtual stage system for mixed reality performance service Download PDFInfo
- Publication number
- WO2015133667A1 WO2015133667A1 PCT/KR2014/001921 KR2014001921W WO2015133667A1 WO 2015133667 A1 WO2015133667 A1 WO 2015133667A1 KR 2014001921 W KR2014001921 W KR 2014001921W WO 2015133667 A1 WO2015133667 A1 WO 2015133667A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- virtual stage
- signal
- virtual
- video
- video sound
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/10—Office automation; Time management
Abstract
The present invention relates to an online virtual stage system which sets up a virtual stage online and allows a host and a guest to participate and, more particularly, to an online virtual stage system for a mixed reality performance service which allows hosts and guests to enjoy the same video and audio in one virtual stage, and which is capable of inducing voluntary participation of a lot of guests in stages having an enhanced sense of reality, wherein one or more guests directly participate in seats of the virtual stage using his/her own online avatar.
Description
본 발명은 온라인 상에서의 가상무대를 개설하고 참여하도록 하는 온라인 가상무대 시스템에 관한 것으로, 보다 상세하게는 호스트와 게스트가 하나의 가상무대에서 동일한 영상과 음향을 즐길 수 있을 뿐만 아니라, 하나 이상의 게스트가 자신의 온라인 아바타를 이용해 직접 가상무대의 객석에 참여하여 보다 현실감 있는 무대와 많은 게스트의 자발적 참여를 유도할 수 있는 혼합현실형 공연 서비스를 위한 온라인 가상무대 시스템에 관한 것이다.The present invention relates to an on-line virtual stage system for establishing and participating in an on-line virtual stage. More specifically, the host and the guest can enjoy the same image and sound on one virtual stage, It is about an online virtual stage system for a mixed reality performance service that can induce a more realistic stage and voluntary participation of many guests by directly participating in a virtual stage audience using their online avatar.
본 발명은 혼합현실형 공연 서비스를 위한 온라인 가상무대 시스템에 관한 것이다.The present invention relates to an on-line virtual stage system for a mixed reality performance service.
기존의 온라인 가상무대는, 소위 아프리카 TV 등과 같이 단순히 호스트가 자신의 단말기 및 자신의 단말기에 장착된 영상음향장치를 이용해 다른 게스트의 단말기에 전송하고, 호스트와 게스트는 그 화면 상에서 채팅 등만을 수행하는 정도의 수준에 불과한 실정이다.In the existing online virtual stage, the host simply transmits to the other guest's terminal using his or her own terminal and the video and audio device mounted on the terminal, such as a so-called African TV, and the host and the guest only chat on the screen. It is just a level.
이러한 기존의 온라인 가상무대 기술은, 가상무대를 꾸미고 제공하는 호스트와 그 가상무대에 참여하는 게스트들에게 실제 공연무대와 같은 현장감이 제공되지 못할 뿐만 아니라, 가상무대에 대한 상황별 이벤트가 적시에 일치되어 발생되지 못하고, 게스트들에게도 보다 현실적이고 적극적인 참여의 유도가 불가능한 문제가 있다.This existing online virtual stage technology not only provides a real stage performance to the host who decorates and provides the virtual stage and the guests who participate in the virtual stage, but also timely matches the contextual events on the virtual stage. There is a problem that cannot occur, and it is impossible for the guests to induce more realistic and active participation.
본 발명의 배경이 되는 기술은 대한민국 공개특허공보 제10-2008-0096927호 등에 개시되어 있으나, 상기 공개특허공보 등 역시 상술한 문제점에 대한 해결책을 제시하고 있지 못하는 실정이다.The background art of the present invention is disclosed in Korean Patent Laid-Open Publication No. 10-2008-0096927 and the like, but the present disclosure does not provide a solution to the above-described problem.
상술한 문제점을 해결하기 위해 안출된 본 발명의 목적은 가상무대 애플리케이션을 통해 개설되는 가상무대에 호스트 클라이언트에서 획득되는 영상음향신호가 합성되고, 게스트 클라이언트의 사용자에 대한 온라인 아바타가 그 가상무대에 함께 포함되도록 구성함으로써, 호스트와 게스트가 하나의 가상무대에서 동일한 영상과 음향을 즐길 수 있을 뿐만 아니라, 하나 이상의 게스트가 자신의 온라인 아바타를 이용해 직접 가상무대의 객석에 참여하여 보다 현실감 있는 무대와 많은 게스트의 자발적 참여를 유도할 수 있는 혼합현실형 공연 서비스를 위한 온라인 가상무대 시스템을 제공하기 위한 것이다.An object of the present invention devised to solve the above-described problem is to synthesize a video sound signal obtained from a host client on a virtual stage opened through a virtual stage application, and the online avatar of the user of the guest client is combined with the virtual stage. By including it, the host and guest can not only enjoy the same video and sound on one virtual stage, but also more than one guest can directly participate in the virtual stage by using their online avatar to create a more realistic stage and many guests. It is to provide an on-line virtual stage system for mixed reality performance service that can induce voluntary participation.
또한, 호스트 클라이언트의 호스트가 개설되는 가상무대에 각종 이벤트 아이템을 포함시키고, 특정 영상신호 출력과 동시에 이벤트 아이템의 효과가 발생되도록 함으로써, 가상무대에 대한 다양한 이벤트 효과를 각 상황의 발생과 동기화되어 발생되도록 하는 혼합현실형 공연 서비스를 위한 온라인 가상무대 시스템을 제공하기 위함이다.In addition, by including various event items on the virtual stage where the host of the host client is opened, and the effect of the event items to occur at the same time as the output of a specific video signal, various event effects on the virtual stage is synchronized with the occurrence of each situation To provide an online virtual stage system for mixed reality performance services.
또한, 호스트 클라이언트에서 획득되는 영상에 대한 크로마키 처리에 의해, 실제 호스트의 모습만이 영상처리되어 가상무대에 합성되도록 함으로써, 실제 호스트에 의한 가상무대가 현실적이고 생동감 넘치게 출력되도록 하는 혼합현실형 공연 서비스를 위한 온라인 가상무대 시스템을 제공하기 위함이다.In addition, by performing chroma key processing on the image obtained from the host client, only the actual state of the image is processed to be synthesized on the virtual stage, so that the virtual stage by the actual host is output realistically and lively. To provide an online virtual stage system for the service.
상기한 바와 같은 목적을 달성하기 위한 본 발명의 특징에 따르면, 본 발명은 가상무대 애플리케이션을 제공하는 사업자 서버와 가상무대 애플리케이션을 제공받아 탑재한 호스트 클라이언트 및 하나 이상의 게스트 클라이언트 간의 통신망을 통한 온라인 가상무대 시스템으로서, 상기 가상무대 애플리케이션을 통해, 온라인 가상공간인 가상무대 개설요청 신호와 영상음향장치로부터 획득되는 영상음향 신호를 상기 사업자 서버로 전송하는 호스트 클라이언트; 상기 가상무대 개설요청 신호에 따른 가상무대를 생성하여 전송하는 사업자 서버; 상기 가상무대 애플리케이션을 통해, 자신의 온라인 아바타를 각각 생성하고 상기 생성된 온라인 아바타의 상기 생성된 가상무대에 대한 참여신청 신호를 상기 사업자 서버로 각각 전송하는 하나 이상의 게스트 클라이언트; 를 포함하고, 상기 사업자 서버는, 상기 가상무대 애플리케이션을 통해 전송된 가상무대 개설요청 신호에 따라 가상무대를 생성하고, 상기 가상무대 애플리케이션을 통해 전송된 참여신청 신호에 따라 상기 온라인 아바타 각각을 상기 생성된 가상무대에 포함시켜 상기 호스트 클라이언트와 게스트 클라이언트에 전송하는 MMO 관리 모듈과, 상기 전송된 영상음향 신호를 스트리밍 방식으로 전송하는 스트리밍 모듈을 포함하는 가상무대 애플리케이션 관리서버를 포함하고, 상기 호스트 클라이언트는, 상기 MMO 모듈로부터 전송된 가상무대와 상기 영상음향장치로부터 획득된 영상음향 신호를 합성하여 호스트 디스플레이에 출력하고, 상기 게스트 클라이언트는, 상기 MMO 모듈로부터 전송된 가상무대와 상기 스트리밍 모듈로부터 스트리밍 방식으로 전송되는 영상음향 신호를 합성하여 게스트 디스플레이에 출력되도록 하는 것을 기본적인 기술적 특징으로 한다.According to a feature of the present invention for achieving the above object, the present invention provides an online virtual stage through a communication network between a host server providing a virtual stage application and a host client provided with a virtual stage application and at least one guest client. A system comprising: a host client for transmitting a virtual stage establishment request signal, which is an online virtual space, and a video sound signal obtained from a video sound apparatus, through the virtual stage application; An operator server for generating and transmitting a virtual stage based on the virtual stage establishment request signal; One or more guest clients that respectively generate their own online avatars through the virtual stage application and transmit a participation request signal for the generated virtual stage of the generated online avatars to the operator server; Includes, the operator server, generates a virtual stage according to the virtual stage establishment request signal transmitted through the virtual stage application, the generation of each of the online avatar according to the participation request signal transmitted through the virtual stage application And a virtual stage application management server including an MMO management module which is included in the virtual stage and transmitted to the host client and the guest client, and a streaming module which transmits the transmitted video sound signal in a streaming manner. And synthesizing the virtual sound stage signal transmitted from the MMO module and the video sound signal obtained from the video sound apparatus, and outputting the synthesized audio signal to a host display. send Is to ensure that the synthesis is output on a video display guest acoustic signals with basic technical feature.
이때, 상기 가상무대 애플리케이션은 상기 영상음향장치로부터 획득된 영상음향 신호 중 영상 신호에 대한 크로마키(chromakey) 처리 기능을 포함하고, 상기 호스트 클라이언트는, 상기 가상무대 애플리케이션을 통해, 상기 영상음향장치로부터 획득된 영상음향 신호 중 영상 신호에 대한 크로마키(chromakey) 처리 신호를 입력받고, 상기 MMO 모듈로부터 전송된 가상무대와 상기 영상음향장치로부터 획득된 영상음향 신호를 합성하되, 상기 획득된 영상음향 신호 중 영상신호를 상기 입력받은 크로마키 처리 신호에 따라 처리하여 합성하고, 상기 입력받은 크로마키 처리 신호를 상기 사업자 서버로 전송하며, 상기 사업자 서버는 상기 전송받은 크로마키 처리 신호를 상기 하나 이상의 게스트 클라이언트로 전송하고, 상기 게스트 클라이언트는, 상기 MMO 모듈로부터 전송된 가상무대와 상기 스트리밍 모듈로부터 스트리밍 방식으로 전송되는 영상음향 신호를 합성하되, 상기 스트리밍 방식으로 전송되는 영상음향 신호 중 영상신호를 상기 전송받은 크로마키 처리 신호에 따라 처리하여 합성하는 것을 특징으로 한다.In this case, the virtual stage application includes a chroma key processing function for a video signal among the video sound signals obtained from the video sound apparatus, and the host client, from the video sound apparatus through the virtual stage application Receiving a chroma key processing signal for the video signal of the obtained video sound signal, and synthesizes the virtual stage transmitted from the MMO module and the video sound signal obtained from the video sound device, the obtained video sound signal The video signal is processed and synthesized according to the received chroma key processing signal, and the received chroma key processing signal is transmitted to the operator server, and the operator server transmits the received chroma key processing signal to the one or more guest clients. To the guest client, the MMO module Synthesizing the virtual sound stage and the video sound signal transmitted from the streaming module by the streaming method, the video signal of the video sound signal transmitted by the streaming method is processed according to the received chroma key processing signal and synthesized. It is done.
또한, 상기 가상무대 애플리케이션은 상기 가상무대에 포함되는 하나 이상의 이벤트(event) 아이템 기능을 포함하고, 상기 호스트 클라이언트는, 상기 가상무대 애플리케이션을 통해, 상기 하나 이상의 이벤트 아이템 생성 신호를 상기 사업자 서버로 더 전송하며, 상기 사업자 서버는, 상기 하나 이상의 이벤트 아이템 생성 신호에 따른 하나 이상의 이벤트 아이템이 포함된 가상무대를 생성하여 전송하는 것을 특징으로 한다.The virtual stage application may include one or more event item functions included in the virtual stage, and the host client may further transmit the one or more event item generation signals to the operator server through the virtual stage application. The operator server may generate and transmit a virtual stage including one or more event items according to the one or more event item generation signals.
또한, 상기 호스트 클라이언트는, 상기 탑재된 가상무대 애플리케이션을 통해, 상기 영상음향장치로부터 획득된 영상음향 신호 중 영상신호의 특정 시점에 상기 이벤트 아이템에 대한 이벤트 발생 신호의 큐 트리거 신호를 입력받아 삽입하여 상기 사업자 서버로 전송하고, 상기 전송된 가상무대에 포함된 이벤트 아이템에 대한 이벤트가 상기 큐 트리거 신호가 입력된 순간 발생되도록 하며, 상기 사업자 서버의 스트리밍 모듈은, 상기 큐 트리거 신호가 삽입된 영상음향 신호를 스트리밍 방식으로 전송하고, 상기 게스트 클라이언트는, 상기 가상무대 애플리케이션을 통해, 상기 스트리밍 모듈로부터 스트리밍 방식으로 전송되는 영상음향 신호를 합성하여 게스트 디스플레이에 표시되도록 하되, 상기 영상음향 신호 중 상기 큐 트리거 신호가 삽입된 영상신호의 프레임 출력시 상기 큐 트리거 신호에 따른 상기 이벤트 아이템에 대한 이벤트가 발생되도록 하는 것을 특징으로 한다.The host client may receive and insert a cue trigger signal of an event generation signal for the event item at a specific time of the video signal among the video sound signals obtained from the video sound apparatus through the mounted virtual stage application. And transmits the event to the operator server and generates an event for the event item included in the transmitted virtual stage at the moment when the cue trigger signal is input, and the streaming module of the operator server includes the video sound in which the cue trigger signal is inserted. The signal is transmitted in a streaming manner, and the guest client synthesizes a video sound signal transmitted from the streaming module in a streaming method through the virtual stage application to be displayed on a guest display, wherein the queue triggers the video sound signal. Signal inserted When the frame output of the signal is characterized in that such an event occurs with respect to the event item corresponding to the queue trigger signal.
이상 살펴본 바와 같은 본 발명에 따르면, 호스트와 게스트가 하나의 가상무대에서 동일한 영상과 음향을 즐길 수 있을 뿐만 아니라, 하나 이상의 게스트가 자신의 온라인 아바타를 이용해 직접 가상무대의 객석에 참여하여 보다 현실감 있는 무대와 많은 게스트의 자발적 참여를 유도할 수 있는 혼합현실형 공연 서비스를 위한 온라인 가상무대 시스템을 제공할 수 있다.According to the present invention as described above, not only the host and the guest can enjoy the same image and sound on one virtual stage, but also more than one guest can directly participate in the virtual stage by using their online avatar, We can provide an online virtual stage system for mixed reality performance service that can induce voluntary participation of stage and many guests.
또한, 본 발명에 따르면 가상무대에 대한 다양한 이벤트 효과를 각 상황의 발생과 동기화되어 발생되도록 하는 혼합현실형 공연 서비스를 위한 온라인 가상무대 시스템을 제공을 제공할 수 있다.In addition, according to the present invention can provide an on-line virtual stage system for the mixed reality performance service to be generated in synchronization with the occurrence of the various events effects on the virtual stage.
또한, 본 발명에 따르면 실제 호스트에 의한 가상무대가 현실적이고 생동감 넘치게 출력되도록 하는 혼합현실형 공연 서비스를 위한 온라인 가상무대 시스템을 제공할 수 있다.In addition, according to the present invention can provide an on-line virtual stage system for a mixed reality performance service that allows the virtual stage by the real host to be output realistically and lively.
도 1은 본 발명에 따른 의한 혼합현실형 공연 서비스를 위한 온라인 가상무대 시스템의 블록 구성도이다.1 is a block diagram of an online virtual stage system for a mixed reality performance service according to the present invention.
도 2는 본 발명에 따른 혼합현실형 공연 서비스를 위한 온라인 가상무대 시스템의 신호처리 과정을 나타내기 위한 개략적인 흐름도이다.2 is a schematic flowchart illustrating a signal processing process of an on-line virtual stage system for a mixed reality performance service according to the present invention.
도 3은 MMO 모듈과 스트리밍 모듈에 의한 신호처리를 나타내기 위한 설명도이다.3 is an explanatory diagram for illustrating signal processing by an MMO module and a streaming module.
도 4는 가상무대에 대한 예시도이다.4 is an exemplary diagram of a virtual stage.
도 5는 크로마키 처리된 음향영산 신호와 게스트 클라이언트에 의해 가상공간에 온라인 아바타가 참여된 화면의 예시도이다.5 is an exemplary diagram of a screen in which an online avatar is joined to a virtual space by a chroma key processed sound production signal and a guest client.
상기한 바와 같은 목적을 달성하기 위한 본 발명의 특징에 따르면, 본 발명은 가상무대 애플리케이션을 제공하는 사업자 서버와 가상무대 애플리케이션을 제공받아 탑재한 호스트 클라이언트 및 하나 이상의 게스트 클라이언트 간의 통신망을 통한 온라인 가상무대 시스템으로서, 상기 가상무대 애플리케이션을 통해, 온라인 가상공간인 가상무대 개설요청 신호와 영상음향장치로부터 획득되는 영상음향 신호를 상기 사업자 서버로 전송하는 호스트 클라이언트; 상기 가상무대 개설요청 신호에 따른 가상무대를 생성하여 전송하는 사업자 서버; 상기 가상무대 애플리케이션을 통해, 자신의 온라인 아바타를 각각 생성하고 상기 생성된 온라인 아바타의 상기 생성된 가상무대에 대한 참여신청 신호를 상기 사업자 서버로 각각 전송하는 하나 이상의 게스트 클라이언트; 를 포함하고, 상기 사업자 서버는, 상기 가상무대 애플리케이션을 통해 전송된 가상무대 개설요청 신호에 따라 가상무대를 생성하고, 상기 가상무대 애플리케이션을 통해 전송된 참여신청 신호에 따라 상기 온라인 아바타 각각을 상기 생성된 가상무대에 포함시켜 상기 호스트 클라이언트와 게스트 클라이언트에 전송하는 MMO 관리 모듈과, 상기 전송된 영상음향 신호를 스트리밍 방식으로 전송하는 스트리밍 모듈을 포함하는 가상무대 애플리케이션 관리서버를 포함하고, 상기 호스트 클라이언트는, 상기 MMO 모듈로부터 전송된 가상무대와 상기 영상음향장치로부터 획득된 영상음향 신호를 합성하여 호스트 디스플레이에 출력하고, 상기 게스트 클라이언트는, 상기 MMO 모듈로부터 전송된 가상무대와 상기 스트리밍 모듈로부터 스트리밍 방식으로 전송되는 영상음향 신호를 합성하여 게스트 디스플레이에 출력되도록 하는 것을 최선의 기술적 특징으로 한다.According to a feature of the present invention for achieving the above object, the present invention provides an online virtual stage through a communication network between a host server providing a virtual stage application and a host client provided with a virtual stage application and at least one guest client. A system comprising: a host client for transmitting a virtual stage establishment request signal, which is an online virtual space, and a video sound signal obtained from a video sound apparatus, through the virtual stage application; An operator server for generating and transmitting a virtual stage based on the virtual stage establishment request signal; One or more guest clients that respectively generate their own online avatars through the virtual stage application and transmit a participation request signal for the generated virtual stage of the generated online avatars to the operator server; Includes, the operator server, generates a virtual stage according to the virtual stage establishment request signal transmitted through the virtual stage application, the generation of each of the online avatar according to the participation request signal transmitted through the virtual stage application And a virtual stage application management server including an MMO management module which is included in the virtual stage and transmitted to the host client and the guest client, and a streaming module which transmits the transmitted video sound signal in a streaming manner. And synthesizing the virtual sound stage signal transmitted from the MMO module and the video sound signal obtained from the video sound apparatus, and outputting the synthesized audio signal to a host display. send Is the best technical features to be output to the guest to display the composite image sound signals.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다.Advantages and features of the present invention and methods for achieving them will be apparent with reference to the embodiments described below in detail with the accompanying drawings.
그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다 However, the present invention is not limited to the embodiments disclosed below, but can be implemented in various different forms, and only the embodiments make the disclosure of the present invention complete, and the general knowledge in the art to which the present invention belongs. It is provided to fully inform the person having the scope of the invention, which is defined only by the scope of the claims. Like reference numerals refer to like elements throughout.
이하, 본 발명의 실시예들에 의하여 혼합현실형 공연 서비스를 위한 온라인 가상무대 시스템을 설명하기 위한 도면들을 참고하여 본 발명에 대해 설명하도록 한다.Hereinafter, the present invention will be described with reference to the drawings for explaining an online virtual stage system for a mixed reality performance service according to embodiments of the present invention.
도 1은 본 발명에 따른 의한 혼합현실형 공연 서비스를 위한 온라인 가상무대 시스템의 블록 구성도이고, 도 2는 본 발명에 따른 혼합현실형 공연 서비스를 위한 온라인 가상무대 시스템의 신호처리 과정을 나타내기 위한 개략적인 흐름도이며, 도 3은 MMO 모듈과 스트리밍 모듈에 의한 신호처리를 나타내기 위한 설명도이고, 도 4는 가상무대에 대한 예시도이며, 도 5는 크로마키 처리된 음향영산 신호와 게스트 클라이언트에 의해 가상공간에 온라인 아바타가 참여된 화면의 예시도이다.1 is a block diagram of an online virtual stage system for a mixed reality performance service according to the present invention, Figure 2 shows a signal processing process of the online virtual stage system for a mixed reality performance service according to the present invention 3 is an explanatory diagram illustrating signal processing by an MMO module and a streaming module, FIG. 4 is an exemplary diagram of a virtual stage, and FIG. 5 is a chroma key-processed acoustic signal and a guest client. An example of a screen in which an online avatar participates in a virtual space.
본 발명의 바람직한 실시예에 따른 혼합현실형 공연 서비스를 위한 온라인 가상무대 시스템은 가상무대 애플리케이션(110)을 제공하는 사업자 서버(100)와 가상무대 애플리케이션(110)을 제공받아 탑재한 호스트 클라이언트(200) 및 하나 이상의 게스트 클라이언트(300) 간의 통신망(10)을 통한 혼합현실형 공연 서비스를 위한 온라인 가상무대 시스템에 관한 것이다.An online virtual stage system for a mixed reality performance service according to a preferred embodiment of the present invention includes a host server 200 provided with an operator server 100 providing a virtual stage application 110 and a virtual stage application 110. And an online virtual stage system for a mixed reality performance service through a communication network 10 between one or more guest clients 300.
보다 구체적으로, 본 발명에 따른 혼합현실형 공연 서비스를 위한 온라인 가상무대 시스템은, 상기 가상무대 애플리케이션(110)을 통해, 온라인 가상공간인 가상무대 개설요청 신호와 영상음향장치로부터 획득된 영상음향 신호를 상기 사업자 서버(100)로 전송하는 호스트 클라이언트(200)와, 상기 가상무대 개설요청 신호에 따른 가상무대를 생성하여 전송하는 사업자 서버(100), 및 상기 가상무대 애플리케이션(110)을 통해, 자신의 온라인 아바타를 각각 생성하고 상기 생성된 온라인 아바타의 상기 생성된 가상무대에 대한 참여신청 신호를 상기 사업자 서버로 각각 전송하는 하나 이상의 게스트 클라이언트(300)를 포함한다.More specifically, the online virtual stage system for a mixed-reality performance service according to the present invention, through the virtual stage application 110, the virtual stage establishment request signal, which is an online virtual space and the video sound signal obtained from the video sound apparatus Through the host client 200 for transmitting to the operator server 100, the operator server 100 for generating and transmitting a virtual stage according to the virtual stage establishment request signal, and the virtual stage application 110, At least one guest client 300 for generating each of the on-line avatars and transmits the participation request signal for the generated virtual stage of the generated online avatar to the operator server, respectively.
이때, 상기 사업자 서버(100)는, 상기 가상무대 애플리케이션(110)을 통해 전송된 가상무대 개설요청 신호에 따라 가상무대를 생성하고, 상기 가상무대 애플리케이션을 통해 전송된 참여신청 신호에 따라 상기 온라인 아바타 각각을 상기 생성된 가상무대에 포함시켜 상기 호스트 클라이언트(200)와 게스트 클라이언트(300)에 전송하는 MMO(Massively Multi-play Online) 관리 모듈(131)과, 상기 전송된 영상음향 신호를 스트리밍 방식으로 전송하는 스트리밍 모듈(132)을 포함하는 가상무대 애플리케이션 관리서버(130)를 포함한다.At this time, the operator server 100 generates a virtual stage according to the virtual stage establishment request signal transmitted through the virtual stage application 110, and the online avatar in accordance with the participation request signal transmitted through the virtual stage application. Massively Multi-play Online (MMO) management module 131 which includes each of the generated virtual stages and transmits them to the host client 200 and the guest client 300, and the transmitted video sound signals in a streaming manner. It includes a virtual stage application management server 130 including a streaming module 132 to transmit.
즉, 상기 사업자 서버(100)는 상기 호스트 클라이언트(200)에 탑재된 가상무대 애플리케이션으로부터 가상무대 개설요청 신호와 상기 호스트 클라이언트(200)와 연결된 영상음향장치로부터 획득된 영상음향 신호를 전송받으면, 상기 MMO 모듈은 상기 가상무대 개설요청 신호에 따라 가상무대가 생성되도록 하고, 상기 스트리밍 모듈(132)은 상기 전송받은 영상음향 신호를 상기 게스트 클라이언트로 모두 전송한다,That is, the operator server 100 receives the virtual stage establishment request signal and the video sound signal obtained from the video sound apparatus connected to the host client 200 from the virtual stage application mounted on the host client 200. The MMO module causes the virtual stage to be generated according to the virtual stage establishment request signal, and the streaming module 132 transmits all the received video and audio signals to the guest client.
이때, 상기 호스트 클라이언트(200)는, 상기 MMO 모듈(131)로부터 전송된 가상무대와 상기 영상음향장치로부터 획득된 영상음향 신호를 합성하여 호스트 디스플레이에 출력하고, 상기 게스트 클라이언트(300)는, 상기 MMO 모듈(131)로부터 전송된 가상무대와 상기 스트리밍 모듈(132)로부터 스트리밍 방식으로 전송되는 영상음향 신호를 합성하여 게스트 디스플레이에 출력되도록 한다.In this case, the host client 200 synthesizes the virtual stage transmitted from the MMO module 131 and the video sound signal obtained from the video sound apparatus, and outputs the synthesized video sound signal to the host display. The virtual stage transmitted from the MMO module 131 and the video sound signal transmitted from the streaming module 132 by the streaming method are synthesized and output to the guest display.
즉, 상기 가상무대 애플리케이션을 통해, 상기 호스트 클라이언트(200)에서는 가상무대 개설요청 신호에 따라 개설된 가상무대에 자신의 영상음향장치로부터 획득된 영상이 합성되어 자신의 디스플레이인 호스트 디스플레이에 출력되고, 상기 게스트 클라이언트(300)에서는 상기 MMO 모듈(131)로부터 전송된 가상무대에 상기 스트리밍 모듈로부터 전송된 영상음향신호가 합성되어 자신의 디스플레이인 게스트 디스플레이에 출력되도록 한다.That is, through the virtual stage application, the host client 200 synthesizes an image obtained from the video sound apparatus on the virtual stage opened according to the virtual stage establishment request signal, and outputs the synthesized image to the host display which is its own display. The guest client 300 synthesizes the video sound signal transmitted from the streaming module to the virtual stage transmitted from the MMO module 131 and outputs the synthesized audio signal to the guest display which is its own display.
이로써, 호스트 클라이언트의 사용자에 의해 개설된 가상무대에 호스트 클라이언트의 사용자 자신의 영상과 음향이 합성되어 제공되고, 그러한 가상무대에 하나 이상의 게스트 클라이언트에 의해 각각 생성된 온라인 아바타가 참여되도록 함으로써 하나 이상의 호스트 클라이언트 사용자들이 상기 가상무대에 능동적으로 참여할 수 있도록 한다.In this way, the user's own image and sound of the host client are synthesized and provided to the virtual stage opened by the user of the host client, and the virtual stage includes one or more hosts by allowing each of the online avatars generated by the one or more guest clients to participate. Allow client users to actively participate in the virtual stage.
상기 가상무대 애플리케이션은 상기 영상음향장치로부터 획득된 영상음향 신호 중 영상 신호에 대한 크로마키(chromakey) 처리 기능을 포함한다.The virtual stage application includes a chroma key processing function for a video signal among video sound signals obtained from the video sound apparatus.
이때, 상기 호스트 클라이언트(200)는, 상기 가상무대 애플리케이션을 통해, 상기 영상음향장치로부터 획득된 영상음향 신호 중 영상 신호에 대한 크로마키(chromakey) 처리 신호를 입력받고, 상기 MMO 모듈(131)로부터 전송된 가상무대와 상기 영상음향장치로부터 획득된 영상음향 신호를 합성하되, 상기 획득된 영상음향 신호 중 영상신호를 상기 입력받은 크로마키 처리 신호에 따라 처리하여 합성하고, 상기 입력받은 크로마키 처리 신호를 상기 사업자 서버(100)로 전송한다.In this case, the host client 200 receives a chroma key processing signal for a video signal among video sound signals obtained from the video sound apparatus through the virtual stage application, and receives the chroma signal from the MMO module 131. Synthesize the transmitted virtual stage and the video sound signal obtained from the video sound apparatus, and process the video signal among the obtained video sound signals according to the received chroma key processing signal, and synthesize the video signal. To transmit to the operator server 100.
이때, 상기 사업자 서버(100)는 상기 전송받은 크로마키 처리 신호를 상기 하나 이상의 게스트 클라이언트(300)로 전송하고, 상기 게스트 클라이언트(300)는, 상기 MMO 모듈(131)로부터 전송된 가상무대와 상기 스트리밍 모듈(132)로부터 스트리밍 방식으로 전송되는 영상음향 신호를 합성하되, 상기 스트리밍 방식으로 전송되는 영상음향 신호 중 영상신호를 상기 전송받은 크로마키 처리 신호에 따라 처리하여 합성하여 출력되도록 한다.In this case, the operator server 100 transmits the received chroma key processing signal to the one or more guest clients 300, and the guest client 300, the virtual stage transmitted from the MMO module 131 and the Synthesizes the video sound signal transmitted from the streaming module 132 by the streaming method, and processes the video signal among the video sound signals transmitted by the streaming method according to the received chroma key processing signal to be synthesized and output.
특히, 상기 호스트 클라이언트(200)의 사용자는 상기 가상무대 애플리케이션을 통해 생성되는 가상무대에 스테이지와 객석을 각각 설정하고, 상기 가상무대 애플리케이션은 호스트 클라이언트에서 획득된 영상이 스테이지에서 크로마키 처리되어 합성되도록 하고, 상기 객석에 상기 하나 이상의 호스트 클라이언트(300)에 의해 각각 생성된 온라인 아바타들이 표시되도록 한다.In particular, a user of the host client 200 sets a stage and a seat on a virtual stage generated through the virtual stage application, and the virtual stage application is configured such that an image obtained from the host client is chroma keyed on the stage and synthesized. The online avatars generated by the one or more host clients 300 are displayed on the seat.
상기 가상무대 애플리케이션은 상기 가상무대에 포함되는 하나 이상의 이벤트(event) 아이템 기능을 포함한다.The virtual stage application includes one or more event item functions included in the virtual stage.
이때, 상기 호스트 클라이언트(200)는, 상기 가상무대 애플리케이션을 통해, 상기 하나 이상의 이벤트 아이템 생성 신호를 상기 사업자 서버로 더 전송하고, 상기 사업자 서버(100)는, 상기 하나 이상의 이벤트 아이템 생성 신호에 따른 하나 이상의 이벤트 아이템이 포함된 가상무대를 생성하여 전송한다.In this case, the host client 200 further transmits the one or more event item generation signals to the operator server through the virtual stage application, and the operator server 100 according to the one or more event item generation signals. Create and send a virtual stage containing one or more event items.
이때, 상기 이벤트 아이템은 상기 가상공간에 포함되는 조명, 카메라, 안개효과 장치 등의 아이템이 포함될 수 있다.In this case, the event item may include items such as lighting, camera, fog effect device included in the virtual space.
즉, 상기 호스트 클라이언트(200)에서 상기 가상무대 애플리케이션을 통해 하나 이상의 이벤트 아이템 생성 신호를 상기 사업자 서버로 전송하면, 상기 사업자 서버는 생성되는 가상무대에 상기 이벤트 아이템 생성 신호에 따른 이벤트 아이템을 포함시키고, 상기 호스트 클라이언트(200)와 게스트 클라이언트(300)에서는 상기 이벤트 아이템이 포함된 가상공간이 출력되도록 한다.That is, when the host client 200 transmits one or more event item generation signals to the operator server through the virtual stage application, the operator server includes an event item according to the event item generation signal in the generated virtual stage. In addition, the host client 200 and the guest client 300 output a virtual space including the event item.
이때, 상기 호스트 클라이언트(200)는, 상기 탑재된 가상무대 애플리케이션을 통해, 상기 영상음향장치로부터 획득된 영상음향 신호 중 영상신호의 특정 시점에 상기 이벤트 아이템에 대한 이벤트 발생 신호의 큐 트리거 신호를 입력받아 삽입하여 상기 사업자 서버로 전송하고, 상기 전송된 가상무대에 포함된 이벤트 아이템에 대한 이벤트가 상기 큐 트리거(cue trigger) 신호가 입력된 순간 발생되도록 하고, 상기 사업자 서버의 스트리밍 모듈(132)은, 상기 큐 트리거 신호가 삽입된 영상음향 신호를 스트리밍 방식으로 전송하며, 상기 게스트 클라이언트(300)는, 상기 가상무대 애플리케이션을 통해, 상기 스트리밍 모듈로부터 스트리밍 방식으로 전송되는 영상음향 신호를 합성하여 게스트 디스플레이에 표시되도록 하되, 상기 영상음향 신호 중 상기 큐 트리거 신호가 삽입된 영상신호의 프레임 출력시 상기 큐 트리거 신호에 따른 상기 이벤트 아이템에 대한 이벤트가 발생되도록 한다.In this case, the host client 200 inputs a cue trigger signal of the event generation signal for the event item at a specific time point of the video signal among the video sound signals obtained from the video sound apparatus through the mounted virtual stage application. Receives, inserts and transmits to the operator server, the event for the event item included in the transmitted virtual stage to be generated the moment the cue trigger (cue trigger) signal is input, the streaming module 132 of the operator server And transmitting the video sound signal in which the cue trigger signal is inserted in a streaming method, and the guest client 300 synthesizes the video sound signal transmitted from the streaming module in a streaming method through the virtual stage application to display a guest. But to be displayed on the cute sound of the video sound signal When the signal is going to the output frame of the inserted video signal such that the event occurs for the event item corresponding to the queue trigger signal.
즉, 상기 호스트 클라이언트(200)는 상기 가상무대 애플리케이션을 통해, 상기 영상음향장치로부터 획득되는 영상음향신호 중 영상신호의 특정 시점에 큐 트리거 신호를 삽입시킨 영상음향신호를 사업자 서버(100)로 전송하고, 동시에 큐 트리거 신호가 삽입된 순간 호스트 디스플레이에 출력되는 가상무대에 포함된 이벤트 아이템의 이벤트 효과를 발생시킨다.That is, the host client 200 transmits the video sound signal in which the cue trigger signal is inserted at a specific time point of the video signal among the video sound signals obtained from the video sound apparatus to the operator server 100 through the virtual stage application. At the same time, the event effect of the event item included in the virtual stage output to the host display is generated at the moment the cue trigger signal is inserted.
또한, 상기 사업자 서버의 스트리밍 모듈(312)은 상기 큐 트리거 신호가 삽입된 영상음향 신호를 게스트 클라이언트에 각각 전송하고, 상기 게스트 클라이언트는 상기 가상무대 애플리케이션을 통해, 상기 가상공간에 상기 호스트 클라이언트에서 획득된 영상음향신호가 합성되어 출력되고, 상기 큐 트리거 신호가 삽입된 영상음향신호의 영상신호를 구성하는 프레임이 출력되는 순간 이벤트 아이템의 이벤트 효과가 발생되도록 한다.In addition, the streaming module 312 of the operator server transmits the video sound signal inserted with the cue trigger signal to each of the guest client, the guest client is obtained from the host client in the virtual space through the virtual stage application The video sound signal is synthesized and output, and the event effect of the event item is generated at the moment when the frame constituting the video signal of the video sound signal into which the cue trigger signal is inserted is output.
상술한 구성에 의해, 본 발명에 따른 온라인 가상공간 시스템은, 호스트 클라이언트의 사용자가 각종 이벤트 아이템이 포함된 자신의 가상무대를 온라인 상에 개설하고, 그 개설된 가상무대에 하나 이상의 게스트 클라이언트에 의한 온라인 아바타들이 참여하도록 하며, 특정 영상 또는 특정 음향이 출력되는 순간 이벤트 아이템에 의한 효과, 즉 조명 이벤트 아이템의 경우 조명효과가 발생하거나, 안개발생장치 이벤트 아이템의 경우 안개효과가 발생되도록 하여, 보다 현실적이고 실감나는 가상무대를 제공할 수 있도록 할 뿐만 아니라, 게스트들 역시 자신의 온라인 아바타를 이용하여 참여할 수 있도록 하여 보다 실제와 같은 무대효과가 발휘될 수 있도록 한다.According to the above-described configuration, in the online virtual space system according to the present invention, a user of a host client opens his or her virtual stage including various event items on-line, and uses one or more guest clients on the opened virtual stage. The on-line avatars participate, and the effect of the event item at the moment of outputting a specific image or a specific sound, that is, the lighting effect occurs in the case of a lighting event item, or the fog effect occurs in the case of a fog event event item. In addition to providing a virtual and realistic virtual stage, guests can also participate by using their online avatars so that more realistic stage effects can be achieved.
상술한 구성을 갖는 혼합현실형 공연 서비스를 위한 온라인 가상무대 시스템은, 호스트가 노래방 또는 극장 등에서 자신의 호스트 클라이언트에서 획득되는 영상음향 신호를 상기 가상무대 애플리케이션을 통해 제공함으로써, 실제 노래방 또는 극장에서 진행되는 호스트의 노래나 춤 등이 실제 온라인 상의 가상무대에 현실적으로 제공되고, 이를 다수의 게스트들이 자신의 아바타를 이용해 가상무대에 관객으로 참여하여 가상과 현실이 융합된 혼합현실형 가상무대를 제공할 수 있다.In the online virtual stage system for the mixed reality performance service having the above-described configuration, the host proceeds in actual karaoke or theater by providing a video sound signal obtained from his or her host client through karaoke or theater through the virtual stage application. Hosts' songs and dances are realistically provided on virtual stages online, and many guests can participate in virtual stages using their avatars to provide mixed reality virtual stages where virtual and reality are fused. have.
본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구의 범위에 의하여 나타내어지며, 특허청구의 범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.Those skilled in the art will appreciate that the present invention can be embodied in other specific forms without changing the technical spirit or essential features of the present invention. Therefore, it should be understood that the embodiments described above are exemplary in all respects and not restrictive. The scope of the present invention is indicated by the scope of the following claims rather than the detailed description, and all changes or modifications derived from the meaning and scope of the claims and the equivalent concept are included in the scope of the present invention. Should be interpreted.
*부호의 설명* Description of the sign
10: 통신망 100: 사업자 서버10: network 100: operator server
110: 가상무대 애플리케이션 120: 가상무대 애플리케이션 제공부110: virtual stage application 120: virtual stage application provider
130: 가상무대 애플리케이션 관리서버130: virtual stage application management server
131: MMO 관리모듈 132: 스트리밍 모듈131: MMO management module 132: streaming module
150: 가상무대 151: 이벤트 아이템150: Virtual Stage 151: Event Item
200: 호스트 클라이언트 210: 영상음향장치200: host client 210: video sound apparatus
220: 크로마키 처리된 영상 250: 영상신호220: chroma key processed image 250: video signal
215: 영상신호를 구성하는 프레임215: frame constituting the video signal
255: 큐 트리거 신호 300: 게스트 클라이언트255: queue trigger signal 300: guest client
320: 온라인 아바타320: online avatar
Claims (4)
- 가상무대 애플리케이션을 제공하는 사업자 서버와 가상무대 애플리케이션을 제공받아 탑재한 호스트 클라이언트 및 하나 이상의 게스트 클라이언트 간의 통신망을 통한 온라인 가상무대 시스템으로서,As an online virtual stage system through a communication network between an operator server providing a virtual stage application and a host client provided with the virtual stage application and one or more guest clients,상기 가상무대 애플리케이션을 통해, 온라인 가상공간인 가상무대 개설요청 신호와 영상음향장치로부터 획득되는 영상음향 신호를 상기 사업자 서버로 전송하는 호스트 클라이언트;A host client configured to transmit a virtual stage establishment request signal, which is an online virtual space, and a video sound signal obtained from a video sound apparatus, through the virtual stage application;상기 가상무대 개설요청 신호에 따른 가상무대를 생성하여 전송하는 사업자 서버;An operator server for generating and transmitting a virtual stage based on the virtual stage establishment request signal;상기 가상무대 애플리케이션을 통해, 자신의 온라인 아바타를 각각 생성하고 상기 생성된 온라인 아바타의 상기 생성된 가상무대에 대한 참여신청 신호를 상기 사업자 서버로 각각 전송하는 하나 이상의 게스트 클라이언트; 를 포함하고,One or more guest clients that respectively generate their own online avatars through the virtual stage application and transmit a participation request signal for the generated virtual stage of the generated online avatars to the operator server; Including,상기 사업자 서버는,The operator server,상기 가상무대 애플리케이션을 통해 전송된 가상무대 개설요청 신호에 따라 가상무대를 생성하고, 상기 가상무대 애플리케이션을 통해 전송된 참여신청 신호에 따라 상기 온라인 아바타 각각을 상기 생성된 가상무대에 포함시켜 상기 호스트 클라이언트와 게스트 클라이언트에 전송하는 MMO 관리 모듈과, 상기 전송된 영상음향 신호를 스트리밍 방식으로 전송하는 스트리밍 모듈을 포함하는 가상무대 애플리케이션 관리서버를 포함하고,Generate a virtual stage according to the virtual stage establishment request signal transmitted through the virtual stage application, and include each of the online avatars in the generated virtual stage according to the participation request signal transmitted through the virtual stage application to the host client. And a virtual stage application management server including an MMO management module for transmitting to a guest client and a streaming module for transmitting the transmitted video sound signal in a streaming manner.상기 호스트 클라이언트는,The host client,상기 MMO 모듈로부터 전송된 가상무대와 상기 영상음향장치로부터 획득된 영상음향 신호를 합성하여 호스트 디스플레이에 출력하고,Synthesizing the virtual sound stage transmitted from the MMO module and the video sound signal obtained from the video sound apparatus, and outputting the synthesized video sound signal to a host display;상기 게스트 클라이언트는,The guest client,상기 MMO 모듈로부터 전송된 가상무대와 상기 스트리밍 모듈로부터 스트리밍 방식으로 전송되는 영상음향 신호를 합성하여 게스트 디스플레이에 출력되도록 하는 혼합현실형 공연 서비스를 위한 온라인 가상무대 시스템.And a virtual stage transmitted from the MMO module and a video sound signal transmitted in a streaming manner from the streaming module to be output to a guest display.
- 제 1 항에 있어서,The method of claim 1,상기 가상무대 애플리케이션은 상기 영상음향장치로부터 획득된 영상음향 신호 중 영상 신호에 대한 크로마키(chromakey) 처리 기능을 포함하고,The virtual stage application includes a chroma key processing function for a video signal among video sound signals obtained from the video sound apparatus,상기 호스트 클라이언트는,The host client,상기 가상무대 애플리케이션을 통해, 상기 영상음향장치로부터 획득된 영상음향 신호 중 영상 신호에 대한 크로마키(chromakey) 처리 신호를 입력받고, 상기 MMO 모듈로부터 전송된 가상무대와 상기 영상음향장치로부터 획득된 영상음향 신호를 합성하되, 상기 획득된 영상음향 신호 중 영상신호를 상기 입력받은 크로마키 처리 신호에 따라 처리하여 합성하고, 상기 입력받은 크로마키 처리 신호를 상기 사업자 서버로 전송하며,The virtual stage application receives a chroma key processing signal for a video signal among video sound signals obtained from the video sound apparatus, and transmits the virtual stage transmitted from the MMO module and the video sound apparatus. Synthesize a sound signal, process the video signal of the obtained video sound signal according to the received chroma key processing signal, synthesize the received audio signal, and transmit the received chroma key processing signal to the operator server,상기 사업자 서버는 상기 전송받은 크로마키 처리 신호를 상기 하나 이상의 게스트 클라이언트로 전송하고,The operator server transmits the received chroma key processing signal to the one or more guest clients,상기 게스트 클라이언트는,The guest client,상기 MMO 모듈로부터 전송된 가상무대와 상기 스트리밍 모듈로부터 스트리밍 방식으로 전송되는 영상음향 신호를 합성하되, 상기 스트리밍 방식으로 전송되는 영상음향 신호 중 영상신호를 상기 전송받은 크로마키 처리 신호에 따라 처리하여 합성하는 것을 특징으로 하는 혼합현실형 공연 서비스를 위한 온라인 가상무대 시스템.Synthesizes the virtual stage transmitted from the MMO module and the video sound signal transmitted from the streaming module in a streaming method, and processes and synthesizes the video signal among the video sound signals transmitted in the streaming method according to the received chroma key processing signal. Online virtual stage system for a mixed reality performance service, characterized in that.
- 제 1 항에 있어서,The method of claim 1,상기 가상무대 애플리케이션은 상기 가상무대에 포함되는 하나 이상의 이벤트(event) 아이템 기능을 포함하고,The virtual stage application includes one or more event item functions included in the virtual stage,상기 호스트 클라이언트는,The host client,상기 가상무대 애플리케이션을 통해, 상기 하나 이상의 이벤트 아이템 생성 신호를 상기 사업자 서버로 더 전송하며,Through the virtual stage application, further transmits the one or more event item generation signal to the operator server,상기 사업자 서버는,The operator server,상기 하나 이상의 이벤트 아이템 생성 신호에 따른 하나 이상의 이벤트 아이템이 포함된 가상무대를 생성하여 전송하는 것을 특징으로 하는 혼합현실형 공연 서비스를 위한 온라인 가상무대 시스템.An online virtual stage system for a mixed reality performance service, characterized in that for generating and transmitting a virtual stage containing one or more event items according to the one or more event item generation signal.
- 제 3 항에 있어서,The method of claim 3, wherein상기 호스트 클라이언트는,The host client,상기 탑재된 가상무대 애플리케이션을 통해, 상기 영상음향장치로부터 획득된 영상음향 신호 중 영상신호의 특정 시점에 상기 이벤트 아이템에 대한 이벤트 발생 신호의 큐 트리거 신호를 입력받아 삽입하여 상기 사업자 서버로 전송하고, 상기 전송된 가상무대에 포함된 이벤트 아이템에 대한 이벤트가 상기 큐 트리거 신호가 입력된 순간 발생되도록 하며,Through the mounted virtual stage application, a cue trigger signal of an event generation signal for the event item is received and inserted at a specific time of the video signal among the video sound signals obtained from the video sound apparatus, and transmitted to the service provider server. An event for an event item included in the transmitted virtual stage is generated at the moment the cue trigger signal is input,상기 사업자 서버의 스트리밍 모듈은,The streaming module of the operator server,상기 큐 트리거 신호가 삽입된 영상음향 신호를 스트리밍 방식으로 전송하고,Transmitting the video sound signal in which the cue trigger signal is inserted in a streaming method,상기 게스트 클라이언트는,The guest client,상기 가상무대 애플리케이션을 통해, 상기 스트리밍 모듈로부터 스트리밍 방식으로 전송되는 영상음향 신호를 합성하여 게스트 디스플레이에 표시되도록 하되, 상기 영상음향 신호 중 상기 큐 트리거 신호가 삽입된 영상신호의 프레임 출력시 상기 큐 트리거 신호에 따른 상기 이벤트 아이템에 대한 이벤트가 발생되도록 하는 것을 특징으로 하는 혼합현실형 공연 서비스를 위한 온라인 가상무대 시스템.Through the virtual stage application, the video sound signal transmitted from the streaming module in a streaming manner is synthesized to be displayed on the guest display, and the cue trigger when outputting a frame of the video signal into which the cue trigger signal is inserted among the video sound signals. On-line virtual stage system for a mixed reality performance service, characterized in that to generate an event for the event item according to the signal.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/KR2014/001921 WO2015133667A1 (en) | 2014-03-07 | 2014-03-07 | Online virtual stage system for mixed reality performance service |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/KR2014/001921 WO2015133667A1 (en) | 2014-03-07 | 2014-03-07 | Online virtual stage system for mixed reality performance service |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2015133667A1 true WO2015133667A1 (en) | 2015-09-11 |
Family
ID=54055458
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/KR2014/001921 WO2015133667A1 (en) | 2014-03-07 | 2014-03-07 | Online virtual stage system for mixed reality performance service |
Country Status (1)
| Country | Link |
|---|---|
| WO (1) | WO2015133667A1 (en) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20070016902A (en) * | 2005-08-05 | 2007-02-08 | 주식회사 오아시스미디어 | Real-time multilayer image synthesis recording system and method, and the store device which records a method |
| KR100701010B1 (en) * | 2005-12-09 | 2007-03-29 | 한국전자통신연구원 | Data Broadcasting System and Method interlocked with the Internet using the Virtual Studio |
| KR20080106676A (en) * | 2007-06-04 | 2008-12-09 | 주식회사 케이티 | System and method for virtual reality singing room service |
| KR20090110123A (en) * | 2008-04-17 | 2009-10-21 | (주)아이스타티브이 | The apparatus and method for making image which used chromakey |
| KR20130115540A (en) * | 2012-04-12 | 2013-10-22 | 동국대학교 산학협력단 | Apparatus and method for processing performance on stage using digital character |
-
2014
- 2014-03-07 WO PCT/KR2014/001921 patent/WO2015133667A1/en active Application Filing
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20070016902A (en) * | 2005-08-05 | 2007-02-08 | 주식회사 오아시스미디어 | Real-time multilayer image synthesis recording system and method, and the store device which records a method |
| KR100701010B1 (en) * | 2005-12-09 | 2007-03-29 | 한국전자통신연구원 | Data Broadcasting System and Method interlocked with the Internet using the Virtual Studio |
| KR20080106676A (en) * | 2007-06-04 | 2008-12-09 | 주식회사 케이티 | System and method for virtual reality singing room service |
| KR20090110123A (en) * | 2008-04-17 | 2009-10-21 | (주)아이스타티브이 | The apparatus and method for making image which used chromakey |
| KR20130115540A (en) * | 2012-04-12 | 2013-10-22 | 동국대학교 산학협력단 | Apparatus and method for processing performance on stage using digital character |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107360440B (en) | Deep interaction system and interaction method based on game process introduced into live stream | |
| CN110213601A (en) | A kind of live broadcast system and live broadcasting method based on cloud game, living broadcast interactive method | |
| US20220264068A1 (en) | Telepresence system and method | |
| JP2000165831A (en) | Multi-point video conference system | |
| US10359988B2 (en) | Shared experience of virtual environments | |
| WO2016153161A1 (en) | Two-way virtual reality realizing system | |
| Gunkel et al. | WebVR meets WebRTC: Towards 360-degree social VR experiences | |
| CN102195939B (en) | High-speed wireless network remote-control competition system and its implementation | |
| Prins et al. | TogetherVR: A framework for photorealistic shared media experiences in 360-degree VR | |
| US20150128195A1 (en) | Video reproduction system | |
| WO2017222258A1 (en) | Multilateral video communication system and method using 3d depth camera | |
| WO2017188637A1 (en) | Message display method according to event occurrence in vr device and apparatus therefor | |
| Metzger | Adding reality to the virtual | |
| TW200421768A (en) | Share-memory networked motion simulation system | |
| JP6688378B1 (en) | Content distribution system, distribution device, reception device, and program | |
| KR20150105157A (en) | On-line virtual stage system for the performance service of mixed-reality type | |
| CN117221615A (en) | Live interaction method, device, equipment and storage medium | |
| KR20110137439A (en) | The method for providing a broadcasting service by implementing virtual reality in cyberspace by the conversion of virtual world and real world | |
| WO2015133667A1 (en) | Online virtual stage system for mixed reality performance service | |
| JP2000231644A (en) | Speaker, specifying method for virtual space and recording medium where program thereof is recorded | |
| KR20020086835A (en) | The methode of multiplaying videogame and watching videogame using on internet. | |
| WO2019107275A1 (en) | Information processing device and game image distribution method | |
| CN116962746A (en) | Online chorus method and device based on continuous wheat live broadcast and online chorus system | |
| WO2021187647A1 (en) | Method and system for expressing avatar imitating user's motion in virtual space | |
| CN115686196A (en) | 640-degree panoramic immersive dynamic experience multi-player interactive game system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 14884865 Country of ref document: EP Kind code of ref document: A1 |
|
| NENP | Non-entry into the national phase |
Ref country code: DE |
|
| 122 | Ep: pct application non-entry in european phase |
Ref document number: 14884865 Country of ref document: EP Kind code of ref document: A1 |