KR102364275B1 - 현실세계 데이터의 가상화시스템 및 방법 - Google Patents

현실세계 데이터의 가상화시스템 및 방법 Download PDF

Info

Publication number
KR102364275B1
KR102364275B1 KR1020200077292A KR20200077292A KR102364275B1 KR 102364275 B1 KR102364275 B1 KR 102364275B1 KR 1020200077292 A KR1020200077292 A KR 1020200077292A KR 20200077292 A KR20200077292 A KR 20200077292A KR 102364275 B1 KR102364275 B1 KR 102364275B1
Authority
KR
South Korea
Prior art keywords
data
unit
information
real
server
Prior art date
Application number
KR1020200077292A
Other languages
English (en)
Other versions
KR20210158653A (ko
Inventor
신지수
Original Assignee
파이브마일 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 파이브마일 주식회사 filed Critical 파이브마일 주식회사
Priority to KR1020200077292A priority Critical patent/KR102364275B1/ko
Publication of KR20210158653A publication Critical patent/KR20210158653A/ko
Application granted granted Critical
Publication of KR102364275B1 publication Critical patent/KR102364275B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00—Animation
    • G06T13/20—3D [Three Dimensional] animation
    • G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4784—Supplemental services, e.g. displaying phone caller identification, shopping application receiving rewards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video

Abstract

본 발명은 현실세계 데이터의 가상화시스템 및 방법에 관한 것으로, 구체적으로는 현실세계의 데이터를 가상공간에 반영하기 위해 현실세계의 데이터를 가상화하기 위한 가상화시스템 및 그 방법에 관한 것이다.
본 발명은 효율적인 데이터의 활용으로 버츄얼 리얼리티 산업 분야에서 양방향 컨텐츠 제작에 응용을 할수있는 방법의 제공할 수 있으며, 스트리밍을 진행하는 사용자 또는 참여자들이 아바타를 통해 상호작용을 체험할 수 있도록 함으로써 콘텐츠 소비자가 영상을 시청하는 즐거움을 가져다주는 효과가 있다.

Description

현실세계 데이터의 가상화시스템 및 방법{Virtualization systems and methods for real-world data}
본 발명은 현실세계 데이터의 가상화시스템 및 방법에 관한 것으로, 구체적으로는 현실세계의 데이터를 가상공간에 반영하기 위해 현실세계의 데이터를 가상화하기 위한 가상화시스템 및 그 방법에 관한 것이다.
캐릭터는 특정 인물을 상징화하거나, 동물이나 식물 등을 모티브로 하여 개성과 이미지가 부여된 상품으로서, 개인이나 기업들이 소비자들에게 보다 친근하게 접근할 수 있도록 활용하고 있다. 최근에는 통신 기술의 발전으로 캐릭터를 소비하는 방식은 전통적인 텔레비전 매체에서 벗어나 모바일 플랫폼을 이용하는 유튜브TM와 같은 다양한 동영상 플랫폼으로 확장되고 있다. 5G(5 generation) 통신 기술이 보급되면서 현장감과 체험감을 극대화시킬 수 있는 가상현실(VR) 또는 증강현실(AR) 기반 콘텐츠도 늘어나고 있다.
실시간으로 주고받을 수 있는 데이터 규모가 커짐에 따라 영상 콘텐츠를 스트리밍 방식으로 제공하는 기술이 실생활에서 구현되고 있고, 텍스트와 이미지를 넘어 동영상으로 소통하는 서비스가 보편화되고 있다. 통신기술의 발전과 동영상 콘텐츠 서비스의 확장에 따라, 기존의 캐릭터 제작자로부터 소비자로의 일방적인 캐릭터 소비 방식이 아닌 캐릭터와 소비자의 양방향 상호작용에 의해 캐릭터를 소비함으로써, 캐릭터 콘텐츠의 사용성,체험감, 편의성을 높이기 위한 기술의 연구가 요구된다.
한국공개특허공보 제10-2017-0037623호 (2017.04.04) 한국공개특허공보 제10-2015-0111608호 (2015.10.06_
본 발명의 목적은 효율적인 데이터의 활용으로 버츄얼 리얼리티 산업 분야에서 양방향 컨텐츠 제작에 응용을 할수있는 방법의 제공에 있다.
또한 스트리밍을 진행하는 사용자 또는 참여자들이 아바타를 통해 상호작용을 체험할 수 있도록 하는 것에 목적이 있다.
상기와 같은 문제를 해결하기 위해, 본 발명은 사용자를 인식하고 움직임을 측청하여 측정된 사용자 움직임데이터를 서버로 전송하고, 실제 물체의 위치정보를 수집한 물체구현데이터를 서버로 전송하고, 실제환경정보를 외부로부터 실시간으로 수집하고, 수집된 실제환경정보데이터를 서버로 전송하는 콘텐츠제공부(100)와, 상기 콘텐츠제공부(100)로부터 전송받은 사용자 움직임데이터를 이용하여 아바타그래픽데이터를 생성하고, 상기 콘텐츠제공부(100)로부터 전송받은 물체구현데이터를 이용하여 물체그래픽데이터를 생성하되 상기 물체그래픽데이터를 기반으로 가상공간을 생성하고, 상기 콘텐츠제공부(100)로부터 전송받은 실제환경정보데이터가 가상공간으로 출력가능하도록 가공하고, 상기 아바타그래픽데이터와 실제환경정보데이터가 반영된 가상공간을 디스플레이화면으로 출력하는 서버(200)와, 상기 서버(200)로부터 출력되는 디스플레이화면을 제공받고, 상기 서버(200)로 채팅내용이 입력가능한 채팅입력부(310)를 포함하고, 시청자가 소정 액수의 후원금을 지원하기 위한 후원금지원정보를 입력하기 위한 후원금지원부(320)를 포함하는 콘텐츠시청단말부(300)를 포함하는 것을 특징으로 하고,
상기 콘텐츠제공부(100)는 사용자가 착용하는 것으로, 사용자를 인식하고 움직임을 측정하여 사용자 움직임데이터를 제공하고, 측정된 사용자 움직임데이터를 서버로 전송하는 사용자모션캡쳐부(110)와, 실제 물체의 위치와 가상공간 객체의 위치를 연동하여 가상공간을 구현하기 위해, 실제 물체의 위치정보를 수집한 물체구현데이터를 서버로 전송하는 가상물체구현부(120)와, 날씨정보, 온도정보, 지진정보, 외부소리, 위치정보에 관한 실제환경정보데이터를 외부로부터 실시간으로 수집하고, 수집된 실제환경정보데이터를 서버로 전송하는 데이터수집부(130)와, 사용자가 사용하는 물체의 위치 및 움직임을 감지하여 물체감지데이터를 제공하기 위한 물체감지센서부(140)를 포함하고, 상기 서버(200)는 사용자와 원거리에 위치하는 실세계 공간에 대한 실시간 3차원 그래픽데이터를 생성하고, 복수개의 구조물들을 이용하여 구성된 실세계 공간에 상응하게 3차원가상공간을 생성하는 가상공간생성부(210)와, 상기 콘텐츠제공부(100)와 콘텐츠시청단말부(300)로부터 정보를 송수신하는 통신부(220)와, 상기 콘텐츠제공부(100)로부터 제공받은 사용자 움직임데이터를 이용하여 아바타그래픽데이터를 생성하고, 콘텐츠제공부(100)의 가상물체구현부(120)로부터 물체구현데이터를 제공받아 3차원 그래픽데이터를 생성하고, 콘텐츠제공부(100)의 데이터수집부(130)로부터 제공받은 실제환경정보를 실시간으로 제공받아 가상공간으로 송출가능한 정보로 변환하고, 콘텐츠시청단말부(300)로부터 전송받은 채팅내용을 실시간으로 전송받아 출력가능한 형태로 가공하고, 콘텐츠시청단말부(300)로부터 후원금지원정보를 전송받아 설정된 후원금범위에 따른 애니메이션효과가 다르게 연출되도록 가공되는 제어부(230)와, 상기 제어부(230)로부터 생성된 아바타그래픽데이터와 3차원 그래픽데이터와, 가공된 실제환경정보와 채팅내용과 후원금지원정보를 디스플레이하는 디스플레이부(240)를 포함하고, 상기 콘텐츠시청단말부(300)는 콘텐츠시청자에 의해 채팅내용을 입력받고, 입력된 채팅내용을 서버로 전송하는 채팅입력부(310)와, 콘텐츠시청자가 소정 액수의 후원금을 지원하기 위해 후원금지원정보를 입력하고, 입력된 후원금지원정보를 서버로 전송하는 후원금지원부(320)를 포함하는 것을 특징으로 하는 현실세계 데이터의 가상화시스템과,
사용자와 원거리에 위치하는 실세계 공간에 대한 실시간 3차원 그래픽 데이터를 생성하는 3차원그래픽데이터생성단계(S1); 상기 3차원그래픽데이터생성단계(S1)를 통해 생성된 3차원 그래픽 데이터를 기반으로 3차원 가상공간을 생성하는 3차원가상공간생성단계(S2); 외부매체를 통해 날씨,온도를 포함하는 실제환경정보 데이터를 획득하여 3차원가상공간생성단계(S2)의 3차원 가상공간에 송출가능한 정보로 변환하는 실제환경정보데이터획득단계(S3); 모션인식장치를 이용하여 사용자 움직임을 측정하여 사용자 움직임데이터를 획득하는 사용자움직임데이터획득단계(S4); 상기 사용자움직임데이터획득단계(S4)에서 획득한 사용자 움직임데이터를 이용하여 아바타그래픽데이터로 가공하는 아바타그래픽데이터가공단계(S5); 상기 3차원그래픽데이터생성단계(S1)의 3차원그래픽데이터와 실제환경정보데이터획득단계(S3)를 통해 변환된 실제환경정보데이터와 아바타그래픽데이터가공단계(S5)의 아바타그래픽데이터를 정합하여 상기 3차원가상공간생성단계(S2)를 통해 생성된 3차원가상공간에 반영하여 디스플레이로 출력하는 디스플레이출력단계(S6)를 포함하는 것을 특징으로 하는 현실세계 데이터의 가상화방법을 제공한다.
본 발명은 효율적인 데이터의 활용으로 버츄얼 리얼리티 산업 분야에서 양방향 컨텐츠 제작에 응용을 할수있는 방법의 제공할 수 있으며, 스트리밍을 진행하는 사용자 또는 참여자들이 아바타를 통해 상호작용을 체험할 수 있도록 함으로써 콘텐츠 소비자가 영상을 시청하는 즐거움을 가져다주는 효과가 있다.
도 1은 본 발명의 가상화시스템의 전체적인 구성에 관한 도면이다.
도 2은 본 발명의 가상화시스템의 콘텐츠제공부(100)에 관한 도면이다.
도 3은 본 발명의 가상화시스템의 서버(200)에 관한 도면이다.
도 4은 본 발명의 가상화시스템의 콘텐츠시청단말부(300)에 관한 도면이다.
도 5는 본 발명의 가상화시스템의 예시도면이다.
도 6은 본 발명의 가상화방법에 관한 순서도이다.
본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니 되며, 발명자는 자신의 발명을 가장 최선의 방법으로 설명하기 위해 용어의 개념을 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다.
이하 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세히 설명하기로 한다.
본 발명은 현실세계 데이터의 가상화시스템 및 방법에 관한 것으로 구체적으로는 현실세계 데이터를 가공하여 가상공간으로 입력시킴으로써 사용자에게 콘텐츠를 제공하기 위한 가상화시스템 및 방법에 관한 것이다.
먼저, 도 1을 참고하면 본 발명의 현실세계 데이터의 가상화시스템은 콘텐츠제공부(100), 서버(200), 콘텐츠시청단말부(300)를 포함하여 구성된다.
각 구성요소를 구체적으로 설명하면 다음과 같다.
콘텐츠제공부(100)는 사용자를 인식하고 움직임을 측청하여 측정된 사용자 움직임데이터를 서버로 전송하고, 실제 물체의 위치정보를 수집한 물체구현데이터를 서버로 전송하고, 실제환경정보를 외부로부터 실시간으로 수집하고, 수집된 실제환경정보데이터를 서버로 전송하는 것이다.
도 2를 참고하면 상기 콘텐츠제공부(100)는 사용자모션캡쳐부(110), 가상물체구현부(120), 데이터수집부(130), 물체감지센서부(140)를 포함하여 구성된다.
사용자모션캡쳐부(110)는 사용자가 착용하는 것으로, 사용자를 인식하고 움직임을 측정하여 사용자 움직임데이터를 제공하고, 측정된 사용자 움직임데이터를 서버로 전송하는 것이다.
상기 사용자모션캡쳐부(110)는 사용자의 움직임을 3차원 가상 공간에 반영하기 위해서 체험 공간에 복수개의 센서들을 추가로 구비할 수 있다. 예를 들어, 복수개의 센서들은 움직임 센서, 터치 센서, 압력 센서, 방향 센서 등 사용자의 움직임이나 시선방향 등을 측정할 수 있는 다양한 센서들에 상응할 수 있다.
가상물체구현부(120)는 실제 물체의 위치와 가상공간 객체의 위치를 연동하여 가상공간을 구현하기 위해, 실제 물체의 위치정보를 수집한 물체구현데이터를 서버로 전송하는 것이다.
데이터수집부(130)는 날씨정보, 온도정보, 지진정보, 외부소리정보, 위치정보에 관한 실제환경정보데이터를 외부로부터 실시간으로 수집하고, 수집된 실제환경정보데이터를 서버로 전송하는 것이다.
상기 실제환경정보는 날씨정보, 온도정보, 지진정보, 외부소리정보, 위치정보에 관한 데이터를 수집하는 것으로,
날씨정보의 경우 기상청에서 제공하는 날씨정보를 제공받을 수 있으며, 온도 정보의 경우 현실세계에 설치된 온도계가 연동되어 온도정보를 제공받을 수 있으며, 지진정보의 경우 현실세계에 설치된 지진계와 연동되어 지진정보를 제공받을 수 있고, 외부소리정보는 녹음장치를 이용하여 사용자 주변의 소리를 녹음한 정보이며, 위치정보는 사용자가 위치한 장소에 대한 위치, 가상세계에 반영되는 물체들의 위치에 관한 정보이다.
물체감지센서부(140)는 사용자 주변에 위치한 물체과 그 물체의 움직임을 감지하는 데이터인 물체감지데이터를 제공하기 위한 것이다.
서버(200)는 상기 콘텐츠제공부(100)로부터 전송받은 사용자 움직임데이터를 이용하여 아바타그래픽데이터를 생성하고, 상기 콘텐츠제공부(100)로부터 전송받은 물체구현데이터를 이용하여 물체그래픽데이터를 생성하되 상기 물체그래픽데이터를 기반으로 가상공간을 생성하고, 상기 콘텐츠제공부(100)로부터 전송받은 실제환경정보데이터가 가상공간으로 출력가능하도록 가공하고, 상기 아바타그래픽데이터와 실제환경정보데이터가 반영된 가상공간을 디스플레이화면으로 출력하기 위한 것이다.
도 3을 참고하면 상기 서버(200)는 가상공간생성부(210), 통신부(220), 제어부(230), 디스플레이부(240), 데이터베이스부(250)를 포함하여 구성된다.
가상공간생성부(210)는 사용자와 원거리에 위치하는 실세계 공간에 대한 실시간 3차원 그래픽데이터를 생성하고, 복수개의 물체들을 포함하여 구성된 실세계 공간에 상응하도록 3차원가상공간을 생성하기 위한 것이다.
상기 가상공간생성부(210)는 콘텐츠제공부(100)의 물체감지센서부(140)를 통하여 감지된 물체의 위치와 움직임을 반영하여 3차원가상공간을 생성할 수 있으며 이를 통해서 사용자가 좀더 현실감을 느낄 수있는 효과가 있다.
통신부(220)는 상기 콘텐츠제공부(100)와 콘텐츠시청단말부(300)로부터 정보를 송수신하기 위한 것이다.
제어부(230)는 아바타그래픽생성기능(231), 3차원그래픽생성기능(232), 실제환경정보변환기능(233), 채팅내용가공기능(234), 후원금형태가공기능(235) 등을 포함하고,
아바타그래픽생성기능(231)은 상기 콘텐츠제공부(100)로부터 제공받은 사용자 움직임데이터를 이용하여 아바타그래픽데이터를 생성하기 위한 기능이다.
상기 아바타그래픽생성기능(231)은 아바타 형태를 유형별로 분류한 다음 사용자의 움직임데이터를 분석한 정보를 토대로 아바타그래픽데이터를 생성할 수 있다.
예를 들어 사용자가 남성인 경우 남성의 신체사이즈, 움직임 등을 분석하여 남성 아바타 그래픽을 생성할 수 있으며, 움직임이 활발한 경우 활발한 이미지를 가진 아바타 그래픽을 생성할 수 있다.
3차원그래픽생성기능(232)은 콘텐츠제공부(100)의 가상물체구현부(120)로부터 물체구현데이터를 제공받아 3차원 그래픽 데이터를 생성하기 위한 기능이다.
상기 3차원그래픽생성기능(232)은 가상물체구현부(120)를 통해 물체구현데이터를 제공받아 3차원 그래픽 데이터를 생성하고, 물체감지센서부(140)를 통해 물체의 움직임을 감지한 데이터인 물체감지데이터를 반영하여 3차원 그래픽 데이터를 변경할 수도 있다.
실제환경정보변환기능(233)은 콘텐츠제공부(100)의 데이터수집부(130)로부터 제공받은 실제환경정보를 실시간으로 제공받아 가상공간으로 송출가능한 정보로 변환하는 기능이다.
상기 실제환경정보변환기능(233)은 데이터수집부(130)으로 제공받은 주변 환경 정보를 실시간으로 전송받아 3차원 그래픽화를 통한 날씨, 환경, 공간을 표현한다.
이 정보는 한번에 모든 항목을 가상공간상에 출력하거나, 사용자의 선택에 의해 출력의 종류 지정과 비율, 적용 빈도를 조정할 수 있으며, 이를 위한 조작 장치가 가상으로 제공된다.
3차원 그래픽화를 통한 날씨, 환경, 공간을 표현하는 방법은 다음과 같다.
날씨는 다양한 유형의 날씨를 사전에 지정된 유형의 가상공간의 3차원 그래픽 조명과 3차원 그래픽 데이터, 음성, 효과음과 같은 사운드를 조합하여 이펙트, 오브젝트 출력을 통해 사용자와 상호작용을 할 수 있다.
예를 들어 날씨가 맑으면 강한 주광색 조명이 배경 공간 전체에 출력되며, 주광 오브젝트에 닿은 물체는 밝게 처리되어 사용자에게 상호작용됨을 알릴 수 있고, 비는 빗방울을 3차원 그래픽으로 출력하여 아바타와 오브젝트에 충돌하는 방식으로 상호작용할 수 있다.
환경은 바람, 온도와 같은 주변 환경을 의미하며, 가상의 공간에 물리적인 연산을 통한 3차원 그래픽의 변화를 시각적인 정보로 가공하고, 효과음을 청각정보로 가공하여 출력한다. 예를 들어 바람이 불면 사용자아바타의 머리카락과 배경에 설치된 3차원 그래픽 오브젝트가 흔들리고, 밀리는 등의 상호작용을 할 수 있고, 온도의 변화는 아지랑이 등의 3차원 그래픽 효과를 통하여 상호작용이 이루어진다.
공간은 사용자가 현재 위치한 현실 상황의 정보를 실시간으로 전송받아 해당 지역의 랜드마크, 공간 표현을 위한 바닥과 벽, 천정과 같은 실내 특정 공간에 대한 표현, 가구와 같은 사물, 지형 표현을 위한 자연물 등을 3차원 그래픽화하여 가상공간에 실시간으로 투영하여 표현한다. .
사용자는 가상의 조정장치를 이용하여 부분적이거나 전체 사용을 설정할 수 있으며, 물체감지센서부(140)을 통하여 표현된 3차원 그래픽 요소와 상호작용을 할 수 있으며, 이때 현장감을 줄 수 있도록 조작에 대한 3차원 그래픽 변화와 효과음을 통해 상호작용을 확인할 수 있다. 예를 들어 아바타가 손으로 가구를 조작하거나, 문을 여는 등의 가상 환경에서의 물리적인 상호작용을 할 수 있다.
채팅내용가공기능(234)은 콘텐츠시청단말부(300)로부터 전송받은 채팅내용을 실시간으로 전송받아 출력가능한 형태로 가공하는 기능이다.
상기 채팅내용가공기능(234)은 채팅내용을 실시간으로 전송받아 3차원 그래픽화하여 글자객체를 생성하고, 글자객체는 채팅내용을 분석하여 분석값에 따라 글자객체의 이펙트의 종류, 강도를 다르게 할 수 있다. 예를 들어 느낌표(!)를 2개 이상 붙이는 경우 글자가 점점 커지면서 터지는 이펙트가 생성될 수 있으며, 때로는 아바타가 손으로 글자객체를 잡고 던지거나 부수는 등의 물리적 상호작용을 할 수 있다.
후원금형태가공기능(235)은 콘텐츠시청단말부(300)로부터 후원금지원정보를 전송받아 설정된 후원금범위에 따른 애니메이션효과가 다르게 연출되도록 가공되는 기능이다.
상기 후원금형태가공기능(235)은 콘텐츠소비자인 시청자가 트윕, 트게더 등의 후원플랫폼을 통하여 콘텐츠제공자에게 후원하기 위한 것으로, 후원금지원정보를 분석하여 데이터값에 따라 3차원 이펙트의 종류, 강도가 다르게 나타날 수 있도록 한다,
디스플레이부(240)는 상기 제어부(230)로부터 생성된 아바타그래픽데이터와 3차원 그래픽데이터와, 가공된 실제환경정보와 채팅내용과 후원금지원정보를 디스플레이하기 위한 것이다. 상기 디스플레이부(240)를 통해 가상공간을 시각적으로 출력함으로써 서버(200)로 접속한 콘텐츠시청단말부(300)로 디스플레이된 가상공간정보를 제공할 수 있다.
데이터베이스부(250)는 콘텐츠제공부(100)로부터 전송받은 데이터와 상기 제어부(230)를 통해 제공되는 데이터와 콘텐츠시청단말부(300)로부터 전송받은 데이터들을 저장하는 기능을 한다. 즉, 콘텐츠제공부(100)로부터 사용자 움직임데이터, 물체구현데이터 등을 전송받아 저장하고, 제어부(230)로부터 아바타그래픽데이터, 3차원 그래픽 데이터 등을 제공받아 저장하고, 콘텐츠시청단말부(300)로부터 채팅내용, 후원금지원정보 등을 전송받아 저장한다.
콘텐츠시청단말부(300)는 상기 서버(200)로부터 출력되는 디스플레이화면을 제공받고, 상기 서버(200)로 채팅내용이 입력가능한 채팅입력부(310)를 포함하고, 시청자가 소정 액수의 후원금을 지원하기 위한 후원금지원정보를 입력하기 위한 후원금지원부(320)를 포함하는 것이다.
상기 콘텐츠시청단말부(300)는 시청자가 소지한 단말기로서 PC, 스마트폰 등이 될 수 있다.
도 4을 참고하면 상기 콘텐츠시청단말부(300)는 채팅입력부(310), 후원금지원부(320)를 포함하여 구성된다.
채팅입력부(310)는 콘텐츠시청자에 의해 채팅내용을 입력받고, 입력된 채팅내용을 서버로 전송하기 위한 것이다.
후원금지원부(320)는 콘텐츠시청자가 소정 액수의 후원금을 지원하기 위해 후원금지원정보를 입력하고, 입력된 후원금지원정보를 서버로 전송하기 위한 것이다.
도 5는 데이터를 분석하여 필요한 정보를 추출하는 것에 대한 예시도면으로, 가상현실의 데이터 특성에 따라 필요한 정보를 추출해서 가상현실에 적용시키는 모습을 나타낸 도면이다.
상기와 같은 가상화시스템을 이용하여 현실세계 데이터를 가상화하는 방법은 아래와 같다.
본 발명의 현실세계 데이터의 가상화방법은 3차원그래픽데이터생성단계(S1), 3차원가상공간생성단계(S2), 실제환경정보데이터획득단계(S3), 사용자움직임데이터획득단계(S4), 아바타그래픽데이터가공단계(S5), 디스플레이출력단계(S6)를 포함하여 진행된다.
각 단계를 구체적으로 설명하면 다음과 같다.
S1)3차원그래픽데이터생성단계
3차원그래픽데이터생성단계(S1)는 사용자와 원거리에 위치하는 실세계 공간에 대한 실시간 3차원 그래픽 데이터를 생성하는 단계이다.
구체적으로는 상기 3차원그래픽데이터생성단계(S1)는 콘텐츠제공부(100)를 통해 수집된 물체구현데이터를 서버(200)로 전송하고, 전송된 물체구현데이터를 이용하여 3차원 그래픽 데이터를 생성할 수 있다.
S2)3차원가상공간생성단계
3차원가상공간생성단계(S2)는 상기 3차원그래픽데이터생성단계(S1)를 통해 생성된 3차원 그래픽 데이터를 기반으로 3차원 가상공간을 생성하는 단계이다.
상기 3차원 가상공간은 콘텐츠시청자에게 실제와 유사한 환경을 제공해주어야 하기 때문에 실제환경과 대응되는 형태의 3차원 가상공간을 생성할 수 있다.
S3)실제환경정보데이터획득단계
실제환경정보데이터획득단계(S3)는 외부매체를 통해 날씨,온도를 포함하는 실제환경정보 데이터를 획득하여 3차원가상공간생성단계(S2)의 3차원 가상공간에 송출가능한 정보로 변환하는 단계이다.
구체적으로는 상기 실제환경정보데이터획득단계(S3)는 콘텐츠제공부(100)의 데이터수집부(130)를 통하여 날씨정보, 온도정보, 지진정보, 외부소리, 위치정보 등의 실제환경정보를 획득하여 서버(200)로 전송하여 서버(200)의 제어부(230)를 통해 3차원 가상공간에 송출가능한 정보로 변환할 수 있다.
이외에도 현실에서 데이터로 변환할 수 있는 모든 종류의 정보를 입력하여 실제환경정보데이터를 획득할 수 있음은 물론이다.
S4)사용자움직임데이터획득단계
사용자움직임데이터획득단계(S4)는 모션인식장치를 이용하여 사용자 움직임을 측정하여 사용자 움직임데이터를 획득하는 단계이다.
상기 사용자움직임데이터획득단계(S4)는 콘텐츠제공부(100)의 사용자모션캡쳐부(110)를 이용하여 사용자 움직임데이터를 획득할 수 있다.
이때 사용자모션캡쳐부(110)는 모션인식이 가능한 모션인식장치로서 사용자의 움직임을 측정할 수 있다.
S5)아바타그래픽데이터가공단계
아바타그래픽데이터가공단계(S5)는 상기 사용자움직임데이터획득단계(S4)에서 획득한 사용자 움직임데이터를 이용하여 아바타그래픽데이터로 가공하는 단계이다.
상기 아바타그래픽데이터가공단계(S5)는 상기 사용자움직임데이터획득단계(S4)를 통해 획득한 사용자 움직임데이터를 서버(200)로 전송한 후,전송된 사용자 움직임데이터를 서버(200)의 제어부(230)로 전송받아 아바타그래픽데이터로 가공할 수 있다.
S6)디스플레이출력단계
디스플레이출력단계(S6)는 상기 3차원그래픽데이터생성단계(S1)의 3차원그래픽데이터와 실제환경정보데이터획득단계(S3)를 통해 변환된 실제환경정보데이터와 아바타그래픽데이터가공단계(S5)의 아바타그래픽데이터를 정합하여 상기 3차원가상공간생성단계(S2)를 통해 생성된 3차원가상공간에 반영하여 디스플레이로 출력하는 단계이다.
상기 디스플레이출력단계(S6)는 상기 3차원그래픽데이터생성단계(S1)의 3차원그래픽데이터와 실제환경정보데이터획득단계(S3)를 통해 변환된 실제환경정보데이터와 아바타그래픽데이터가공단계(S5)의 아바타그래픽데이터를 정합하여 상기 3차원가상공간생성단계(S2)를 통해 생성된 3차원가상공간에 반영하여 서버(200)의 디스플레이부(240)로 디스플레이할 수 있다.
이상과 같은 본 명세서에 기재된 실시예와 도면에 도시된 구성은 본 발명의 가장 바람직한 일실시예에 불과할 뿐이고 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 이들을 대체할 수 있는 다양한 균등물과 변형예들이 있을 수 있음을 이해하여야 한다
100 콘텐츠제공부
110 사용자모션캡쳐부
120 가상물체구현부
130 데이터수집부
140 물체감지센서부
200 서버
210 가상공간생성부
220 통신부
230 제어부
240 디스플레이부
250 데이터베이스부
300 콘텐츠시청단말부
310 채팅입력부
320 후원금지원부

Claims (3)

  1. 사용자를 인식하고 움직임을 측청하여 측정된 사용자 움직임데이터를 서버로 전송하고, 실제 물체의 위치정보를 수집한 물체구현데이터를 서버로 전송하고, 실제환경정보를 외부로부터 실시간으로 수집하고, 수집된 실제환경정보데이터를 서버로 전송하는 콘텐츠제공부(100)와,
    상기 콘텐츠제공부(100)로부터 전송받은 사용자 움직임데이터를 이용하여 아바타그래픽데이터를 생성하고, 상기 콘텐츠제공부(100)로부터 전송받은 물체구현데이터를 이용하여 물체그래픽데이터를 생성하되 상기 물체그래픽데이터를 기반으로 가상공간을 생성하고, 상기 콘텐츠제공부(100)로부터 전송받은 실제환경정보데이터가 가상공간으로 출력가능하도록 가공하고, 상기 아바타그래픽데이터와 실제환경정보데이터가 반영된 가상공간을 디스플레이화면으로 출력하는 서버(200)와,
    상기 서버(200)로부터 출력되는 디스플레이화면을 제공받고, 상기 서버(200)로 채팅내용이 입력가능한 채팅입력부(310)를 포함하고, 시청자가 소정 액수의 후원금을 지원하기 위한 후원금지원정보를 입력하기 위한 후원금지원부(320)를 포함하는 콘텐츠시청단말부(300)를 포함하고,

    상기 콘텐츠제공부(100)는
    사용자가 착용하는 것으로, 사용자를 인식하고 움직임을 측정하여 사용자 움직임데이터를 제공하고, 측정된 사용자 움직임데이터를 서버로 전송하는 사용자모션캡쳐부(110)와,
    실제 물체의 위치와 가상공간 객체의 위치를 연동하여 가상공간을 구현하기 위해, 실제 물체의 위치정보를 수집한 물체구현데이터를 서버로 전송하는 가상물체구현부(120)와,
    날씨정보, 온도정보, 지진정보, 외부소리, 위치정보에 관한 실제환경정보데이터를 외부로부터 실시간으로 수집하고, 수집된 실제환경정보데이터를 서버로 전송하는 데이터수집부(130)와,
    사용자가 사용하는 물체의 위치 및 움직임을 감지하여 물체감지데이터를 제공하기 위한 물체감지센서부(140)를 포함하고,
    상기 서버(200)는
    사용자와 원거리에 위치하는 실세계 공간에 대한 실시간 3차원 그래픽데이터를 생성하고, 복수개의 구조물들을 이용하여 구성된 실세계 공간에 상응하게 3차원가상공간을 생성하는 가상공간생성부(210)와,
    상기 콘텐츠제공부(100)와 콘텐츠시청단말부(300)로부터 정보를 송수신하는 통신부(220)와,
    상기 콘텐츠제공부(100)로부터 제공받은 사용자 움직임데이터를 이용하여 아바타그래픽데이터를 생성하고, 콘텐츠제공부(100)의 가상물체구현부(120)로부터 물체구현데이터를 제공받아 3차원 그래픽데이터를 생성하고, 콘텐츠제공부(100)의 데이터수집부(130)로부터 제공받은 실제환경정보를 실시간으로 제공받아 가상공간으로 송출가능한 정보로 변환하고, 콘텐츠시청단말부(300)로부터 전송받은 채팅내용을 실시간으로 전송받아 출력가능한 형태로 가공하고, 콘텐츠시청단말부(300)로부터 후원금지원정보를 전송받아 설정된 후원금범위에 따른 애니메이션효과가 다르게 연출되도록 가공되는 제어부(230)와,
    상기 제어부(230)로부터 생성된 아바타그래픽데이터와 3차원 그래픽데이터와, 가공된 실제환경정보와 채팅내용과 후원금지원정보를 디스플레이하는 디스플레이부(240)를 포함하고,
    상기 콘텐츠시청단말부(300)는
    콘텐츠시청자에 의해 채팅내용을 입력받고, 입력된 채팅내용을 서버로 전송하는 채팅입력부(310)와,
    콘텐츠시청자가 소정 액수의 후원금을 지원하기 위해 후원금지원정보를 입력하고, 입력된 후원금지원정보를 서버로 전송하는 후원금지원부(320)를 포함하는 것을 특징으로 하는 현실세계 데이터의 가상화시스템.

  2. 삭제
  3. 삭제
KR1020200077292A 2020-06-24 2020-06-24 현실세계 데이터의 가상화시스템 및 방법 KR102364275B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200077292A KR102364275B1 (ko) 2020-06-24 2020-06-24 현실세계 데이터의 가상화시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200077292A KR102364275B1 (ko) 2020-06-24 2020-06-24 현실세계 데이터의 가상화시스템 및 방법

Publications (2)

Publication Number Publication Date
KR20210158653A KR20210158653A (ko) 2021-12-31
KR102364275B1 true KR102364275B1 (ko) 2022-02-17

Family

ID=79177829

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200077292A KR102364275B1 (ko) 2020-06-24 2020-06-24 현실세계 데이터의 가상화시스템 및 방법

Country Status (1)

Country Link
KR (1) KR102364275B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102525348B1 (ko) 2023-02-02 2023-04-25 주식회사 벨라도 사용자 참여형 콘텐츠의 시청이 가능한 상호작용 플랫폼 서비스 제공 방법, 장치 및 시스템

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102520287B1 (ko) * 2022-03-15 2023-04-11 주식회사 비투엔 메타버스를 이용한 아동 돌봄 서비스 시스템 및 제어 방법
KR102561602B1 (ko) * 2022-04-22 2023-07-31 이민재 컨시어지 서비스의 중개 플랫폼을 제공하는 서버의 제어 방법

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101505060B1 (ko) * 2010-08-24 2015-03-26 한국전자통신연구원 가상 현실 연동 서비스 제공 시스템 및 그 방법
KR102210408B1 (ko) 2014-03-26 2021-01-29 에스케이텔레콤 주식회사 가상화 서버의 이중화를 위한 제어 방법 및 이를 위한 가상화 제어 장치
KR102398401B1 (ko) 2014-09-25 2022-05-13 애플 인크. 네트워크 기능 가상화
KR20200041839A (ko) * 2020-02-24 2020-04-22 주식회사 아프리카티비 방송 시청을 위한 가상 현실 사용자 인터페이스 제공 방법 및 장치

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102525348B1 (ko) 2023-02-02 2023-04-25 주식회사 벨라도 사용자 참여형 콘텐츠의 시청이 가능한 상호작용 플랫폼 서비스 제공 방법, 장치 및 시스템

Also Published As

Publication number Publication date
KR20210158653A (ko) 2021-12-31

Similar Documents

Publication Publication Date Title
KR102364275B1 (ko) 현실세계 데이터의 가상화시스템 및 방법
US10496910B2 (en) Inconspicuous tag for generating augmented reality experiences
GB2556347B (en) Virtual Reality
CN110716645A (zh) 一种增强现实数据呈现方法、装置、电子设备及存储介质
KR102282316B1 (ko) 혼합 현실의 등급을 매긴 정보 전달
RU2621644C2 (ru) Мир массового одновременного удаленного цифрового присутствия
CN112379812A (zh) 仿真3d数字人交互方法、装置、电子设备及存储介质
CN108874126B (zh) 基于虚拟现实设备的交互方法及系统
US20120150650A1 (en) Automatic advertisement generation based on user expressed marketing terms
US20220382051A1 (en) Virtual reality interaction method, device and system
CN105339867A (zh) 使用视觉逼真的对象显示
US20180081448A1 (en) Augmented-reality-based interactive authoring-service-providing system
TW201246088A (en) Theme-based augmentation of photorepresentative view
SG190826A1 (en) Natural gesture based user interface methods and systems
KR101743764B1 (ko) 감성 아바타 이모티콘 기반의 초경량 데이터 애니메이션 방식 제공 방법, 그리고 이를 구현하기 위한 감성 아바타 이모티콘 제공 단말장치
KR20220106855A (ko) 뉴럴 네트워크를 이용하여 상황을 인지하는 증강 현실 제공 장치, 제공 방법 및 상기 방법을 실행하기 위하여 매체에 저장된 컴퓨터 프로그램
CN111643899A (zh) 一种虚拟物品显示方法、装置、电子设备和存储介质
KR20210028198A (ko) 아바타 애니메이션
Şen et al. A novel gesture-based interface for a VR simulation: Re-discovering Vrouw Maria
CN112419510A (zh) 一种虚拟现实与增强现实的展厅互动方法
Raajan et al. Augmented reality based virtual reality
CN114358822A (zh) 一种广告展示方法、装置、介质及设备
KR20100048747A (ko) 안면 추적을 이용한 모바일 유저 인터페이스 장치
US11961190B2 (en) Content distribution system, content distribution method, and content distribution program
JPH10214344A (ja) インタラクティブ表示装置

Legal Events

Date Code Title Description
GRNT Written decision to grant