KR101808598B1 - 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현장치 및 그 방법 - Google Patents

다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현장치 및 그 방법 Download PDF

Info

Publication number
KR101808598B1
KR101808598B1 KR1020140056698A KR20140056698A KR101808598B1 KR 101808598 B1 KR101808598 B1 KR 101808598B1 KR 1020140056698 A KR1020140056698 A KR 1020140056698A KR 20140056698 A KR20140056698 A KR 20140056698A KR 101808598 B1 KR101808598 B1 KR 101808598B1
Authority
KR
South Korea
Prior art keywords
motion
screen
user
unit
metaverse
Prior art date
Application number
KR1020140056698A
Other languages
English (en)
Other versions
KR20150129957A (ko
Inventor
박상욱
장종현
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020140056698A priority Critical patent/KR101808598B1/ko
Priority to US14/710,024 priority patent/US9480928B2/en
Publication of KR20150129957A publication Critical patent/KR20150129957A/ko
Application granted granted Critical
Publication of KR101808598B1 publication Critical patent/KR101808598B1/ko

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63GMERRY-GO-ROUNDS; SWINGS; ROCKING-HORSES; CHUTES; SWITCHBACKS; SIMILAR DEVICES FOR PUBLIC AMUSEMENT
    • A63G31/00Amusement arrangements
    • A63G31/16Amusement arrangements creating illusions of travel
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F9/00Games not otherwise provided for
    • A63F9/14Racing games, traffic games, or obstacle games characterised by figures moved by action of the players
    • A63F9/143Racing games, traffic games, or obstacle games characterised by figures moved by action of the players electric
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/23Recognition of whole body movements, e.g. for sport training

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명은 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현장치 및 그 방법에 관한 것으로, 본 발명에 따른 다른 실시예는 실감미디어 콘텐츠 및 상기 실감미디어 콘텐츠에 대응되는 실감효과 데이터를 제공하는 콘텐츠 서버, 상기 실감미디어 콘텐츠를 재생하는 복수의 화면부, 상기 실감효과 데이터를 기초로 사용자에게 실감효과를 제공하는 실감디바이스, 상기 사용자의 모션을 인식하여 모션 정보를 생성하는 모션 인식부, 상기 모션 정보를 기초로 상기 사용자의 모션을 상기 화면부에 반영하는 모션 처리부, 상기 모션 인식부가 상기 사용자로부터 화면 이동 신호를 수신하면, 상기 화면 이동 신호에 상응하는 화면부에 상기 사용자의 모션을 반영하도록 상기 모션 처리부에 요청하는 화면 이동부 및 상기 화면부에 복수의 사용자의 모션이 반영되는 경우, 상기 복수의 사용자가 공유하는 메타버스 콘텐츠와 상기 메타버스 콘텐츠에 대응되는 메타버스 실감효과 데이터를 제공하는 메타버스 서버를 포함하는 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현장치를 제공할 수 있다.

Description

다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현장치 및 그 방법{Experience Ride Representation Apparatus and its Method for Real-sense media service based on multi-vision}
본 발명은 4D 영화관, 시뮬레이터, 라이드 제품에서 모션을 포함하는 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현장치 및 그 방법에 관한 것으로, 구체적으로는 동계 스포츠에서 영상과 함께 사실적인 몰입감을 제공하는 라이드 제어와 다양한 콘텐츠와 인터랙티브한 체험 서비스를 제공하기 위한 장치 및 그 운용방법에 관한 것이다.
현재 실감나는 멀티미디어 콘텐츠를 제공하기 위해 전통적인 비디오 장치와 오디오 장치를 통해 시각적 효과 및 청각적 효과를 극대화하는 기술이 상용화되고 있다. 시각적 효과와 청각적 효과를 제공하는 것을 넘어서서, 4D 영화관에서는 사용자에게 움직임을 제공하여 몰입감을 높이는 실감체험 서비스가 제공되고 있다.
그러나, 영상을 기반으로 콘텐츠 생성시에 프로듀서에 의해 미리 저작 혹은 프로그래밍되어 제공되는 모션 및 실감효과 재현 서비스는 사용자 혹은 콘텐츠와 인터랙티브 한 실감재현 효과를 제공하는데 한계가 있다.
또한, 생성된 하나의 영상에 특화된 서비스로 다른 실감미디어 콘텐츠 및 타 사용자에게 다양한 서비스를 제공하는 장치 및 방법은 아직 제시된 바 없다.
대한민국 공개특허 : 제10-2010-0008774호
본 발명의 일 실시예가 해결하고자 하는 과제는 실감미디어 콘텐츠를 포함하는 체험형 라이드를 인터랙티브 하게 할 수 있는 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현장치 및 그 방법을 제공하는 데 있다.
본 발명의 다른 실시예가 해결하고자 하는 과제는 사용자의 모션을 인지하여 콘텐츠에 반영하고, 이를 통한 다수의 사용자와 경연할 수 있는 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현장치 및 그 방법을 제공하는 데 있다.
본 발명의 또 다른 실시예가 해결하고자 하는 과제는 콘텐츠 및 사용자 관리를 통해 하나의 스튜디오에서 다수의 사용자가 콘텐츠를 공유하여 사용하거나 화면을 이동하려는 모션에 따라 다른 사용자와 콘텐츠를 공유하는 것을 자유롭게 제공하여 실감미디어 콘텐츠의 활성화를 높이고 라이드를 체험하는 사용자 간의 교감을 높일 수 있는 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현장치 및 그 방법을 제공하는 데 있다.
본 발명에 따른 일 실시예는 사용자로부터 수신한 제 1 신호에 따라, 상기 사용자의 모션을 복수의 화면부에서 이동하도록 반영하고, 상기 화면부에 재생되는 실감미디어 콘텐츠를 기초로 상기 사용자에게 제 2 신호를 전송하며, 상기 화면부가 복수의 사용자에 의해 공유되면, 상기 복수의 사용자에게 메타버스 콘텐츠를 제공하는 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현장치를 제공할 수 있다.
본 발명에 따른 다른 실시예는 실감미디어 콘텐츠 및 상기 실감미디어 콘텐츠에 대응되는 실감효과 데이터를 제공하는 콘텐츠 서버, 상기 실감미디어 콘텐츠를 재생하는 복수의 화면부, 상기 실감효과 데이터를 기초로 사용자에게 실감효과를 제공하는 실감디바이스, 상기 사용자의 모션을 인식하여 모션 정보를 생성하는 모션 인식부, 상기 모션 정보를 기초로 상기 사용자의 모션을 상기 화면부에 반영하는 모션 처리부, 상기 모션 인식부가 상기 사용자로부터 화면 이동 신호를 수신하면, 상기 화면 이동 신호에 상응하는 화면부에 상기 사용자의 모션을 반영하도록 상기 모션 처리부에 요청하는 화면 이동부 및 상기 화면부에 복수의 사용자의 모션이 반영되는 경우, 상기 복수의 사용자가 공유하는 메타버스 콘텐츠와 상기 메타버스 콘텐츠에 대응되는 메타버스 실감효과 데이터를 제공하는 메타버스 서버를 포함하는 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현장치를 제공할 수 있다.
일 실시예에 있어서, 상기 콘텐츠 서버는 상기 사용자의 모션 정보에 따라 상기 화면부에서 재생되는 상기 실감미디어 콘텐츠의 재생 속도를 조절하는 콘텐츠 속도 조절부를 포함할 수 있다.
다른 실시예에 있어서, 상기 콘텐츠 서버는 상기 실감미디어 콘텐츠 및 상기 실감효과 데이터를 상기 화면부에 통신망을 통해 전송하는 콘텐츠 전송부를 포함할 수 있다.
또 다른 실시예에 있어서, 상기 화면부는 상기 사용자의 움직임을 아바타 및 캐릭터 중 선택되는 어느 하나 이상으로 반영할 수 있다.
또 다른 실시예에 있어서, 상기 모션 인식부가 상기 사용자의 모션으로부터 인식하는 모션 정보는 상기 사용자가 진행하는 방향을 기준으로 올라가거나 내려가는 Pitch 모션 정보, 상기 사용자가 진행하는 방향의 좌측 또는 우측으로 회전하는 모션에 관한 Yaw 모션 정보 및 상기 사용자가 진행하는 방향을 기준으로 좌측 또는 우측으로 기울어지는 Roll 모션 정보를 포함할 수 있다.
또 다른 실시예에 있어서, 상기 화면 이동부가 상기 사용자의 모션을 상기 화면 이동 신호에 상응하는 화면부에 반영할 때, 상기 화면 이동 신호를 수신하기 전 상기 화면부에서 재생되는 실감미디어 콘텐츠와 상기 화면 이동 신호에 상응하는 화면부에서 재생되는 실감미디어 콘텐츠를 연결하는 화면 연결부를 더 포함할 수 있다.
또 다른 실시예에 있어서, 상기 실감미디어 콘텐츠 및 상기 메타버스 콘텐츠 중 선택되는 어느 하나로부터 지형정보를 획득하고, 상기 지형정보에 상응하는 실감효과를 상기 화면부에 반영하도록 상기 모션 처리부에 요청하는 지형정보 제공부를 더 포함할 수 있다.
또 다른 실시예에 있어서, 상기 지형정보 제공부는 상기 지형정보를 기초로 상기 실감디바이스를 통해 상기 사용자에게 물리적인 자극을 전달하도록 상기 실감디바이스에 요청할 수 있다.
본 발명에 따른 또 다른 실시예는 사용자로부터 제 1 신호를 수신하는 단계, 상기 제 1 신호에 따라 상기 사용자의 모션을 복수의 화면부에서 이동하도록 반영하는 단계, 상기 화면에 재생되는 실감미디어 콘텐츠를 기초로 상기 사용자에게 제 2 신호를 전송하는 단계 및 상기 화면부가 복수의 사용자에 의해 공유되면, 상기 복수의 사용자에게 메타버스 콘텐츠를 제공하는 단계를 포함하는 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현방법을 제공할 수 있다.
본 발명에 따른 또 다른 실시예는 콘텐츠 서버가 실감미디어 콘텐츠 및 상기 실감미디어 콘텐츠에 대응되는 실감효과 데이터를 화면부에 제공하는 단계, 상기 화면부가 상기 실감미디어 콘텐츠를 재생하는 단계, 실감디바이스가 상기 실감효과 데이터를 기초로 사용자에게 실감효과를 제공하는 단계, 모션 인식부가 상기 사용자의 모션을 인식하여 모션 정보를 생성하는 단계, 모션 처리부가 상기 모션 정보를 기초로 상기 사용자의 모션을 상기 화면부에 반영하는 단계, 상기 모션 인식부가 상기 사용자로부터 화면 이동 신호를 수신하면, 화면 이동부가 상기 화면 이동 신호에 상응하는 화면부에 상기 사용자의 모션을 반영하도록 상기 모션 처리부에 요청하는 단계 및 상기 화면부에 복수의 사용자의 모션이 반영되는 경우, 메타버스 서버가 상기 복수의 사용자가 공유하는 메타버스 콘텐츠와 상기 메타버스 콘텐츠에 대응되는 메타버스 실감효과 데이터를 제공하는 단계를 포함하는 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현방법을 제공할 수 있다.
일 실시예에 있어서, 콘텐츠 속도 조절부가 상기 사용자의 모션 정보에 따라 상기 화면부에서 재생되는 상기 실감미디어 콘텐츠의 재생 속도를 조절하는 단계를 더 포함할 수 있다.
다른 실시예에 있어서, 콘텐츠 전송부가 상기 실감미디어 콘텐츠 및 상기 실감효과 데이터를 상기 화면부에 통신망을 통해 전송하는 단계를 더 포함할 수 있다.
또 다른 실시예에 있어서, 상기 화면 이동부가 상기 사용자의 모션을 상기 화면 이동 신호에 상응하는 화면부에 반영할 때, 상기 화면 연결부는 상기 화면 이동 신호를 수신하기 전 상기 화면부에서 재생되는 실감미디어 콘텐츠와 상기 화면 이동 신호에 상응하는 화면부에서 재생되는 실감미디어 콘텐츠를 연결하는 단계를 더 포함할 수 있다.
또 다른 실시예에 있어서, 지형정보 제공부가 상기 실감미디어 콘텐츠 및 상기 메타버스 콘텐츠 중 선택되는 어느 하나로부터 지형정보를 획득하고, 상기 지형정보에 상응하는 실감효과를 상기 화면부에 반영하도록 상기 모션 처리부에 요청하는 단계 및 상기 지형정보를 기초로 상기 실감디바이스를 통해 상기 사용자에게 물리적인 자극을 전달하도록 상기 실감디바이스에 요청하는 단계를 더 포함할 수 있다.
본 발명의 일 실시예에 따른 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현장치 및 그 방법은 실감미디어 콘텐츠를 포함하는 체험형 라이드를 인터랙티브 하게 제공할 수 있다.
본 발명의 일 실시예에 따른 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현장치 및 그 방법은 사용자의 모션을 인지하여 콘텐츠에 반영하고, 이를 통한 다수의 사용자와 경연하는 서비스를 제공할 수 있다.
본 발명의 일 실시예에 따른 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현장치 및 그 방법은 콘텐츠 및 사용자 관리를 통해 하나의 스튜디오에서 다수의 사용자가 콘텐츠를 공유하여 사용하거나 화면을 이동하려는 모션에 따라 다른 사용자와 콘텐츠를 공유하는 것을 자유롭게 제공하여 실감미디어 콘텐츠의 활성화를 높이고 라이드를 체험하는 사용자 간의 교감을 높일 수 있다.
도 1은 본 발명의 일 실시예에 따른 체험형 라이드 재현장치와 사용자 사이의 신호 전달 과정을 나타낸 개념도이다.
도 2는 본 발명의 일 실시예에 따른 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현장치가 복수의 사용자에 의해 공유된 것을 나타낸 개념도이다.
도 3은 본 발명의 일 실시예에 따른 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현장치를 나타낸 개념도이다.
도 4 및 도 5는 본 발명의 일 실시예에 따는 모션 인식부 및 모션 처리부를 나타낸 개념도이다.
도 6은 본 발명의 일 실시예에 따른 화면 이동부에 의해 사용자가 복수의 화면을 이동하는 과정을 나타낸 개념도이다.
도 7은 본 발명의 일 실시예에 따른 화면 연결부가 화면부에서 재생되는 영상을 연결하는 방법을 나타낸 것이다.
도 8은 본 발명의 일 실시예에 따른 화면부가 복수인 경우 실시예를 나타낸다.
도 9 및 도 10은 본 발명의 일 실시예에 따른 메타버스 서버에 의해 복수의 사용자가 화면부를 공유하는 것을 나타낸 개념도이다.
도 11은 본 발명의 일 실시예에 따른 모션 인식부가 사용자의 모션으로부터 인식하는 모션 정보의 종류를 나타낸 것이다.
도 12는 본 발명의 일 실시예에 따른 지형정보 제공부가 사용자에게 콘텐츠에 포함되는 지형정보를 제공하는 것을 나타낸 개념도이다.
도 13은 본 발명의 일 실시예에 따른 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현방법을 나타낸 순서도이다.
도 14는 본 발명의 일 실시예에 따른 메타버스 서버에 의한 공유화면 제공방법을 나타낸 순서도이다.
도 15는 본 발명의 일 실시예에 따른 속도 조절부가 실감미디어 콘텐츠를 제공하는 방법을 나타낸 순서도이다.
도 16은 본 발명의 일 실시예에 따른 화면 이동부가 실감미디어 콘텐츠를 제공하는 방법을 나타낸 순서도이다.
도 17은 본 발명의 일 실시예에 따른 지형정보 제공부가 지형정보를 제공하는 방법을 나타낸 순서도이다.
본 명세서에 개시되어 있는 본 발명의 개념에 따른 실시 예들에 대해서 특정한 구조적 또는 기능적 설명은 단지 본 발명의 개념에 따른 실시 예들을 설명하기 위한 목적으로 예시된 것으로서, 본 발명의 개념에 따른 실시 예들은 다양한 형태들로 실시될 수 있으며 본 명세서에 설명된 실시 예들에 한정되지 않는다.
본 발명의 개념에 따른 실시 예들은 다양한 변경들을 가할 수 있고 여러 가지 형태들을 가질 수 있으므로 실시예들을 도면에 예시하고 본 명세서에서 상세하게 설명하고자 한다. 그러나, 이는 본 발명의 개념에 따른 실시예들을 특정한 개시 형태들에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물, 또는 대체물을 포함한다.
제1 또는 제2 등의 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있지만, 상기 구성 요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로만, 예컨대 본 발명의 개념에 따른 권리 범위로부터 벗어나지 않은 채, 제1구성 요소는 제2구성 요소로 명명될 수 있고 유사하게 제2구성 요소는 제1구성 요소로도 명명될 수 있다.
어떤 구성 요소가 다른 구성 요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성 요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성 요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성 요소가 다른 구성 요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는 중간에 다른 구성 요소가 존재하지 않는 것으로 이해되어야 할 것이다. 구성 요소들 간의 관계를 설명하는 다른 표현들, 즉 "~사이에"와 "바로 ~사이에" 또는 "~에 이웃하는"과 "~에 직접 이웃하는" 등도 마찬가지로 해석되어야 한다.
본 명세서에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로서, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 본 명세서에 기재된 특징, 숫자, 단계, 동작, 구성 요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성 요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 나타낸다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 갖는 것으로 해석되어야 하며, 본 명세서에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이하, 본 명세서에 첨부된 도면들을 참조하여 본 발명의 실시예들을 상세히 설명한다.
도 1은 본 발명의 일 실시예에 따른 체험형 라이드 재현장치와 사용자 사이의 신호 전달 과정을 나타낸 개념도이다.
도 1을 참조하면, 본 발명의 일 실시예에 따른 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현장치(10)는 사용자(U)로부터 수신한 제 1 신호(S1)에 따라, 사용자(U)의 모션을 체험형 라이드 재현장치(10)에 포함되는 복수의 화면부에서 이동하도록 반영할 수 있다. 여기서, 제 1 신호(S1)는 사용자(10)에 의해 생성되는 전기적인 신호 및 기계적인 신호를 포함할 수 있다.
사용자(U)는 하나의 화면부를 통해 실감미디어 콘텐츠를 제공받고, 제 1 신호(S1)를 체험형 라이드 재현장치(10)에 전송함으로써, 사용자(U)가 원하는 화면부에서 실감미디어 콘텐츠를 제공받을 수 있다.
사용자(U)는 화면부에 재생되는 실감미디어 콘텐츠에 따라 제 2 신호(S2)를 전송받을 수 있다. 여기서, 제 2 신호(S2)는 실감미디어 콘텐츠를 통해 사용자(U)가 특정 상황에 몰입하도록 제공되는 신호를 포함할 수 있다. 예를 들어, 제 2 신호(S2)는 사용자(U)의 오감을 자극하는 신호를 포함할 수 있다.
도 2는 본 발명의 일 실시예에 따른 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현장치가 복수의 사용자에 의해 공유된 것을 나타낸 개념도이다.
도 2를 참조하면, 본 발명의 일 실시예에 따른 체험형 라이드 재현장치(10)가 복수의 사용자(U1, U2)에 의해 공유되면, 체험형 라이드 재현장치(10)는 복수의 사용자(U1, U2)에게 메타버스(metaverse) 콘텐츠를 제공할 수 있다.
여기서, 메타버스 콘텐츠는 사용자(U1)와 사용자(U2)가 하나의 공간에서 동일한 상황을 공유할 수 있도록 느끼게 하는 영상 정보를 포함할 수 있다.
도 3은 본 발명의 일 실시예에 따른 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현장치를 나타낸 개념도이다.
본 발명의 일 실시예에 따른 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현장치는 콘텐츠 서버(100), 화면부(200), 실감디바이스(300), 모션 인식부(400), 모션 처리부(500), 화면 이동부(600) 및 메타버스 서버(700)를 포함할 수 있다.
도 3을 참조하면, 콘텐츠 서버(100)는 실감미디어 콘텐츠 및 실감효과 데이터를 제공할 수 있다.
실감미디어 콘텐츠는 사용자(U)에게 현장성을 제공할 수 있는 영상정보를 포함할 수 있다. 도 3에 나타낸 것처럼, 실감미디어 콘텐츠는 스키장의 배경 영상 정보를 포함할 수 있다.
콘텐츠 서버(100)가 제공하는 실감미디어 콘텐츠는 화면부(200)에 재생될 수 있다. 사용자(U)는 화면부(200)에 재생되는 배경 영상 정보를 복수의 화면부(200, 200a, 200b)를 통해서 제공받을 수 있다.
실감효과 데이터는 실감미디어 콘텐츠에 대응되는 실감효과 데이터를 포함할 수 있다.
실감미디어 콘텐츠가 화면부(200)를 통해서 사용자(U)에게 시각적으로 제공될 때, 실감효과 데이터는 사용자(U)가 더욱 실감미디어 콘텐츠에 몰입할 수 있도록 청각, 촉각, 미각 및 후각을 자극할 수 있는 수단을 제공할 수 있다.
여기서, 실감효과 데이터는 스키장에서 사용자(U)가 실제 느낄 수 있는 바람, 향기, 소리에 대한 정보를 포함할 수 있다.
도 3의 사용자(U)는 스키장의 배경 영상을 3개의 화면부(200, 200a, 200b)를 통해 제공받으면서, 좌측 화면부(200a)에 나타나는 숲의 향기, 정면 화면부(200)에서 느낄 수 있는 바람의 세기, 우측 화면부(200b)에 나타나는 슬로프에서 들려오는 사람들의 함성 소리 등을 실감디바이스(300)로부터 제공받을 수 있다.
일 실시예에 있어서, 콘텐츠 서버(100)는 사용자(U)의 모션 정보에 따라 화면부(200)에서 재생되는 실감미디어 콘텐츠의 재생 속도를 조절하는 콘텐츠 속도 조절부(800)를 더 포함할 수 있다.
모션 인식부(400)가 사용자(U)로부터 속도 증가 신호 또는 속도 감소 신호를 수신하면, 콘텐츠 속도 조절부(800)는 실감미디어 콘텐츠를 제공하는 속도를 증가 또는 감소하는 방법으로 사용자(U)에게 몰입감을 증가시킬 수 있다.
다른 실시예에 있어서, 콘텐츠 서버(100)는 실감미디어 콘텐츠 및 실감효과 데이터를 화면부(200)에 통신망을 통해 전송하는 콘텐츠 전송부(900)를 더 포함할 수 있다.
콘텐츠 전송부(900)는 근거리 또는 원거리에 위치한 화면부(200)에 실감미디어 콘텐츠 및 실감효과 데이터를 전송할 수 있다.
도 3에서는 콘텐츠 서버(100)를 화면부(200)와 근접한 위치에 나타냈으나, 다양한 실시예에서 사용자(U)와 화면부(200)는 제 1 공간에 배치될 수 있고, 콘텐츠 서버(100)는 통신 회사가 운용하는 서버의 형태로 제 2 공간에 배치될 수 있으며, 사용자(U)는 원격지에 배치된 콘텐츠 서버(100)로부터 소정의 통신망을 통해 서비스를 제공받을 수 있다.
여기서, 통신망은 유선 통신망 및 무선 통신망을 포함할 수 있다. 무선 통신망은 무선랜(Wireless LAN: WLAN), 와이 파이(Wi-Fi), 와이브로(Wireless Broadband: Wibro), 와이맥스(World Interoperability for Microwave Access: Wimax), HSDPA(High Speed Downlink Packet Access), IEEE 802.16, 롱 텀 에볼루션(Long Term Evolution: LTE), 광대역 무선 이동 통신 서비스(Wireless Mobile Broadband Service: WMBS) 등이 포함될 수 있다.
또한, 근거리 통신 기술로는, 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(Infrared Data Association: IrDA), UWB(Ultra Wideband), 지그비(ZigBee), 인접 자장 통신(Near Field Communication: NFC) 등이 포함될 수 있다.
또한, 유선 통신 기술로는, USB 통신, 이더넷(Ethernet), 시리얼 통신(serial communication), 광/동축 케이블 등을 포함할 수 있다.
화면부(200)는 실감미디어 콘텐츠를 재생할 수 있다.
도 3에 나타낸 것처럼, 화면부(200)는 복수의 화면부(200, 200a, 200b)를 포함하는 디스플레이부로 구현될 수 있다.
화면부(200)는 실감미디어 콘텐츠를 재생함에 있어, 복수의 디스플레이부에 사용자(U)의 시점에 따른 다른 영상을 재생할 수 있다.
디스플레이부는 엘씨디(LCD, Liquid Crystal Display), 싱글-칩 디엘피 프로젝터(Single-chip DLP(Digital Light Processing) 프로젝터), 쓰리-칩 디엘피 프로젝터(Three-chip DLP(Digital Light Processing) 프로젝터), 씨알티(CRT,Cathode Ray Tube), 플라즈마 디스플레이 패널(Plasma Display Panel), 엘씨에스(LCS, Liquid Crystal on Silicon), 투명 스크린 홀로그래픽 이미지(Holographic Images on Transparent Screen), 유기 발광 다이오드(OLED, Organic Light Emitting Diode) 및 LED 전광판 중 선택되는 어느 하나가 될 수 있다.
실감디바이스(300)는 실감효과 데이터를 수신하고, 실감효과 데이터를 기초로 사용자(U)에게 실감효과를 제공할 수 있다. 실감디바이스(300)는 바람을 만드는 장치, 향기를 만드는 장치, 소리를 만드는 장치를 포함할 수 있다.
더 나아가, 실감디바이스(300)는 사용자(U)의 움직임 및 실감미디어 콘텐츠에 따라 사용자(U)에게 소정의 움직임 정보를 제공할 수 있다.
예를 들어, 사용자(U)가 스노우 보드를 즐기는 중에 장애물을 만난 경우, 장애물에 의해 발행하는 충격등이 사용자(U)에게 제공될 수 있다.
여기서, 장애물에 의해 발행하는 충격등을 포함하는 물리적인 자극은 기계적인 장치를 통해서 사용자(U)에게 제공될 수 있으며, 본 발명의 권리범위를 특별한 기계적인 장치로 제한하는 것은 아니며, 당업자 수준에서 다양하게 구현이 가능하다.
도 4는 본 발명의 일 실시예에 따는 모션 인식부 및 모션 처리부를 나타낸 개념도이다.
도 4를 참조하면, 모션 인식부(400)는 사용자(U)의 모션을 인식하여 모션 정보를 생성할 수 있다.
모션 인식부(400)는 사용자(U)의 모션 정보를 인식하기 위해 복수의 카메라를 구비할 수 있다.
다른 방법에 있어서, 모션 인식부(400)는 신호발생 장치와 소정의 센서를 이용하여, 사용자(U)의 움직임, 동작 및 모션을 인식하고, 이를 전기적인 신호로 변환할 수 있다.
모션을 인식하는 방법은 다양한 방법을 적용할 수 있으며, 본 발명의 권리범위를 특별한 모션 인식 방법으로 제한하는 것은 아니다.
모션 처리부(500)는 모션 인식부(400)로부터 수신한 모션 정보를 기초로 사용자(U)의 모션을 화면부(200)에 반영할 수 있다.
도 4의 화면부(200)를 살펴보면, 사용자(U)와 동일한 형상을 갖는 캐릭터 또는 아바타(UA)가 화면부(200)에 표시되는 것을 확인할 수 있다.
다른 실시예에서, 사용자(U)는 화면부(200)에 표시되는 형상을 특정 캐릭터 형상으로 설정할 수 있다.
도 4와 도 5를 비교하면, 사용자(U)의 움직임에 따라, 화면부(200)에서 나타나는 캐릭터(UA)의 모습도 변경되는 것을 확인할 수 있다.
사용자(U)의 모습을 화면부(200)에 반영하기 위해, 모션 인식부(400)는 카메라등을 구비할 수 있고, 사용자(U)의 모습을 인식하는 카메라는 복수가 될 수 있다.
모션 처리부(500)는 사용자(U)의 모습을 다양한 각도에서 나타내기 위해 소정의 모션 알고리즘을 사용할 수 있으나, 본 발명의 권리범위를 특정 모션 알고리즘으로 제한하는 것은 아니다.
도 6은 본 발명의 일 실시예에 따른 화면 이동부에 의해 사용자가 복수의 화면을 이동하는 과정을 나타낸 개념도이다.
도 6을 참조하면, 화면 이동부(600)는 모션 인식부(400)가 사용자(U)로부터 화면 이동 신호를 수신하면, 화면 이동 신호에 상응하는 화면부(200)에 사용자(U)의 모션을 반영하도록 모션 처리부(500)에 요청할 수 있다.
사용자(U)는 모션 인식부(400)에 화면 이동 신호를 전달할 수 있다. 화면 이동 신호는 사용자(U)에 의해 생성되는 기계적 또는 전기적 신호를 포함할 수 있다.
모션 인식부(400)는 화면 이동 신호를 화면 이동부(600)에 전달할 수 있다. 이때, 화면 이동부(600)는 화면 이동 신호에 상응하는 화면부(200)를 결정하고, 결정된 화면부(200)에 사용자(U)의 모션을 반영하도록 모션 처리부(500)에 요청할 수 있다.
도 3에서 사용자(U)는 정면에 위치한 화면부(200)에서 사용자(U)의 모습을 확인할 수 있었으나, 화면 이동 신호를 전송함으로써, 좌측에 위치한 화면부(200a)에서 사용자(U)의 모습이 나타남을 확인할 수 있다.
예를 들어, 사용자(U)는 화면을 이동하기 전 화면부(200)에 나타난 초급 코스를 연습하던 중 좌측에 위치한 화면부(200a)에 중급 코스가 있는 경우, 화면 이동 신호를 모션 인식부(400)에 전송하는 방법으로 좌측에 위치한 화면부(200a)로 이동하고, 중급 코스의 연습을 시작할 수 있다.
도 7은 본 발명의 일 실시예에 따른 화면 연결부가 화면부에서 재생되는 영상을 연결하는 방법을 나타낸 것이다.
도 7을 참조하면, 본 발명의 일 실시예에 따른 체험형 라이드 재현장치(10)는 화면 연결부(620)를 더 포함할 수 있다.
화면 연결부(620)는 화면 이동부(600)가 사용자(U)의 모션을 화면 이동 신호에 상응하는 화면부(200a)에 반영할 때, 화면 이동 신호를 수신하기 전 화면부(200)에서 재생되는 실감미디어 콘텐츠와 화면 이동 신호에 상응하는 화면부(200a)에서 재생되는 실감미디어 콘텐츠를 연결할 수 있다.
도 6에서는 사용자(U)의 화면 이동 신호에 따라 사용자(U)의 모습(UA)을 좌측에 위치한 화면부(200a)에 반영했으나, 도 7에서는 사용자(U)의 모습(UA)을 좌측에 위치한 화면부(200a)에 반영하는 것뿐만 아니라, 화면 연결부(620)를 통해 정면의 화면부(200)에 나타내던 배경화면 영상도 좌측에 위치한 화면부(200a)에 재생하도록 하였다.
즉, 도 6의 정면에 위치한 화면부(200)에서 재생되던 실감미디어 콘텐츠는 도 7의 좌측에 위치한 화면부(200a)에서 재생되는 실감미디어 콘텐츠와 대응된다.
따라서, 사용자는 화면 이동부(600)를 통해, 복수의 화면부(200, 200a, 200b)를 이동하면서 라이딩을 즐길 수 있을 뿐만 아니라, 화면 연결부(620)를 통해, 끊김 없는 실감미디어 콘텐츠를 제공받을 수 있다.
본 발명의 실시예에서, 화면 이동부(600)와 화면 연결부(620)는 동시에 작용할 수 있다.
도 6에서는 이해를 돕기 위해, 3개의 화면부(200, 200a, 200b)만을 도시 했으나, 도 8에 나타낸 것처럼, 6개의 화면부(200, 200a, 200b, 200c, 200d, 200e)가 구비되면, 사용자(U)는 6개의 화면부(200, 200a, 200b, 200c, 200d, 200e)를 자유롭게 이동할 수 있다.
도 9 및 도 10은 본 발명의 일 실시예에 따른 메타버스 서버에 의해 복수의 사용자가 화면부를 공유하는 것을 나타낸 개념도이다.
도 9 및 도 10을 참조하면, 본 발명의 일 실시예에 따른 메타버스 서버(700)는 화면부(200, 200a 200b)에 복수의 사용자(U1, U2)의 모션이 반영되는 경우, 복수의 사용자(U1, U2)가 공유하는 메타버스 콘텐츠와 메타버스 콘텐츠에 대응되는 메타버스 실감효과 데이터를 복수의 사용자(U1, U2)에게 제공할 수 있다.
도 9에서 A 사용자(U1)는 좌측에 위치한 화면부(200a)를 통해 라이딩을 하고 있다. 도 9에서 B 사용자(U2)는 우측에 위치한 화면부(200b)를 통해 라이딩을 하고 있다.
도 10에서 A 사용자(U1) 및 B 사용자(U2)는 중안에 위치한 화면부(200)를 공유하고 있다. 이때, 메타버스 서버(700)는 메타버스 콘텐츠와 메타버스 실감효과를 중앙에 위치한 화면부(200)에 제공할 수 있다.
A 사용자(U1)는 중앙에 위치한 화면부(200)를 B 사용자(U2)와 공유하면서, 라이딩을 할 수 있다. 이때, A 사용자(U1)의 좌측에 위치한 화면부(200a)는 A 사용자(U1)의 개인 화면부(200a)가 될 수 있다. A 사용자(U1)의 좌측에 위치한 화면부(200a)는 여전히 콘텐츠 서버(100)로부터 실감미디어 콘텐츠 및 실감효과 데이터를 제공받을 수 있다.
B 사용자(U2)는 중앙에 위치한 화면부(200)를 A 사용자(U1)와 공유하면서, 라이딩을 할 수 있다. 이때, B 사용자(U2)의 우측에 위치한 화면부(200b)는 B 사용자(U)의 개인 화면부(200b)가 될 수 있다. B 사용자(U2)의 좌측에 위치한 화면부(200a)는 여전히 콘텐츠 서버(100)로부터 실감미디어 콘텐츠 및 실감효과 데이터를 제공받을 수 있다.
도 11은 본 발명의 일 실시예에 따른 모션 인식부가 사용자의 모션으로부터 인식하는 모션 정보의 종류를 나타낸 것이다.
도 11을 참조하면, 모션 정보는 Pitch 모션 정보, Yaw 모션 정보 및 Roll 모션 정보를 포함할 수 있다.
Pitch 모션 정보는 사용자(U)가 진행하는 방향을 기준으로 올라가거나 내려가는 정보를 포함할 수 있다. 여기서, 사용자(U)가 진행하는 방향은 X축(901)으로 증가하는 방향이 될 수 있다.
Pitch 모션 정보는 사용자(U)의 진행 방향을 X축(901)이라고 할 때, Z축(903)의 + 방향으로 상승하는 모션과, Z축(903)의 - 방향으로 하강하는 모션을 포함할 수 있다. 즉, Y축(902)을 기준으로 회전하는 모션을 포함할 수 있다.
Yaw 모션 정보는 사용자(U)가 진행하는 방향의 좌측 또는 우측으로 회전하는 모션 정보를 포함할 수 있다. 사용자(U)의 진행 방향을 X축(901)이라고 할 때, Z축(903)을 기준으로 회전하는 모션을 포함할 수 있다.
Roll 모션 정보는 사용자(U)가 진행하는 방향을 기준으로 좌측 또는 우측으로 기울어지는 모션을 포함할 수 있다. 사용자(U)의 진행 방향을 X축(901)이라고 할 때, X축(901)을 기준으로 회전하는 모션을 포함할 수 있다.
모션 인식부(400)가 Pitch 모션 정보, Yaw 모션 정보 및 Roll 모션 정보를 포함하는 사용자(U)의 모션 정보를 수신하면, 모션 처리부(500)를 통해 화면부(200)에 사용자(U)의 모션을 반영할 수 있다.
도 12는 본 발명의 일 실시예에 따른 지형정보 제공부가 사용자에게 콘텐츠에 포함되는 지형정보를 제공하는 것을 나타낸 개념도이다.
도 12를 참조하면, 본 발명의 일 실시예에 따른 지형정보 제공부(720)는 실감미디어 콘텐츠 또는 메타버스 콘텐츠로부터 지형정보를 획득하고, 지형정보에 상응하는 실감효과를 사용자(U)에게 제공할 수 있다.
화면부(205)에는 진행방향으로 올라가는 실감미디어 콘텐츠가 재생되고 있다. 지형정보 제공부(720)는 화면부(205)에서 재생되는 실감미디어 콘텐츠의 지형정보를 획득하고, 지형정보에 상응하는 효과를 사용자에게 제공할 수 있다.
모션 인식부(400)가 사용자(U)의 모션 정보를 생성하고, 모션 처리부(500)가 모션 정보를 기초로 사용자(U)의 모션을 화면부(205)에 반영할 때, 지형정보 제공부(720)는 지형정보에 따라 사용자(U)의 모션을 보정하여 화면부(205)에 반영하도록 요청할 수 있다.
예를 들어, 사용자(U)가 모션 인식부(400)에 아바타의 속도를 증가시키는 신호를 전송한 경우, 모션 인식부(400)가 속도 증가 모션 정보를 생성하여, 모션 처리부(500)에 전송한 경우라도, 지형정보 제공부(720)는 현재의 지형이 오르막이라는 지형정보를 획득하여, 모션 처리부(500)에 제공함으로써, 사용자(U)가 요청한 속도에서 일정 부분 감소 된 속도를 아바타에 반영하도록 할 수 있다.
다른 실시예에서, 사용자(U)로부터 모션을 인식하여 Pitch 모션 정보, Yaw 모션 정보 및 Roll 모션 정보를 포함하는 모션 정보를 생성하여, 모션 처리부(500)에 전달한 경우라도, 모션 처리부(500)는 지형정보 제공부(720)로부터 수신한 지형정보를 고려하여 보정된 모션을 화면부(205)에 반영할 수 있다.
또한, 지형정보 제공부(720)는 실감 디바이스(300)에 지형정보를 전송하는 방법으로 사용자(U)에게 물리적인 자극을 제공할 수 있다.
예를 들어, 지형정보 제공부(720)가 실감미디어 콘텐츠로부터 일정한 기울기가 적용된 지형정보를 획득한 경우, 실감 디바이스(300)에 연결된 소정의 장치를 통해 일정한 기울기를 느낄 수 있도록 할 수 있다.
도 13은 본 발명의 일 실시예에 따른 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현방법을 나타낸 순서도이다.
도 13을 참조하면, 단계 S501에서 콘텐츠 서버(100)는 실감미디어 콘텐츠 및 실감미디어 콘텐츠에 대응되는 실감효과 데이터를 제 1 화면부(200)에 제공할 수 있다.
단계 S502에서 제 1 화면부(200)는 실감효과 데이터를 실감디바이스(300)에 제공할 수 있다.
단계 S503에서 제 1 화면부(200)는 실감미디어 콘텐츠를 재생하여, 사용자(U)에게 실감미디어 콘텐츠를 제공할 수 있다.
단계 S504에서 사용자(U)는 실감디바이스(300)로부터 실감효과를 제공받을 수 있다.
단계 S505에서 사용자(U)가 실감미디어 콘텐츠 및 실감효과 데이터를 제공받는 중에, 모션 인식부(400)는 사용자(U)로부터 모션을 인식할 수 있다.
단계 S506에서 모션 인식부(400)는 모션 정보를 생성하고, 단계 S507에서 생성한 모션 정보를 모션 처리부(500)에 전송할 수 있다.
단계 S508에서 모션 처리부(500)는 모션 정보를 제 1 화면부(200)에 전송할 수 있다.
단계 S509에서 제 1 화면부(200)는 사용자(U)의 모션을 아바타 형태로 반영할 수 있다.
단계 S510에서 모션 인식부(400)는 사용자(U)로부터 화면 이동 신호를 수신할 수 있다.
단계 S511에서 모션 인식부(400)는 화면 이동 신호를 생성하고, 단계 S512에서 화면 이동 신호를 모션 처리부(500)에 전송할 수 있다.
단계 S513에서 모션 처리부(500)가 화면 이동 신호에 상응하는 화면부(200a)를 결정하면, 단계 S514에서 모션 정보를 제 2 화면부(200a)에 전송할 수 있다.
단계 S515에서 제 2 화면부(200)는 사용자(U)의 아바타(UA)를 반영할 수 있다.
도 14는 본 발명의 일 실시예에 따른 메타버스 서버에 의한 공유화면 제공방법을 나타낸 순서도이다.
도 14를 참조하면, 단계 S601에서 화면부(200)는 복수의 사용자(U1, U2)가 화면부(200)를 공유하는 것을 인식할 수 있다.
단계 S602에서 화면부(200)가 복수의 사용자(U1, U2)가 화면부(200)를 공유한다는 신호는 메타버스 서버(700)에 전송할 수 있다.
단계 S603에서 메타버스 서버(700)는 메타버스 공간 형성을 결정하고, 단계 S604에서 메타버스 콘텐츠 및 메타버스 실감효과 데이터를 화면부(200)에 전송할 수 있다.
단계 S605에서 화면부(200)는 메타버스 실감효과 데이터를 실감디바이스(300)에 전송할 수 있다.
단계 S606 및 단계 S607에서 사용자(U1) 1은 메타버스 콘텐츠 및 메타버스 실감효과 데이터를 화면부(200)를 통해서 제공받을 수 있다.
단계 S608 및 단계 S609에서 사용자(U2) 2는 메타버스 콘텐츠 및 메타버스 실감효과 데이터를 화면부(200)를 통해서 제공받을 수 있다.
즉, 사용자(U1) 1 및 사용자(U2) 2는 동일한 화면부(200)를 공유할 수 있다.
도 15는 본 발명의 일 실시예에 따른 속도 조절부가 실감미디어 콘텐츠를 제공하는 방법을 나타낸 순서도이다.
도 15를 참조하면, 단계 S701에서 사용자(U)는 속도 증가 모션을 생성할 수 있다. 속도 증가 모션은 사용자(U)의 설정에 따라 다르게 설정할 수 있다.
단계 S702에서 모션 정보를 모션 인식부(400)에 전송할 수 있다.
단계 S703에서 모션 인식부(400)는 모션 정보를 콘텐츠 속도 조절부(800)에 전송할 수 있다.
단계 S704에서 콘텐츠 속도 조절부(800)는 모션 정보에 상응하는 실감미디어 콘텐츠의 제공 속도를 결정하고, 단계 S705에서 실감미디어 콘텐츠를 화면부(200)에 제공할 수 있다.
단계 S706에서 화면부(200)는 증가 된 속도의 실감미디어 콘텐츠를 제공할 수 있고, 사용자(U)는 단계 S707에서 증가 된 속도의 실감미디어 콘텐츠를 제공받을 수 있다.
도 16은 본 발명의 일 실시예에 따른 화면 이동부가 실감미디어 콘텐츠를 제공하는 방법을 나타낸 순서도이다.
도 16를 참조하면, 단계 S801에서 제 1 화면부(200)는 A 실감미디어 콘텐츠를 재생할 수 있다.
단계 S802에서 화면 이동부(600)는 모션 인식부(400)로부터 화면 이동 신호를 수신할 수 있다.
단계 S803에서 화면 이동부(600)가 제 1 화면부(200)에 재생정보를 요청하면, 단계 S804에서 화면 이동부(600)는 제 1 화면부(200)로부터 재생정보를 수신할 수 있다.
단계 S805에서 화면 이동부(600)가 재생정보를 화면 연결부(620)에 전송하면, 단계 S806에서 화면 연결부(620)는 화면 이동 신호에 상응하는 화면부(200)를 결정할 수 있다.
단계 S807에서 화면 연결부(620)는 재생정보를 확인하고, 단계 S808에서 화면 연결부(620)는 제 2 화면부(200a)에 A 실감미디어 콘텐츠를 제공할 수 있다.
단계 S809에서 화면 연결부(620)는 제 1 화면부(200)에 B 실감미디어 콘텐츠를 제공할 수 있다. 여기서, A 실감미디어 콘텐츠와 B 실감미디어 콘텐츠는 구별될 수 있다.
단계 S810에서 제 1 화면부(200)는 B 실감미디어 콘텐츠를 재생할 수 있다.
단계 S811에서 제 2 화면부(200a)는 A 실감미디어 콘텐츠를 재생할 수 있다.
결과적으로, 사용자(U)는 제 2 화면부(200a)로부터 A 실감미디어 콘텐츠를 제공받을 수 있다.
도 17은 본 발명의 일 실시예에 따른 지형정보 제공부가 지형정보를 제공하는 방법을 나타낸 순서도이다.
도 17을 참조하면, 단계 S901에서 모션 인식부(400)는 사용자의 모션을 인식할 수 있다.
단계 S902에서 모션 인식부(400)는 사용자의 모션을 기초로 모션 정보를 생성할 수 있다.
단계 S903에서 모션 인식부(400)는 모션 정보를 모션 처리부(500)에 전송할 수 있다.
단계 S904에서 모션 처리부(500)는 사용자의 모션을 화면부(205)에 반영하도록 요청할 수 있다.
단계 S905에서 화면부(205)는 사용자의 모션을 아바타로 반영할 수 있다.
단계 S906에서 지형정보 제공부(700)는 화면부(205)에서 전송 받은 실감미디어 콘텐츠로부터 지형정보를 획득할 수 있다.
단계 S907에서 지형정보 제공부(700)는 모션 처리부(500)에 지형정보를 반영하도록 요청할 수 있다.
단계 S908에서 모션 처리부(500)는 화면부(205)에 지형정보를 반영하도록 요청할 수 있다.
단계 S909에서 화면부(205)는 지형정보를 반영한 아바타를 표시할 수 있다.
다른 실시예에서, 지형정보 제공부(720)가 지형정보를 기초로 실감디바이스(300)를 통해 사용자에게 물리적인 자극을 전달하도록 실감디바이스(300)에 요청하는 단계를 더 수행할 수도 있다.
여기에서 개시된 실시예들과 결합하여 설명된 방법 또는 알고리즘의 단계들은 하드웨어로, 프로세서에 의해서 실행된 소프트웨어 모듈에서, 또는 상기 두 가지의 결합에서 직접 구현될 수 있을 것이다. 소프트웨어 모듈은 RAM 메모리, 플래시 메모리, ROM 메모리, EPROM 메모리, EEPROM 메모리, 레지스터들, 하드 디스크, 탈부착 가능 디스크, CD-ROM, 또는 본 발명이 속한 기술분야에서 알려진 어떤 다른 형상의 저장 매체에 상주할 수 있을 것이다. 예시적인 저장 매체는 상기 프로세서와 결합할 수 있을 것이며, 그래서 상기 프로세서가 상기 저장 매체로부터 정보를 읽고 그리고 정보를 그 저장 매체에 쓸 수 있도록 한다. 대안으로, 상기 저장 매체는 상기 프로세서에 통합될 수 있을 것이다. 상기 프로세서 및 상기 저장 매체는 ASIC 내에 상주할 수 있을 것이다. 그 ASIC은 사용자 단말 내에 위치할 수 있을 것이다. 대안으로, 상기 프로세서 및 상기 저장 매체는 사용자 단말 내 별도의 컴포넌트들로서 상주할 수 있을 것이다.
상기에서 설명된 모든 프로세스들은 하나 또는 그 이상의 범용 또는 특수 목적 컴퓨터들이나 프로세서들에 의해서 실행된 소프트웨어 코드 모듈들 내에서 구현될 수 있을 것이며, 그리고 그 소프트웨어 코드 모듈들을 경유하여 완전히 자동화될 수 있을 것이다. 상기 코드 모듈들은 임의 유형의 컴퓨터-독출가능 매체 또는 다른 컴퓨터 저장 디바이스 또는 저장 디바이스들의 집합 상에 저장될 수 있을 것이다. 상기 방법들 중 몇몇 또는 모두는 전문화된 컴퓨터 하드웨어 내에서 대안으로 구현될 수 있을 것이다.
여기에서 설명된 모든 방법들 및 태스크들은 컴퓨터 시스템에 의해서 실행되고 그리고 충분히 자동화될 수 있을 것이다. 상기 컴퓨터 시스템은, 몇몇의 경우들에서, 상기 설명된 기능들을 수행하기 위해서 네트워크를 통해서 통신하고 그리고 상호 동작하는 다중의 개별 컴퓨터들 또는 컴퓨팅 디바이스들 (예를 들면, 물리적인 서버들, 워크스테이션들, 저장 어레이들 등)을 포함할 수 있을 것이다. 그런 컴퓨팅 디바이스 각각은 메모리 또는 다른 비-일시적 컴퓨터-독출가능 저장 매체에 저장된 프로그램 명령어들 또는 모듈들을 실행시키는 프로세서 (또는 다중 프로세서들 또는 회로 또는 회로들의 집합, 예를 들면 모듈)를 포함하는 것이 보통이다. 비록 여기에서 설명된 다양한 기능들 중 몇몇 또는 모두는 컴퓨터 시스템의 애플리케이션-특정 회로 (예를 들면, ASIC들 또는 FPGA들)로 구현될 수 있을 것이지만, 그 설명된 다양한 기능들은 그런 프로그램 명령어들로 구현될 수 있을 것이다. 상기 컴퓨터 시스템이 여러 컴퓨팅 디바이스들을 포함할 때에, 이 디바이스들은 같은 장소에 배치되는 것이 필요한 것은 아니지만, 같이 배치될 수 있을 것이다. 상기 개시된 방법들 및 태스크들의 결과들은 솔리드 스테이트 메모리 칩들 및/또는 자기 디스크들과 같은 변환 물리 저장 디바이스들에 의해서 상이한 상태로 영구적으로 저장될 수 있을 것이다.
본 발명은 도면에 도시된 실시 예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시 예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 등록청구범위의 기술적 사상에 의해 정해져야 할 것이다.
100 : 콘텐츠 서버
200 : 화면부
300 : 실감디바이스
400 : 모션 인식부
500 : 모션 처리부
600 : 화면 이동부
620 : 화면 연결부
700 : 메타버스 서버
720 : 지형정보 제공부
800 : 콘텐츠 속도 조절부
900 : 콘텐츠 전송부
901 : X축
902 : Y축
903 : Z축
U : 사용자

Claims (15)

  1. 사용자로부터 수신한 제 1 신호에 따라 상기 사용자의 모션을 복수의 화면부에서 이동하도록 반영하고, 상기 화면부에 재생되는 실감미디어 콘텐츠를 기초로 상기 사용자에게 제 2 신호를 전송하는, 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현장치로서,
    실감미디어 콘텐츠 및 상기 실감미디어 콘텐츠에 대응되는 실감효과 데이터를 제공하는 콘텐츠 서버;
    상기 화면부에 복수의 사용자의 모션이 반영되는 경우, 상기 복수의 사용자가 공유하는 메타버스 콘텐츠와 상기 메타버스 콘텐츠에 대응되는 메타버스 실감효과 데이터를 제공하는 메타버스 서버; 및
    상기 제1 신호에 포함된 사용자의 화면 이동 신호에 상응하는 화면부에 사용자의 모션을 반영하기 위해, 상기 화면 이동 신호를 수신하기 전 상기 화면부에서 재생되는 실감미디어 콘텐츠와 상기 화면 이동 신호에 상응하는 화면부에서 재생되는 실감미디어 콘텐츠를 연결하는 화면 연결부를 포함하고,
    상기 복수의 화면부는,
    상기 콘텐츠 서버로부터 실감미디어 콘텐츠 및 실감효과 데이터를 수신하여 개별 사용자에게 제공하는 적어도 하나의 개인 화면부; 및
    상기 메타버스 서버로부터 메타버스 콘텐츠 및 메타버스 실감효과 데이터를 수신하여 복수의 사용자에게 제공하는 적어도 하나의 공유 화면부를 포함하는, 체험형 라이드 재현장치.
  2. 청구항 1에 있어서,
    상기 실감효과 데이터를 기초로 사용자에게 실감효과를 제공하는 실감디바이스;
    상기 사용자의 모션을 인식하여 모션 정보를 생성하는 모션 인식부;
    상기 모션 정보를 기초로 상기 사용자의 모션을 상기 화면부에 반영하는 모션 처리부; 및
    상기 모션 인식부가 상기 사용자로부터 화면 이동 신호를 수신하면, 상기 화면 이동 신호에 상응하는 화면부에 상기 사용자의 모션을 반영하도록 상기 모션 처리부에 요청하는 화면 이동부를 더 포함하는, 체험형 라이드 재현장치.
  3. 청구항 1에 있어서,
    상기 콘텐츠 서버는,
    상기 사용자의 모션 정보에 따라 상기 화면부에서 재생되는 상기 실감미디어 콘텐츠의 재생 속도를 조절하는 콘텐츠 속도 조절부를 포함하는, 체험형 라이드 재현장치.
  4. 청구항 1에 있어서,
    상기 콘텐츠 서버는,
    상기 실감미디어 콘텐츠 및 상기 실감효과 데이터를 상기 화면부에 통신망을 통해 전송하는 콘텐츠 전송부를 포함하는 체험형 라이드 재현장치.
  5. 청구항 1에 있어서,
    상기 화면부는
    상기 사용자의 움직임을 아바타 및 캐릭터 중 선택되는 어느 하나 이상으로 반영하는 것을 특징으로 하는 체험형 라이드 재현장치.
  6. 청구항 2에 있어서,
    상기 모션 인식부가 상기 사용자의 모션으로부터 인식하는 모션 정보는
    상기 사용자가 진행하는 방향을 기준으로 올라가거나 내려가는 피치(Pitch) 모션 정보,
    상기 사용자가 진행하는 방향의 좌측 또는 우측으로 회전하는 모션에 관한 요(Yaw) 모션 정보 및
    상기 사용자가 진행하는 방향을 기준으로 좌측 또는 우측으로 기울어지는 롤(Roll) 모션 정보를 포함하는, 체험형 라이드 재현장치.
  7. 삭제
  8. 청구항 1에 있어서,
    상기 실감미디어 콘텐츠 및 상기 메타버스 콘텐츠 중 선택되는 어느 하나로부터 지형정보를 획득하고, 상기 지형정보에 상응하는 실감효과를 상기 화면부에 반영하도록 모션 처리부에 요청하는 지형정보 제공부를 더 포함하는 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현장치.
  9. 청구항 8에 있어서,
    상기 지형정보 제공부는,
    상기 지형정보를 기초로 실감디바이스를 통해 상기 사용자에게 물리적인 자극을 전달하도록 상기 실감디바이스에 요청하는 것을 특징으로 하는 체험형 라이드 재현장치.
  10. 사용자로부터 수신한 제 1 신호에 따라, 상기 사용자의 모션을 복수의 화면부에서 이동하도록 반영하고, 상기 화면부에 재생되는 실감미디어 콘텐츠를 기초로 상기 사용자에게 제 2 신호를 전송하는, 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현방법으로서,
    콘텐츠 서버가 실감미디어 콘텐츠 및 상기 실감미디어 콘텐츠에 대응되는 실감효과 데이터를 화면부에 제공하는 단계;
    상기 화면부에 복수의 사용자의 모션이 반영되는 경우, 메타버스 서버가 상기 복수의 사용자가 공유하는 메타버스 콘텐츠와 상기 메타버스 콘텐츠에 대응되는 메타버스 실감효과 데이터를 제공하는 단계;
    상기 제1 신호에 포함된 사용자의 화면 이동 신호에 상응하는 화면부에 사용자의 모션을 반영하기 위해, 상기 화면 이동 신호를 수신하기 전 상기 화면부에서 재생되는 실감미디어 콘텐츠와 상기 화면 이동 신호에 상응하는 화면부에서 재생되는 실감미디어 콘텐츠를 연결하는 단계;
    상기 복수의 화면부는,
    상기 콘텐츠 서버로부터 실감미디어 콘텐츠 및 실감효과 데이터를 수신하여 개별 사용자에게 제공하는 적어도 하나의 개인 화면부; 및
    상기 메타버스 서버로부터 메타버스 콘텐츠 및 메타버스 실감효과 데이터를 수신하여 복수의 사용자에게 제공하는 적어도 하나의 공유 화면부를 포함하는, 체험형 라이드 재현 방법.
  11. 청구항 10에 있어서,
    상기 화면부가 상기 실감미디어 콘텐츠를 재생하는 단계;
    실감디바이스가 상기 실감효과 데이터를 기초로 사용자에게 실감효과를 제공하는 단계;
    모션 인식부가 상기 사용자의 모션을 인식하여 모션 정보를 생성하는 단계;
    모션 처리부가 상기 모션 정보를 기초로 상기 사용자의 모션을 상기 화면부에 반영하는 단계; 및
    상기 모션 인식부가 상기 사용자로부터 화면 이동 신호를 수신하면, 화면 이동부가 상기 화면 이동 신호에 상응하는 화면부에 상기 사용자의 모션을 반영하도록 상기 모션 처리부에 요청하는 단계를 더 포함하는, 체험형 라이드 재현방법.
  12. 청구항 10에 있어서,
    콘텐츠 속도 조절부가 상기 사용자의 모션 정보에 따라 상기 화면부에서 재생되는 상기 실감미디어 콘텐츠의 재생 속도를 조절하는 단계를 더 포함하는, 체험형 라이드 재현방법.
  13. 청구항 10에 있어서,
    콘텐츠 전송부가 상기 실감미디어 콘텐츠 및 상기 실감효과 데이터를 상기 화면부에 통신망을 통해 전송하는 단계를 더 포함하는 체험형 라이드 재현방법.
  14. 청구항 11에 있어서,
    지형정보 제공부가 상기 실감미디어 콘텐츠 및 상기 메타버스 콘텐츠 중 선택되는 어느 하나로부터 지형정보를 획득하고, 상기 지형정보에 상응하는 실감효과를 상기 화면부에 반영하도록 상기 모션 처리부에 요청하는 단계; 및
    상기 지형정보를 기초로 상기 실감디바이스를 통해 상기 사용자에게 물리적인 자극을 전달하도록 상기 실감디바이스에 요청하는 단계를 더 포함하는 체험형 라이드 재현방법.
  15. 삭제
KR1020140056698A 2014-05-12 2014-05-12 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현장치 및 그 방법 KR101808598B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020140056698A KR101808598B1 (ko) 2014-05-12 2014-05-12 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현장치 및 그 방법
US14/710,024 US9480928B2 (en) 2014-05-12 2015-05-12 Experience ride representation apparatus and method for real-sense media service based on multi-vision

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140056698A KR101808598B1 (ko) 2014-05-12 2014-05-12 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현장치 및 그 방법

Publications (2)

Publication Number Publication Date
KR20150129957A KR20150129957A (ko) 2015-11-23
KR101808598B1 true KR101808598B1 (ko) 2018-01-18

Family

ID=54366952

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140056698A KR101808598B1 (ko) 2014-05-12 2014-05-12 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현장치 및 그 방법

Country Status (2)

Country Link
US (1) US9480928B2 (ko)
KR (1) KR101808598B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220060955A (ko) 2020-11-05 2022-05-12 주식회사 숨비 공연 실감 체험시스템
KR20230089460A (ko) 2021-12-13 2023-06-20 현대자동차주식회사 가상 주행 시뮬레이션 장치 및 이를 몰입감 향상 방법

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10636218B2 (en) * 2018-09-24 2020-04-28 Universal City Studios Llc Augmented reality for an amusement ride
KR102650340B1 (ko) * 2019-06-07 2024-03-22 주식회사 케이티 재생 시각을 정밀하게 제어하는 동영상 재생 단말, 방법 및 서버
KR102641519B1 (ko) * 2021-08-11 2024-02-29 한국전자기술연구원 메타버스 제공 방법, 메타버스 제공 장치, 및 메타버스 제공 시스템
US11971930B2 (en) 2022-08-18 2024-04-30 Bank Of America Corporation Hybrid metaverse using edge nodes to support a soft repository for event processing

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4856771A (en) * 1987-10-22 1989-08-15 Nelson, Berg Enterprises Video simulation apparatus
US5004225A (en) * 1989-11-01 1991-04-02 Yuri Krukovsky Simulated observation flight apparatus
JPH10207344A (ja) * 1997-01-23 1998-08-07 Namco Ltd 映像表示装置及びシミュレーション装置
JP3187758B2 (ja) * 1997-11-27 2001-07-11 コナミ株式会社 スキーシミュレーションゲーム装置
US6902488B2 (en) * 2000-06-30 2005-06-07 Central Japan Railway Company Lateral steady acceleration simulation system for railway vehicle
TWI302667B (ko) * 2002-05-08 2008-11-01 Via Tech Inc
US20090075741A1 (en) * 2007-09-19 2009-03-19 Morgan Gabriel Milligan Extreme sports vehicle stimulator trainer (E.S.V.S.T.)
KR20100008774A (ko) 2008-07-16 2010-01-26 한국전자통신연구원 실감 효과 표현 방법 및 그 장치 및 실감 효과 메타데이터가 기록된 컴퓨터로 읽을 수 있는 기록 매체
KR20110007419A (ko) 2009-07-16 2011-01-24 한국전자통신연구원 멀티 메타버스 환경에서의 콘텐츠 전송 시스템 및 이를 이용한 콘텐츠 관리 방법
KR20120114770A (ko) 2011-04-08 2012-10-17 동서대학교산학협력단 서클비전 기반의 대규모 체감형 인터랙티브 게임 시스템 및 그 방법
KR101364594B1 (ko) 2011-05-26 2014-02-20 한국과학기술연구원 사용자의 움직임과 모션 플랫폼 사이의 양방향 상호 작용을 기반으로 한 실감형 스노보드 장치 및 그 제어방법.
KR101326944B1 (ko) 2012-03-02 2013-11-11 전북대학교산학협력단 동계 스포츠 시뮬레이터 및 그에 따른 제어 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220060955A (ko) 2020-11-05 2022-05-12 주식회사 숨비 공연 실감 체험시스템
KR20230089460A (ko) 2021-12-13 2023-06-20 현대자동차주식회사 가상 주행 시뮬레이션 장치 및 이를 몰입감 향상 방법

Also Published As

Publication number Publication date
US20150321107A1 (en) 2015-11-12
US9480928B2 (en) 2016-11-01
KR20150129957A (ko) 2015-11-23

Similar Documents

Publication Publication Date Title
KR101808598B1 (ko) 다중 화면 실감미디어 서비스를 위한 체험형 라이드 재현장치 및 그 방법
US10810798B2 (en) Systems and methods for generating 360 degree mixed reality environments
CN110300909B (zh) 用于显示交互式增强现实展示的系统、方法和介质
CN109069932B (zh) 观看与虚拟现实(vr)用户互动性相关联的vr环境
JP7057756B2 (ja) 仮想現実(vr)環境におけるvrユーザの観客ビュー追跡
JP6663505B2 (ja) Vr環境における観客ビュー視点
CN107735152B (zh) 用于虚拟现实(vr)观看的扩展视野重新渲染
CN107427722B (zh) 晕动病监测和补充声音对抗晕动病的应用
JP2020036334A (ja) ヘッドマウントディスプレイによって提示されるパーソナル空間コンテンツの制御
US20180095542A1 (en) Object Holder for Virtual Reality Interaction
US20170236162A1 (en) Generating content for a virtual reality system
CN105705210A (zh) 用于头戴式显示器用户的基于摄像机的安全机制
KR20190121407A (ko) 두부 장착형 시스템과 연관된 홉을 감소시키기 위한 시스템 및 방법
JP2017528935A (ja) 仮想現実コンテンツをレンダリングするモバイルコンピューティングデバイスを備えたインタフェースを有する頭部装着型デバイス(hmd)システム
CN105324738A (zh) 在头戴式显示器中切换操作模式
JP2019533226A (ja) 人による追跡装置のオクルージョンの影響を低減するシステム及び方法
KR20190090880A (ko) 감소된 홉을 이용해 두부 장착형 시스템 내에서 증강 가상 현실 장면을 생성하기 위한 시스템 및 방법
CA2883484A1 (en) System and method for visualizing synthetic objects withinreal-world video clip
US10437055B2 (en) Master device, slave device, and control method therefor
JP2018533317A (ja) 仮想現実映像伝送方法、再生方法、及びこれらを用いたプログラム
Chung Emerging Metaverse XR and Video Multimedia Technologies
KR101357901B1 (ko) N-스크린 환경에서 체감형 서비스 제공 방법, 장치 및 이를 위한 기록매체
US20150215410A1 (en) GEO-Referencing Media Content
WO2022249536A1 (ja) 情報処理装置及び情報処理方法

Legal Events

Date Code Title Description
A302 Request for accelerated examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant