KR20140065180A - 실시간 방송 콘텐츠 기반의 체험형 콘텐츠 제공 장치 및 방법 - Google Patents

실시간 방송 콘텐츠 기반의 체험형 콘텐츠 제공 장치 및 방법 Download PDF

Info

Publication number
KR20140065180A
KR20140065180A KR1020120132409A KR20120132409A KR20140065180A KR 20140065180 A KR20140065180 A KR 20140065180A KR 1020120132409 A KR1020120132409 A KR 1020120132409A KR 20120132409 A KR20120132409 A KR 20120132409A KR 20140065180 A KR20140065180 A KR 20140065180A
Authority
KR
South Korea
Prior art keywords
content
experiential
user
information
real
Prior art date
Application number
KR1020120132409A
Other languages
English (en)
Inventor
김태준
김영일
류원
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020120132409A priority Critical patent/KR20140065180A/ko
Publication of KR20140065180A publication Critical patent/KR20140065180A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4781—Games

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명은 TV를 통해 전달되는 장면을 실시간으로 시청자가 즐길 수 있는 게임 콘텐츠로 변환하여 시청자가 이 내용을 바탕으로 방송 내용을 직접 체험해 볼 수 있게 하는 실시간 방송 콘텐츠 기반의 체험형 콘텐츠 제공 장치 및 방법을 제공한다. 실시간 방송 콘텐츠 기반의 체험형 콘텐츠 제공 장치는 수신된 사용자 프로필 정보 및 방송 콘텐츠 사전정보에 기초하여 발생할 수 있는 상황을 패턴화하는 정보를 생성하고, 수신된 실시간 방송 콘텐츠에서 인상적인 장면을 선별하고, 선별된 인상적인 장면 및 생성된 패턴화하는 정보에 기초하여 체험형 콘텐츠를 생성하는 콘텐츠 변환 서버 및 콘텐츠 변환 서버에 상기 사용자 프로필 정보를 전달하고, 수신된 체험형 콘텐츠를 구동하여 사용자 인터페이스를 통해 사용자에게 전달하는 사용자 처리 단말을 포함한다.

Description

실시간 방송 콘텐츠 기반의 체험형 콘텐츠 제공 장치 및 방법{APPARATUS AND METHOD FOR PROVIDING USER EXPERIENTIAL CONTENTS BASED ON REAL TIME BROADCAST CONTENTS}
본 발명은 실시간 방송과 게임 시스템의 연동에 관한 것으로서, 실시간 TV 중계 상황에서 TV 방송 내용을 시청자가 체험할 수 있는 콘텐츠로 변환하는 장치 및 방법에 관한 것이다.
TV(Television)를 통하여 전달되는 일반적인 방송 콘텐츠는 방송사 또는 콘텐츠 제공업체에서 시청자에게 일방적인 정보를 전달하는 단방향의 통신 방식을 가진다. 따라서 시청자는 제공받는 방송 콘텐츠에 대해 능동적으로 참여할 수 없으며, 제공되는 콘텐츠를 수동적으로 수용하게 된다. 예를 들어, TV에 호기심을 끄는 장면이나 멋진 장면을 시청하는 경우, 시청자는 자신이 시청하는 방송 내용을 직/간접적으로 체험해보고 싶어할 수 있다. 대표적인 예로 스포츠 중계를 들 수 있다. 축구나 야구 실황중계에서 선수가 멋있는 골을 성공시키거나 홈런을 날리는 경우 상당수의 시청자들은 선수들의 동작을 그대로 따라 하고자 한다. 그러나 현재의 방송 서비스는 단순히 TV 장면을 제공하며, 부가적인 서비스도 해당 장면을 다시 보여주는 리플레이(Replay) 기능을 제공할 뿐이다.
대한민국 공개특허 제10-2012-0025812호는 실시간 방송을 이용한 게임 시스템에 대한 것으로서, 실시간 방송과 시뮬레이션 게임 및 SNS를 결합하여 다수의 사용자에게 실시간 방송과 시뮬레이션 게임을 결합한 서비스를 제공하는 기술이다. 예를 들어, 야구 경기를 실시간 방송으로 시청하면서, 접속한 다수의 사용자가 실제 야구 경기에 해당하는 구단과 선수의 통계 데이터를 제공받고, 통계 데이터에 기초하여 타자나 투수의 동작을 서로 예측하고 결과의 정확도에 따라 점수를 주고 받는 게임 형식으로 구현한다. 선행문헌은 실시간 방송과 게임 시스템을 결합하여 네트워크에 접속한 다수의 사용자에게 서비스하는 기술을 포함하고 있으나, 이는 시청자에게 실제 참여를 유도하거나 체험 기회를 제공하지 못한다.
(특허문헌 1) 대한민국 공개특허 제10-2012-0025812호
본 발명이 해결하고자 하는 과제는 TV를 통해 전달되는 장면을 실시간으로 시청자가 즐길 수 있는 게임 콘텐츠로 변환하여 시청자가 이 내용을 바탕으로 방송 내용을 직접 체험해 볼 수 있게 하는 것이다. 이를 위하여 실시간으로 방송되는 장면 중에서 일부분이 게임형의 콘텐츠로 변환되어 전송되어야 하고 이 전송된 내용을 바탕으로 시청자의 단말 장치는 시청자를 위한 새로운 게임상의 가상 공간을 생성하게 된다. TV에서 방송된 내용과 유사한 가상의 공간이 재현되면 시청자는 시청자의 시점이 아니라 방송 출연자의 시점에서 재구성된 자신만의 게임을 즐길 수 있다.
본 발명에 따른 실시간 방송 콘텐츠 기반의 체험형 콘텐츠 제공 장치는 수신된 사용자 프로필 정보 및 방송 콘텐츠 사전정보에 기초하여 발생할 수 있는 상황을 패턴화하는 정보를 생성하고, 수신된 실시간 방송 콘텐츠에서 인상적인 장면을 선별하고, 선별된 인상적인 장면 및 생성된 패턴화하는 정보에 기초하여 체험형 콘텐츠를 생성하는 콘텐츠 변환 서버 및 콘텐츠 변환 서버에 상기 사용자 프로필 정보를 전달하고, 수신된 체험형 콘텐츠를 구동하여 사용자 인터페이스를 통해 사용자에게 전달하는 사용자 처리 단말을 포함한다.
콘텐츠 변환 서버는 수신된 실시간 방송 콘텐츠의 여러 장면 중에서 인상적인 장면, 결정적인 장면 또는 사용자가 관심을 가지는 장면 등을 선택하고, 선택된 화면에 기초하여 가상현실 게임 콘텐츠와 같은 체험형 콘텐츠를 생성한다. 생성된 체험형 콘텐츠는 선택된 화면과 대응하는 영상화면은 물론, 발생할 수 있는 여러 상황 및 각각의 상황에 대한 응답을 포함하는 시나리오를 포함한다. 콘텐츠 변환 서버는 생성된 체험형 콘텐츠를 사용자 처리 단말로 전달한다.
사용자 처리 단말은 콘텐츠 변환 서버로부터 수신된 체험형 콘텐츠를 구동하여 사용자에게 제공한다. 사용자는 사용자 처리 단말에 포함된 체험형 사용자 인터페이스를 통해 체험형 콘텐츠를 제공받는다. 체험형 사용자 인터페이스는 헤드 마운트 디스플레이(Head Mount Display)와 같은 체험형 화면 재생장치를 포함한다. 사용자는 이러한 체험형 사용자 인터페이스를 통해 가상현실과 같은 체험형 콘텐츠를 제공받을 수 있다. 또한 사용자 처리 단말은 모션 인식 센서와 같은 체험형 사용자 인터페이스를 통해 사용자로부터 수신된 제어 명령에 따라 체험형 콘텐츠를 제어하고, 체험형 콘텐츠에 포함된 시나리오에 따라 사용자의 입력에 대응하여 서비스를 제공한다.
본 발명에 따른 실시간 방송 콘텐츠 기반의 체험형 콘텐츠 제공 방법은 먼저, 사용자 처리 단말로부터 사용자 프로필 정보를 수신받는다. 그리고 방송 중계 서버로부터 해당 실시간 방송 콘텐츠의 사전 정보를 수신받는다. 다음으로 체험형 콘텐츠를 구동하는데 필요한 정보를 미리 설정하고, 실시간으로 체험형 콘텐츠를 생성하기 위하여 발생할 수 있는 상황을 패턴화하여 준비한다. 그리고 방송 중계 서버로부터 실시간 방송 콘텐츠를 수신한다.콘텐츠 변환 서버는 수신된 실시간 방송 콘텐츠로부터 인상적인 장면을 선별하고, 선별된 인상적인 장면에 기초하여 체험형 콘텐츠를 생성한다. 다음으로 생성된 체험형 콘텐츠를 사용자 처리 단말로 전달한다.
콘텐츠 변환 서버로부터 생성된 체험형 콘텐츠를 수신한 사용자 처리 단말은 체험형 콘텐츠를 구동한다. 사용자 처리 단말은 체험형 콘텐츠를 현실감 있는 3D화면으로 재구성한다. 그리고 재구성된 체험형 콘텐츠를 사용자 인터페이스를 통해 사용자에게 제공한다. 사용자에게 체험형 콘텐츠를 전달하는 방법은 사용자 처리 단말이 포함하고 있는 사용자 인터페이스의 종류에 따라 달라질 수 있다. 일반적인 TV나 모니터와 같은 2D 디스플레이 화면을 이용한 방법뿐만 아니라, 체험형 사용자 인터페이스를 이용하는 방법을 포함할 수 있다. 체험형 사용자 인터페이스는 HMD과 같은 체험형 인터페이스 장치를 포함한다. 재구성된 콘텐츠가 시작되면 HMD을 통해 사전에 수신한 경기장 정보를 바탕으로 가상 공간에서 동일한 축구장이 3D 영상으로 재현되고 골을 넣기 전의 장면은 사용자의 시점이 아니라 골을 성공시킨 선수의 시점에서 재현된다.
다음으로 사용자로부터 입력된 사용자 조작 명령에 기초하여 체험형 콘텐츠를 제어한다. 사용자 조작 명령을 입력받는 사용자 인터페이스는 종래에 이용되던 마우스, 키보드 및 게임 패드뿐만 아니라 다양한 모션 인식 장치를 통해 사용자의 움직임을 인식하는 사용자 인터페이스를 포함한다. 모션 인식 장치는 사용자를 촬영하는 영상을 인식하여 모션을 인식하는 방법과 자이로 센서와 같은 모션을 인식하는 센서를 포함하는 인식 장치를 착용 또는 소지하여 모션을 인식하는 방법을 포함한다. 사용자의 모션을 인식하는 모션 인식 장치를 통해 사용자의 움직임이 콘텐츠 처리부로 전달되어 재구성된 콘텐츠가 제어되고, 콘텐츠 변환부로부터 수신된 체험형 콘텐츠에 포함된 시나리오에 기초하여 다양하게 체험형 콘텐츠가 전개된다.
본 발명에 따른 실시간 방송 콘텐츠 기반의 체험형 콘텐츠 제공 장치 및 방법은 단순히 보기만 하던 TV 콘텐츠의 한계에서 벗어나 시청자가 체험해 볼 수 있는 새로운 서비스를 제공한다. 단순하게 게임을 위한 가상 현실 공간을 만드는 것이 아니라 실제 TV를 통해 방송된 장면을 실시간으로 시청자용 게임 화면으로 재구성한다. 시청자는 단순하게 TV를 보는 입장이 아니라 TV에 등장하는 사람의 시점에서 게임을 즐길 수 있다. 본 발명을 통해 TV 콘텐츠에 대한 시청자들의 호응을 높일 수 있고 방송과 게임이 융합된 새로운 서비스도 가능해진다.
도 1은 본 발명에 따른 실시간 방송 콘텐츠 기반의 체험형 콘텐츠 제공 장치(100)의 일 실시예를 나타내는 구성도이다.
도 2는 본 발명의 일 실시예에 따른 실시간 방송 콘텐츠 기반의 체험형 콘텐츠 제공 방법을 나타내는 흐름도이다.
이하, 첨부된 도면들을 참조하여 본 발명의 실시예를 상세하게 설명한다. 본 명세서에서 사용되는 용어는 실시예에서의 기능 및 효과를 고려하여 선택된 용어들로서, 그 용어의 의미는 사용자 또는 운용자의 의도 또는 업계의 관례 등에 따라 달라질 수 있다. 따라서 후술하는 실시예들에서 사용된 용어의 의미는, 본 명세서에 구체적으로 명시된 경우에는 명시된 정의에 따르며, 구체적으로 명시하지 않는 경우, 당업자들이 일반적으로 인식하는 의미로 해석되어야 할 것이다.
도 1은 본 발명에 따른 실시간 방송 콘텐츠 기반의 체험형 콘텐츠 제공 장치(100)의 일 실시예를 나타내는 구성도이다.
도 1을 참조하면, 본 발명에 따른 실시간 방송 콘텐츠 기반의 체험형 콘텐츠 제공 장치(100)는 콘텐츠 변환서버(110) 및 사용자 처리 단말(130)을 포함한다. 방송 중계 서버(10)는 실시간 방송 콘텐츠를 콘텐츠 변환서버(110) 및 화면 재생장치(20)에 공급한다.
콘텐츠 변환서버(110)는 관리부(111), 콘텐츠 변환부(112), 콘텐츠 처리부(131) 및 사용자 UI부(114)를 포함한다.
관리부(111)는 방송 중계 서버(10)로부터 실시간 방송 콘텐츠 및 방송 콘텐츠 사전정보를 수신한다. 실시간 방송 콘텐츠는 지상파 및 케이블 방송사에서 송출되는 방송 콘텐츠를 포함하며, 스마트 TV 또는 IPTV를 통해 제공되는 VoD(Video on Demand) 콘텐츠를 포함할 수 있다. 실시간 방송 콘텐츠는 방송 전파, 케이블 및 인터넷를 이용하여 전송될 수 있으며, 제공 방법은 실시간 스트리밍(Streaming) 및 실시간 전파 송신 및 다운로드 형태를 포함할 수 있다. 방송 콘텐츠 사전정보는 전달되는 실시간 방송 콘텐츠에 대응하는 콘텐츠에 대한 부가정보로서 실시간 방송 콘텐츠를 체험형 콘텐츠로 변환하는 과정에서 참고되는 정보이다. 예를 들어, 실시간 방송 콘텐츠가 야구 경기일 경우 야구 정보, 팀 정보, 선수 정보, 경기장 정보, 경기 시각, 경기장의 날씨 정보, 잔디 상태 정보 및 관중 규모 정보 등을 포함할 수 있다.
관리부(111)는 방송 중계 서버(10)로부터 수신된 실시간 방송 콘텐츠 및 방송 콘텐츠 사전정보에 기초하여 사용자들이 참여하기에 적합한 인상적인 장면이 있는지 판단한다. 실시간 방송 콘텐츠가 야구 경기인 경우, 경기 중에 방송되는 다양한 장면들 중에서 인상적인 장면을 선별한다. 예를 들어, 타자의 적시타 장면, 득점 장면 및 홈런 장면이나 수비수의 호수비 장면 또는 투수의 삼진 장면 등이 인상적인 장면으로 선별될 수 있다. 축구 경기를 예를 들면, 골 장면이나 골키퍼 선방 장면 등을 선별할 수 있다.
관리부(111)는 선별된 인상적인 장면을 패턴화한다. 예를 들어, 축구 경기의 골 장면에서 수비수들의 위치, 숫자 및 움직임에 대한 정보, 공의 궤적 및 골키퍼의 움직임 등을 패턴화한다.
관리부(111)는 실시간 방송 콘텐츠의 다수의 장면이나 부분들 중에서 인상적인 장면을 선별하고, 선별된 인상적인 장면을 패턴화하여, 인상적인 장면에 대한 패턴화된 정보를 포함하는 선별된 콘텐츠 정보를 생성하여 콘텐츠 변환부(112)로 전달한다. 선별된 콘텐츠 정보는 패턴화된 정보뿐만 아니라 인상적인 장면의 영상 정보를 포함할 수 있다. 또한 관리부는 방송 중계 서버(10)로부터 수신된 방송 콘텐츠 사전정보를 콘텐츠 변환부(112)로 전달한다.
콘텐츠 변환부(112)는 관리부(111)로부터 선별된 콘텐츠 정보를 수신하고, 사용자 처리 단말(130)로부터 사용자 프로필 정보를 수신한다. 사용자 프로필 정보는 콘텐츠 변환부(112)에서 선별된 실시간 방송 영상을 체험형 콘텐츠로 변환하는데 기초가 되는 정보를 포함할 수 있다. 사용자 프로필 정보는 사용자 처리 단말(130)의 하드웨어 성능, 내장된 소프트웨어 또는 OS의 종류/성능 및 사용자 인터페이스(User Interface)의 종류/성능을 포함할 수 있다.
콘텐츠 변환부(112)는 수신된 방송 콘텐츠 사전 정보에 기초하여 해당 방송 콘텐츠에 기초한 체험형 콘텐츠에서 발생할 수 있는 상황을 미리 패턴화하여 준비할 수 있다. 만약 수신된 방송 콘텐츠 사전 정보에 기초하여 해당 방송 콘텐츠가 축구 경기이고, 해당 경기에 출장하는 선수에 대한 정보 및 경기가 열리는 경기장 정보에 기초하여 미리 패턴화된 데이터를 준비한다. 축구 경기인 경우, 해당 경기장의 정보를 통해 경기장을 모델링하고, 슛, 골키퍼 수비 및 드리블과 같은 발생할 수 있는 상황을 패턴화하여 미리 준비할 수 있다.
콘텐츠 변환부(112)는 사용자 처리 단말(130)로부터 수신된 사용자 프로필 정보 및 관리부(111)로부터 수신된 선별된 실시간 방송 영상에 기초하여 체험형 콘텐츠를 생성한다. 콘텐츠 변환부(112)는 수신된 사용자 프로필 정보에 포함된 사용자 처리 단말(130)의 성능 및 사용자 인터페이스 종류를 고려하여 선별된 실시간 방송 영상을 체험형 콘텐츠로 변환한다. 예를 들어, 야구 중계를 시청하는 경우, 특정 선수가 홈런을 치는 장면이 선별되면 콘텐츠 변환부(112)는 먼저 사용자 프로필 정보에 기초하여 사용자 처리 단말(130)이 처리할 수 있는 게임 엔진 또는 3D 엔진을 설정한다. 그리고 설정된 엔진에 기초하여 해당 영상장면을 게임과 같은 형태로 구현하여 체험형 콘텐츠를 생성한다. 즉, 해당 선별된 실시간 방송 영상에 해당하는 투수와 타자의 현재 상태와 선수 정보 등을 포함하는 게임 콘텐츠와 유사한 체험형 콘텐츠를 생성한다.
콘텐츠 변환부(113)는 선별된 실시간 방송 영상을 체험형 콘텐츠로 변환할 때, 수신된 선별된 콘텐츠 정보에 포함된 패턴화된 정보를 이용하여 체험형 콘텐츠를 생성할 수 있다. 예를 들어 축구 경기에서 패턴화된 정보에 포함된 수비수의 숫자, 위치, 움직임, 골키퍼의 움직임 및 공의 궤적 정보를 미리 저장된 경기장 모델 및 선수 모델에 적용하여 체험형 콘텐츠를 생성할 수 있다.
그리고 콘텐츠 변환부(113)는 사용자의 조작 명령에 따라 체험형 콘텐츠가 어떻게 진행될지 그 시나리오도 준비한다. 예를 들어, 축구 경기에 해당하는 체험형 콘텐츠의 경우 공격수가 드리블 후에 수비수의 태클을 피하며 슛을 성공시키는 경우 체험형 콘텐츠에서도 드리블 후에 수비수의 태클이 들어오는 시나리오를 준비한다.
다음으로 콘텐츠 변환부(112)는 생성된 체험형 콘텐츠를 사용자 처리 단말(130)로 전달한다.
사용자 처리 단말(130)은 콘텐츠 처리부(131) 및 체험형 UI부(132)를 포함한다.
콘텐츠 처리부(131)는 사용자 처리 단말(130)에 대한 정보를 포함하는 사용자 프로필 정보를 콘텐츠 변환부(112)로 전달하고, 콘텐츠 변환부(112)로부터 체험형 콘텐츠를 전달받는다.
콘텐츠 처리부(131)는 수신된 체험형 콘텐츠를 구동시켜 체험형 콘텐츠를 재구성한다. 체험형 콘텐츠는 현실감 있는 3D화면으로 재구성될 수 있다. 즉, 일반적으로 PC 또는 콘솔(Console) 게임기에서 게임 콘텐츠를 구동시키는 것과 유사하게 체험형 콘텐츠를 처리하여 3D화면으로 재구성하는 것이다. 그리고 콘텐츠 처리부(131)는 재구성된 콘텐츠를 체험형 UI부(132)로 전달한다.
다음으로 콘텐츠 처리부(131)는 체험형 UI부(132)로부터 수신된 사용자 조작 명령에 기초하여 실행중인 체험형 콘텐츠를 제어한다. 예를 들어 축구의 슛 장면에 해당하는 체험형 콘텐츠에서 슛을 하는 공격수 역할을 수행하는 경우, 체험형 UI부(132)로부터 수신된 사용자 조작 명령에 기초하여 공격수를 제어하여 움직임을 취하고, 슛을 한다. 즉, PC나 콘솔 게임기 등에서 마우스나 게임 패드에 의해 입력된 명령에 따라 게임 콘텐츠를 제어하는 방법과 유사하다.
체험형 UI부(132)는 콘텐츠 처리부(131)로부터 재구성된 콘텐츠를 수신하고, 수신된 재구성된 콘텐츠를 사용자 인터페이스를 통해 사용자에게 제공한다. 콘텐츠 처리부(131)에서 실행되어 재구성된 콘텐츠를 포함하고 있는 사용자 인터페이스를 이용하여 사용자에게 제공한다. 포함하고 있는 사용자 인터페이스는 전통적으로 사용되는 TV나 모니터와 같은 2D 디스플레이 화면을 이용한 방법뿐만 아니라, 체험형 사용자 인터페이스를 이용하는 방법을 포함할 수 있다. 체험형 사용자 인터페이스는 헤드 마운트 디스플레이(Head Mount Display, 이하 HMD이라 칭함)와 같은 체험형 인터페이스 장치를 포함한다.
그리고 체험형 UI부(132)는 사용자 인터페이스를 통해 입력된 사용자 조작 명령을 콘텐츠 처리부(114)로 전달한다. 사용자 조작 명령을 입력받는 사용자 인터페이스는 종래에 이용되던 마우스, 키보드 및 게임 패드뿐만 아니라 다양한 모션 인 장치를 통해 사용자의 움직임을 인식하는 사용자 인터페이스를 포함한다. 모션 인식 장치는 사용자를 촬영하는 영상을 인식하여 모션을 인식하는 방법과 자이로 센서와 같은 모션을 인식하는 센서를 포함하는 인식 장치를 착용 또는 소지하여 모션을 인식하는 방법을 포함한다.
예를 들어, 체험형 콘텐츠에 참여를 원하는 경우 사용자는 HMD과 모션 인식 장치를 착용하고 재구성된 콘텐츠를 시작한다. 재구성된 콘텐츠가 시작되면 HMD을 통해 사전에 수신한 경기장 정보를 바탕으로 가상 공간에서 동일한 축구장이 3D 영상으로 재현되고 골을 넣기 전의 장면은 사용자의 시점이 아니라 골을 성공시킨 선수의 시점에서 재현된다. 사용자의 모션을 인식하는 모션 인식 장치를 통해 사용자의 움직임이 콘텐츠 처리부(131)로 전달되어 재구성된 콘텐츠가 제어되고, 콘텐츠 변환부(112)로부터 수신된 체험형 콘텐츠에 포함된 시나리오에 기초하여 다양하게 체험형 콘텐츠가 전개된다.
도 2는 본 발명의 일 실시예에 따른 실시간 방송 콘텐츠 기반의 체험형 콘텐츠 제공 방법을 나타내는 흐름도이다.
도 2를 참조하면, 본 발명의 일 실시예에 따른 실시간 방송 콘텐츠 기반의 체험형 콘텐츠 제공 방법은
먼저, 사용자 처리 단말(130)로부터 사용자 프로필 정보를 수신받는다(201). 사용자 프로필 정보는 실시간 방송 영상을 체험형 콘텐츠로 변환하는데 기초가 되는 정보를 포함할 수 있다. 사용자 프로필 정보는 사용자 처리 단말(130)의 하드웨어 성능, 내장된 소프트웨어 또는 OS의 종류/성능 및 사용자 인터페이스(User Interface)의 종류/성능을 포함할 수 있다.
그리고 방송 중계 서버로부터 해당 실시간 방송 콘텐츠의 사전 정보를 수신받는다(202). 방송 콘텐츠 사전정보는 전달되는 실시간 방송 콘텐츠에 대응하는 콘텐츠에 대한 부가정보로서 실시간 방송 콘텐츠를 체험형 콘텐츠로 변환하는 과정에서 참고되는 정보이다.
다음으로 체험형 콘텐츠를 구동하는데 필요한 정보를 미리 설정하고 준비한다(203). 콘텐츠 변환 서버(110)는 수신된 사용자 프로필 정보에 기초하여 사용자 처리 단말(130)에서 구동할 수 있는 게임 엔진 또는 3D 엔진을 설정하고, 사용자 처리 단말이 보유한 사용자 인터페이스 장치를 고려하여 준비한다.
그리고 실시간으로 체험형 콘텐츠를 생성하기 위하여 발생할 수 있는 상황을 패턴화하여 준비한다(204). 콘텐츠 변환 서버(110)는 수신된 방송 콘텐츠 사전정보에 기초하여 체험형 콘텐츠에서 발생할 수 있는 상황을 미리 패턴화하여 준비할 수 있다. 만약 수신된 방송 콘텐츠 사전 정보에 기초하여 해당 방송 콘텐츠가 축구 경기이고, 해당 경기에 출장하는 선수에 대한 정보 및 경기가 열리는 경기장 정보에 기초하여 미리 패턴화된 데이터를 준비한다. 축구 경기인 경우, 해당 경기장의 정보를 통해 경기장을 모델링하고, 슛, 골키퍼 수비 및 드리블과 같은 발생할 수 있는 상황을 패턴화하여 미리 준비할 수 있다.
다음으로 방송 중계 서버(10)로부터 실시간 방송 콘텐츠를 수신한다(205). 그리고 콘텐츠 변환 서버(110)는 수신된 실시간 방송 콘텐츠로부터 인상적인 장면을 선별한다(206). 수신된 실시간 방송 콘텐츠는 일반적으로 영상으로 다양한 상황에 대한 영상을 포함한다. 이러한 다양한 영상 중에서 극적인 장면, 인상적인 장면 또는 게임화 하기 적합한 장면 등을 선별한다. 실시간 방송 콘텐츠가 야구 경기인 경우, 경기 중에 방송되는 다양한 장면들 중에서 인상적인 장면을 선별한다. 예를 들어, 타자의 적시타 장면, 득점 장면 및 홈런 장면이나 수비수의 호수비 장면 또는 투수의 삼진 장면 등이 인상적인 장면으로 선별될 수 있다. 축구 경기를 예를 들면, 골 장면이나 골키퍼 선방 장면 등을 선별할 수 있다.
다음으로 선별된 인상적인 장면에 기초하여 체험형 콘텐츠를 생성한다(207).콘텐츠 변환 서버(110)는 수신된 사용자 프로필 정보에 포함된 사용자 처리 단말(130)의 성능 및 사용자 인터페이스 종류를 고려하여 선별된 실시간 방송 영상을 체험형 콘텐츠로 변환한다. 예를 들어, 야구 중계를 시청하는 경우, 특정 선수가 홈런을 치는 장면이 선별되면 먼저 사용자 프로필 정보에 기초하여 설정된 사용자 처리 단말(130)이 처리할 수 있는 게임 엔진 또는 3D 엔진을 이용하여 해당 영상장면을 게임과 같은 형태로 구현하여 체험형 콘텐츠를 생성한다.
이 과정에서 미리 준비된 발생할 수 있는 상황을 패턴화하는 단계(204 단계)의 정보를 참고할 수 있다. 선별된 실시간 방송 영상을 체험형 콘텐츠로 변환할 때, 수신된 선별된 콘텐츠 정보에 포함된 패턴화된 정보를 이용하여 체험형 콘텐츠를 생성할 수 있다. 예를 들어 축구 경기에서 패턴화된 정보에 포함된 수비수의 숫자, 위치, 움직임, 골키퍼의 움직임 및 공의 궤적 정보를 미리 저장된 경기장 모델 및 선수 모델에 적용하여 체험형 콘텐츠를 생성할 수 있다. 그리고 콘텐츠 변환 서버(110)는 사용자의 조작 명령에 따라 체험형 콘텐츠가 어떻게 진행될지 그 시나리오도 준비한다.
다음으로 생성된 체험형 콘텐츠를 사용자 처리 단말로 전달한다(208). 콘텐츠 변환 서버로부터 생성된 체험형 콘텐츠를 수신한 사용자 처리 단말(130)은 체험형 콘텐츠를 구동한다(209). 먼저 사용자 처리 단말(130)은 수신된 체험형 콘텐츠를 구동시켜 체험형 콘텐츠를 재구성한다. 체험형 콘텐츠는 현실감 있는 3D화면으로 재구성될 수 있다. 그리고 재구성된 체험형 콘텐츠를 사용자 인터페이스를 통해 사용자에게 제공한다. 사용자에게 체험형 콘텐츠를 전달하는 방법은 사용자 처리 단말(130)이 포함하고 있는 사용자 인터페이스의 종류에 따라 달라질 수 있다. 일반적인 TV나 모니터와 같은 2D 디스플레이 화면을 이용한 방법뿐만 아니라, 체험형 사용자 인터페이스를 이용하는 방법을 포함할 수 있다. 체험형 사용자 인터페이스는 HMD과 같은 체험형 인터페이스 장치를 포함한다.
재구성된 콘텐츠가 시작되면 HMD을 통해 사전에 수신한 경기장 정보를 바탕으로 가상 공간에서 동일한 축구장이 3D 영상으로 재현되고 골을 넣기 전의 장면은 사용자의 시점이 아니라 골을 성공시킨 선수의 시점에서 재현된다.
다음으로 사용자로부터 입력된 사용자 조작 명령에 기초하여 체험형 콘텐츠를 제어한다(210). 사용자 조작 명령을 입력받는 사용자 인터페이스는 종래에 이용되던 마우스, 키보드 및 게임 패드뿐만 아니라 다양한 모션 인식 장치를 통해 사용자의 움직임을 인식하는 사용자 인터페이스를 포함한다. 모션 인식 장치는 사용자를 촬영하는 영상을 인식하여 모션을 인식하는 방법과 자이로 센서와 같은 모션을 인식하는 센서를 포함하는 인식 장치를 착용 또는 소지하여 모션을 인식하는 방법을 포함한다. 사용자의 모션을 인식하는 모션 인식 장치를 통해 사용자의 움직임이 콘텐츠 처리부(131)로 전달되어 재구성된 콘텐츠가 제어되고, 콘텐츠 변환부(112)로부터 수신된 체험형 콘텐츠에 포함된 시나리오에 기초하여 다양하게 체험형 콘텐츠가 전개된다.
이상 바람직한 실시 예를 들어 본 발명을 상세하게 설명하였으나, 본 발명은 전술한 실시 예에 한정되지 않고, 본 발명의 기술적 사상의 범위 내에서 당 분야에서 통상의 지식을 가진 자에 의하여 여러 가지 변형이 가능하다.
10: 방송 중계 서버
20: 화면 재생 장치
110: 콘텐츠 변환 서버
111: 관리부
112: 콘텐츠 변환부
130: 사용자 처리 단말
131: 콘텐츠 처리부
132: 체험형 UI부

Claims (1)

  1. 수신된 사용자 프로필 정보 및 방송 콘텐츠 사전정보에 기초하여 발생할 수 있는 상황을 패턴화하는 정보를 생성하고, 수신된 실시간 방송 콘텐츠에서 인상적인 장면을 선별하고, 상기 선별된 인상적인 장면 및 상기 생성된 패턴화하는 정보에 기초하여 체험형 콘텐츠를 생성하는 콘텐츠 변환 서버; 및
    상기 콘텐츠 변환 서버에 상기 사용자 프로필 정보를 전달하고, 상기 수신된 체험형 콘텐츠를 구동하여 사용자 인터페이스를 통해 사용자에게 전달하는 사용자 처리 단말;
    을 포함하는 것을 특징으로 하는 실시간 방송 콘텐츠 기반의 체험형 콘텐츠 제공 장치.
KR1020120132409A 2012-11-21 2012-11-21 실시간 방송 콘텐츠 기반의 체험형 콘텐츠 제공 장치 및 방법 KR20140065180A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020120132409A KR20140065180A (ko) 2012-11-21 2012-11-21 실시간 방송 콘텐츠 기반의 체험형 콘텐츠 제공 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120132409A KR20140065180A (ko) 2012-11-21 2012-11-21 실시간 방송 콘텐츠 기반의 체험형 콘텐츠 제공 장치 및 방법

Publications (1)

Publication Number Publication Date
KR20140065180A true KR20140065180A (ko) 2014-05-29

Family

ID=50892164

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120132409A KR20140065180A (ko) 2012-11-21 2012-11-21 실시간 방송 콘텐츠 기반의 체험형 콘텐츠 제공 장치 및 방법

Country Status (1)

Country Link
KR (1) KR20140065180A (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017188696A1 (ko) * 2016-04-25 2017-11-02 장부다 Vr 공간에서 사용자 인터페이스를 제공하는 방법, 디바이스 및 기록매체
KR20180037857A (ko) * 2016-10-05 2018-04-13 주식회사 씨제이헬로 Vr 광고 제공 장치 및 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017188696A1 (ko) * 2016-04-25 2017-11-02 장부다 Vr 공간에서 사용자 인터페이스를 제공하는 방법, 디바이스 및 기록매체
KR20180037857A (ko) * 2016-10-05 2018-04-13 주식회사 씨제이헬로 Vr 광고 제공 장치 및 방법

Similar Documents

Publication Publication Date Title
EP3593873B1 (en) Apparatus and method of mapping a virtual environment
US9782678B2 (en) Methods and systems for computer video game streaming, highlight, and replay
EP3600580B1 (en) Personalized user interface based on in-application behavior
US8817078B2 (en) Augmented reality videogame broadcast programming
US8665374B2 (en) Interactive video insertions, and applications thereof
US10477179B2 (en) Immersive video
US11716500B2 (en) Systems and methods for automatically generating scoring scenarios with video of event
US9873045B2 (en) Systems and methods for a unified game experience
US20080032797A1 (en) Combining broadcast sporting events and computer-based gaming
KR20140103033A (ko) 라이브 이벤트들을 위한 증강 현실
JP2013244404A (ja) ゲームモードが変更可能なモバイル野球ゲームの進行方法
US11865446B2 (en) Interactive what-if game replay methods and systems
WO2021023964A1 (en) Content generation system and method
WO2018106461A1 (en) Methods and systems for computer video game streaming, highlight, and replay
JP5379064B2 (ja) 情報処理装置、情報処理システム、情報処理方法、プログラム及び情報記憶媒体
WO2022074565A1 (en) Systems and methods for augmenting video content
KR20140065180A (ko) 실시간 방송 콘텐츠 기반의 체험형 콘텐츠 제공 장치 및 방법
US20230186528A1 (en) Enhanced interactive features for a video presentation system
JP7403581B2 (ja) システム及びデバイス
KR101870922B1 (ko) 양방향 방송 컨텐츠 제공 시스템 및 방법
KR20040089164A (ko) 디지털 미디어 방송을 이용한 원격 통신 야구 게임 방법및 시스템

Legal Events

Date Code Title Description
WITN Withdrawal due to no request for examination