KR101909462B1 - 콘텐츠 제공장치 및 방법 - Google Patents

콘텐츠 제공장치 및 방법 Download PDF

Info

Publication number
KR101909462B1
KR101909462B1 KR1020170173273A KR20170173273A KR101909462B1 KR 101909462 B1 KR101909462 B1 KR 101909462B1 KR 1020170173273 A KR1020170173273 A KR 1020170173273A KR 20170173273 A KR20170173273 A KR 20170173273A KR 101909462 B1 KR101909462 B1 KR 101909462B1
Authority
KR
South Korea
Prior art keywords
tag
augmented reality
data
content
moving image
Prior art date
Application number
KR1020170173273A
Other languages
English (en)
Inventor
안형준
Original Assignee
코디소프트 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 코디소프트 주식회사 filed Critical 코디소프트 주식회사
Priority to KR1020170173273A priority Critical patent/KR101909462B1/ko
Application granted granted Critical
Publication of KR101909462B1 publication Critical patent/KR101909462B1/ko
Priority to PCT/KR2018/014354 priority patent/WO2019117494A1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/231Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명은 콘텐츠 제공장치 및 방법에 관한 것이다. 본 발명의 일 실시예에 따르면, 증강현실이 적용된 동영상 스트리밍 서비스를 제공하기 위하여 콘텐츠 재생장치와 통신하는 통신부, 및 상기 콘텐츠 재생장치에 동영상 스트리밍 서비스를 제공하기 위하여 증강현실 태그가 포함된 동영상 데이터, 증강현실 태그에 따라 실행되는 증강현실 스크립트 데이터, 증강현실 태그를 인식하기 위한 태그 인식 프로그램을 송신하도록 상기 통신부를 제어하는 제어부를 포함하는, 콘텐츠 제공장치를 제공한다.

Description

콘텐츠 제공장치 및 방법{APPARATUS AND METHOD FOR PROVIDING CONTENTS}
본 발명은 콘텐츠 제공장치 및 방법에 관한 것이다.
최근, 교육환경이 디지털 환경으로 빠른 속도로 변화하고 있다. 디지털 교과서의 보급이나 멀티미디어 기기를 활용한 교육 환경이 빠른 속도로 보급되고 있다. 더불어, 단순한 이차원 그림과 텍스트로 구성된 과거의 학습 방식에서 벗어나 다양한 멀티미디어 컨텐츠를 사용하는 학습 방식이 제안되고 있다.
그러나, 이러한 멀티미디어 컨텐츠를 사용한 학습 방식도 일방적 학습 방식이기 때문에, 학습자에게 학습에 대한 흥미나 몰입을 이끌어 내는 데에는 한계를 가지고 있다.
한국등록특허공보 제10-0841593호(2008.06.20.)
본 발명은 다양한 정보와 흥미를 제공하기 위하여 증강현실(이하, AR) 태그가 포함된 동영상 데이터와 AR 태그에 따라 실행되는 스크립트 데이터를 이용하여 증강현실이 적용된 콘텐츠를 제공하는 콘텐츠 제공장치 및 방법을 제공하는 것이다.
본 발명의 일 실시예에 따르면, 증강현실이 적용된 동영상 스트리밍 서비스를 제공하기 위하여 콘텐츠 재생장치와 통신하는 통신부, 및 상기 콘텐츠 재생장치에 동영상 스트리밍 서비스를 제공하기 위하여 증강현실 태그가 포함된 동영상 데이터, 증강현실 태그에 따라 실행되는 증강현실 스크립트 데이터, 증강현실 태그를 인식하기 위한 태그 인식 프로그램을 송신하도록 상기 통신부를 제어하는 제어부를 포함하는, 콘텐츠 제공장치를 제공한다.
또한, 상기 증강현실 태그는 문자 및 숫자 중 적어도 하나를 포함하는 기호로 표현될 수 있다.
또한, 상기 태그 인식 프로그램은 실시간으로 전송되는 동영상 내에서 상기 증강현실 태그를 인식하기 위한 템플릿 데이터를 포함할 수 있다.
또한, 상기 태그 인식 프로그램은 상기 템플릿 데이터를 이용한 템플릿 매칭을 수행하여 상기 증강현실 태그를 인식할 수 있다.
또한, 상기 태그 인식 프로그램은 미리 설정된 태그 인식 영역을 기준으로 증강현실 태그가 차지하는 영역과, 나머지 영역 각각의 비율을 비교하여 비교 결과를 상기 템플릿 데이터와 매칭시켜 상기 증강현실 태그의 코드를 검출할 수 있다.
또한, 상기 템플릿 데이터는 상기 증강현실 태그가 차지하는 영역과, 나머지 영역 각각의 비율에 따른 상기 증강현실 태그의 코드를 포함할 수 있다.
또한, 상기 템플릿 데이터는 동영상의 해상도 별로 설정된 상기 증강현실 태그의 코드를 포함할 수 있다.
본 발명의 다른 실시예에 따르면, 증강현실이 적용된 동영상 스트리밍 서비스를 제공하기 위하여, (a) 콘텐츠 제공장치가 콘텐츠 재생장치의 종류를 확인하는 단계, 및 (b) 증강현실 태그가 포함된 동영상 데이터, 증강현실 태그에 따라 실행되는 증강현실 스크립트 데이터, 증강현실 태그를 인식하기 위한 태그 인식 프로그램을 상기 콘텐츠 재생장치에 제공하는 단계를 포함하는, 콘텐츠 제공방법을 제공한다.
또한, 상기 (a) 단계에서는, 상기 콘텐츠 재생장치에 맞는 해상도의 동영상 데이터를 제공하기 위하여 상기 콘텐츠 제공장치가 상기 콘텐츠 재생장치의 종류를 확인할 수 있다.
또한, 상기 (b) 단계에서는, 상기 콘텐츠 제공장치가 콘텐츠 제공 모드에 따라 설정된 데이터를 상기 콘텐츠 재생장치에 제공하되, 상기 콘텐츠 제공 모드는 편집 동영상 제공 모드 및 라이브 동영상 제공 모드를 포함할 수 있다.
또한, 상기 편집 동영상 제공 모드에서는 상기 콘텐츠 제공장치가 저장부에 저장된 동영상 데이터, 증강현실 스크립트 데이터, 태그 인식 프로그램을 상기 콘텐츠 재생장치에 제공하되, 상기 동영상 데이터는 화면의 좌우측 가장자리에 설정된 태그 배치 영역으로 적어도 하나의 증강현실 태그가 배치되도록 증강현실 태그를 포함하고, 상기 증강현실 스크립트 데이터는 미리 설정된 데이터를 출력하도록 실행될 수 있다.
또한, 상기 라이브 동영상 제공 모드에서는 상기 콘텐츠 제공장치가 실시간으로 촬영된 동영상과, 콘텐츠 제공자가 미리 설정한 증강현실 스크립트 데이터 및 태그 인식 프로그램을 상기 콘텐츠 재생장치에 제공할 수 있다.
또한, 상기 증강현실 태그는 문자 및 숫자 중 적어도 하나를 포함하는 기호로 표현될 수 있다.
또한, 상기 태그 인식 프로그램은 실시간으로 전송되는 동영상 내에서 상기 증강현실 태그를 인식하기 위한 템플릿 데이터를 포함할 수 있다.
또한, 상기 태그 인식 프로그램은 상기 템플릿 데이터를 이용한 템플릿 매칭을 수행하여 상기 증강현실 태그를 인식할 수 있다.
또한, 상기 태그 인식 프로그램은 미리 설정된 태그 인식 영역을 기준으로 증강현실 태그가 차지하는 영역과, 나머지 영역 각각의 비율을 비교하여 비교 결과를 상기 템플릿 데이터와 매칭시켜 상기 증강현실 태그의 코드를 검출할 수 있다.
또한, 상기 템플릿 데이터는 상기 증강현실 태그가 차지하는 영역과, 나머지 영역 각각의 비율에 따른 상기 증강현실 태그의 코드를 포함할 수 있다.
또한, 상기 템플릿 데이터는 동영상의 해상도 별로 설정된 상기 증강현실 태그의 코드를 포함할 수 있다.
본 발명은 AR 태그가 포함된 동영상 데이터와 AR 태그에 따라 실행되는 스크립트 데이터를 이용하여 증강현실이 적용된 콘텐츠를 제공함으로써 사용자에게 다양한 정보와 흥미를 제공할 수 있다.
본 발명은 콘텐츠 제공장치가 동영상 스트리밍 서비스를 제공할 때 동영상 데이터와 별도로 AR 스크립트 데이터를 콘텐츠 재생장치에 제공함으로써, 사용자에게 화질 저하 없이 구동되는 AR을 제공할 수 있다.
본 발명은 동영상을 재생하는 중 AR 데이터를 선택적으로 출력시킬 수 있다. 이를 통해, 본 발명은 사용자가 AR의 구동을 선택할 수 있는 편의성을 향상시킬 수 있다.
도 1은 본 발명의 일 실시예에 따른 증강현실이 적용된 콘텐츠 제공 시스템의 구성을 나타내는 도면이다.
도 2는 본 발명의 일 실시예에 따른 콘텐츠 제공장치의 구성을 나타내는 도면이다.
도 3은 증강현실 태그가 포함된 동영상 데이터를 나타내는 도면이다.
도 4는 증강현실 스크립트 데이터가 실행된 동영상을 나타내는 도면이다.
도 5는 태그 인식 프로그램의 템플릿 매칭을 설명하는 도면이다.
도 6은 본 발명의 일 실시예에 따른 콘텐츠 재생장치의 구성을 나타내는 도면이다.
도 7은 본 발명의 일 실시예에 따른 증강현실이 적용된 콘텐츠 제공방법을 나타내는 순서도이다.
이하에서는, 본 발명의 바람직한 실시예에 기초하여 본 발명을 보다 구체적으로 설명한다. 그러나, 하기 실시예는 본 발명의 이해를 돕기 위한 일 예에 불과한 것으로 이에 의해 본 발명의 권리범위가 축소되거나 한정되는 것은 아니다.
도 1은 본 발명의 일 실시예에 따른 증강현실이 적용된 콘텐츠 제공 시스템의 구성을 나타내는 도면이다.
도 1을 참조하면, 본 발명의 일 실시예에 따른 증강현실이 적용된 콘텐츠 제공 시스템은 콘텐츠 제공장치(100), 통신망(50) 및 콘텐츠 재생장치(200)를 포함할 수 있다.
콘텐츠 제공장치(100)는 통신망(50)을 통해 콘텐츠 재생장치(200)와 통신하여 콘텐츠를 제공하거나, 회원 관리, 결재 관리 등의 콘텐츠 제공 서비스를 위한 다양한 기능을 수행할 수 있다. 특히, 콘텐츠 제공장치(100)는 사용자에게 증강현실이 적용된 동영상 스트리밍을 서비스하기 위하여, AR 태그가 포함된 동영상 데이터, AR 태그에 따라 실행되는 AR 스크립트 데이터, AR 태그를 인식하기 위한 태그 인식 프로그램을 콘텐츠 재생장치(200)에 제공할 수 있다.
일 실시예로, 콘텐츠 제공장치(100)는 동영상 스트리밍 서비스를 제공하는 서버로 구성될 수 있다. 이를 위하여, 도 2를 참조하면 콘텐츠 제공장치(100)는 서버 통신부(110), 서버 제어부(120), 서버 저장부(130)를 포함할 수 있다.
서버 통신부(110)는 유선 및 무선 중 적어도 하나의 방식으로 통신망(50)을 통해 콘텐츠 재생장치(200)와 통신하여 동영상 스트리밍 서비스를 제공하기 위한 데이터를 송수신하는 기능을 수행할 수 있다. 예를 들면, 서버 통신부(110)는 상술한 동영상 데이터, AR 스크립트 데이터, 태그 인식 프로그램을 콘텐츠 재생장치(200)로 송신할 수 있다.
여기서, 서버 통신부(110)는 콘텐츠 제공장치(100) 내에 포함된 모듈로 기재하고 있으나, 반드시 이에 한정되는 것은 아니며, 통신을 위한 별도의 장치로 구성될 수도 있다.
서버 제어부(120)는 콘텐츠 제공장치(100)의 전반적인 기능을 제어하는 제어 수단으로서, 서버 통신부(110)를 제어하여 콘텐츠 재생장치(200)로부터 스크립트 설정 정보를 수신하거나, 콘텐츠 재생장치(200)로 AR 태그가 포함된 동영상 데이터, AR 태그에 따라 실행되는 AR 스크립트 데이터, AR 태그를 인식하기 위한 태그 인식 프로그램을 송신하도록 서버 통신부(110)를 제어할 수 있다.
구체적으로, 서버 제어부(120)는 동영상 스트리밍 서비스를 제공하기 위하여 도 3에 도시된 바와 같이 AR 태그(300)가 포함된 동영상 데이터를 실시간으로 송신하도록 서버 통신부(110)를 제어할 수 있다. 또한, 서버 제어부(120)는 동영상 데이터와 함께 AR 스크립트 데이터 및 태그 인식 프로그램을 송신하도록 서버 통신부(110)를 제어할 수 있다.
여기서, AR 태그(300)는 문자 및 숫자 중 적어도 하나를 포함하는 기호로 표현된 코드를 포함할 수 있다. 예를 들면, AR 태그(300)는 A00 내지 Z99 중 적어도 하나로 표현되는 코드를 포함할 수 있다.
또한, 동영상 데이터는 AR 스크립트 데이터가 인코딩되지 않은 상태로 콘텐츠 재생장치(200)로 송신될 수 있다.
또한, AR 스크립트 데이터는 도 4와 같이 동영상 데이터에서 추가 정보를 제공하도록 설정될 수 있다. 예를 들면, AR 스크립트 데이터는 동영상 데이터에 링크되어 콘텐츠 제공자가 제공하는 AR 데이터를 보여주거나 AR 프로그램을 실행하도록 설정될 수 있다.
여기서, AR 스크립트 데이터는 AR 태그(300)에 매칭되어 출력이 실행되는 비디오 데이터, 오디오 데이터 또는 프로그램을 포함할 수 있다. 즉, AR 스크립트 데이터는 콘텐츠 재생장치(200)에서 추출한 AR 태그(300)에 매칭되어 실행되는 데이터 또는 프로그램을 포함할 수 있다.
또한, AR 스크립트 데이터는 비디오 데이터, 오디오 데이터 또는 프로그램의 위치와 효과를 지정하도록 설정될 수 있다. 예를 들면, AR 스크립트 데이터는 재생되는 동영상 내의 좌측 상단 부분에 사진을 보여주되, 상단에서 하단으로 내려오는 효과를 보이도록 설정될 수 있다.
또한, AR 스크립트 데이터는 콘텐츠 재생장치(200)에서 "A" 태그를 추출한 경우 "A" 태그에 매칭된 "B" 사진을 동영상에 오버레이(overlay)시켜 출력하거나, "C" 태그를 추출한 경우 "C" 태그에 매칭된 "D" 프로그램을 동영상에 오버레이시켜 실행하도록 설정될 수 있다.
또한, 태그 인식 프로그램은 실시간으로 전송되는 동영상 내에서 AR 태그(300)를 인식하기 위한 템플릿 데이터를 포함할 수 있다. 이때, 태그 인식 프로그램은 템플릿 데이터를 이용한 템플릿 매칭을 수행하여 AR 태그(300)를 인식할 수 있다.
구체적으로, 태그 인식 프로그램은 도 5를 참조하여 미리 설정된 태그 인식 영역(310)을 기준으로 AR 태그의 기호가 차지하는 제1 영역(320)과, 나머지 영역인 제2 영역(330) 각각의 비율을 비교하여 비교 결과를 템플릿 데이터와 매칭시켜 AR 태그를 인식할 수 있다.
여기서, 템플릿 데이터는 AR 태그의 기호가 차지하는 제1 영역(320)과, 나머지 영역인 제2 영역(330) 각각의 비율에 따라 설정된 코드를 포함할 수 있다. 예를 들면, 템플릿 데이터는 제1 영역(320)이 약 40%이고 제2 영역(330)이 약 60%인 AR 태그의 기호를 A01에 대한 코드로 저장하고, 제1 영역(320)이 약 41%이고 제2 영역(330)이 약 59%인 AR 태그의 기호를 A02에 대한 코드로 저장할 수 있다.
즉, 템플릿 데이터는 제1 영역(320)과 제2 영역(330)의 비율에 따라 매칭되어 AR 태그를 인식할 수 있는 복수의 코드를 포함할 수 있다.
또한, 템플릿 데이터는 동영상의 해상도 별로 설정된 AR 태그의 코드를 포함할 수 있다. 예를 들면, 템플릿 데이터는 1080P, 720P, 360P 각각의 동영상 해상도에 따라 태그 인식 영역(310) 또는 기호의 크기가 달라지므로 각 해상도 별로 AR 태그를 인식할 수 있도록 제1 영역(320) 및 제2 영역(330)의 비율에 따라 설정된 AR 태그의 코드를 포함할 수 있다.
한편, 서버 제어부(120)는 서버 통신부(110)를 통해 접속된 콘텐츠 재생장치(200)가 어떤 종류의 장치인지 판단하여 해당 종류의 장치에 맞게 콘텐츠를 제공하도록 제어할 수 있다. 예를 들면, 서버 제어부(120)는 콘텐츠 재생장치(200)가 모바일 장치인지 PC인지 판단하여 모바일 장치 또는 PC에 맞는 형식의 콘텐츠를 콘텐츠 재생장치(200)에 제공할 수 있다.
서버 저장부(130)는 동영상 데이터, AR 스크립트 데이터 및 태그 인식 프로그램을 저장할 수 있다. 여기서, 서버 저장부(130)는 서버 제어부(120)에 의해 설정된 동영상 데이터, AR 스크립트 데이터 및 태그 인식 프로그램을 저장하고, 서버 제어부(120)의 요청에 따라 저장된 동영상 데이터, AR 스크립트 데이터 및 태그 인식 프로그램을 서버 제어부(120)에 제공할 수 있다.
콘텐츠 재생장치(200)는 콘텐츠 제공장치(100)로부터 수신한 콘텐츠를 재생할 수 있는 모바일 장치 또는 PC로 구성될 수 있다.
이러한, 콘텐츠 재생장치(200)는 단말기 통신부(210), 단말기 출력부(220), 단말기 입력부(230), 단말기 제어부(240) 및 단말기 저장부(250)를 포함할 수 있다.
다만, 콘텐츠 재생장치(200)는 단말기 통신부(210), 단말기 출력부(220), 단말기 입력부(230), 단말기 제어부(240) 및 단말기 저장부(250)만을 포함하여 구성되는 것으로 기재하고 있으나, 이는 본 발명의 일 실시예에 따른 본질적인 특성에서 벗어나지 않는 범위에서 콘텐츠 재생장치(200)에 포함되는 구성 요소에 대하여 다양하게 수정 및 변형하여 적용 가능할 것이다.
단말기 통신부(210)는 유선 및 무선 중 적어도 하나의 방식으로 통신망(50)을 통해 콘텐츠 제공장치(100)와 통신하여 동영상 스트리밍 서비스를 제공받기 위한 데이터를 송수신하는 기능을 수행할 수 있다. 예를 들면, 단말기 통신부(210)는 동영상 데이터, AR 스크립트 데이터, 태그 인식 프로그램을 콘텐츠 제공장치(100)로부터 수신할 수 있다.
단말기 출력부(220)는 동영상 스트리밍 서비스를 제공받기 위하여 콘텐츠 제공장치(100)로부터 수신한 데이터를 출력시킬 수 있다. 이를 위하여, 단말기 출력부(220)는 비디오 데이터를 출력하는 디스플레이 및 오디오 데이터를 출력하는 스피커를 포함할 수 있다. 예를 들면, 단말기 출력부(220)는 디스플레이를 통해 동영상을 출력하고 스피커를 통해 사운드를 출력할 수 있다.
단말기 입력부(230)는 동영상 재생과 관련된 사용자의 입력과, AR 스크립트 실행을 위한 사용자의 입력을 수신할 수 있다. 이를 위하여, 단말기 입력부(230)는 복수의 키를 구비하는 키패드, 디스플레이에 결합된 터치패드, 사용자의 음성 입력을 전기적 신호로 변환하는 마이크로폰 등을 포함할 수 있다.
단말기 제어부(240)는 콘텐츠 재생장치(200)의 전반적인 기능을 제어하는 제어 수단으로서, 단말기 통신부(210)를 제어하여 콘텐츠 제공장치(100)로부터 AR 태그가 포함된 동영상 데이터, AR 태그에 따라 실행되는 AR 스크립트 데이터, AR 태그를 인식하기 위한 태그 인식 프로그램을 수신하도록 단말기 통신부(210)를 제어할 수 있다.
구체적으로, 단말기 제어부(240)는 동영상 스트리밍 서비스를 실생하기 위하여 AR 태그가 포함된 동영상 데이터를 실시간으로 수신하도록 단말기 통신부(210)를 제어할 수 있다. 또한, 단말기 제어부(240)는 동영상 데이터와 함께 AR 스크립트 데이터 및 태그 인식 프로그램을 수신하도록 단말기 제어부(240)를 제어할 수 있다.
여기서, 단말기 제어부(240)는 동영상 데이터로부터 AR 태그를 추출하고, 추출한 태그에 매칭된 AR 스크립트 데이터를 실행시킬 수 있다.
예를 들면, 단말기 제어부(240)는 콘텐츠 제공장치(100)로부터 수신한 동영상 데이터로부터 "A" 태그를 추출한 경우 "A" 태그에 매칭된 "B" 사진을 동영상에 오버레이(overlay)시켜 화면에 표시하거나, "C" 태그를 추출한 경우 "C" 태그에 매칭된 "D" 프로그램을 동영상에 오버레이시켜 화면에 표시되도록 실행시킬 수 있다.
단말기 제어부(240)는 콘텐츠 제공장치(100)로부터 수신한 태그 인식 프로그램을 실행하여 실시간으로 전송되는 동영상 내에서 AR 태그를 인식할 수 있다. 이때, 단말기 제어부(240)는 템플릿 데이터를 이용한 템플릿 매칭을 수행할 수 있다.
구체적으로, 단말기 제어부(240)는 도 5를 참조하여 상술한 바와 같이 태그 인식 프로그램을 실행시켜 미리 설정된 태그 인식 영역(310)을 기준으로 AR 태그의 기호가 차지하는 제1 영역(320)과, 나머지 영역인 제2 영역(330) 각각의 비율을 비교하여 비교 결과를 템플릿 데이터와 매칭시켜 AR 태그를 인식할 수 있다.
여기서, 단말기 제어부(240)는 사용자에 의해 동영상 해상도가 변경되더라도 동영상의 해상도 별로 설정된 템플릿 데이터를 이용하여 템플릿 매칭을 수행할 수 있다.
단말기 저장부(250)는 동영상 데이터, AR 스크립트 데이터 및 태그 인식 프로그램을 저장할 수 있다. 여기서, 단말기 저장부(250)는 단말기 제어부(240)에 의해 설정된 동영상 데이터, AR 스크립트 데이터 및 태그 인식 프로그램을 저장하고, 단말기 제어부(240)의 요청에 따라 저장된 동영상 데이터, AR 스크립트 데이터 및 태그 인식 프로그램을 단말기 제어부(240)에 제공할 수 있다.
본 발명의 일 실시에에 따른 증강현실이 적용된 콘텐츠 제공 시스템은 실시간으로 제공되는 동영상 내에서 AR 태그를 인식하여 AR 스크립트를 실행함으로써 사용자에게 AR이 구동되는 콘텐츠를 제공할 수 있다.
이하에서는 도 7을 참조하여 본 발명의 일 실시예에 따른 증강현실이 적용된 콘텐츠 제공방법을 설명한다.
도 7은 본 발명의 일 실시예에 따른 증강현실이 적용된 콘텐츠 제공방법을 나타내는 순서도이다.
도 7을 참조하면, 본 발명의 일 실시예에 따른 증강현실이 적용된 콘텐츠 제공방법은 동영상 스트리밍 서비스를 제공하기 위하여 콘텐츠 제공장치가 콘텐츠 재생장치의 종류를 확인하는 단계(S100) 및 AR 태그가 포함된 동영상 데이터, AR 태그에 따라 실행되는 AR 스크립트 데이터, AR 태그를 인식하기 위한 태그 인식 프로그램을 콘텐츠 재생장치에게 제공하는 단계(S200)를 포함할 수 있다.
단계 S100에서 콘텐츠 제공장치는 콘텐츠 재생장치의 종류에 맞는 형식으로 콘텐츠를 제공하도록 서버 통신부를 통해 접속된 콘텐츠 재생장치가 어떤 종류의 장치인지 확인할 수 있다. 예를 들면, 서버 제어부(120)는 콘텐츠 재생장치(200)가 모바일 장치인지 PC인지 판단하여 모바일 장치 또는 PC에 맞는 해상도의 동영상 데이터를 콘텐츠 재생장치(200)에게 제공할 수 있다.
단계 S200에서는 콘텐츠 제공장치가 콘텐츠 제공 모드에 따라 설정된 데이터를 콘텐츠 재생장치에 제공할 수 있다.
우선, 콘텐츠 제공장치는 편집 동영상 제공 모드에서 서버 저장부에 저장된 동영상 데이터, AR 스크립트 데이터, 태그 인식 프로그램을 콘텐츠 재생장치에게 제공할 수 있다. 이를 위하여, 콘텐츠 제공장치는 화면의 좌우측 가장자리에 설정된 태그 배치 영역으로 적어도 하나의 AR 태그가 배치되도록 AR 태그를 포함하여 편집된 동영상 데이터를 미리 서버 저장부에 저장시킬 수 있다. 또한, 콘텐츠 제공장치는 미리 설정된 데이터를 출력하도록 실행되는 AR 스크립트 데이터와, AR 태그를 인식하기 위한 태그 인식 프로그램을 미리 서버 저장부에 저장시킬 수 있다.
여기서, AR 스크립트 데이터 및 태그 인식 프로그램은 상술한 내용과 동일하므로 중복 설명을 생략한다.
한편, 콘텐츠 제공장치는 라이브 동영상 제공 모드에서 실시간으로 촬영된 동영상과 함께 콘텐츠 제공자가 미리 설정한 AR 스크립트 데이터 및 태그 인식 프로그램을 실시간으로 콘텐츠 재생장치에게 제공할 수 있다.
예를 들면, 콘텐츠 제공장치는 1인 방송의 동영상 스트리밍 서비스를 제공하는 콘텐츠 제공자로부터 실시간으로 촬영된 동영상과 미리 설정된 AR 스크립트 데이터를 수신할 수 있다. 이때, 콘텐츠 제공자는 AR 스크립트 데이터로 자신의 여행 사진 등을 콘텐츠 제공장치에 미리 저장시켜 놓고 콘텐츠 재생장치에서 실시간으로 촬영된 동영상과 함께 AR 스크립트 실행시 여행 사진을 사용자에게 보여줄 수 있다.
본 발명은 AR 태그가 포함된 동영상 데이터와 AR 태그에 따라 실행되는 스크립트 데이터를 이용하여 증강현실이 적용된 콘텐츠를 제공함으로써 사용자에게 다양한 정보와 흥미를 제공할 수 있다.
본 발명은 콘텐츠 제공장치가 동영상 스트리밍 서비스를 제공할 때 동영상 데이터와 별도로 AR 스크립트 데이터를 콘텐츠 재생장치에 제공함으로써, 사용자에게 화질 저하 없이 구동되는 AR을 제공할 수 있다.
종래의 동영상 스트리밍 서비스에서는 동영상 데이터와 AR 데이터를 함께 인코딩하여 동영상의 해상도가 360P일 경우 AR도 360P에 맞춰 화질의 저하가 발생하였다. 그러나, 본 발명에서는 인코딩된 동영상 데이터와 별도로 AR 스크립트 데이터를 콘텐츠 재생장치에 제공하므로 인코딩된 동영상의 해상도와 상관없이 AR이 원본 수준의 해상도를 유지할 수 있다. 이로 인해, 사용자는 데이터 절감을 위해 저해상도로 인코딩된 동영상을 시청하더라도 인코딩되지 않아 원본 수준의 해상도가 유지되어 구동되는 AR을 감상할 수 있다.
또한, 본 발명은 동영상을 재생하는 중 AR 데이터를 선택적으로 출력시킬 수 있다. 이를 통해, 본 발명은 사용자가 AR의 구동을 선택할 수 있는 편의성을 향상시킬 수 있다.
이상에서 본 발명에 대한 기술 사상을 첨부 도면과 함께 서술하였지만, 이는 본 발명의 바람직한 실시예를 예시적으로 설명한 것이지 본 발명을 한정하는 것은 아니다. 또한, 이 기술 분야의 통상의 지식을 가진 자라면 누구나 본 발명의 기술 사상의 범주를 이탈하지 않는 범위 내에서 다양한 변형 및 모방이 가능함은 명백한 사실이다.
50: 통신망
100: 콘텐츠 제공장치
110: 서버 통신부
120: 서버 제어부
130: 서버 저장부
200: 콘텐츠 재생장치
210: 단말기 통신부
220: 단말기 출력부
230: 단말기 입력부
240: 단말기 제어부
250: 단말기 저장부

Claims (16)

  1. 증강현실이 적용된 동영상 스트리밍 서비스를 제공하기 위하여,
    콘텐츠 재생장치와 통신하는 통신부; 및
    상기 콘텐츠 재생장치에 동영상 스트리밍 서비스를 제공하기 위하여 증강현실 태그가 포함된 동영상 데이터, 증강현실 태그에 따라 실행되는 증강현실 스크립트 데이터, 증강현실 태그를 인식하여 상기 증강현실 스크립트 데이터를 실행하기 위한 태그 인식 프로그램을 상기 콘텐츠 재생장치에 제공하도록 상기 통신부를 제어하는 제어부를 포함하되,
    상기 태그 인식 프로그램은 실시간으로 전송되는 동영상 내에서 문자 및 숫자 중 적어도 하나를 포함하는 기호로 표현되는 상기 증강현실 태그를 인식하기 위한 템플릿 데이터를 포함하고, 미리 설정된 태그 인식 영역을 기준으로 증강현실 태그가 차지하는 영역과 나머지 영역 각각의 비율을 비교하여 비교 결과를 템플릿 데이터와 매칭시켜 상기 증강현실 태그의 코드를 검출하는 템플릿 매칭을 수행하여 상기 증강현실 태그를 인식하며,
    상기 템플릿 데이터는 상기 증강현실 태그가 차지하는 제1 영역과, 나머지 영역인 제2 영역 각각의 비율에 따른 상기 증강현실 태그의 코드를 포함하되, 동영상의 복수의 해상도에 따라 달라지는 태그 인식 영역 또는 기호의 크기에 대응하기 위하여, 해상도별로 상기 증강현실 태그를 인식하도록 상기 제1 영역 및 상기 제2 영역의 비율이 설정된 상기 증강현실 태그의 코드를 포함하는, 콘텐츠 제공장치.
  2. 삭제
  3. 삭제
  4. 삭제
  5. 삭제
  6. 삭제
  7. 삭제
  8. 증강현실이 적용된 동영상 스트리밍 서비스를 제공하기 위하여,
    (a) 콘텐츠 제공장치가 콘텐츠 재생장치의 종류를 확인하는 단계; 및
    (b) 증강현실 태그가 포함된 동영상 데이터, 증강현실 태그에 따라 실행되는 증강현실 스크립트 데이터, 증강현실 태그를 인식하여 상기 증강현실 스크립트 데이터를 실행하기 위한 태그 인식 프로그램을 상기 콘텐츠 재생장치에 제공하는 단계를 포함하되,
    상기 태그 인식 프로그램은 실시간으로 전송되는 동영상 내에서 문자 및 숫자 중 적어도 하나를 포함하는 기호로 표현되는 상기 증강현실 태그를 인식하기 위한 템플릿 데이터를 포함하고, 미리 설정된 태그 인식 영역을 기준으로 증강현실 태그가 차지하는 영역과 나머지 영역 각각의 비율을 비교하여 비교 결과를 템플릿 데이터와 매칭시켜 상기 증강현실 태그의 코드를 검출하는 템플릿 매칭을 수행하여 상기 증강현실 태그를 인식하며,
    상기 템플릿 데이터는 상기 증강현실 태그가 차지하는 제1 영역과, 나머지 영역인 제2 영역 각각의 비율에 따른 상기 증강현실 태그의 코드를 포함하되, 동영상의 복수의 해상도에 따라 달라지는 태그 인식 영역 또는 기호의 크기에 대응하기 위하여, 해상도별로 상기 증강현실 태그를 인식하도록 상기 제1 영역 및 상기 제2 영역의 비율이 설정된 상기 증강현실 태그의 코드를 포함하는, 콘텐츠 제공방법.
  9. 제8항에 있어서,
    상기 (a) 단계에서는, 상기 콘텐츠 재생장치에 맞는 해상도의 동영상 데이터를 제공하기 위하여 상기 콘텐츠 제공장치가 상기 콘텐츠 재생장치의 종류를 확인하는 것인, 콘텐츠 제공방법.
  10. 제8항에 있어서,
    상기 (b) 단계에서는, 상기 콘텐츠 제공장치가 콘텐츠 제공 모드에 따라 설정된 데이터를 상기 콘텐츠 재생장치에 제공하되,
    상기 콘텐츠 제공 모드는 편집 동영상 제공 모드 및 라이브 동영상 제공 모드를 포함하는, 콘텐츠 제공방법.
  11. 제10항에 있어서,
    상기 편집 동영상 제공 모드에서는 상기 콘텐츠 제공장치가 저장부에 저장된 동영상 데이터, 증강현실 스크립트 데이터, 태그 인식 프로그램을 상기 콘텐츠 재생장치에 제공하되,
    상기 동영상 데이터는 화면의 좌우측 가장자리에 설정된 태그 배치 영역으로 적어도 하나의 증강현실 태그가 배치되도록 증강현실 태그를 포함하고, 상기 증강현실 스크립트 데이터는 미리 설정된 데이터를 출력하도록 실행되는, 콘텐츠 제공방법.
  12. 제10항에 있어서,
    상기 라이브 동영상 제공 모드에서는 상기 콘텐츠 제공장치가 실시간으로 촬영된 동영상과, 콘텐츠 제공자가 미리 설정한 증강현실 스크립트 데이터 및 태그 인식 프로그램을 상기 콘텐츠 재생장치에 제공하는, 콘텐츠 제공방법.
  13. 삭제
  14. 삭제
  15. 삭제
  16. 삭제
KR1020170173273A 2017-12-15 2017-12-15 콘텐츠 제공장치 및 방법 KR101909462B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020170173273A KR101909462B1 (ko) 2017-12-15 2017-12-15 콘텐츠 제공장치 및 방법
PCT/KR2018/014354 WO2019117494A1 (ko) 2017-12-15 2018-11-21 콘텐츠 제공장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170173273A KR101909462B1 (ko) 2017-12-15 2017-12-15 콘텐츠 제공장치 및 방법

Publications (1)

Publication Number Publication Date
KR101909462B1 true KR101909462B1 (ko) 2018-10-22

Family

ID=64102504

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170173273A KR101909462B1 (ko) 2017-12-15 2017-12-15 콘텐츠 제공장치 및 방법

Country Status (2)

Country Link
KR (1) KR101909462B1 (ko)
WO (1) WO2019117494A1 (ko)

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010008391A (ko) * 2000-11-30 2001-02-05 최세현 인터넷을 통한 외국어 학습 방법 및 시스템
KR20140061009A (ko) * 2012-11-13 2014-05-21 주식회사 한울네오텍 음성인식을 이용한 하이브리드 증강현실 시스템 및 그 방법
KR20140115900A (ko) * 2013-03-21 2014-10-01 주식회사 케이티 교육용 교안 콘텐츠 제작 시스템 및 이를 위한 방법
KR101615171B1 (ko) * 2014-01-22 2016-05-12 단국대학교 산학협력단 증강현실을 기반으로 한 협업적 교육콘텐츠 제공 시스템 및 제공 서비스 방법
KR101613438B1 (ko) * 2015-04-21 2016-04-19 정지연 증강현실 컨텐츠의 생성 및 재생 시스템과, 이를 이용한 방법

Also Published As

Publication number Publication date
WO2019117494A1 (ko) 2019-06-20

Similar Documents

Publication Publication Date Title
US9836267B2 (en) Image/audio playback device of mobile communication terminal
US20240146981A1 (en) Encoding device and method, reproduction device and method, and program
US8161518B2 (en) Contents distribution system and distribution server and display terminal of contents distribution system
US20190373336A1 (en) Method and apparatus for generating caption
US20200366957A1 (en) Apparatus, systems and methods for accessing information based on an image presented on a display
CN103606310A (zh) 教学方法及系统
CN108986117B (zh) 视频图像分割方法及装置
KR20150032097A (ko) 영상표시장치, 영상표시장치의 구동방법 및 영상표시방법
JP4655065B2 (ja) コンテンツ配信システム、コンテンツ配信システムの配信サーバ及び表示端末、コンテンツ配信プログラム
KR101909462B1 (ko) 콘텐츠 제공장치 및 방법
KR101909461B1 (ko) 증강현실이 적용된 교육 서비스 제공방법
CN112533056B (zh) 一种显示设备及声音再现方法
KR20110047389A (ko) 학습 콘텐츠 서비스 제공 방법 및 시스템
KR20110040219A (ko) 텔레비전 수신기에 있어서의 자동 채널설정 방법과 이에 적합한 콘텐츠 재생 방법
CN101212635B (zh) 录像图像处理方法和系统
KR20180100873A (ko) 대체 광고를 재생하는 디스플레이 장치 및 그 디스플레이 장치의 제어 방법
JP2018129700A (ja) 信号処理システム、信号生成装置、出力装置、信号生成方法、出力方法、信号生成プログラム、及び出力プログラム
AU2011338800B2 (en) Video stream presentation system and protocol
KR102147577B1 (ko) 디스플레이 단말 및 디스플레이 방법
JP4426622B2 (ja) データ中継装置
KR101757596B1 (ko) 인쇄 매체에 삽입된 코드를 이용한 컨텐츠 재생 시스템 및 방법
KR20220031436A (ko) 전자 장치 및 그 동작 방법
KR101619153B1 (ko) 스마트 기기를 이용한 시각 또는 청각 장애인의 디지털 영상 콘텐츠 간편 시청 시스템 및 그 방법
CN115623276A (zh) 一种显示设备及广告插播方法
CN110447233A (zh) 用于识别用户界面的显示设备及其控制方法

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant