KR20140025787A - 증강 방송 서비스 제공 장치 및 방법 - Google Patents

증강 방송 서비스 제공 장치 및 방법 Download PDF

Info

Publication number
KR20140025787A
KR20140025787A KR1020120091900A KR20120091900A KR20140025787A KR 20140025787 A KR20140025787 A KR 20140025787A KR 1020120091900 A KR1020120091900 A KR 1020120091900A KR 20120091900 A KR20120091900 A KR 20120091900A KR 20140025787 A KR20140025787 A KR 20140025787A
Authority
KR
South Korea
Prior art keywords
augmented
content
description data
scene description
broadcast
Prior art date
Application number
KR1020120091900A
Other languages
English (en)
Other versions
KR101955723B1 (ko
Inventor
김정학
김순철
최범석
하정락
정영호
홍진우
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020120091900A priority Critical patent/KR101955723B1/ko
Priority to US13/874,317 priority patent/US8797357B2/en
Publication of KR20140025787A publication Critical patent/KR20140025787A/ko
Application granted granted Critical
Publication of KR101955723B1 publication Critical patent/KR101955723B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23412—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs for generating or manipulating the scene composition of objects, e.g. MPEG-4 objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14—Display of multiple viewports
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • H04N21/4725—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content using interactive regions of the image, e.g. hot spots
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8146—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/45—Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명은 단말에서의 증강 방송 서비스 제공 방법으로, 증강 방송 서비스 제공이 가능함을 알리는 정보, 증강 콘텐츠 제공 서버 정보 및 증강 콘텐츠를 TV 화면에 표현하기 위한 증강 장면 서술 데이터 제공 서버 정보를 포함하는 증강 방송 서비스 정보를 수신하는 단계와, 사용자가 선택한 증강 장면 서술 데이터 및 증강 콘텐츠를 상기 증강 콘텐츠 제공 서버 및 증강 서술 데이터 서버로부터 획득하는 단계와, 상기 증강 장면 서술 데이터에 따라 방송 콘텐츠에 상기 증강 콘텐츠를 오버레이시켜 출력하는 단계를 포함한다.

Description

증강 방송 서비스 제공 장치 및 방법{Apparatus and Method for Providing Augmented Broadcast Service}
본 발명은 방송 서비스 제공 장치 및 방법에 관한 것으로, 특히 방송 서비스 영상에 컴퓨터로 제작된 그래픽 객체가 오버레이되어 표현되고 사용자와 오버레이된 그래픽 객체 사이의 상호작용을 가능하게 하는 증강 방송 서비스 제공 장치 및 방법에 관한 것이다.
증강 현실(AR: Augmented Reality)은 모바일, 태블릿, PC, TV 등 다양한 형태의 플랫폼상에서 재생되는 정지 영상 또는 동영상 위에 컴퓨터로 제작된 그래픽 이미지를 오버레이하여 표현하는 것을 의미한다. 달리 표현하면, 증강현실은 현실 세계 위에 가상의 물체를 겹쳐 보여주는 기술이라 할 수 있다. 증강현실은 광고, 엔터테인먼트, 교육 등 다양한 서비스를 제공하는 새로운 형태의 기술적 트랜드가 되고 있다.
한편, 스마트폰이 확산되고 다양한 형태의 응용프로그램들이 등장하면서, 사람들은 자신의 기기에서 사용하는 매체를 통해 다양한 유형의 상호작용을 경험하고자 한다. 증강 현실 서비스도 이러한 경향에 맞추어 사용자가 자신의 기기에서 실행되는 응용 프로그램상에서 오버레이된 그래픽 객체와의 상호작용을 통해 다양한 형태의 정보를 얻을 수 있도록 진화하고 있다.
이러한 추세에 따라, TV 방송 서비스 분야에서도 증강 현실 서비스가 제공되고 있다. 대표적인 서비스로 스포츠 방송에서 컴퓨터 그래픽을 활용해 해설자가 사용자에게 부가적인 정보를 전달하는 것과 가상 광고를 그 예로 들 수 있다. 그러나, 이러한 형태의 서비스는 엄밀하게는 진정한 의미의 증강 현실 서비스라고 할 수는 없다. 이는 단지 TV 방송국에서 증강 현실이 적용된 TV 프로그램을 편도 미디어로서 사용자에게 전달한 것뿐이다. 즉, 스마트폰을 중심으로 하는 모바일 환경에서 경험할 수 있는 형태의 상호작용이 전혀 고려되지 않은 것이다.
즉, 종래 TV 방송 서비스 분야에서 제공되는 증강 현실 서비스는 방송 콘텐츠 영상 이미지와 그 영상 이미지 위에 오버레이되어 부가적으로 표현되는 그래픽 객체 이미지가 합성되어 새로운 영상 이미지가 생성되고, 이와 같이 합성된 영상 이미지들의 연속된 스트림으로서 증강 현실이 적용된 방송 영상이 전송된다.
따라서, TV(또는 TV 셋탑박스)에서는 증강 현실 서비스가 적용된 방송 영상에서 증강 현실 그래픽 객체를 독립적으로 처리할 수가 없고, 이로 인해 증강 현실 그래픽 객체와 사용자와의 상호작용을 통한 부가적인 서비스를 제공할 수가 없다.
본 발명은 증강 방송 서비스를 위해 필요한 정보, 데이터, 증강 콘텐츠를 효율적으로 전달하는 방법, 수신 단말의 동작, 수신 데이터 처리 방법을 제안한다.
본 발명은 단말에서의 증강 방송 서비스 제공 방법으로, 증강 방송 서비스 제공이 가능함을 알리는 정보, 증강 콘텐츠 제공 서버 정보 및 증강 콘텐츠를 TV 화면에 표현하기 위한 증강 장면 서술 데이터 제공 서버 정보를 포함하는 증강 방송 서비스 정보를 수신하는 단계와, 사용자가 선택한 증강 장면 서술 데이터 및 증강 콘텐츠를 상기 증강 콘텐츠 제공 서버 및 증강 장면 서술 데이터 서버로부터 획득하는 단계와, 상기 증강 장면 서술 데이터에 따라 방송 콘텐츠에 상기 증강 콘텐츠를 오버레이시켜 출력하는 단계를 포함한다.
본 발명은 증강 방송 서비스 제공 단말 장치로, 방송망을 통해 증강 방송 서비스 제공이 가능함을 알리는 정보, 증강 콘텐츠 제공 서버 정보 및 증강 콘텐츠를 TV 화면에 표현하기 위한 증강 장면 서술 데이터 제공 서버 정보를 포함하는 증강 방송 서비스 정보와 방송 콘텐츠를 수신하는 방송 수신부와, 상기 방송 수신부에 의해 수신된 증강 방송 서비스 정보에 따라, 상기 유/무선 통신망을 통해 사용자가 선택한 증강 장면 서술 데이터 및 증강 콘텐츠를 상기 증강 콘텐츠 제공 서버 및 증강 장면 서술 데이터 서버로부터 획득하는 증강 방송 서비스 데이터 획득부와, 상기 증강 방송 서비스 데이터 획득부에 의해 획득된 증강 장면 서술 데이터에 따라 상기 방송 수신부에 의해 수신된 방송 콘텐츠에 상기 증강 콘텐츠를 오버레이시켜 출력하는 증강 방송 합성부를 포함한다.
본 발명은 증강 방송 서비스 제공 방법으로, 상기 방송 콘텐츠 제공 서버에서 제공되는 방송 콘텐츠가 증강 방송 서비스를 제공하는 프로그램인 경우, 증강 방송 서비스 제공 서버가 증강 방송 서비스 제공이 가능함을 알리는 정보, 증강 콘텐츠 제공 서버 정보 및 증강 콘텐츠를 TV 화면에 표현하기 위한 증강 장면 서술 데이터 제공 서버 정보를 포함하는 증강 방송 서비스 정보를 하나 이상의 단말로 전송하는 단계와, 증강 콘텐츠 제공 서버가 상기 단말이 접속됨에 따라, 상기 사용자가 선택한 증강 콘텐츠를 제공하는 단계와, 증강 장면 서술 데이터 제공 서버가 상기 단말이 접속됨에 따라, 사용자가 선택한 증강 장면 서술 데이터를 제공하는 단계를 포함한다.
본 발명은 증강 방송 콘텐츠 시스템으로, 방송 콘텐츠 제공 서버와, 상기 방송 콘텐츠 제공 서버에서 제공되는 방송 콘텐츠가 증강 방송 서비스를 제공하는 프로그램인 경우, 증강 방송 서비스 제공이 가능함을 알리는 정보, 증강 콘텐츠 제공 서버 정보 및 증강 콘텐츠를 TV 화면에 표현하기 위한 증강 장면 서술 데이터 제공 서버 정보를 포함하는 증강 방송 서비스 정보를 하나 이상의 단말로 전송하는 증강 방송 서비스 정보 제공 서버와, 상기 단말이 접속됨에 따라, 사용자가 선택한 증강 콘텐츠를 제공하는 증강 콘텐츠 제공 서버와, 상기 단말이 접속됨에 따라, 사용자가 선택한 증강 장면 서술 데이터를 제공하는 증강 장면 서술 데이터 제공 서버를 포함한다.
본 발명은 TV 방송국으로부터 사용자에게 증강 현실이 적용된 TV 프로그램이 편도 미디어로서 전달되는 것이 아니라, 사용자가 TV 프로그램상에 오버레이되는 그래픽 객체를 선택할 수 있고, 그래픽 객체와의 상호작용을 통해 다양한 부가정보를 획득할 수 있다는 이점이 있다.
이러한 증강 그래픽 객체를 이용한 다양한 형태의 부가서비스가 가능하다.
본 발명을 기반으로 구성 가능한 방송 시스템에서는, 증강 방송 서비스 구성에 관련된 정보를 테이블 형태로 단말에 제공함으로써, 사용자가 증강 장면 서술 데이터 및 증강 콘텐츠를 미리 선택하는 것이 가능하며, TV는 사용자가 선택한 증강 장면 서술 데이터 및 증강 콘텐츠만을 다운로드 하는 것이 가능하다. 즉, 이것은 사용자 선택형 증강 방송 서비스 제공이 가능함을 의미한다.
본 발명을 기반으로 구성 가능한 방송 시스템에서는, 증강 방송 서비스 구성에 관련된 정보를 테이블 형태로 단말에 제공함으로써, 단말이 증강 방송 서비스 제공이 가능한 방송 콘텐츠들 각각에 대해 증강 장면 서술 데이터 및 증강 콘텐츠를 다운로드하기 위한 스케줄을 구성하고, 이 스케줄에 따라 증강 장면 서술 데이터를 제공하는 서버 및 증강 콘텐츠를 제공하는 서버에 접속하여 증강 방송 서비스 제공이 가능한 방송 콘텐츠들 각각에 대한 증강 장면 서술 데이터 및 증강 콘텐츠를 다운로드하는 것이 가능하다.
본 발명을 기반으로 구성 가능한 방송 시스템에서는, 단말이 증강 장면 서술 데이터 제공 서버와의 접속을 유지하고, 증강 장면 서술 데이터 제공 서버가 제공하는 증강 장면 서술 데이터를 수시로 다운로드하거나 업데이트할 수 있다.
본 발명을 기반으로 구성 가능한 방송 시스템에서는, 단말이 증강 콘텐츠 제공 서버와의 접속을 유지하고, 증강 콘텐츠 제공 서버가 제공하는 증강 콘텐츠를 수시로 다운로드하거나 업데이트할 수 있다.
도 1은 본 발명의 실시 예에 따른 증강 방송 서비스 제공 시스템의 구성도이다.
도 2는 본 발명의 실시 예에 따른 증강 방송 서비스를 수신하는 단말의 개략적인 구성 블록도이다.
도 3은 본 발명의 실시 예에 따른 증강 방송 서비스 제공 방법을 설명하기 위한 신호 흐름도이다.
도 4a는 본 발명의 증강 장면 서술 데이터 획득 과정의 일 실시 예를 설명하기 위한 신호 흐름도이다.
도 4b는 본 발명의 증강 장면 서술 데이터 획득 과정의 다른 실시 예를 설명하기 위한 신호 흐름도이다.
도 5a는 본 발명의 증강 콘텐츠 데이터 획득 과정의 일 실시 예를 설명하기 위한 신호 흐름도이다.
도 5b는 본 발명의 증강 콘텐츠 데이터 획득 과정의 다른 실시 예를 설명하기 위한 신호 흐름도이다.
이하, 첨부된 도면을 참조하여 기술되는 바람직한 실시 예를 통하여 본 발명을 당업자가 용이하게 이해하고 재현할 수 있도록 상세히 기술하기로 한다.
본 발명을 설명함에 있어 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명 실시 예들의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다.
명세서 전반에 걸쳐 사용되는 용어들은 본 발명 실시 예에서의 기능을 고려하여 정의된 용어들로서, 사용자 또는 운용자의 의도, 관례 등에 따라 충분히 변형될 수 있는 사항이므로, 이 용어들의 정의는 본 발명의 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
도 1은 본 발명의 실시 예에 따른 증강 방송 서비스 제공 시스템의 구성도이다.
도 1을 참조하면, 단말(100)은 TV와 같이 방송 시청이 가능한 단말로, TV, TV 셋탑박스 또는 TV 서비스를 제공하는 모든 사용자 단말을 포함한다.
방송 콘텐츠 제공 서버(210)는 방송망(10)을 통해 하나 이상의 단말(100)에 방송 콘텐츠 데이터를 브로드캐스팅한다. 방송 콘텐츠가 증강 방송 서비스를 제공하는 프로그램인 경우, 증강 방송 서비스 정보 제공 서버(220)는 하나 이상의 단말(100)에 증강 방송 서비스 제공이 가능함을 알리는 정보를 브로드캐스팅한다.
그러면, 단말(100)은 통신망(20)을 통해 증강 장면 서술 데이터 제공 서버(230) 및 증강 콘텐츠 제공 서버(240)에 접속하여 증강 방송 서비스를 위한 증강 콘텐츠 및 증강 장면 서술 데이터를 획득한 후, 방송 콘텐츠와 합성하여 증강 방송 서비스를 제공한다. 이때, 본 발명의 실시 예에 따라, 단말(100)은 사용자로부터 증강 콘텐츠 및 증강 장면 서술 데이터를 선택받고, 선택된 증강 콘텐츠만을 방송 콘텐츠에 합성한다. 이러한 단말(100)의 상세 구성 및 동작에 대해서는 하기의 도 2를 참조하여 살펴보기로 한다.
방송 콘텐츠 제공 서버(210)는 뉴스, 스포츠 등과 같이 실시간으로 정보를 전달하는 프로그램들과 드라마, 영화, 예능, 다큐멘터리 등과 같이 촬영 후 별도의 편집 과정을 거친 프로그램들을 제공한다. 방송 콘텐츠 제공 서버(210)는 방송 콘텐츠를 직접 제작하고 지상파, 케이블 또는 인터넷망을 통해 방송 콘텐츠를 송출하는 방송국에 의해 운영될 수도 있고, 제작된 방송 콘텐츠들을 모아서 여러 채널로 재송출하는 케이블 또는 인터넷 방송 사업자에 의해 운영될 수도 있다.
증강 방송 서비스 정보 제공 서버(220)는, 방송 콘텐츠가 증강 방송 서비스를 제공하는 프로그램인 경우, 증강 방송 서비스 제공이 가능함을 알리는 정보를 제공한다. 또한, 증강 방송 서비스 정보 제공 서버(220)는 증강 콘텐츠를 TV 화면에 표현하기 위한 증강 장면 서술 데이터를 제공하는 서버 정보 및 증강 콘텐츠를 제공하는 서버 정보도 제공한다.
증강 장면 서술 데이터 제공 서버 정보는 단말이 다운로드해야 하는 증강 장면 서술 데이터 리스트(또는 파일명) 및 단말이 증강 장면 서술 데이터를 다운로드하기 위해 접속해야 하는 서버 정보 즉, 서버의 주소를 포함한다. 증강 장면 서술 데이터 제공 서버 정보는 다양한 실시 예가 가능하다.
일 실시 예로, 증강 장면 서술 데이터 서버 정보는 증강 장면 서술 데이터를 다운로드 하기 위해 접속해야 하는 서버의 주소만 포함할 수 있다. 이 경우는 사용자가 원하는 증강 장면 서술 데이터를 선택해서 다운로드할 수 있도록 하는 것에 해당된다. 즉, 단말은 증강 장면 서술 데이터 제공 서버 정보에 따라 증강 장면 서술 데이터 제공 서버에 접속하여 증강 장면 서술 데이터를 선택할 수 있는 웹 페이지 화면을 띄우고, 사용자는 원하는 증강 장면 서술 데이터를 선택해서 다운로드 할 수 있다.
다른 실시 예로, 증강 장면 서술 데이터 서버 정보는 증강 장면 서술 데이터를 다운로드 하기 위해 접속해야 하는 서버의 주소 및 해당되는 증강 장면 서술 데이터 파일 이름을 포함할 수 있다. 이 경우는, 사용자의 선택 없이, 단말이 증강 장면 서술 데이터 제공 서버 정보에 따라 증강 장면 서술 데이터 제공 서버에 접속하여 지정된 증강 장면 서술 데이터 파일을 다운로드 하는 것에 해당된다.
증강 장면 서술 데이터는 증강 장면 서술 데이터 제공 서버에 의해 자동으로 단말에 전송되는 것도 가능하다. 이것은, 단말이 증강 장면 서술 데이터 제공 서버에 접속하면, 증강 장면 서술 데이터 제공 서버가 단말에 증강 장면 서술 데이터를 스트리밍 형태로 자동으로 전송하거나 단말에 다운로드된 증강 장면 서술 데이터를 수시로 업데이트할 수 있음을 고려한 것이다.
증강 장면 서술 데이터의 업데이트는 방송 콘텐츠의 내용에 연동되어 수행될 수 있다. 즉, 방송 콘텐츠가 실시간 콘텐츠인 경우, 시시각각 변하는 상황에 따라 증강 장면 서술 데이터가 생성되고, 이 데이터가 수시로 업데이트되는 형태로 단말에 전달될 수 있다.
증강 콘텐츠 제공 서버 정보는 단말(100)이 다운로드해야 하는 증강 콘텐츠 리스트(또는 파일명) 및 단말(100)이 증강 콘텐츠를 다운로드 하기 위해 접속해야 하는 서버 정보를 포함한다. 여기서, 한가지 고려해야 할 점은 다양한 증강 콘텐츠 제공자들이 존재할 수 있다는 것이다. 즉, 이것은 증강 콘텐츠를 제공하는 서버가 다양한 형태로 존재할 수 있고 증강 콘텐츠를 제공하는 서버에 다양한 형태의 증강 콘텐츠들이 존재할 수 있음을 의미한다.
증강 콘텐츠 제공 서버 정보는 다양한 실시 예가 가능하다.
일 실시 예로, 증강 콘텐츠 제공 서버 정보는 증강 콘텐츠를 다운로드하기 위해 접속해야 하는 서버의 주소만을 포함할 수 있다. 이 경우는 사용자가 원하는 증강 콘텐츠를 선택해서 다운로드 할 수 있도록 하는 것에 해당된다. 즉, 단말은 증강 콘텐츠 제공 서버 정보에 따라 증강 콘텐츠 제공 서버에 접속하여 증강 콘텐츠를 선택할 수 있는 웹 페이지 화면을 띄우고, 사용자는 원하는 증강 콘텐츠를 선택해서 다운로드 할 수 있다.
다른 실시 예로, 증강 콘텐츠 제공 서버 정보는 증강 콘텐츠를 다운로드하기 위해 접속해야 하는 서버의 주소 및 해당되는 증강 콘텐츠 파일 이름을 포함할 수 있다. 이 경우는, 사용자의 선택없이, 단말이 증강 콘텐츠 제공 서버 정보에 따라 증강 콘텐츠 제공 서버에 접속하여 지정된 증강 콘텐츠를 다운로드 하는 것에 해당된다.
증강 방송 서비스가 제공되는 방송 프로그램에 대해 증강 방송 서비스 제공이 가능함을 알리는 정보, 증강 콘텐츠를 제공하는 서버 정보 및 증강 장면 서술 데이터를 제공하는 서버 정보 등은 방송 시스템에서 사용되는 PAT/PMT(Program Association Table/Program Map Table) 또는 EPG(Electronic Program Guide)처럼 테이블(이하 증강 방송 서비스 정보 테이블이라 함) 형태로 제공된다.
증강 방송 서비스가 제공되는 다수의 방송 프로그램들에 대한 증강 방송 서비스 정보 테이블의 일 예가 하기의 <표 1>과 같이 구성될 수 있다.
<표 1>
Figure pat00001
상기 <표 1>을 참조하면, 방송 콘텐츠 프로그램은 ID로 구분될 수 있다.
증강 장면 서술 데이터는 AR_SD_Addr_n과 AR_SD_List_n의 조합으로 만들어지는 URL(Uniform Resource Locator)을 근거로 다운로드된다. AR_SD_List_n은 그 자체가 파일명이 될 수도 있고, 증강 장면 서술 데이터 파일들의 리스트를 나타낼 수도 있다. AR_SD_List_n이 파일명인 경우, 단말은 그 파일만 다운로드한다. AR_SD_List_n이 파일 리스트인 경우, 그 리스트에는 증강 장면 서술 데이터 파일들의 URL이 기재되어 있으며, 단말은 그 리스트에 따라 증강 장면 서술 데이터 파일들을 다운로드한다.
증강 콘텐츠는 AR_C_Addr_n과 AR_C_List_n의 조합으로 만들어지는 URL을 근거로 다운로드된다. AR_C_List_n은 그 자체가 파일명이 될 수도 있고, 증강 콘텐츠 파일들의 리스트를 나타낼 수도 있다. AR_C_List_n이 파일명인 경우, 단말은 그 파일만 다운로드 한다. AR_C_List_n이 파일 리스트인 경우, 그 리스트에는 증강 콘텐츠 파일들의 URL이 기재되어 있으면, 단말은 그 리스트에 따라 증강 콘텐츠 파일들을 다운로드 한다.
상기 <표 1>은 구성 가능한 증강방송 서비스 정보 테이블의 일 실시 예일 뿐 이에 한정되지 않는다. 즉, 전술한 바와 같은 증강 콘텐츠 제공 서버 정보 제공 유형 및 증강 장면 서술 데이터 제공 서버 정보 제공 유형에 따라 다양한 형태로 조합된 증강방송 서비스 정보 테이블 구성이 가능하다.
전술한 바와 같은 증강 방송 서비스 정보 테이블이 단말(100)에 제공되면, 사용자가 증강 장면 서술 데이터 및 증강 콘텐츠를 미리 선택하는 것이 가능하며, 단말(100)은 사용자가 선택한 증강 장면 서술 데이터 및 증강 콘텐츠만을 다운로드 하는 것이 가능해진다. 즉, 사용자 선택형 증강 방송 서비스 제공이 가능하다. 이러한 증강 방송 서비스 정보 테이블은 방송 콘텐츠와 다중화되어 전송된다. 또한, 증강 방송 서비스 정보 테이블은 주기적으로 반복되어 전송된다.
증강 장면 서술 데이터 제공 서버(240)는 단말(100)에 증강 장면 서술 데이터를 전송하며, 다양한 실시 예가 가능하다.
일 실시 예로, 단말이 다운로드하려는 특정 증강 장면 서술 데이터를 지정하지 않고 증강 장면 서술 데이터 제공 서버에 접속할 수 있다. 이 경우는 사용자가 원하는 증강 장면 서술 데이터를 선택해서 다운로드할 수 있도록 하는 것에 해당된다. 즉, 증강 장면 서술 데이터 제공 서버는 단말을 통해 사용자가 원하는 증강 장면 서술 데이터를 선택할 수 있도록 웹 페이지 형태의 데이터를 제공하고, 사용자의 선택에 따라 해당되는 증강 장면 서술 데이터를 제공하는 것이다. 추가적으로, 단말로부터 방송 프로그램 ID와 같이 방송 콘텐츠 프로그램을 식별할 수 있는 정보가 증강 장면 서술 데이터 제공 서버에 전달되는 경우에는, 사용자가 그 방송 콘텐츠 프로그램에 관련된 증강 장면 서술 데이터만을 선택할 수 있도록 하는 웹 페이지 형태의 데이터를 단말에 제공할 수도 있다.
다른 실시 예로, 단말이 다운로드하려는 증강 장면 서술 데이터를 지정하여 증강 장면 서술 데이터 제공 서버에 접속할 수 있다. 이 경우는 전술한 일 실시 예에서와 같은 선택 과정 없이 증강 장면 서술 데이터 제공 서버가 지정된 증강 장면 서술 데이터를 단말에 제공하는 것이다.
증강 장면 서술 데이터 제공 서버(230)는 증강 장면 서술 데이터를 스트리밍 형태로 자동으로 단말(100)에 전송하거나, 단말(100)에 다운로드된 증강 장면 서술 데이터를 수시로 업데이트하기 위한 정보 또는 데이터를 단말(100)에 전송할 수 있다. 즉, 단말(100)이 증강 장면 서술 데이터 제공 서버(240)에 접속하면, 증강 장면 서술 데이터 제공 서버(240)는 그 접속 상태를 계속 유지하고 증강 장면 서술 데이터를 자동으로 단말(100)에 전달하는 것이 가능하다. 이와 같이 증강 장면 서술 데이터를 증강 장면 서술 데이터 제공 서버(240)가 자동으로 전송하고 업데이트하는 형태로 단말(100)에 전달하게 되면, 실시간 방송 콘텐츠와 연동하여 방송 콘텐츠 내용의 시시각각 변화하는 상황을 증강 장면 서술 데이터로 만들어서 보내는 것이 가능하다.
증강 장면 서술 데이터는 증강 방송 서비스 제공을 위한 장면(Scene) 구성, 해당 장면에 나타나는 증강 콘텐츠 객체의 기하학적 속성 및 그래픽적 속성, 증강 콘텐츠 객체의 애니메이션 등에 관련된 정보이다.
증강 장면 서술 데이터에는 증강 콘텐츠가 표현되는 증강 장면이 생성되고 소멸되는 시간 정보, 증강 장면이 단말의 화면상에서 나타나는 위치 및 크기 정보, 방송 콘텐츠 내용 및 진행 시간에 따라 증강 장면에 표현되어야 하는 증강 콘텐츠 객체를 선택 또는 지정하는 정보, 증강 콘텐츠 객체의 크기, 위치, 회전 등의 기하학적인 속성 및 색상, 질감, 조명 효과 등의 그래픽적인 속성을 지정하는 정보, 증강 콘텐츠 객체의 행위 연출에 관련된 애니메이션 정보 등이 포함된다.
경우에 따라서는, 증강 장면 서술 데이터에 증강 콘텐츠 제공 서버 정보가 포함될 수도 있다. 즉, 증강 콘텐츠 제공 서버 정보가 반드시 상기 증강 방송 서비스 정보 테이블에 포함되어야 하는 것은 아니다.
증강 콘텐츠 제공 서버(240)는 단말(100)에 증강 콘텐츠를 전송하며, 다양한 실시 예가 가능하다.
일 실시 예로, 단말이 다운로드하려는 특정 증강 콘텐츠를 지정하지 않고 증강 콘텐츠 제공 서버(240)에 접속할 수 있다. 이 경우는 사용자가 원하는 증강 콘텐츠를 선택해서 다운로드 할 수 있도록 하는 것에 해당된다. 즉, 증강 콘텐츠 제공 서버(240)는 단말을 통해 사용자가 원하는 증강 콘텐츠를 선택할 수 있도록 웹 페이지 형태의 데이터를 제공하고, 사용자의 선택에 따라 해당되는 증강 콘텐츠를 제공하는 것이다. 추가적으로, 단말로부터 방송 프로그램 ID와 같이 방송 콘텐츠 프로그램을 식별할 수 있는 정보가 증강 콘텐츠 제공 서버(240)에 전달되는 경우에는, 사용자가 그 방송 콘텐츠 프로그램에 관련된 증강 콘텐츠만을 선택할 수 있도록 하는 웹 페이지 형태의 데이터를 단말에 제공할 수도 있다.
다른 실시 예로, 단말이 다운로드하려는 증강 콘텐츠를 지정하여 증강 콘텐츠 서버(240)에 접속할 수 있다. 이 경우는 전술한 실시 예에서와 같은 선택 과정 없이 증강 콘텐츠 제공 서버가 지정된 증강 콘텐츠를 단말에 제공하는 것이다.
증강 콘텐츠는 2차원적인 이미지, 3차원적인 그래픽 객체, 영상, 웹 페이지, 플래시 애니메이션 등 다양한 형태로 나타날 수 있다. 증강 콘텐츠는 단말의 그래픽 처리과정을 통해 그래픽 객체 형태로 방송 콘텐츠 영상 위에 오버레이되어 표현될 수 있다. 또한, TV 화면이 몇 개의 영역으로 나누어져서, 방송 콘텐츠 영상이 어떠한 영역에 적당한 크기로 줄어들고, 이와 병행하여, 증강 콘텐츠는 다른 영역에 적당한 크기로 표현될 수도 있다. 상기 몇 가지 과정에서, 방송 콘텐츠 영상과 증강 콘텐츠 객체가 하나의 완벽한 이미지로서 합성되어 단말의 화면에 출력되기 전에는, 증강 콘텐츠 객체를 단말의 그래픽 처리장치 및 사용자 인터페이스 처리장치를 통해 독립적으로 접근하여 그 속성을 변경하거나 소정의 명령 신호를 가하여 어떠한 동작이 실행되도록 할 수 있다. 따라서, 증강 콘텐츠 객체는 사용자가 그것을 이동시키거나, 그것의 크기를 재조정하거나, 그것에 어떠한 명령 신호를 가하면 그에 따라 동작하는 것이 가능하도록 제작될 필요가 있다. 또한, 증강 콘텐츠 객체는 사용자의 입력에 반응하여 메시지나 광고와 같은 추가적인 정보를 표현하도록 제작될 수도 있고 방송 콘텐츠와 관련된 추가적인 정보를 표현하도록 제작될 수도 있다.
방송 콘텐츠와 관련된 추가적인 정보에 대한 것으로 스포츠 중계를 예로 들 수 있다. 스포츠 방송 콘텐츠와 관련된 증강 콘텐츠는 매 순간 변화하는 상황들을 메시지나 그래픽으로 표현 가능한 형태로 제작되어야 한다. 즉, 방송을 통해 중계되는 스포츠 프로그램의 급변하는 상황들이 상기 추가 정보가 될 수 있다.
증강 콘텐츠에 포함되는 정보 또는 증강 콘텐츠에 관련된 추가적인 정보 등은 반드시 증강 장면 서술 데이터에 따라 표현될 필요는 없다. 경우에 따라서는, 증강 콘텐츠 제공 서버(240)에 의해 증강 콘텐츠가 표현되어야 하는 정보들이 업데이트될 수도 있다. 방송 콘텐츠가 스포츠와 같은 실시간 중계 콘텐츠인 경우, 증강 콘텐츠 제공 서버는 방송 콘텐츠 제공 서버와 연동하여, 시시각각 변화하는 정보들을 증강 콘텐츠에 반영하여 표현할 수가 있다. 이러한 서비스 제공을 위해서는, 단말(100)이 증강 콘텐츠 제공 서버(240)와 통신할 수 있는 상태를 계속 유지하는 기능이 제공되어야 한다.
도 2는 본 발명의 일 실시 예에 따른 증강 방송 서비스를 수신하는 단말의 개략적인 구성 블록도이다.
도 2를 참조하면, 단말(100)은 통신부(110), 조작부(120), 메모리(130), 표시부(140) 및 제어부(150)를 포함한다.
통신부(110)는 지상파, 케이블, 인터넷 등 다양한 형태의 방송망(10)을 통해 방송 콘텐츠와 증강 방송 서비스 정보 테이블을 수신한다. 또한, 통신부(110)는 WiBro, WiFi, LTE, Ethernet 등 인터넷 서비스가 가능한 다양한 형태의 통신망(20)을 통해 증강 장면 서술 데이터 제공 서버(230) 및 증강 콘텐츠 서버(240)에 접속하여 증강 장면 서술 데이터 및 증강 콘텐츠를 수신한다.
조작부(120)는 사용자로부터 정보를 입력받을 수 있는 인터페이스로, 키보드, 마우스, 리모콘 또는 터치 스크린 등의 모든 가능한 수단이다. 도 2에서는 조작부(120) 및 표시부(140)가 분리되어 있는 것으로 도시되어 있으나, 터치 스크린과 같이 조작부(120)와 표시부(140)가 통합된 형태의 사용자 인터페이스로 구성될 수도 있다. 본 발명의 실시 예에 따라, 조작부(120)를 통해 사용자로부터 증강 콘텐츠 선택 정보가 입력될 수 있다. 또한, 증강 방송 서비스 중에 사용자로부터 이벤트 발생 신호가 입력될 수 있다. 여기서, 이벤트 발생 신호란, 증강 콘텐츠 객체를 흔들어 본다거나, 이동시킨다거나, 찔러본다거나, 어떠한 단어 또는 문장을 검색하는 등 TV를 시청하면서 할 수 있는 다양한 형태의 이벤트를 의미한다.
메모리(130)는 플래시 메모리 등으로 구현될 수 있으며, 본 발명의 실시 예에 따라, 증강 방송 서비스 정보 테이블, 증강 장면 서술 데이터 및 증강 콘텐츠를 저장한다.
표시부(140)는 정지 영상 또는 동영상 신호를 출력하는 것으로, 본 발명의 실시 예에 따라, 방송 콘텐츠에 증강 콘텐츠가 오버레이되는 형태로 화면이 구성된다.
제어부(150)는 상술한 바와 같은 단말 내부 구성 요소들을 제어하여, 방송 콘텐츠에 증강 콘텐츠가 합성된 증강 방송 서비스가 출력되도록 제어한다.
본 발명에 따라 제어부(150)는 상세하게는 방송 수신부(151), 증강 방송 서비스 데이터 획득부(152), 증강 방송 합성부(156) 및 사용자 이벤트 처리부(157)를 포함한다.
방송 수신부(151)는 방송망(10)을 통해 방송 콘텐츠 제공 서버(210)로부터 방송 콘텐츠 데이터를 수신한다. 또한, 방송 콘텐츠가 증강 방송 서비스를 제공하는 프로그램인 경우, 방송망(10)을 통해 증강 방송 서비스 제공 서버(220)로부터 증강 방송 서비스 제공 가능 정보와 함께 증강 콘텐츠를 제공하는 서버 정보 및 증강 콘텐츠를 TV 화면에 표현하기 위한 증강 장면 서술(Description) 데이터를 제공하는 서버 정보를 포함하는 증강 방송 서비스 정보 테이블을 수신한다.
증강 방송 서비스 데이터 획득부(152)는 증강 방송을 위해 필요한 증강 콘텐츠 및 증강 장면 서술 데이터를 획득하는 것으로, 상세하게는 다운로드 스케줄 관리부(153), 증강 장면 서술 데이터 획득부(154) 및 증강 콘텐츠 획득부(155)를 포함한다.
다운로드 스케줄 관리부(153)는 증강 방송 서비스 정보 테이블을 수신하면, 증강 방송 서비스 제공이 가능한 방송 콘텐츠들 각각에 대해 증강 장면 서술 데이터 및 증강 콘텐츠를 다운로드하기 위한 스케줄을 관리하는 테이블을 구성한다.
증강 콘텐츠를 단말의 화면에 표현함에 있어 다운로드 처리를 위해 시간이 소요되는데, 소요되는 시간은 증강 콘텐츠 객체의 데이터량에 비례하여 커질 수 있다. 따라서, 증강 방송 서비스 제공이 가능함을 알리는 정보, 증강 콘텐츠를 제공하는 서버 정보 및 증강 장면 서술 데이터를 제공하는 서버 정보 등은 증강 방송 서비스가 실행되는 방송 콘텐츠 프로그램이 시작되기 전에 단말(100)에 전달되어야 하고, 증강 방송 서비스를 위해 필요한 증강 장면 서술 데이터 및 증강 콘텐츠 객체들 또한 증강 방송 서비스가 실행되는 방송 프로그램이 시작되기 전 또는 해당 증강 장면이 단말의 화면에 표현되기 전에 단말(100)에 다운로드되어야 한다. 또한, 증강 방송 합성부(156)가 증강 콘텐츠 객체를 로딩하는 과정 및 증강 콘텐츠 객체를 그래픽 속성 데이터 및 애니메이션 데이터에 따라 처리하는 과정에 소요되는 시간 등을 고려하여 증강 콘텐츠 객체를 미리 로딩해야 한다.
전술한 바와 같은 점을 고려하여, 증강 콘텐츠 객체들이 증강 방송 합성부(156)로 로딩되는 시퀀스(순서) 및 타이밍 정보가 소정의 테이블 형태로서 단말(100)에 제공될 수 있다. 이 테이블은 증강 방송 서비스 정보 테이블에 포함될 수도 있고, 증강 장면 서술 데이터에 포함될 수도 있다.
다운로드 스케줄 관리부(153)는 이 테이블 정보에 따라, 증강 장면 서술 데이터 및 증강 콘텐츠를 다운로드하는 시간, 증강 콘텐츠 객체를 증강 방송 합성부(156)에 로딩하는 시간 및 증강 콘텐츠 객체를 그래픽 속성 데이터 및 애니메이션 데이터에 따라 처리하는 시간 등을 고려하여 스케줄링한다. 그리고, 증강 현실 객체들을 순차적으로 증강 방송 합성부(156)에 미리 로딩할 수 있다.
증강 장면 서술 데이터 획득부(154)는 통신망(20)을 통해 스케줄 관리부(153)에 의해 스케줄된 시간에 증강 방송 서비스 정보 테이블에 포함된 주소를 이용하여 증강 장면 서술 데이터 제공 서버(230)에 접속하여 증강 방송 서비스 제공이 가능한 방송 콘텐츠들 각각에 대한 증강 장면 서술 데이터를 다운로드한다. 본 발명의 실시 예에 따라, 증강 장면 서술 데이터 획득부(154)는 조작부(120)를 통해 사용자가 선택한 증강 장면 서술 데이터만을 다운로드한다. 증강 장면 서술 데이터 획득은 다양한 실시 예가 가능한데, 이에 대해서는 하기의 도 4a 및 도 4b를 참조하여 상세히 살펴보기로 한다.
증강 장면 서술 데이터 획득부(154)는 증강 장면 서술 데이터 제공 서버(230)와의 접속을 유지하고, 증강 장면 서술 데이터 제공 서버(230)가 제공하는 증강 장면 서술 데이터를 수시로 다운로드하거나 업데이트 할 수 있다.
증강 콘텐츠 획득부(155)는 통신망(20)을 통해 스케줄 관리부(153)에 의해 스케줄된 시간에 증강 콘텐츠 제공 서버(240)에 접속하여 증강 방송 서비스 제공이 가능한 방송 콘텐츠들 각각에 대한 증강 콘텐츠를 다운로드한다. 증강 콘텐츠 획득은 다양한 실시 예가 가능한데, 이에 대해서는 하기의 도 4a 및 도 4b를 참조하여 상세히 살펴보기로 한다.
상기 증강 방송 서비스 정보 테이블과 함께 방송 프로그램의 시작 시간 정보 및 방송 프로그램의 진행 시간 정보가 주기적으로 단말에 전달되면, 증강 콘텐츠를 효율적으로 다운로드할 수 있다. 이때, 증강 콘텐츠 데이터 획득부(155)는 조작부(120)를 통해 사용자와의 인터랙션을 통해 허가된 증강 콘텐츠만 다운로드할 수도 있고, 자동으로 우선 다운로드하고 추후에 방송 콘텐츠가 재생될 때 사용자의 동의를 얻어 증강 콘텐츠가 단말의 화면에 표현되도록 할 수도 있다. 또한, 증강 콘텐츠 데이터 획득부(155)는 증강 콘텐츠 제공 서버(240)와의 접속을 유지하고, 증강 콘텐츠 제공 서버(240)가 제공하는 증강 콘텐츠를 수시로 다운로드하거나 업데이트할 수 있다.
증강 방송 합성부(156)는 증강 방송 서비스 데이터 획득부(152)를 통해 다운로드된 증강 장면 서술 데이터에 따라 증강 현실 콘텐츠를 방송 수신부(151)에 의해 수신된 방송 콘텐츠 영상 위에 그래픽 객체 형태로 오버레이하여 표현한다. 또는, 증강 방송 합성부(156)는 증강 장면 서술 데이터에 따라 증강 콘텐츠를 방송 콘텐츠 영상과 병행하여 그래픽 객체 형태로 표현한다. 즉, 증강 방송 합성부(156)는 증강 장면 서술 데이터에 따라 TV 화면을 분할하여, 분할된 한 부분은 방송 콘텐츠를 출력하고, 분할된 또 다른 부분은 증강 콘텐츠를 출력할 수도 있다.
또한, 방송 콘텐츠의 진행 시간 또는 방송 콘텐츠의 진행 시간을 파악할 수 있는 방송 콘텐츠 영상의 프레임 시퀀스 정보가 방송 콘텐츠와 함께 지속적으로 단말에 전달되면, 증강 콘텐츠를 방송 콘텐츠와 동기화하여 표현할 수 있다.
방송 콘텐츠의 진행 시간 정보를 주기적으로 전송해야 하는 이유는 다음과 같다. 본 발명에 따른 증강 방송 서비스는 기본적으로 방송 콘텐츠의 시나리오 또는 그것을 구성하는 장면(SCENE) 및 그 장면을 구성하는 각종 요소들에 기반하여 방송 콘텐츠의 장면에 동기화된 증강 콘텐츠가 정확한 시점에 디스플레이되도록 하는 것을 목적으로 하기 때문에 정확한 시간 정보가 필요하다. 그런데, 일반적으로 방송 콘텐츠가 방송망을 통해 스트리밍될 때 사용되는 시간 정보는 방송 콘텐츠의 정확한 시작 시점이나 방송 콘텐츠의 진행 시간을 나타내는 정보가 아니기 때문에, 방송 콘텐츠 스트리밍에 사용되는 시간 정보를 이용해서 방송 콘텐츠와 증강 콘텐츠를 동기화하는 것은 거의 불가능하다. 또한 방송 콘텐츠가 스트리밍될 때 방송 콘텐츠의 시작 시점에 대한 정보만으로도 불충분한데, 이것은 사용자가 어떠한 방송 콘텐츠를 시청함에 있어 반드시 그 처음부터 시청하지는 않기 때문이다. 따라서, 주기적으로 방송 콘텐츠의 진행 정도를 나타내는 시간 정보를 전송하지 않으면 방송 콘텐츠와 증강 콘텐츠의 정확한 동기화가 이루어질 수 없다.
사용자 이벤트 처리부(157)는 사용자가 TV 화면에 표현된 증강 콘텐츠 객체에 소정의 이벤트를 가하면 그에 반응하여 증강 콘텐츠와 관련된 애니메이션을 수행거나 추가적인 정보를 출력한다. 경우에 따라서는, 증강 방송 서비스 데이터 획득부(152)와 연동되어 증강 콘텐츠와 관련된 증강 장면 서술 데이터를 다운로드할 수도 있고, 새로운 증강 콘텐츠를 다운로드할 수도 있고, 그 외에 다양한 형태의 정보를 다운로드할 수도 있다. 이 경우, 사용자 인터랙션에 관련된 프로토콜 즉, 증강 장면 서술 데이터에 증강 콘텐츠 객체가 사용자와의 인터랙션이 가능한 것인지의 여부를 나타내는 정보가 포함되어야 한다. 증강 콘텐츠 객체의 표현은 증강 장면 서술 데이터에 서술된 내용을 기본으로 하며 사용자에 의한 입력 이벤트가 발생하는 경우 이것을 인터럽트 처리 형태로 반영한다. 즉, 인터럽트 서비스 루틴을 처리하고 나면, 증강 장면 서술 데이터에 서술된 내용에 따라 객체가 표현될 수 있도록 한다.
사용자가 증강 방송 서비스를 이용하면서, 증강 콘텐츠 객체에 소정의 이벤트를 가하거나 증강 방송 서비스 및 방송 콘텐츠와 관련된 추가적인 정보를 요청할 수 있다. 이러한 이벤트 및 요청을 처리하기 위해서는 어떠한 곳에 그 처리 방법을 기술해 놓아야 한다.
사용자가 증강 콘텐츠 객체에 소정의 이벤트를 가하거나 증강 방송 서비스 및 방송 콘텐츠와 관련된 추가적인 정보를 요청하는 행위 및 이러한 사용자의 행위에 상응하는 서비스를 제공하는 행위를 증강 방송 서비스와 관련된 인터랙션(interaction)이라 할 수 있으며, 이러한 인터랙션에 관련된 예측 가능한 사용자의 행위 및 그에 상응하는 서비스 형태는 상기 증강 장면 서술 데이터에 기술될 수도 있고, 증강 콘텐츠와 연동하는 증강 콘텐츠의 애니메이션 데이터 또는 이와 유사한 형태의 서술 데이터에 기술될 수도 있다. 여기서 사용자의 행위란, 키보드, 마우스, 리모콘, 또는 기타 다양한 디바이스를 이용해 증강 콘텐츠 객체를 흔들어 본다거나, 이동시킨다거나, 찔러본다거나, 어떠한 단어 또는 문장을 검색하는 등 TV를 시청하면서 할 수 있는 다양한 형태의 것들을 의미하며, 사용자의 행위에 상응하는 서비스 형태란, 증강 콘텐츠 객체의 애니메이션을 수행한다거나, 증강 콘텐츠 객체의 상태를 변화시킨다거나, 어떠한 메시지를 출력한다거나, 어떠한 웹 페이지를 출력한다거나, 또 다른 증강 콘텐츠 객체를 다운로드하는 등 다양한 형태의 것들을 의미한다.
도 3은 본 발명의 실시 예에 따른 증강 방송 서비스 제공 방법을 설명하기 위한 신호 흐름도이다. 여기서, 방송 콘텐츠는 증강 현실 서비스가 제공되는 증강 방송 서비스에 대해서만 설명하기로 한다.
도 3을 참조하면, 310 단계에서, 방송 콘텐츠 제공 서버(210)는 방송 콘텐츠가 증강 방송 서비스를 제공하는 프로그램인 경우, 증강 방송 서비스 정보 제공 요청 메시지를 증강 방송 서비스 정보 제공 서버(220)에 전송한다.
방송 콘텐츠 제공 서버와 증강 방송 서비스 정보 제공 서버가 어떠한 동일한 시간 정보를 기준으로 정해진 스케줄에 따라 각각 방송 콘텐츠와 증강 방송 서비스 정보를 방송망을 통해 브로드캐스팅할 수도 있다. 즉, 서로 별도 요청 신호 없이 알아서 정해진 스케줄에 따라 자신이 보내야 하는 데이터를 전송할 수도 있다.
방송망에는 다중화 장치가 있다. 이 다중화 장치는 방송 콘텐츠와 증강 방송 서비스 정보를 다중화하는 역할을 한다. 다중화 장치는 방송 전송 규격인 MPEG-2 TS에 따라 해당 기능을 수행한다.
320 단계에서, 증강 방송 서비스 정보 제공 서버(220)는 증강 방송 서비스 제공이 가능함을 알리는 정보, 증강 콘텐츠 제공 서버 정보 및 증강 콘텐츠를 TV 화면에 표현하기 위한 증강 장면 서술 데이터 제공 서버 정보를 포함하는 증강 방송 서비스 정보를 단말(100)로 브로드캐스팅한다.
증강 방송 서비스가 제공되는 방송 프로그램에 대해 증강 방송 서비스 제공이 가능함을 알리는 정보, 증강 콘텐츠를 제공하는 서버 정보 및 증강 장면 서술 데이터를 제공하는 서버 정보 등은 방송 시스템에서 사용되는 PAT/PMT(Program Association Table/Program Map Table) 또는 EPG(Electronic Program Guide)처럼 테이블(이하 증강 방송 서비스 정보 테이블이라 함) 형태로 제공될 수 있다. 증강 방송 서비스 정보 테이블의 일 예는 상기 <표 1>과 같다. 이러한 증강 방송 서비스 정보 테이블이 단말(100)에 제공되면, 사용자가 증강 장면 서술 데이터 및 증강 콘텐츠를 미리 선택하는 것이 가능하며, 단말(100)은 사용자가 선택한 증강 장면 서술 데이터 및 증강 콘텐츠만을 다운로드 하는 것이 가능해진다. 즉, 사용자 선택형 증강 방송 서비스 제공이 가능하다. 이러한 증강 방송 서비스 정보 테이블은 방송 콘텐츠와 다중화되어 전송될 수 있다. 또한, 증강 방송 서비스 정보 테이블은 주기적으로 반복되어 전송될 수 있다.
330 단계에서, 단말(100)은 다운로드 스케줄을 구성한다.
340 단계에서, 단말(100)은 증강 장면 서술 데이터 제공 서버(230)에 접속하여 사용자가 선택한 증강 장면 서술 데이터를 획득한다. 증강 장면 서술 데이터 제공 서버 정보는 단말이 다운로드해야 하는 증강 장면 서술 데이터 리스트(또는 파일명) 및 단말이 증강 장면 서술 데이터를 다운로드하기 위해 접속해야 하는 서버 정보 즉, 서버의 주소를 포함한다. 이에 대해서는 하기의 도 4a 및 도 4b를 참조하여 상세히 설명하기로 한다.
350 단계에서, 단말(100)은 증강 콘텐츠 제공 서버(240)에 접속하여 사용자가 선택한 증강 콘텐츠를 획득한다. 이에 대해서는 하기의 도 5a 및 도 5b를 참조하여 상세히 설명하기로 한다.
360 단계에서, 단말(100)은 수신된 증강 콘텐츠 및 증강 장면 서술 데이터를 메모리에 저장한다.
전술한 바와 같이 증강 장면 서술 데이터 및 증강 콘텐츠가 미리 획득되면, 370 단계에서 증강 방송 서비스가 제공된다.
이때, 방송 콘텐츠 제공 서버(210)는 단말(100)로 방송 콘텐츠를 브로드캐스팅하고, 단말(100)은 방송 콘텐츠에 증강 콘텐츠를 오버레이시켜 출력한다.
증강 콘텐츠는 2차원적인 이미지, 3차원적인 그래픽 객체, 영상, 웹 페이지, 플래시 애니메이션 등 다양한 형태로 나타날 수 있다. 증강 콘텐츠는 단말의 그래픽 처리과정을 통해 그래픽 객체 형태로 방송 콘텐츠 영상 위에 오버레이되어 표현될 수 있다. 또한, TV 화면이 몇 개의 영역으로 나누어져서, 방송 콘텐츠 영상이 어떠한 영역에 적당한 크기로 줄어들고, 이와 병행하여, 증강 콘텐츠는 다른 영역에 적당한 크기로 표현될 수도 있다. 상기 몇 가지 과정에서, 방송 콘텐츠 영상과 증강 콘텐츠 객체가 하나의 완벽한 이미지로서 합성되어 단말의 화면에 출력되기 전에는, 증강 콘텐츠 객체를 단말의 그래픽 처리장치 및 사용자 인터페이스 처리장치를 통해 독립적으로 접근하여 그 속성을 변경하거나 소정의 명령 신호를 가하여 어떠한 동작이 실행되도록 할 수 있다. 따라서, 증강 콘텐츠 객체는 사용자가 그것을 이동시키거나, 그것의 크기를 재조정하거나, 그것에 어떠한 명령 신호를 가하면 그에 따라 동작하는 것이 가능하도록 제작될 필요가 있다. 또한, 증강 콘텐츠 객체는 사용자의 입력에 반응하여 메시지나 광고와 같은 추가적인 정보를 표현하도록 제작될 수도 있고 방송 콘텐츠와 관련된 추가적인 정보를 표현하도록 제작될 수도 있다.
또한, 도면에는 도시되어 있지 않지만, 전술한 바와 같이 증강 방송 서비스를 제공하는 중에 사용자로부터 입력되는 이벤트가 발생될 수 있다. 단말(100)은 사용자 이벤트를 처리한다.
또한, 증강 장면 서술 데이터의 업데이트는 방송 콘텐츠의 내용에 연동되어 수행될 수 있다. 즉, 방송 콘텐츠가 실시간 콘텐츠인 경우, 시시각각 변하는 상황에 따라 증강 장면 서술 데이터가 생성되고, 이 데이터가 수시로 업데이트되는 형태로 단말에 전달될 수 있다.
도 4a는 본 발명의 증강 장면 서술 데이터 획득 과정의 일 실시 예를 설명하기 위한 신호 흐름도이다.
도 4a를 참조하면, 341 단계에서, 단말(100)은 증강 장면 서술 데이터 서버 정보로 증강 장면 서술 데이터를 다운로드 하기 위해 접속해야 하는 서버의 주소만 수신한다.
342 단계에서, 단말(100)은 수신된 주소를 갖는 증강 장면 서술 데이터 제공 서버(230)에 접속한다.
343 단계에서, 증강 장면 서술 데이터 제공 서버(230)는 증강 장면 서술 데이터를 선택할 수 있는 웹 페이지를 단말(100)에 전송한다. 이때, 단말(100)로부터 방송 프로그램 ID와 같이 방송 콘텐츠 프로그램을 식별할 수 있는 정보가 증강 장면 서술 데이터 제공 서버(230)에 전달되는 경우에는, 사용자가 그 방송 콘텐츠 프로그램에 관련된 증강 장면 서술 데이터만을 선택할 수 있도록 하는 웹 페이지 형태의 데이터를 단말(100)에 제공할 수도 있다.
344 단계에서, 단말(100)은 상기 웹페이지 화면을 디스플레이하고, 사용자가 원하는 증강 장면 서술 데이터에 대한 선택 정보를 입력받는다.
345 단계에서, 단말(100)은 사용자에 의해 선택된 증강 장면 서술 데이터를 증강 장면 서술 데이터 제공 서버(230)에 요청한다.
346 단계에서, 증강 장면 서술 데이터 제공 서버(230)는 요청된 증강 장면 서술 데이터를 해당 단말(100)에 전송한다.
도 4b는 본 발명의 증강 장면 서술 데이터 획득 과정의 다른 실시 예를 설명하기 위한 신호 흐름도이다.
도 4b를 참조하면, 347 단계에서, 단말(100)은 증강 장면 서술 데이터 서버 정보로 증강 장면 서술 데이터를 다운로드하기 위해 접속해야 하는 서버의 주소 및 해당되는 증강 장면 서술 데이터 파일명을 수신한다.
348 단계에서, 단말(100)은 증강 장면 서술 데이터 서버 정보에 지정된 증강 장면 서술 데이터 파일을 증강 장면 서술 데이터 제공 서버(230)에 요청한다.
그러면, 349 단계에서 증강 장면 서술 데이터 제공 서버(230)는 단말(100)로 요청한 증강 장면 서술 데이터 파일을 전송한다.
도 5a는 본 발명의 증강 콘텐츠 획득 과정의 일 실시 예를 설명하기 위한 신호 흐름도이다.
도 5a를 참조하면, 351 단계에서, 단말(100)은 증강 콘텐츠 제공 서버 정보로 증강 콘텐츠를 다운로드 하기 위해 접속해야 하는 서버의 주소만 수신한다.
352 단계에서, 단말(100)은 수신된 주소를 갖는 증강 콘텐츠 제공 서버(240)에 접속한다.
353 단계에서, 증강 콘텐츠 제공 서버(240)는 증강 콘텐츠를 선택할 수 있는 웹 페이지를 단말(100)에 전송한다. 이때, 단말(100)로부터 방송 프로그램 ID와 같이 방송 콘텐츠 프로그램을 식별할 수 있는 정보가 증강 콘텐츠 제공 서버(240)에 전달되는 경우에는, 사용자가 그 방송 콘텐츠 프로그램에 관련된 증강 콘텐츠를 선택할 수 있도록 하는 웹 페이지 형태의 데이터를 단말(100)에 제공할 수도 있다.
354 단계에서, 단말(100)은 상기 웹페이지 화면을 디스플레이하고, 사용자가 원하는 증강 콘텐츠에 대한 선택 정보를 입력받는다.
355 단계에서, 단말(100)은 사용자에 의해 선택된 증강 콘텐츠를 증강 콘텐츠 제공 서버(240)에 요청한다.
356 단계에서, 증강 콘텐츠 제공 서버(240)는 요청된 증강 콘텐츠를 해당 단말(100)에 전송한다.
도 5b는 본 발명의 증강 콘텐츠 데이터 획득 과정의 다른 실시 예를 설명하기 위한 신호 흐름도이다.
도 5b를 참조하면, 357 단계에서, 단말(100)은 증강 콘텐츠 서버 정보로 증강 콘텐츠를 다운로드하기 위해 접속해야 하는 서버의 주소 및 해당되는 증강 콘텐츠 파일명을 수신한다.
358 단계에서, 단말(100)은 증강 콘텐츠 서버 정보에 지정된 증강 콘텐츠 파일을 증강 콘텐츠 제공 서버(240)에 요청한다.
그러면, 359 단계에서 증강 콘텐츠 제공 서버(240)는 단말(100)로 요청한 증강 콘텐츠 파일을 전송한다.

Claims (20)

  1. 단말에서의 증강 방송 서비스 제공 방법에 있어서,
    증강 방송 서비스 제공이 가능함을 알리는 정보, 증강 콘텐츠 제공 서버 정보 및 증강 콘텐츠를 TV 화면에 표현하기 위한 증강 장면 서술 데이터 제공 서버 정보를 포함하는 증강 방송 서비스 정보를 수신하는 단계와,
    사용자가 선택한 증강 장면 서술 데이터 및 증강 콘텐츠를 상기 증강 콘텐츠 제공 서버 및 증강 서술 데이터 서버로부터 획득하는 단계와,
    상기 증강 장면 서술 데이터에 따라 방송 콘텐츠에 상기 증강 콘텐츠를 오버레이시켜 출력하는 단계를 포함함을 특징으로 하는 증강 방송 서비스 제공 방법.
  2. 제 1항에 있어서, 상기 획득하는 단계는
    상기 증강 장면 서술 데이터 및 증강 콘텐츠를 획득하기 위한 다운로드 스케줄을 구성하는 단계를 포함함을 특징으로 하는 증강 방송 서비스 제공 방법.
  3. 제 1항에 있어서,
    상기 증강 방송 서비스를 제공하는 중에 사용자로부터 입력되는 이벤트가 발생될 경우, 사용자 이벤트를 처리하는 단계를 더 포함함을 특징으로 하는 증강 방송 서비스 제공 방법.
  4. 방송망을 통해 증강 방송 서비스 제공이 가능함을 알리는 정보, 증강 콘텐츠 제공 서버 정보 및 증강 콘텐츠를 TV 화면에 표현하기 위한 증강 장면 서술 데이터 제공 서버 정보를 포함하는 증강 방송 서비스 정보와 방송 콘텐츠를 수신하는 방송 수신부와,
    상기 방송 수신부에 의해 수신된 증강 방송 서비스 정보에 따라, 상기 유/무선 통신망을 통해 증강 장면 서술 데이터 및 증강 콘텐츠를 상기 증강 콘텐츠 제공 서버 및 증강 서술 데이터 서버로부터 획득하는 증강 방송 서비스 데이터 획득부와,
    상기 증강 방송 서비스 데이터 획득부에 의해 획득된 증강 장면 서술 데이터에 따라 상기 방송 수신부에 의해 수신된 방송 콘텐츠에 상기 증강 콘텐츠를 오버레이시켜 출력하는 증강 방송 합성부를 포함함을 특징으로 하는 증강 방송 서비스 제공 단말 장치.
  5. 제 4항에 있어서, 상기 증강 방송 서비스 데이터 획득부는
    다운로드 스케줄을 구성하는 다운로드 스케줄 관리부와,
    상기 다운로드 스케줄 관리부에 의해 스케줄링된 시간에 상기 증강 장면 서술 데이터를 획득하는 증강 장면 서술 데이터 획득부와,
    상기 다운로드 스케줄 관리부에 의해 스케줄링된 시간에 증강 콘텐츠를 획득하는 증강 콘텐츠 획득부를 포함함을 특징으로 하는 증강 방송 서비스 제공 단말 장치.
  6. 제 4항에 있어서, 상기 증강 방송 서비스 데이터 획득부는
    상기 방송 콘텐츠가 실시간 콘텐츠인 경우, 수시로 상기 증강 장면 서술 데이터 및 증강 콘텐츠를 업데이트함을 특징으로 하는 증강 방송 서비스 제공 단말 장치.
  7. 증강 방송 서비스 제공 방법에 있어서,
    상기 방송 콘텐츠 제공 서버에서 제공되는 방송 콘텐츠가 증강 방송 서비스를 제공하는 프로그램인 경우, 증강 방송 서비스 정보 제공 서버가 증강 방송 서비스 제공이 가능함을 알리는 정보, 증강 콘텐츠 제공 서버 정보 및 증강 콘텐츠를 TV 화면에 표현하기 위한 증강 장면 서술 데이터 제공 서버 정보를 포함하는 증강 방송 서비스 정보를 하나 이상의 단말로 전송하는 단계와,
    증강 콘텐츠 제공 서버가 상기 단말이 접속됨에 따라, 증강 콘텐츠를 제공하는 단계와,
    증강 장면 서술 데이터 제공 서버가 상기 단말이 접속됨에 따라, 증강 장면 서술 데이터를 제공하는 단계를 포함함을 특징으로 하는 증강 방송 서비스 제공 방법.
  8. 제 7항에 있어서, 상기 증강 방송 서비스 정보는
    PAT/PMT(Program Association Table/Program Map Table) 또는 EPG(Electronic Program Guide)를 포함하는 테이블 형태로 제공됨을 특징으로 하는 증강 방송 서비스 제공 방법.
  9. 제 7항에 있어서, 상기 증강 방송 서비스 정보는
    주기적으로 반복되어 전송됨을 특징으로 하는 증강 방송 서비스 제공 방법.
  10. 제 7항에 있어서, 상기 증강 장면 서술 데이터를 제공하는 단계는
    상기 증강 장면 서술 데이터 서버 정보로 증강 장면 서술 데이터를 다운로드하기 위해 접속해야 하는 서버의 주소만을 수신한 단말의 접속에 따라,
    증강 장면 서술 데이터를 선택할 수 있는 웹 페이지를 상기 단말의 화면에 디스플레이하는 단계와,
    사용자가 원하는 증강 장면 서술 데이터를 선택 정보를 입력받는 단계와,
    사용자에 의해 선택된 증강 장면 서술 데이터를 제공하는 단계를 포함함을 특징으로 하는 증강 방송 서비스 제공 방법.
  11. 제 7항에 있어서, 상기 증강 장면 서술 데이터를 제공하는 단계는
    상기 증강 장면 서술 데이터 서버 정보로 증강 장면 서술 데이터를 다운로드 하기 위해 접속해야 하는 서버의 주소 및 해당되는 증강 장면 서술 데이터 파일명을 수신한 단말로부터 지정된 증강 장면 서술 데이터 파일을 요청받는 단계와,
    상기 지정된 증강 장면 서술 데이터 파일을 해당 단말에 전송하는 단계를 포함함을 특징으로 하는 증강 방송 서비스 제공 방법.
  12. 제 7항에 있어서, 상기 증강 콘텐츠를 제공하는 단계는
    상기 증강 콘텐츠 제공 서버 정보로 증강 콘텐츠를 다운로드하기 위해 접속해야 하는 서버의 주소를 수신한 단말의 접속에 따라 증강 콘텐츠를 선택할 수 있는 웹 페이지를 화면에 디스플레이하는 단계와,
    사용자가 원하는 증강 콘텐츠를 선택 정보를 입력받는 단계와,
    사용자에 의해 선택된 증강 콘텐츠를 해당 단말에 제공하는 단계를 포함함을 특징으로 하는 증강 방송 서비스 제공 방법.
  13. 제 7항에 있어서, 상기 증강 콘텐츠를 제공하는 단계는
    상기 증강 콘텐츠 서버 정보로 증강 콘텐츠를 다운로드 하기 위해 접속해야 하는 서버의 주소 및 해당되는 증강 콘텐츠 파일명을 수신한 단말로부터 지정된 증강 콘텐츠 파일이 요청되는 단계와,
    상기 증강 콘텐츠 제공 서버로부터 단말이 지정한 증강 콘텐츠 파일을 해당 단말로 전송하는 단계를 포함함을 특징으로 하는 증강 방송 서비스 제공 방법.
  14. 증강 방송 콘텐츠 시스템에 있어서,
    방송 콘텐츠 제공 서버와,
    상기 방송 콘텐츠 제공 서버에서 제공되는 방송 콘텐츠가 증강 방송 서비스를 제공하는 프로그램인 경우, 증강 방송 서비스 제공이 가능함을 알리는 정보, 증강 콘텐츠 제공 서버 정보 및 증강 콘텐츠를 TV 화면에 표현하기 위한 증강 장면 서술 데이터 제공 서버 정보를 포함하는 증강 방송 서비스 정보를 하나 이상의 단말로 전송하는 증강 방송 서비스 정보 제공 서버와,
    상기 단말이 접속됨에 따라, 증강 콘텐츠를 제공하는 증강 콘텐츠 제공 서버와,
    상기 단말이 접속됨에 따라, 증강 장면 서술 데이터를 제공하는 증강 장면 서술 데이터 제공 서버를 포함함을 특징으로 하는 증강 방송 서비스 제공 시스템.
  15. 제 14항에 있어서, 상기 증강 장면 서술 데이터 제공 서버는
    상기 단말이 접속됨에 따라, 증강 장면 서술 데이터를 선택할 수 있는 웹 페이지를 상기 단말의 화면에 디스플레이하고, 사용자에 의해 선택된 증강 장면 서술 데이터를 제공함을 특징으로 하는 증강 방송 서비스 제공 시스템.
  16. 제 15항에 있어서, 상기 증강 장면 서술 데이터 제공 서버는
    상기 단말로부터 방송 콘텐츠 프로그램을 식별할 수 있는 정보가 수신될 경우, 그 방송 콘텐츠 프로그램에 관련된 증강 장면 서술 데이터만을 선택할 수 있도록 하는 웹 페이지 화면을 디스플레이함을 특징으로 하는 증강 방송 서비스 제공 시스템.
  17. 제 14항에 있어서, 상기 증강 장면 서술 데이터 제공 서버는
    상기 단말이 접속하여 요청한 증강 장면 서술 데이터 파일을 해당 단말에 전송함을 특징으로 하는 증강 방송 서비스 제공 시스템.
  18. 제 14항에 있어서, 상기 증강 콘텐츠 제공 서버는
    상기 단말의 접속에 따라, 증강 콘텐츠를 선택할 수 있는 웹 페이지를 화면에 디스플레이하고, 사용자에 의해 선택된 증강 콘텐츠를 해당 단말에 제공함을 특징으로 하는 증강 방송 서비스 제공 시스템.
  19. 제 18항에 있어서, 상기 증강 콘텐츠 제공 서버는
    상기 접속된 단말로부터 방송 콘텐츠 프로그램을 식별할 수 있는 정보가 전달됨에 따라, 사용자가 그 방송 콘텐츠 프로그램에 관련된 증강 콘텐츠만을 선택할 수 있도록 하는 웹 페이지 화면을 상기 단말에 디스플레이함을 특징으로 하는 증강 방송 서비스 제공 시스템.
  20. 제 19항에 있어서, 상기 증강 콘텐츠 제공 서버는
    접속한 단말로부터 지정된 증강 콘텐츠 파일이 요청됨에 따라, 상기 단말이 지정한 증강 콘텐츠 파일을 해당 단말로 전송함을 특징으로 하는 증강 방송 서비스 제공 시스템.
KR1020120091900A 2012-08-22 2012-08-22 증강 방송 서비스 제공 장치 및 방법 KR101955723B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020120091900A KR101955723B1 (ko) 2012-08-22 2012-08-22 증강 방송 서비스 제공 장치 및 방법
US13/874,317 US8797357B2 (en) 2012-08-22 2013-04-30 Terminal, system and method for providing augmented broadcasting service using augmented scene description data

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120091900A KR101955723B1 (ko) 2012-08-22 2012-08-22 증강 방송 서비스 제공 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20140025787A true KR20140025787A (ko) 2014-03-05
KR101955723B1 KR101955723B1 (ko) 2019-03-07

Family

ID=50149219

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120091900A KR101955723B1 (ko) 2012-08-22 2012-08-22 증강 방송 서비스 제공 장치 및 방법

Country Status (2)

Country Link
US (1) US8797357B2 (ko)
KR (1) KR101955723B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150120800A (ko) * 2014-04-18 2015-10-28 한국전자통신연구원 증강방송 서비스를 위한 방송 사업자 장치, 콘텐츠 사업자 장치, 수신 단말 및 증강방송 서비스 방법
KR101992477B1 (ko) * 2018-11-08 2019-06-24 넷마블 주식회사 증강 현실 영상 제공 방법 및 장치

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9426506B2 (en) * 2012-08-22 2016-08-23 University-Industry Cooperation Group Of Kyung Hee University Apparatuses for providing and receiving augmented broadcasting service in hybrid broadcasting environment
US10127263B2 (en) * 2013-05-30 2018-11-13 Qualcomm Incorporated Full file repair using schedule description fragment in eMBMS
US9646421B2 (en) 2015-04-14 2017-05-09 International Business Machines Corporation Synchronizing an augmented reality video stream with a displayed video stream
KR101850482B1 (ko) * 2016-10-27 2018-04-19 주식회사 씨제이헬로 방송 연동형 증강현실 서비스 시스템 및 방법
EP3410353A1 (en) 2017-06-01 2018-12-05 eyecandylab Corp. Method for estimating a timestamp in a video stream and method of augmenting a video stream with information
US11082679B1 (en) 2021-01-12 2021-08-03 Iamchillpill Llc. Synchronizing secondary audiovisual content based on frame transitions in streaming content
US11943227B2 (en) 2021-09-17 2024-03-26 Bank Of America Corporation Data access control for augmented reality devices

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060064716A1 (en) * 2000-07-24 2006-03-23 Vivcom, Inc. Techniques for navigating multiple video streams
JP2008092557A (ja) * 2006-08-11 2008-04-17 Seac02 Srl デジタル拡張された現実システム
KR20090044702A (ko) * 2007-11-01 2009-05-07 광주과학기술원 증강현실을 이용한 제품정보 제공 시스템 및 그 제공방법
US20090234947A1 (en) * 2004-09-23 2009-09-17 Decasper Dan S Advanced content and data distribution techniques

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8565740B2 (en) * 2008-05-08 2013-10-22 Blackberry Limited System and method for providing streaming data to a mobile device
KR100941749B1 (ko) 2008-08-25 2010-02-11 에이알비전 (주) 증강 현실 장치 및 가상 이미지 합성 방법
KR101018781B1 (ko) 2010-06-08 2011-03-03 주식회사 온미디어 증강 현실을 이용하여 부가 컨텐츠를 제공하는 방법 및 그 시스템
US9727128B2 (en) * 2010-09-02 2017-08-08 Nokia Technologies Oy Methods, apparatuses, and computer program products for enhancing activation of an augmented reality mode
KR101141059B1 (ko) * 2010-10-01 2012-05-03 한국철도기술연구원 증강현실을 이용한 통행정보 제공 시스템
US9197763B2 (en) * 2010-11-05 2015-11-24 Josh Baker Overlaying data in an augmented reality user interface
US8671433B2 (en) * 2010-11-19 2014-03-11 Media Patents, S.L. Methods, apparatus and systems for delivering and receiving data
KR101719264B1 (ko) * 2010-12-23 2017-03-23 한국전자통신연구원 방송 기반 증강 현실 콘텐츠 제공 시스템 및 그 제공 방법
CN103210360B (zh) * 2011-02-25 2016-05-04 英派尔科技开发有限公司 用于增强现实演出的方法、设备和系统
KR20130000160A (ko) * 2011-06-22 2013-01-02 광주과학기술원 사용자 적응형 증강현실 이동통신 장치와 서버 및 그 방법
US20140063061A1 (en) * 2011-08-26 2014-03-06 Reincloud Corporation Determining a position of an item in a virtual augmented space
US20130249948A1 (en) * 2011-08-26 2013-09-26 Reincloud Corporation Providing interactive travel content at a display device
US20130063487A1 (en) * 2011-09-12 2013-03-14 MyChic Systems Ltd. Method and system of using augmented reality for applications
US20130076788A1 (en) * 2011-09-26 2013-03-28 Eyeducation A. Y. Ltd Apparatus, method and software products for dynamic content management
US9672659B2 (en) * 2011-12-27 2017-06-06 Here Global B.V. Geometrically and semanitically aware proxy for content placement
US20130260360A1 (en) * 2012-03-27 2013-10-03 Sony Corporation Method and system of providing interactive information
WO2013157890A1 (en) * 2012-04-20 2013-10-24 Samsung Electronics Co., Ltd. Method and apparatus of processing data to support augmented reality
US20140015826A1 (en) * 2012-07-13 2014-01-16 Nokia Corporation Method and apparatus for synchronizing an image with a rendered overlay

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060064716A1 (en) * 2000-07-24 2006-03-23 Vivcom, Inc. Techniques for navigating multiple video streams
US20090234947A1 (en) * 2004-09-23 2009-09-17 Decasper Dan S Advanced content and data distribution techniques
JP2008092557A (ja) * 2006-08-11 2008-04-17 Seac02 Srl デジタル拡張された現実システム
KR20090044702A (ko) * 2007-11-01 2009-05-07 광주과학기술원 증강현실을 이용한 제품정보 제공 시스템 및 그 제공방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150120800A (ko) * 2014-04-18 2015-10-28 한국전자통신연구원 증강방송 서비스를 위한 방송 사업자 장치, 콘텐츠 사업자 장치, 수신 단말 및 증강방송 서비스 방법
KR101992477B1 (ko) * 2018-11-08 2019-06-24 넷마블 주식회사 증강 현실 영상 제공 방법 및 장치

Also Published As

Publication number Publication date
KR101955723B1 (ko) 2019-03-07
US8797357B2 (en) 2014-08-05
US20140059604A1 (en) 2014-02-27

Similar Documents

Publication Publication Date Title
KR101955723B1 (ko) 증강 방송 서비스 제공 장치 및 방법
US11025982B2 (en) System and method for synchronizing content and data for customized display
CA2809311C (en) Information processing device, information processing method, and program
CA2963765C (en) Receiving device, transmitting device, and data processing method
US9106962B2 (en) Content playback device, content playback method, content playback program, and content providing system
US20040098753A1 (en) Video combiner
WO2016150388A1 (zh) 界面处理方法、装置及系统
US10484735B2 (en) Method and system for synchronizing media streams
KR102030983B1 (ko) 분할 영상 기반의 라이브 스트리밍 서비스 운용 방법 및 이를 지원하는 전자 장치
CN105100906A (zh) 一种播放控制方法和设备
Ohmata et al. Hybridcast: A new media experience by integration of broadcasting and broadband
CN103116482B (zh) 基于拼接墙的图片播放方法及装置
US8893176B2 (en) Method and apparatus for receiving augmented broadcasting content, method and apparatus for providing augmented content, and system for providing augmented content
KR20130050464A (ko) 증강 콘텐츠 생성 장치 및 방법, 증강 방송 송신 장치 및 방법, 및 증강 방송 수신 장치 및 방법
Kim et al. Design and implementation for interactive augmented broadcasting system
US20180324480A1 (en) Client and Method for Playing a Sequence of Video Streams, and Corresponding Server and Computer Program Product
KR102491466B1 (ko) 수신 장치, 송신 장치, 및 데이터 처리 방법
KR101587442B1 (ko) 타겟팅 증강 콘텐츠 제공 시스템, 증강 콘텐츠 제공 방법 및 장치, 증강 콘텐츠 등록 방법 및 장치
CN105681834A (zh) 显示装置及显示频道列表方法、服务器及控制方法
KR102533674B1 (ko) 수신 장치, 송신 장치 및 데이터 처리 방법
CN113891162A (zh) 直播间加载方法、装置及计算机设备
US10972205B2 (en) Reception apparatus, transmission apparatus, and data processing method
CN114731463A (zh) 数据处理设备及其控制方法和程序
KR101398995B1 (ko) 방송 서비스 제어 장치 및 방법과 그 방법을 실행하기 위한 프로그램이 기록된 기록 매체
CN112601121B (zh) 一种面向多媒体内容组件个性化呈现的方法及系统

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right