KR20100050208A - 셋탑박스를 이용한 방송컨텐츠의 상세정보 전송시스템 및 그 방법 - Google Patents

셋탑박스를 이용한 방송컨텐츠의 상세정보 전송시스템 및 그 방법 Download PDF

Info

Publication number
KR20100050208A
KR20100050208A KR1020080109387A KR20080109387A KR20100050208A KR 20100050208 A KR20100050208 A KR 20100050208A KR 1020080109387 A KR1020080109387 A KR 1020080109387A KR 20080109387 A KR20080109387 A KR 20080109387A KR 20100050208 A KR20100050208 A KR 20100050208A
Authority
KR
South Korea
Prior art keywords
detailed information
top box
specific object
iptv
broadcast content
Prior art date
Application number
KR1020080109387A
Other languages
English (en)
Other versions
KR101370315B1 (ko
Inventor
유응재
심선호
김경태
Original Assignee
에스케이텔레콤 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이텔레콤 주식회사 filed Critical 에스케이텔레콤 주식회사
Priority to KR1020080109387A priority Critical patent/KR101370315B1/ko
Publication of KR20100050208A publication Critical patent/KR20100050208A/ko
Application granted granted Critical
Publication of KR101370315B1 publication Critical patent/KR101370315B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/73Querying
    • G06F16/732Query formulation
    • G06F16/7335Graphical querying, e.g. query-by-region, query-by-sketch, query-by-trajectory, GUIs for designating a person/face/object as a query predicate
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23412Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs for generating or manipulating the scene composition of objects, e.g. MPEG-4 objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4126The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43637Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Theoretical Computer Science (AREA)
  • Mathematical Physics (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명은 셋탑박스를 이용항 방송컨텐츠의 상세정보 전송시스템 및 그 방법에 관한 것이다.
본 발명은, 셋탑박스가 컨텐츠서버로부터 방송컨텐츠 및 상기 방송컨텐츠에 포함된 다수의 특정객체의 상세정보를 수신한다. 셋탑박스는 수신된 방송컨텐츠를 IPTV로 실시간 전송하며, IPTV를 통해 수신된 방송컨텐츠를 디스플레이하는 임의의 시점에서 상기 특정객체의 선택신호가 셋탑박스로 입력되면, 선택신호에 해당하는 특정객체의 상세정보를 추출한다. 이후, 셋탑박스가 수신한 특정객체의 상세정보를 근거리무선통신을 이용하여 무선단말로 전송한다.
이에 의해, 사용자는 방송컨텐츠 수신에 의해 방송을 IPTV로 시청하는 중간에, 방송컨텐츠에 포함된 특정객체에 대한 상세정보를 열람하고 싶을 경우 별도의 단말로 실시간으로 전송 받을 수 있다.
컨텐츠, 멀티, 스크린, 무선

Description

셋탑박스를 이용한 방송컨텐츠의 상세정보 전송시스템 및 그 방법{Transmission System for Providing URL Information of Broadcasting Contents using Settop-box and Method Thereof}
본 발명은 컨텐츠 전송 서비스에 관한 것으로, 구체적으로는 방송컨텐츠에 포함된 특정객체에 대한 URL 정보를 다른 스크린으로 전송하기 위한 셋탑박스를 이용한 방송컨텐츠의 상세정보 전송시스템 및 그 방법에 관한 것이다.
최근의 디지털 TV 시스템은 양방향 또는 대화식(Interactive) TV 방송으로서, 기존의 아날로그 방송과 달리 추가적인 정보를 제공하는데 유용하다.
이런 디지털 방송은 방송국에서 찍은 비디오와 오디오에 CP(Contents Provider)들이 제공하는 컨텐츠들을 MPEG2-TS(Transport Stream) 포맷으로 함께 묶어서 방송하며, 사용자(시청자)들은 셋탑박스(Set Top Box: STB)에서 그 방송을 수신하여 디지털 TV 화면을 통해 시청하게 된다.
한편, 데이터 방송이란 문서, 정지화상, 그래픽, 오디오, 비디오 및 소프트웨어 제품을 PC, 셋탑박스 또는 이동통신 기기와 같은 정보처리 장치에 고속으로 전송 및 방송할 수 있는 기술적 개념으로서, 방송망을 통하여 방송 프로그램과 함 께 프로그램 관련 정보, 날씨, 증권, 뉴스 정보는 물론 인터넷, 전자상거래까지도 가능하게 한다.
이러한 데이터 방송은 방송 전파에 디지털 신호를 실어서 전송하면, 수신장치가 데이터를 자동으로 해독 및 처리하여, 그 결과를 수신자가 직접 받아보거나 또는 그 정보에 의해 다른 기계장치 등을 제어하는 특성을 가진 새로운 분야의 방송을 말한다. 이와 같은 데이터 방송의 신호는 디지털 전송으로 오디오와 비디오 신호를 디지털 전송하는 디지털 방송과도 공통점을 가진다.
데이터 방송은 라디오, 텔레비전 방송에 데이터 신호를 다중화하여 전송하는 방식이 대부분이지만, 이들 방송에 관련되는 내용을 디지털 신호로 전송하는 데이터 방송과 별도의 독립된 정보를 전송하는 데이터 방송도 있다. 이러한 데이터 방송은 텔레비전 전파를 활용한 무선 전달 시스템이라는 장점과 인터넷의 양방향 기능이 결합된 멀티미디어형 정보 서비스라고 할 수 있다.
최근에는 텔레비전 방송 데이터를 포함하는 컨텐츠가 디지털 TV로 전송될 경우 TV와 연계하여 다른 무선디바이스(Device)들로 방송컨텐츠의 특정객체에 대한 상세정보를 데이터방송과 무관하게 시청하기 위한 기술개발이 요구되고 있다.
상기한 문제점을 개선하기 위해 안출된 본 발명의 기술적 과제는 사용자가 방송을 시청하는 중간에, 방송객체에 포함된 특정객체에 대한 상세정보를 열람을 원할 경우 별도의 무선단말로 실시간으로 전송 받을 수 있는 것을 목적으로 한다.
그러나 본 발명의 목적들은 상기에 언급된 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
본 발명의 실시예에 따른 셋탑박스를 이용한 방송컨텐츠의 상세정보 전송 방법은, 셋탑박스가 컨텐츠서버로부터 방송컨텐츠 및 상기 방송컨텐츠에 포함된 다수의 특정객체의 상세정보를 수신하고, 상기 방송컨텐츠를 IPTV로 전송하는 전송단계; 상기 셋탑박스가 상기 IPTV로부터 상기 특정객체의 선택신호를 수신하면, 상기 셋탑박스는 상기 다수의 특정객체의 상세정보에서 상기 선택신호에 해당하는 선택된 상기 특정객체의 상세정보를 추출하는 추출단계; 및 상기 셋탑박스가 상기 선택된 특정객체의 상세정보를 무선단말로 전송하여 표시하도록 하는 표시단계; 를 포함할 수 있다.
상기 추출단계는, 상기 셋탑박스가 상기 IPTV를 통해 상기 수신된 방송컨텐츠를 디스플레이하는 임의의 시점에서 상기 선택신호를 수신할 수 있다.
상기 표시단계는, 상기 셋탑박스가 상기 선택된 특정객체의 상세정보를 근거 리무선통신을 이용해 상기 무선단말로 전송하여 표시하도록 할 수 있다.
본 발명의 실시예에 따른 셋탑박스를 이용한 방송컨텐츠의 상세정보 전송 시스템은, 컨텐츠서버로부터 방송컨텐츠 및 상기 방송컨텐츠에 포함된 다수의 특정객체의 상세정보를 수신하여 상기 방송컨텐츠를 IPTV로 전송하며, 상기 IPTV를 통해 상기 수신된 방송컨텐츠를 디스플레이하는 임의의 시점에서 상기 선택신호가 입력되면 상기 다수의 특정객체의 상세정보에서 상기 선택신호에 따른 선택된 상기 특정객체의 상세정보를 추출하여 무선단말로 전송하는 셋탑박스; 및 상기 선택된 특정객체의 상세정보를 근거리무선통신을 이용해 수신하여 표시하는 상기 무선단말; 을 포함할 수 있다.
본 발명의 실시예에 따른 무선단말은, 컨텐츠서버로부터 방송컨텐츠 및 상기 방송컨텐츠에 포함된 다수의 특정객체의 상세정보를 수신하는 셋탑박스와 근거리무선통신을 수행하는 제1 근거리무선통신부; 상기 제1 근거리무선통신부를 통해 수신한 데이터를 표시하기 위한 디스플레이장치; 및 상기 셋탑박스로부터 상기 다수의 특정객체의 상세정보 중 IPTV에 의해 선택된 상기 특정객체의 상세정보를 수신하도록 상기 제1 근거리무선통신부를 제어하며, 상기 선택된 특정객체의 상세정보를 상기 디스플레이장치를 통해 표시하도록 제어하는 제1 제어부; 를 포함할 수 있다.
상기 무선단말은, 상기 셋탑박스로부터 상기 제1 근거리무선통신부를 통해 수신한 상기 선택된 특정객체의 상세정보를 저장하는 제1 데이터베이스부; 를 더 포함할 수 있다.
본 발명의 실시 예에 따른 셋탑박스는, 유선통신을 수행하는 제2 송수신부; 컨텐츠서버로부터 방송컨텐츠 및 상기 방송컨텐츠에 포함된 다수의 특정객체의 상세정보를 수신하여 상기 방송컨텐츠를 IPTV로 전송하도록 상기 제2 송수신부를 제어하며, 상기 IPTV로부터 상기 특정객체의 선택신호를 수신하도록 상기 제2 송수신부를 제어하며, 상기 다수의 특정객체의 상세정보에서 상기 선택신호에 해당하는 선택된 상기 특정객체의 상세정보를 추출하여 무선단말로 전송하여 표시하도록 하는 제2 제어부; 및 상기 선택된 특정객체의 상세정보를 근거리무선통신을 통해 상기 무선단말로 전송하는 제2 근거리무선통신부; 를 포함할 수 있다.
상기 셋탑박스는 상기 제2 송수신부로부터 수신한 상기 다수의 특정객체의 상세정보를 미리 저장하는 제2 데이터베이스부; 를 더 포함할 수 있다.
상기 제2 제어부는, 상기 IPTV에 의해 상기 수신된 방송컨텐츠를 디스플레이하는 임의의 시점에 상기 IPTV로부터 상기 특정객체의 선택신호를 수신하도록 상기 제2 송수신부를 제어할 수 있다.
본 발명에 따르면, 사용자가 IPTV로 방송컨텐츠 수신에 의해 방송을 시청하다가 방송컨텐츠에 포함된 특정객체에 대한 상세정보를 열람하고 싶을 경우 별도의 무선단말로 실시간으로 전송 받을 수 있는 효과를 제공한다.
또한, 본 발명에 따르면, 사용자는 기존의IPTV 상에서 방송컨텐츠에 포함된 특정객체에 대한 상세정보를 디스플레이할 경우 상세정보를 디스플레이하는 해당 부분은 해당 방송컨텐츠를 시청할 수 없다는 문제를 해결하는 효과를 제공한다.
이하, 본 발명의 바람직한 실시 예의 상세한 설명은 첨부된 도면들을 참조하여 설명할 것이다. 하기에서 본 발명을 설명함에 있어서, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다.
한편, 본 명세서에 있어서는 어느 하나의 구성요소가 다른 구성요소로 데이터 또는 신호를 '전송'하는 경우에는 어느 하나의 구성요소는 다른 구성요소로 직접 데이터 또는 신호를 전송할 수 있고, 적어도 하나의 또 다른 구성요소를 통하여 데이터 또는 신호를 다른 구성요소로 전송할 수 있음을 의미한다.
도 1은 본 발명의 실시 예에 따른 셋탑박스를 이용한 방송컨텐츠의 상세정보 전송시스템의 구성도이다.
도 1을 참조하면, 셋탑박스를 이용한 방송컨텐츠의 상세정보 전송시스템은 IPTV(Internet Protocol Television, 110), 무선단말(130), 셋탑박스(200), 통신망(300), 컨텐츠서버(400) 및 웹서버(500)를 포함할 수 있다.
IPTV(110)는 IP기반 네트워크의 통신망(xDSL, FTTH 등)을 통하여 다양한 컨텐츠(방송컨텐츠, 비디오컨텐츠, 오디오컨텐츠, 텍스트컨텐츠 및 데이터컨텐츠)를 스크린(Screen, 미도시)을 통하여 제공하는 장치로, 규정된 품질 이상의 QoS(Quality of Service)/QoE(Qulity of Experience), 정보보호, 상호작용, 신뢰성 등을 만족하는 것일 수 있다.
본 발명에서 IPTV(110)는 무선단말(130)에 비해 해상도가 높으며, 픽셀수가 많은 단말일 수 있으나, 이에 한정되지는 않는다. 또한, IPTV(110)는 컨텐츠서버(400)로부터 셋탑박스(200)를 이용해 방송컨텐츠를 수신한다.
또한, IPTV(110) 조절장치(리모컨(111) 또는 키패드(112), 도 4참조)를 이용하여 방송컨텐츠에서 특정객체를 선택하는 모듈을 구비할 수 있다. IPTV(110) 조절장치로 특정객체를 선택하는 것에 대해서는 도 4에서 보다 자세히 설명하겠다.
무선단말(130)은 무선링크(150)를 통하여 사용자에게 인터넷 데이터를 제공 가능한 기기로서, 이는 포괄적인 개념의 휴대기기들이다. 즉, 휴대폰, 노트북, PDA(Personal Digital Assistant), GSM(Global System for Mobile)폰, W-CDMA(Wideband CDMA)폰, CDMA-2000폰, MBS(Mobile Broad and System)폰, PMP(Portable Multimedia Player), 핸드헬드 컴퓨터(Handheld Computer)와 같이 멀티미디어 폰 및 멀티미디어 플레이어 등을 포함할 수 있다. 여기서, MBS폰은 현재 논의되고 있는 제 4세대 시스템에서 사용될 핸드폰일 수 있다.
한편, 셋탑박스(200)로부터 방송컨텐츠 중 특정객체의 상세정보 제공을 위한 정보 수신시, 무선단말(130)은 근거리무선통신을 이용해 셋탑박스(200)로 자동으로 인터넷 접속을 실시하는 응용 프로그램을 구비할 수 있다. 응용 프로그램에는 정보수신시, 근거리무선통신을 통해 셋탑박스(200)에 접속하여 특정객체의 상세정보를 수신하기 위한 세션연결을 위한 모듈을 포함할 수 있다.
본 명세서에서 모듈이라 함은 본 발명의 기술적 사상을 수행하기 위한 하드웨어 및 상기 하드웨어를 구동하기 위한 소프트웨어의 기능적, 구조적 결합을 의미할 수 있다. 예컨대, 상기 모듈은 소정의 코드와 상기 소정의 코드가 수행되기 위 한 하드웨어 리소스의 논리적인 단위를 의미할 수 있으며, 반드시 물리적으로 연결된 코드를 의미하거나, 한 종류의 하드웨어를 의미하는 것은 아님은 본 발명의 기술분야의 평균적 전문가에게는 용이하게 추론될 수 있다.
셋탑박스(200)에서 사용하는 근거리무선통신은 Personal Area Network(PAN)일 수 있으며, 블루투스(Bluetooth), 지그비(ZigBee), UWB(Ultra WideBand) 등이 될 수 있다.
셋탑박스(200)는 IPTV(110) 등의 양방향 멀티미디어 통신 서비스를 이용하는데 필요한 통신 기능을 갖고, 방송컨텐츠, EPG(Electronic Program Guide) 등의 컨텐츠 선택메뉴데이터, 광고데이터, 양방향멀티미디어 통신 서비스 데이터 등을 수신한다. 또한, 상기한 데이터들을 저장하기 위한 일반적인 셋탑박스의 데이터 저장소(Data Storage)를 갖고 있다.
한편, 셋탑박스(200)는 사용자측에 설치되어 IPTV(110)와 접속된다. 셋탑박스(200)는 통신망(300)을 통해 방송국 등에 설치되는 컨텐츠서버(400)와 접속되며, 컨텐츠서버(400)에서 인터넷 프로토콜(IP) 등으로 제공되는 다양한 채널의 디지털 방송신호를 수신할 수 있도록 한다. 따라서, 사용자가 선택한 채널의 방송을 접속된 IPTV(110)의 스크린을 통해 송출하여 사용자가 시청할 수 있도록 한다.
본 발명에서, 셋탑박스(200)는 컨텐츠서버(400)로부터 전송된 다수의 특정객체의 상세정보도 저장한다.
구체적으로, 사용자가 IPTV(110)의 조절장치를 이용해 특정객체를 선택하여 셋탑박스(200)로 선택된 특정객체에 대한 상세정보를 근거리무선통신의 수신영역의 범위에 있는 무선단말(130)로 전달할 것을 요청한다. 요청을 수신한 셋탑박스(200)는 대응되는 기저장된 다수의 특정객체로부터 선택된 특정객체의 상세정보를 추출하여 근거리무선통신을 통해 전송한다. 이와 같이 선택된 특정객체의 상세정보를 추출하기 위해 다수의 특정객체의 상세정보를 수신하여 저장한다.
통신망(300)은 셋탑박스(200), 컨텐츠서버(400)간의 데이터전송, 정보교환을 위한 데이터 통신망을 의미하며, IP망일 수 있다. IP망은 대용량, 장거리 음성 및 데이터 서비스가 가능한 대형 통신망의 고속 기간 망이며, 예컨대, 인터넷(Internet)이 될 수 있다. 또한, IP망은 ALL IP(Internet Protocol) 기반의 고속의 멀티미디어 서비스를 제공하기 위한 차세대 유선 망일 수 있다. 한편, 통신망(300)은 이동통신망일 수도 있다. 이동통신망일 경우 동기식 이동 통신망일 수도 있고, 비동기식 이동 통신망일 수도 있다. 비동기식 이동 통신망의 일 실시 예로서, WCDMA(Wideband Code Division Multiple Access) 방식의 통신망을 들 수 있다. 이 경우 도면에 도시되진 않았지만, 이동통신망은 RNC(Radio Network Controller), 및 비동기식 MSC을 포함할 수 있다. 한편, WCDMA망을 일 예로 들었지만, 3G LTE망, 4G망 등 차세대 이동통신망으로 변경될 수 있음은 주지의 사실이다.
컨텐츠서버(400)는 방송국 등에 설치되는 서버로, 컨텐츠 제공자가 제공하는 페이지, 방송컨텐츠와 같은 객체(object) 등을 저장하고 있다가 IPTV(110)로부터의 컨텐츠 요청이 있을 경우 응답하는 역할을 하는 서버이다.
주요 기능으로, 컨텐츠서버(400)는 IPTV(110)로부터 요청된 다양한 채널의 디지털 방송에 해당하는 컨텐츠를 전송하는 역할을 하며, 컨텐츠서버(400)가 보유 한 컨텐츠 중 일부를 셋탑박스(200)에 전송하여 저장하도록 할 수 있다. 이를 통해, 셋탑박스(200)는 IPTV(110)의 요청에 따른 컨텐츠를 신속하게 제공하는 것이 가능하게 된다.
한편, 본 발명에서 컨텐츠서버(400)는 방송컨텐츠 뿐만 아니라, 방송컨텐츠에 포함된 특정객체의 상세정보도 셋탑박스(200)로 전송할 수 있다.
도 2는 도 1의 무선단말(130)의 구조를 나타내는 블록도이다.
도 2에 도시된 바에 따르면, 무선단말(130)은 제1 근거리무선통신부(131), 제1 제어부(133), 제1 데이터베이스부(135) 및 디스플레이장치(137)를 포함할 수 있다.
제1 근거리무선통신부(131)는 근거리무선통신을 통해 셋탑박스(200)로부터 선택된 특정객체의 상세정보를 수신한다.
보다 구체적으로, 사용자는 IPTV(110)의 조절장치에 의해 방송컨텐츠에 포함된 다수의 특정객체 중 특정객체에 대한 선택을 한다. 이에 따라 셋탑박스(200)는 IPTV(110)로부터 특정객체의 선택신호를 수신하고, 기저장된 다수의 특정객체의 상세정보 중 특정객체의 선택신호에 해당하는 선택된 특정객체의 상세정보를 추출하여 근거리무선통신을 통해 무선단말(130)로 전송한다. 이때, 무선단말(130)의 제1 근거리무선통신부(131)는 선택된 특정객체의 상세정보를 수신한다.
제1 제어부(133)는 사용자를 위한 각종 응용 프로그램이 탑재되며, 제1 근거리무선통신부(131)와 셋탑박스(200)간의 데이터통신으로 셋탑박스(200)에 저장된 다수의 특정객체의 상세정보 중 선택된 특정객체의 상세정보를 제1 근거리무선통신부(131)를 통해 수신하도록 제어한다.
이를 위해, 제1 제어부(131)는 제1 근거리무선통신부(131)를 통해 선택된 특정객체의 상세정보를 수신하기 위한 데이터를 수신하는 응용프로그램을 탑재하고 있을 수 있으며, 이는 무선단말(130)이 소프트웨어를 업데이트 하는 것만으로 일정 과정에 의해 자동 접속이 가능하게 한다.
또한, 제1 제어부(131)는 제1 근거리무선통신부(131)를 통하여 수신한 선택된 특정객체의 상세정보를 무선단말(130)의 스크린과 같은 디스플레이장치를 통해 표시하도록 제어할 수 있다.
제1 데이터베이스부(135)는 제1 근거리무선통신부(131)를 통해 셋탑박스(200)로부터 수신한 선택된 특정객체의 상세정보를 저장한다. 한편, 본 명세서에서 데이터베이스라 함은 각각의 데이터베이스에 대응되는 정보를 저장하는 소프트웨어 및 하드웨어의 기능적 구조적 결합을 의미할 수 있다. 데이터베이스는 적어도 하나의 테이블로 구현될 수도 있으며, 데이터베이스에 저장된 정보를 검색, 저장 및 관리하기 위한 별도의 DBMS(Database Management System)을 더 포함할 수도 있다. 또한, 링크드 리스트(linked-list), 트리(Tree), 관계형 데이터베이스의 형태 등 다양한 방식으로 구현될 수 있으며, 데이터베이스에 대응되는 정보를 저장할 수 있는 모든 데이터 저장매체 및 데이터 구조를 포함한다.
디스플레이장치(137)는 제1 근거리무선통신부(131)를 통해 셋탑박스(200)로부터 수신한 선택된 특정객체의 상세정보를 표시하기 위한 스크린을 포함할 수 있 다.
도 3은 도 1의 셋탑박스(200)의 구조를 나타내는 블록도이다.
도 3을 참조하면, 셋탑박스(200)는 제2 송수신부(210), 제2 제어부(230) 및 제2 근거리무선통신부(250) 및 제2 데이터베이스부(270)를 포함한다.
제2 송수신부(210)는 컨텐츠서버(400)로부터 방송컨텐츠 및 방송컨텐츠에 포함된 다수의 특정객체의 상세정보를 수신한다. 제2 송수신부(210)는 수신된 방송컨텐츠를 IPTV(110)로 전송함으로써, IPTV(110) 사용자가 방송을 실시간을 시청할 수 있도록 한다.
제2 제어부(230)는 IPTV(110)의 조절장치에 의해 선택된 특정객체에 대한 선택정보인 선택신호를 이용해 제2 데이터베이스부(230)에 기저장된 다수의 특정객체의 상세정보에서 선택된 특정객체의 상세정보를 추출한다.
한편, 제2 근거리무선통신부(250)는 제2 제어부(230)의 제어에 따라 근거리무선통신에 의해 선택된 특정객체의 상세정보를 무선단말(130)로 전송한다.
제2 데이터베이스부(270)는 제2 송수신부(210)에 의해 수신한 방송컨텐츠에 포함된 다수의 특정객체의 상세정보를 저장한다. 또한, 제2 데이터베이스부(270)는 방송컨텐츠를 함께 저장할 수 있다.
도 4는 본 발명의 실시 예에 따른 셋탑박스를 이용한 방송컨텐츠의 상세정보 전송시스템에서 IPTV의 스크린(113)을 이용해 특정객체를 선택하는 방법을 설명하기 위한 도면이다.
도 1 내지 4를 참조하면, IPTV(110) 시청자는 IPTV(110)의 조절장치(리모컨(111) 또는 키패드(112)로 점선의 직사각형으로 표시된 A영역을 선택할 수 있다. 예컨대, 도면과 같이 A영역으로 표시된 축구선수의 축구화를 선택할 수 있다.
이를 위해, 컨텐츠서버(400)는 셋탑박스(200)의 제2 데이터베이스부(230)로 다수의 특정객체에 대한 상세정보를 제공하기 위한 다수의 특정객체의 상세정보를 방송컨텐츠와 함께 전송하여 저장하도록 할 수 있다.
제2 데이터베이스부(230)에 저장된 특정객체에 대한 상세정보의 예는 도 5와 같을 수 있다.
즉, 특정객체A는 도 4의 축구선수의 축구화(특정객체)에 대한 것일 수 있다. 이 경우, 범위는 직사각형A의 중앙점이 나타내는 영역이 A01~C12부분까지가 축구화에 대한 포인트(Point)를 나타냄을 의미할 수 있다. A01~C12는 픽셀에 대한 범위일 수 있다. 본 발명의 실시 예로 알파벳은 수평 픽셀을, 숫자는 수직 픽셀을 나타내는 것일 수 있다.
상기한 방식에 의해 선택된 특정객체에 대한 선택신호는 셋탑박스(200) 내부의 제2 제어부(250)에 전송된다. 이후, 상술한 바와 같이 제2 제어부(250)는 미리 저장된 다수의 특정객체의 상세정보 중 선택신호에 대응되는 선택된 특정객체의 상세정보를 추출한다. 이후, 제2 제어부(250)는 추출된 특정객체의 상세정보를 제2 근거리무선통신부(270)를 통해 무선단말(130)로 전송한다.
도 6은 본 발명의 실시 예에 따른 셋탑박스를 이용한 방송컨텐츠의 상세정보 전송방법을 나타내는 흐름도이다.
도 1 내지 도 6을 참조하면, 도시되진 않았지만, 사용자는 IPTV(110) 조절장치(리모컨(111) 또는 키패드(112))를 이용해 시청하고자 하는 방송컨텐츠 요청을 셋탑박스(200)로 전송한다. 셋탑박스(200)는 방송컨텐츠 요청을 컨텐츠서버(400)로 전송한다.
이에 따라 컨텐츠서버(400)가 셋탑박스(200)로 방송컨텐츠 및 방송컨텐츠 에 포함된 다수의 특정객체의 상세정보를 전송한다(S10). 여기서, 특정객체의 상세정보는 웹서버(Web Server)들로부터 방송컨텐츠 중 특정객체에 해당하는 상세정보를 조합하여 생성한 정보일 수 있다.
셋탑박스(200)는 컨텐츠서버(400)로부터 수신된 방송컨텐츠 및 방송컨텐츠에 포함된 다수의 특정객체의 상세정보를 저장하며(S20), 컨텐츠서버(400)로부터 수신된 방송컨텐츠를 IPTV(110)로 전송한다(S30). IPTV(110) 사용자는 수신된 방송컨텐츠를 IPTV(110)의 스크린(113, 도 4)을 이용해 시청할 수 있다.
셋탑박스(200)로부터 IPTV(110)로 전송된 방송컨텐츠가 디스플레이되는 임의의 시점에 IPTV(110)의 사용자는 IPTV(110)의 조절장치로 범위(예컨대, 도 4의 A범위)를 지정하여 특정객체를 선택하면(S40), 선택된 특정객체에 대한 선택신호가 IPTV(110)에서 셋탑박스(200)로 전송된다(S50).
셋탑박스(200)는 수신된 선택신호를 이용해 단계(S20)에 저장된 다수의 특정객체의 상세정보 중 대응되는 것을 추출한다(S60). 즉, 셋탑박스(200)는 미리 저장한 다수의 특정객체의 상세정보 중 선택된 특정객체의 상세정보를 추출한다.
단계(S60)의 추출이 완료되면, 셋탑박스(200)는 선택된 특정객체의 상세정보를 근거리무선통신을 이용하여 무선단말(130)로 전송한다(S70).
무선단말(130)은 IPTV(110)의 조절장치에 의해 선택된 특정객체의 상세정보를 수신함으로써, IPTV(110) 및/또는 무선단말(130) 사용자는 특정객체에 대해 재검색하는 불편함을 덜 수 있는 효과가 제공된다.
본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함된다.
또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분사되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고 본 발명을 구현하기 위한 기능적인(Functional) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술 분야의 프로그래머들에 의해 용이하게 추론될 수 있다.
상기 본 발명의 내용은 도면에 도시된 일 실시 예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시 예가 가능하다는 점을 이해할 것이다. 따라서 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의해 정 해져야 할 것이다.
본 발명의 멀티 스크린을 이용한 컨텐츠의 URL 정보제공을 위한 전송시스템 및 그 방법은 사용자는 방송컨텐츠 수신에 의해 방송을 시청하는 중간에 방송컨텐츠에 포함된 특정객체에 대한 상세정보를 알고 싶은 경우 별도의 단말로 실시간으로 전송 받을 수 있다. 따라서, 사용자들은 컨텐츠를 보다 효율적이고 신속하게 전달받을 수 있고, 컨텐츠 제공업체는 고품질의 서비스를 고객에게 제공하여, 관련사업 확대에 기여할 수 있다.
도 1은 본 발명의 실시 예에 따른 무선단말을 이용한 컨텐츠의 URL 정보제공을 위한 전송시스템의 구성도이다.
도 2는 도 1의 무선단말의 구조를 나타내는 블록도이다.
도 3은 도 1의 셋탑박스의 구조를 나타내는 블록도이다.
도 4는 본 발명의 실시 예에 따른 무선단말을 이용한 컨텐츠의 URL 정보제공을 위한 전송시스템에서 IPTV의 스크린을 이용해 특정객체를 선택하는 방법을 설명하기 위한 도면이다.
도 5는 본 발명의 실시 예에 따른 제2 데이터베이스부에 저장된 특정객체에 대한 상세정보를 나타내는 도면이다.
도 6은 본 발명의 실시 예에 따른 무선단말을 이용한 컨텐츠의 URL 정보제공을 위한 전송방법을 나타내는 흐름도이다.
<도면의 주요부분에 대한 부호의 설명>
110: IPTV 130: 무선단말
200: 셋탑박스 300: 통신망
400: 컨텐츠서버 500: 웹서버

Claims (9)

  1. 셋탑박스가 컨텐츠서버로부터 방송컨텐츠 및 상기 방송컨텐츠에 포함된 다수의 특정객체의 상세정보를 수신하고, 상기 방송컨텐츠를 IPTV로 전송하는 전송단계;
    상기 셋탑박스가 상기 IPTV로부터 상기 특정객체의 선택신호를 수신하면, 상기 셋탑박스는 상기 다수의 특정객체의 상세정보에서 상기 선택신호에 해당하는 선택된 상기 특정객체의 상세정보를 추출하는 추출단계; 및
    상기 셋탑박스가 상기 선택된 특정객체의 상세정보를 무선단말로 전송하여 표시하도록 하는 표시단계; 를 포함하는 셋탑박스를 이용한 방송컨텐츠의 상세정보 전송방법.
  2. 제1항에 있어서, 상기 추출단계는,
    상기 셋탑박스가 상기 IPTV를 통해 상기 수신된 방송컨텐츠를 디스플레이하는 임의의 시점에서 상기 선택신호를 수신하는 것을 특징으로 하는 셋탑박스를 이용한 방송컨텐츠의 상세정보 전송방법.
  3. 제1항에 있어서, 상기 표시단계는,
    상기 셋탑박스가 상기 선택된 특정객체의 상세정보를 근거리무선통신을 이용해 상기 무선단말로 전송하여 표시하도록 하는 것을 특징으로 하는 셋탑박스를 이 용한 방송컨텐츠의 상세정보 전송방법.
  4. 컨텐츠서버로부터 방송컨텐츠 및 상기 방송컨텐츠에 포함된 다수의 특정객체의 상세정보를 수신하여 상기 방송컨텐츠를 IPTV로 전송하며,
    상기 IPTV를 통해 상기 수신된 방송컨텐츠를 디스플레이하는 임의의 시점에서 상기 선택신호가 입력되면 상기 다수의 특정객체의 상세정보에서 상기 선택신호에 따른 선택된 상기 특정객체의 상세정보를 추출하여 무선단말로 전송하는 셋탑박스; 및
    상기 선택된 특정객체의 상세정보를 근거리무선통신을 이용해 수신하여 표시하는 상기 무선단말; 을 포함하는 무선단말을 이용한 컨텐츠의 URL 정보제공을 위한 전송시스템.
  5. 컨텐츠서버로부터 방송컨텐츠 및 상기 방송컨텐츠에 포함된 다수의 특정객체의 상세정보를 수신하는 셋탑박스와 근거리무선통신을 수행하는 제1 근거리무선통신부;
    상기 제1 근거리무선통신부를 통해 수신한 데이터를 표시하기 위한 디스플레이장치; 및
    상기 셋탑박스로부터 상기 다수의 특정객체의 상세정보 중 IPTV에 의해 선택된 상기 특정객체의 상세정보를 수신하도록 상기 제1 근거리무선통신부를 제어하며,
    상기 선택된 특정객체의 상세정보를 상기 디스플레이장치를 통해 표시하도록 제어하는 제1 제어부; 를 포함하는 무선단말.
  6. 제5항에 있어서,
    상기 셋탑박스로부터 상기 제1 근거리무선통신부를 통해 수신한 상기 선택된 특정객체의 상세정보를 저장하는 제1 데이터베이스부; 를 더 포함하는 무선단말.
  7. 유선통신을 수행하는 제2 송수신부;
    컨텐츠서버로부터 방송컨텐츠 및 상기 방송컨텐츠에 포함된 다수의 특정객체의 상세정보를 수신하여 상기 방송컨텐츠를 IPTV로 전송하도록 상기 제2 송수신부를 제어하며, 상기 IPTV로부터 상기 특정객체의 선택신호를 수신하도록 상기 제2 송수신부를 제어하며,
    상기 다수의 특정객체의 상세정보에서 상기 선택신호에 해당하는 선택된 상기 특정객체의 상세정보를 추출하여 무선단말로 전송하여 표시하도록 하는 제2 제어부; 및
    상기 선택된 특정객체의 상세정보를 근거리무선통신을 통해 상기 무선단말로 전송하는 제2 근거리무선통신부; 를 포함하는 셋탑박스.
  8. 제7항에 있어서,
    상기 제2 송수신부로부터 수신한 상기 다수의 특정객체의 상세정보를 미리 저장하는 제2 데이터베이스부; 를 더 포함하는 셋탑박스.
  9. 제7항에 있어서, 상기 제2 제어부는,
    상기 IPTV에 의해 상기 수신된 방송컨텐츠를 디스플레이하는 임의의 시점에 상기 IPTV로부터 상기 특정객체의 선택신호를 수신하도록 상기 제2 송수신부를 제어하는 것을 특징으로 하는 셋탑박스.
KR1020080109387A 2008-11-05 2008-11-05 셋탑박스를 이용한 방송컨텐츠의 상세정보 전송시스템 및 그 방법 KR101370315B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020080109387A KR101370315B1 (ko) 2008-11-05 2008-11-05 셋탑박스를 이용한 방송컨텐츠의 상세정보 전송시스템 및 그 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080109387A KR101370315B1 (ko) 2008-11-05 2008-11-05 셋탑박스를 이용한 방송컨텐츠의 상세정보 전송시스템 및 그 방법

Publications (2)

Publication Number Publication Date
KR20100050208A true KR20100050208A (ko) 2010-05-13
KR101370315B1 KR101370315B1 (ko) 2014-03-05

Family

ID=42276395

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080109387A KR101370315B1 (ko) 2008-11-05 2008-11-05 셋탑박스를 이용한 방송컨텐츠의 상세정보 전송시스템 및 그 방법

Country Status (1)

Country Link
KR (1) KR101370315B1 (ko)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101214515B1 (ko) * 2010-12-08 2013-01-09 주식회사 아이플래테아코리아 방송콘텐츠의 부가정보 제공 시스템 및 그 방법
WO2013015546A3 (ko) * 2011-07-25 2013-03-21 주식회사 아이플래테아코리아 방송콘텐츠의 부가정보 제공 방법 및 그 시스템
KR101313293B1 (ko) * 2010-12-16 2013-09-30 주식회사 아이플래테아 방송콘텐츠의 부가정보 제공 시스템 및 그 방법
WO2014116751A1 (en) * 2013-01-25 2014-07-31 Nuance Communications, Inc. Systems and methods for supplementing content with audience-requested information
US9619812B2 (en) 2012-08-28 2017-04-11 Nuance Communications, Inc. Systems and methods for engaging an audience in a conversational advertisement

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030083968A (ko) * 2002-04-24 2003-11-01 한국전자통신연구원 홈서버와 개인정보단말을 이용한 홈쇼핑 시스템 및 방법
KR100587455B1 (ko) * 2004-11-08 2006-06-09 주식회사 케이티프리텔 양방향 데이터 방송 기반의 모바일 인터넷 접속 시스템 및그 방법
KR20060068142A (ko) * 2004-12-16 2006-06-21 주식회사 팬택 이동통신 단말기를 이용한 양방향 텔레비젼 포털 서비스시스템
KR20070097678A (ko) * 2006-03-28 2007-10-05 주식회사 케이티프리텔 방송 프로그램과 연동한 부가 정보 제공 장치 및 방법과이를 이용한 모바일 정보통신 단말

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101214515B1 (ko) * 2010-12-08 2013-01-09 주식회사 아이플래테아코리아 방송콘텐츠의 부가정보 제공 시스템 및 그 방법
KR101313293B1 (ko) * 2010-12-16 2013-09-30 주식회사 아이플래테아 방송콘텐츠의 부가정보 제공 시스템 및 그 방법
WO2013015546A3 (ko) * 2011-07-25 2013-03-21 주식회사 아이플래테아코리아 방송콘텐츠의 부가정보 제공 방법 및 그 시스템
KR101248844B1 (ko) * 2011-07-25 2013-04-01 주식회사 아이플래테아코리아 방송콘텐츠의 부가정보 제공 방법 및 그 시스템
US9301006B2 (en) 2011-07-25 2016-03-29 Iplateiakorea Co., Ltd. Method and system for providing additional information on broadcasting content
US9619812B2 (en) 2012-08-28 2017-04-11 Nuance Communications, Inc. Systems and methods for engaging an audience in a conversational advertisement
WO2014116751A1 (en) * 2013-01-25 2014-07-31 Nuance Communications, Inc. Systems and methods for supplementing content with audience-requested information
US9113213B2 (en) 2013-01-25 2015-08-18 Nuance Communications, Inc. Systems and methods for supplementing content with audience-requested information

Also Published As

Publication number Publication date
KR101370315B1 (ko) 2014-03-05

Similar Documents

Publication Publication Date Title
US10750214B2 (en) Method and apparatus for managing access plans
US20100325667A1 (en) System, server and method for providing supplementary information service related to broadcast content
US20080092184A1 (en) Apparatus for receiving adaptive broadcast signal and method thereof
EP2586197B1 (en) Method and apparatus for providing streaming media programs and targeted advertisements compatibly with http live streaming
US11115335B2 (en) Information processing device and information processing method
KR101370315B1 (ko) 셋탑박스를 이용한 방송컨텐츠의 상세정보 전송시스템 및 그 방법
KR100883982B1 (ko) 디지털 방송 시스템의 광고 방법 및 광고 시스템
US8346228B2 (en) System and method for providing interactive services using a mobile device
US20120066708A1 (en) System method for displaying additional service information of content on auxiliary terminal
KR101234717B1 (ko) 셋탑박스를 이용한 방송컨텐츠 제공 방법 및 이를 위한 셋탑박스
KR101215870B1 (ko) 셋탑박스를 이용한 방송컨텐츠의 정보제공을 위한 전송시스템 및 그 방법
KR101140635B1 (ko) 무선단말 및 프록시서버를 이용한 컨텐츠의 url 정보제공을 위한 전송시스템 및 그 방법
US9137501B2 (en) Method and system for communicating between a host device and user device through an intermediate device using syntax translation
KR101204740B1 (ko) 프록시서버와 이동통신망을 이용한 방송컨텐츠의 정보제공을 위한 전송시스템 및 그 방법
KR101124204B1 (ko) 멀티 스크린 및 프록시서버를 이용한 컨텐츠의 url정보제공을 위한 전송시스템 및 그 방법
KR101308926B1 (ko) 인기 어플리케이션 추천 기능을 제공하는 방송 서비스 시스템 및 방법
KR101333483B1 (ko) 광고정보를 제공하는 방송 수신기 및 그의 동작 방법
KR101891811B1 (ko) 모자이크 epg의 소스정보를 생성하는 장치 및 방법, 그리고 소스정보를 제공받는 단말
KR20100060713A (ko) 이동통신망을 이용한 방송컨텐츠의 정보제공을 위한 전송시스템 및 그 방법
KR101268818B1 (ko) 채널 재핑을 줄이기 위한 무선 액세스 스케줄링 방법 및 장치
KR101287841B1 (ko) 인터넷 방송 수신기에서의 방송 프로그램 수신방법
KR101564464B1 (ko) 디스플레이장치 및 채널 설정 방법
KR100845138B1 (ko) 디지털 멀티미디어 방송에 연계된 양방향 리치 미디어서비스방법 및 그 서비스 시스템
KR20070076015A (ko) 디지털 방송 데이터 출력중 프로관련 정보를 검색하는 방법및 그를 위한 장치를 갖는 이동통신단말기
EP2738749A1 (en) A system for providing a multimedia content to a multimedia rendering device and related devices

Legal Events

Date Code Title Description
A201 Request for examination
N231 Notification of change of applicant
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
J201 Request for trial against refusal decision
B601 Maintenance of original decision after re-examination before a trial
E801 Decision on dismissal of amendment
J301 Trial decision

Free format text: TRIAL NUMBER: 2012101007650; TRIAL DECISION FOR APPEAL AGAINST DECISION TO DECLINE REFUSAL REQUESTED 20120827

Effective date: 20140127

Free format text: TRIAL DECISION FOR APPEAL AGAINST DECISION TO DECLINE REFUSAL REQUESTED 20120827

Effective date: 20140127

S901 Examination by remand of revocation
GRNO Decision to grant (after opposition)
GRNT Written decision to grant
G170 Publication of correction
FPAY Annual fee payment

Payment date: 20180221

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20200122

Year of fee payment: 7