KR100436088B1 - 디지털 방송용 컨텐츠 데이터의 재활용 방법 및 시스템 - Google Patents

디지털 방송용 컨텐츠 데이터의 재활용 방법 및 시스템 Download PDF

Info

Publication number
KR100436088B1
KR100436088B1 KR10-2000-0073040A KR20000073040A KR100436088B1 KR 100436088 B1 KR100436088 B1 KR 100436088B1 KR 20000073040 A KR20000073040 A KR 20000073040A KR 100436088 B1 KR100436088 B1 KR 100436088B1
Authority
KR
South Korea
Prior art keywords
data
content data
content
information
user
Prior art date
Application number
KR10-2000-0073040A
Other languages
English (en)
Other versions
KR20020043385A (ko
Inventor
김문영
Original Assignee
주식회사 알티캐스트
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 알티캐스트 filed Critical 주식회사 알티캐스트
Priority to KR10-2000-0073040A priority Critical patent/KR100436088B1/ko
Priority to GB0129017A priority patent/GB2372896A/en
Priority to FR0115626A priority patent/FR2817696B1/fr
Priority to US10/004,922 priority patent/US20020069414A1/en
Priority to DE10159305A priority patent/DE10159305A1/de
Publication of KR20020043385A publication Critical patent/KR20020043385A/ko
Application granted granted Critical
Publication of KR100436088B1 publication Critical patent/KR100436088B1/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/222—Secondary servers, e.g. proxy server, cable television Head-end
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6125—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/16—Analogue secrecy systems; Analogue subscription systems
    • H04N7/162—Authorising the user terminal, e.g. by paying; Registering the use of a subscription channel, e.g. billing
    • H04N7/165—Centralised control of user terminal ; Registering at central

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Systems (AREA)

Abstract

본 발명은 인터넷망을 이용하는 디지털 텔레비젼용 컨텐츠 데이터의 재(再)활용 방법 및 그 시스템에 관한것으로, 서버에서 디지털 방송망으로부터 송신되는 컨텐츠 데이터를 수신하여 데이터베이스에 저장하여 필요에 따라 재편집한 후, 인터넷망을 통하여 저장된 컨텐츠 데이터를 사용자의 컴퓨터 단말기에 전송하고, 전송된 컨텐츠 데이터를 사용자의 컴퓨터 단말기를 사용하여 시청할 수 있는 것을 특징으로 하는 것으로서, 더욱 상세하게는, 튜너부에서 디지털 방송망으로부터 전송되는 전송 스트림을 수신하는 단계; 수신된 전송 스트림을 리멀티플렉서부에서 각 방송 채널 별로 분리하는 단계; 분리된 채널별 전송 스트림을 서버가 각 컨텐츠별 데이터로 데이터베이스에 저장하는 단계; 저장된 컨텐츠 데이터를 인터넷망을 통하여 사용자에게 전송하는 단계; 로 구성되는 서버에서의 컨텐츠 데이터의 재전송 수순, 및
사용자 단말기에서 인터넷망으로부터 재전송된 컨텐츠 데이터를 수신하는 단계; 수신된 컨텐츠 데이터를 디멀티플렉서를 통하여 영상, 음성 및 정보 데이터로 분리하는 단계; 분리된 영상 및 음성 신호가 영상 디코더 및 음성 디코더에 의하여 디코딩되고, 정보 데이터는 정보 처리부를 통하여 해석되는 단계; 영상 디코더 및 음성 디코더의 출력 데이터를 정보 처리부에서의 출력 데이터와 동기화하여 출력하는 단계; 로 구성되는 사용자 단말기에서의 컨텐츠 데이터의 출력 수순, 으로 구성된 것을 특징으로 한다.

Description

디지털 방송용 컨텐츠 데이터의 재활용 방법 및 시스템{Method and System for re-utilizing of contents data for digital broadcasting}
본 발명은 인터넷망을 이용하는 디지털 텔레비젼용 컨텐츠 데이터의 재(再)활용 방법 및 그 시스템에 관한 것이다.
현재 본격적인 시작을 앞두고 있는 디지털 방송은 현재의 아날로그 방송과는 달리, 방송사는 영상이나 음성뿐만 아니라 방송되는 프로그램에 관련한 여러가지 정보를 디지털 방식으로 변조하여 송신할 수 있다. 즉, 방송의 디지털화로 영상과 음성에 연동되는 관련 정보가 방송에 같이 송출됨으로써, 시청자의 욕구를 충족시키는 새로운 방송 환경으로 변화되는 것이다.
그러나, 텔레비전의 디지털화로 인해 방송국의 수가 급격하게 증가하고 이로인한 엄청난 정보의 제공이 이루어짐으로써 각 시청자들은 정보의 선택에 있어서 자신이 원하는 정보에 대한 취사 선택의 기회를 가지기가 점점 어려워지고 있으며, 비교적 제한된 대역폭으로 인해 이러한 방송이 시청자가 원하는 시간에 언제든지 볼 수 있는 여건은 되지 못하며, 많은 채널에서 나오는 방송중 원하는 시청자가 방송의 시간이 중복된다면 이 또한 동시 청취가 쉽지 않은 문제점이 있다.
또한, 디지털 방송을 실시하는 각 방송사들이 제공하는 많은 량의 프로그램들을 시청자가 효율적으로 관리하고 재활용하기에는 시간과 여건상 많은 어려움이 따르기 때문에 한번 방송된 프로그램의 정보를 다시 활용하기가 어려운 실정이다.
상기와 같은 문제점을 해소하고자 안출된 본 발명의 목적은, 디지털 방송에 있어서, 시청자가 원하는 방송 프로그램 및 관련 정보를 시간과 장소에 구애 받지 않고 시청할 수 있고, 시청자에게 보다 많은 프로그램의 선택을 하게 할 수 있는 디지털 방송용 컨텐츠 데이터의 재(再)활용 방법 및 시스템을 제공하는데 있다.
도 1 은 본 발명에 의한 시스템의 간략한 개념도이다.
도 2 는 본 발명에 의한 서버에서의 컨텐츠 데이터의 재전송 수순을 나타내는 구성도이다.
도 3 은 본 발명에 의한 사용자 단말기에서의 컨텐츠 데이터의 출력 수순을 나타내는 구성도이다.
상기와 같은 목적을 가진 본 발명의 구성은,
서버에서 디지털 방송망으로부터 송신되는 컨텐츠 데이터를 수신하여 데이터베이스에 저장하여 필요에 따라 재편집한 후, 인터넷망을 통하여 저장된 컨텐츠 데이터를 사용자의 컴퓨터 단말기에 전송하고, 전송된 컨텐츠 데이터를 사용자의 컴퓨터 단말기를 사용하여 시청할 수 있는 것을 특징으로 하는 것으로서, 더욱 상세하게는,
튜너부에서 디지털 방송망으로부터 전송되는 전송 스트림을 수신하는 단계; 수신된 전송 스트림을 리멀티플렉서부에서 각 방송 채널별로 분리하는 단계; 분리된 채널별 전송 스트림을 서버가 각 컨텐츠별 데이터로 데이터베이스에 저장하는 단계; 저장된 컨텐츠 데이터를 인터넷망을 통하여 사용자에게 전송하는 단계; 로 구성되는 서버에서의 컨텐츠 데이터의 재전송 수순, 및
사용자 단말기에서 인터넷망으로부터 재전송된 컨텐츠 데이터를 수신하는 단계; 수신된 컨텐츠 데이터를 디멀티플렉서를 통하여 영상, 음성 및 정보 데이터로 분리하는 단계; 분리된 영상 및 음성 신호가 영상 디코더 및 음성 디코더에 의하여 디코딩되고, 정보 데이터는 정보 처리부를 통하여 해석되는 단계; 영상 디코더 및 음성 디코더의 출력 데이터를 정보 처리부에서의 출력 데이터와 동기화하여 출력하는 단계; 로 구성되는 사용자 단말기에서의 컨텐츠 데이터의 출력 수순, 으로 구성된 것을 특징으로 한다.
이하, 계시된 도면을 참조하여 본 발명의 바람직한 실시예를 상세하게 설명하기로 한다.
도 1 은 본 발명에 의한 시스템의 개략적인 개념도이다.
일반적으로, 디지털 방송에 의하여 제공되는 프로그램은 상기 설명한 바와 같이 영상데이터, 음성데이터 및 방송되는 프로그램에 대한 다양한 관련 정보가 담겨져 있는 정보데이터가 합성된 형태로 시청자에게 제공된다. 본 발명에서는 상기 방송용 프로그램을 구성하고 있는 영상데이터, 음성데이터, 정보데이터 및 그들의 동기화 정보가 포함되어 구성되는 방송용 프로그램 데이터를 통칭하여 컨텐츠(contents)데이터라 부르기로 한다.
상기 컨텐츠 데이터의 제작 과정에서 정보 데이터는 이를 제작하기 위한 프로그램 제작 툴을 이용하여 미리 제작된 후 관련 영상 및 음성 데이터와 동기시켜 시청자에게 제공되는 것이 일반적이므로, 본 발명에 의한 실시예에서는 도면에서 계시된 바와 같이, 저작관련 프로그램 툴(저작도구)로부터 제작된 컨텐츠 데이터가 멀티플렉서에 의하여 디지털 방송을 위한 송출 스트림(Transmission Stream, 이하 TS 라 함)으로 포맷되고, TS로 포맷된 프로그램이 방송국에서 디지털 방식으로 변조되어 공중파로 송출되며 본 발명에 의한 서버에서 상기 TS를 수신한다.
수신된 상기 컨텐츠는 서버에 의하여 데이터베이스에 저장되고, 인터넷 망을 통하여 프로그램의 시청을 원하는 사용자들에게 배급하여 주게 된다. 사용자들은 본 발명에 의한 TS 브라우져 또는 시청 장치를 자신의 컴퓨터 단말기에 설치하여 상기 TS 포맷에 의한 디지털 방송 프로그램을 시청할 수 있도록 한다.
이하, 상기 설명된 본 발명에 의한 서버 및 사용자측에서 컨텐츠의 처리를 위한 방법 및 시스템의 구조를 상세하게 설명하기로 한다.
도 2 는 본 발명에 의한 서버 시스템을 나타내는 도면이다.
본 발명에 의한 서버(20)는, 방송국으로부터 송신되는 송출 스트림을 수신하기 위한 튜너부(21), 튜너부에서 수신된 송출 스트림으로부터 각각의 컨텐츠 데이터를 분리하는 리멀티플렉서(22), 리멀티플렉서로부터 분리된 각각의 컨텐츠 데이터를 저장하는 데이터베이스(23), 데이터베이스에 저장된 컨텐츠 데이터를 재가공하기 위한 포맷으로 변환을 하는 디코더부(24), 디코딩된 컨텐츠 데이터를 재편집하기 위한 데이터 편집부(25), 재편집된 컨텐츠 데이터를 시청자에게 송출할 수 있는 포맷으로 변환하는 인코더부(26)로 구성된다.
상기와 같은 구성을 가진 본 발명에 의한 서버에서의 컨텐츠 데이터의 저장 및 재전송을 구현하기 위한 방법은 다음과 같다.
1. 튜너부에서 디지털 방송망으로부터 전송되는 전송 스트림을 수신하는 단계;
방송국으로부터 전송되어지는 디지털 방송용 TS를 수신하기 위한 단계이다. 일반적으로, 방송국에서 컨텐츠 저작도구에 의하여 제작된 컨텐츠는 지정된 정보데이터의 스케줄에 맞추어 정하여진 포맷 방식에 의하여 인코딩이 수행되어 TS 포맷으로 바뀐다. 또한, 송신시 버츄얼 채널(virtual channel)을 이용해 멀티 채널을 제공할 수 있으며, TS 포맷으로 만든 컨텐츠 데이터를 버츄얼 채널로 동시에 전송하기 위하여 다수의 채널에 의하여 컨텐츠 데이터가 멀티플랙서에 의해 멀티플랙싱되어 송출된다. 이렇게 전송되는 컨텐츠 데이터는 본 발명에 의한 튜너부에서 채널을 동조하여 수신하게 된다.
2. 수신된 전송 스트림을 리멀티플렉서부에서 각 방송 채널별로 분리하는 단계;
튜너부에서 수신된 여러 방송국별 공중파를 수신하여 이를 각 방송의 채널별로 분리하는 단계로서, 리멀티플렉서(remultiplexer)부에서 실제의 방송 프로그램용 컨텐츠 데이터를 얻기 위하여 디지털 방송 시스템의 물리적 채널 내에 속하여있는 다수의 버츄얼 채널을 각 채널별로 분리해 낸다.
3. 분리된 각각의 전송 스트림을 서버가 각각의 컨텐츠 데이터로 데이터베이스에 저장하는 단계;
컨텐츠의 시청을 원하는 사용자들에게 전송하기 위하여 서버에서 컨텐츠 데이터를 저장하는 단계로서, 리멀티플렉서부에서 분리된 컨텐츠 데이터를 서버의 운영자가 소망하는 바에 따른 각각의 시간대별 혹은 방송 프로그램 별로 컨텐츠 데이터를 TS 포맷으로 저장한다.
이때, 각 컨텐츠별로 프로그램을 분리할 때에는 중복되는 컨텐츠 데이터의 시스템 정보를 각각의 컨텐츠 데이터에 포함시켜야 한다. 또한, 컨텐츠에 포함된 데이터와 영상 및 음성 데이터와의 동기화 정보를 위해 포맷은 튜너부에서 수신된 TS 포맷을 그대로 유지한다. 상기 동기화 정보를 통해 정보 데이터가 방송 프로그램의 진행에 맞추어 특정된 시간에 시청자의 화면에 표시될 수 있다.
4. 분리되어 저장된 컨텐츠 데이터를 재편집하는 단계;
상기 단계는 본 발명에 있어서 필수적인 단계는 아니나, TS 포맷으로 데이터베이스에 저장된 컨텐츠 데이터를 서버의 운영자가 소정의 사용자의 조건에 맞도록 컨테츠를 재가공하는 단계로서, 사용자에게 제공하는 컨텐츠 데이터의 질을 좀더 향상하기 위한 것이다. 이때, 컨텐츠 데이터의 재편집 영역은 전체 컨텐츠를 대상으로 할 수도 있고 컨텐츠 일부만을 할 수도 있으며 재편집은 현재 적용되고 있는 컨텐츠 데이터의 정보 데이터 부분의 일부를 고치는 것 뿐만 아니라 새로운 정보 데이터를 생성하는 것도 가능하다. 이는 본 발명의 서버에서 컨텐츠 데이터의 제작을 위한 저작도구를 사용할 수 있기 때문이며, 상기 저작도구는 원래의 컨텐츠 데이터를 제작하기 위하여 사용되는 저작도구에 의한 저작 방식과 유사하게 구현될 수 있다. 한편, 컨텐츠 데이터의 수정을 위해서는 이것의 소스 코드(source code)가 필요하나 상기 소스 코드의 전송을 각 방송사에서 재공하기가 현실적으로 불가능하기 때문에 본 발명에 의한 실시예에서는 아래와 같은 단계를 가진 재편집 과정을 가진다.
4-1) 저장된 각 컨텐츠별 데이터를 디코더 부에서 디코딩하는 단계;
컨텐츠 데이터는 전기(前記)하였듯이, 음성, 영상, 정보 데이터뿐만 아니라 정보데이터의 동기화 정보가 포함되어 TS 포맷으로 저장되어 있다. 여기서, 상기 동기화 정보는 대략 컨텐츠 데이터의 주기적인 반복전송을 가능하게 하기위한 일종의 시간 스케쥴인 DataCarousel, 주로 인터넷상의 관련 데이터를 전송할 때 쓰이는 비동기식 IP 스트림과(Asychronous Internet Protocol Stream)과 동기화 정보를 포함한 데이터의 전송에 쓰이는 동기식 스트림(Synchronous Stream) 및 동기화된 스트림(Synchronized Stream)들의 인코딩 방법에 관한 정보 뿐만 아니라 데이터 스트림의 집합체인 데이터 모듈을 그룹화하는 하는 방법에 대한 정보 등을 가리킨다.
따라서, 상기와 같은 비교적 복잡한 구조의 TS 를 저작도구를 사용하여 그대로 편집하는 것은 바람직하지 않을뿐만 아니라 본 발명에 의한 데이터베이스에 저장되는 컨텐츠 데이터의 포맷은 송출될 때의 TS 포맷 그대로이기 때문에 이를 편집에 적당한 포맷으로 변환하기 위한 필요성이 발생하므로 본 발명에 의한 재편집 과정에서는 디코더를 사용하여 재편집을 원하는 컨텐츠 데이터부분을 디코딩하여 TS포맷이 아닌 일반 스트림 포맷으로 변환한다.
4-2) 서버 시스템 운영자가 변환된 컨텐츠 데이터를 필요에 따라 컨텐츠 저작도구를 사용하여 재편집하는 단계;
저작도구에 의한 편집에 알맞게 변환된 컨텐츠 데이터는 서버 시스템 운영자에 의하여 새롭게 재편집되며, 재편집 하기위한 저작도구 및 저작 방법은 공지의 기술을 활용하면 되므로 이의 상세한 설명을 생략하기로 한다.
4-3) 서버에서 재편집된 컨텐츠 데이터를 인코딩하여 데이터베이스에 저장하는 단계;
재편집 과정을 마친 컨텐츠 데이터는 사용자에게 전송될 때 송출시의 TS 포맷을 그대로 유지하게 되므로 이를 위하여 편집된 스트림을 인코더를 사용하여 TS 포맷으로 다시 재변환 한후, 서버에 명령에 의하여 데이터베이스에 저장되게 된다.
5. 저장된 컨텐츠 데이터를 인터넷망을 통하여 사용자에게 전송하는 단계;
데이터베이스에 저장된 TS 포맷의 컨텐츠 데이터는 인터넷망을 통하여 사용자에게 제공된다. 이를 위하여 도면에 도시하지는 않았으나 본 발명에 의한 서버 시스템은 인터넷망에 접속하기 위한 접속장치와 TCP/IP 프로토콜을 처리하기 위한 프로토콜 처리부를 부가하여 가지고 있다. 본 방법에 의한 컨텐츠 데이터의 제공 환경으로서 인터넷 망을 이용하는 이유는 컨텐츠 데이터 시청의 시간적 제약성을 해소할 수 있으며, 방송 프로그램을 일일히 검색해야만 하는 불편함을 해결하고, 사용자 입장에서 인터넷에서 쓰이는 다양한 공지의 기술들을 사용하여 제공되는 컨텐츠들을 사용자의 목적 및 환경에 적합하도록 활용할 수 있기 때문이다.
상기와 같은 본 발명에 의한 방법을 통하여 사용자에게 전송되는 컨텐츠 데이터들은 데이터베이스에 저장된 TS 포맷을 유지한 채로 전송되기 때문에 사용자 입장에서는 이를 자신의 화면에 표시하기 위한 도구로서 자신의 컴퓨터 단말기에 소프트웨어적으로 프로그램을 인스톨하거나 또는 하드웨어적인 표시 장치를 부설하여야 한다. 본 발명에 의한 실시예에 의하면 전송되는 TS 를 사용자 화면에 표시하기 위한 TS 브라우져(browser)를 소프트웨어적인 형태로 제공하며 사용자는 이를 서버로부터 다운로드 받아서 자신의 컴퓨터 단말기에 인스톨함으로써 제공되는 TS 포맷의 컨텐츠 데이터를 재생할 수 있다.
이하, 도 3 을 참조하여 상기 본 발명에 의한 TS 브라우져의 구성을 상세하게 설명하기로 한다.
도 3 은 본 발명에 의한 TS 브라우져의 구성을 나타낸 블럭도이다.
본 발명에 의한 TS 브라우져의 구성은, 인터넷망으로부터 전송되는 TS 포맷의 컨텐츠 데이터를 수신하기 위한 수신부(31), 수신부로부터의 TS 포맷된 컨텐츠 데이터를 영상, 음성 및 정보 데이터로 분리하는 디멀티플렉서부(32), 분리된 영상 및 음성 데이터를 각각 디코딩하는 영상 데이터 디코더부(33) 및 음성 데이터 디코더부(34) 및 분리된 정보 데이터를 디코딩하고, 영상 및 음성 데이터와의 동기화 정보들을 해석하는 정보 데이터 처리부(35), 상기 정보 데이터 처리부에서 해석된 정보 데이터들과 연동되고, 디코딩된 영상 데이터 및 음성 데이터와 상기 정보 데이터를 동기화하고, 사용자의 화면에 출력하기 위한 디스플레이 컨트롤러부(36) 및 오디오 컨트롤러부(37)로 구성되며, 상기 정보 데이터 처리부는 사용자의 컴퓨터단말기(38)로부터 소정의 데이터를 입력받아 이를 인터넷망에 전송하기 위한 송신부(39)와 연결되어 있다.
상기와 같이 구성되어 있는 TS 브라우져가 컨텐츠 데이터를 처리하는 방법은 아래와 같다.
1. 사용자가 사용자 단말기를 이용하여 서버에 접속하고, 인터넷망으로부터 재전송된 컨텐츠 데이터를 수신하는 단계;
사용자가 자신의 컴퓨터 단말기를 사용하여 인터넷에 접속한 후 본 발명에 의한 서버에 접속하여 소망하는 컨텐츠 데이터를 본 발명의 TS 브라우져의 수신부를 통하여 TS 포맷의 컨텐츠 데이터를 수신하는 단계이다.
2. 수신된 컨텐츠 데이터를 디멀티플렉서를 통하여 영상, 음성 및 정보 데이터로 분리하는 단계;
수신부에서 수신한 상기 컨텐츠 데이터는 디멀티플렉서부에서 영상 데이터, 음성 데이터, 정보 데이터로 분리된다. 이때, 상기의 데이터들은 각 데이터의 특성에 맞추어 미리 포맷되어 있으므로 공지의 기술로서 분리를 할 수 있다.
3. 분리된 영상 및 음성 신호가 영상 디코더 및 음성 디코더에 의하여 디코딩되고, 정보 데이터는 정보 처리부를 통하여 해석되는 단계;
영상 및 음성 데이터는 영상 데이터 디코더부 및 음성 데이터 디코딩부에서 각각의 데이터가 가지고 있는 TS 의 포맷이 해석된다. 또한, 정보 데이터 처리부에서의 수행되는 정보 데이터의 디코딩은 본 발명에 의한 서버에서의 정보 데이터의 제편집의 단계에서의 디코딩 방법과 동일하게 수행될 수 있으며 정보 데이터가 가지고 있는 DataCarousel, 비동기식 IP 스트림(Asychronous Internet Protocol Stream), 동기식 스트림(Synchronous Stream) 및 동기화된 스트림(Synchronized Stream) 등의 영상 및 음성 데이터와의 동기화 정보들이 해석된다.
4. 영상 디코더 및 음성 디코더의 출력 데이터를 정보 처리부에서의 출력 데이터와 동기화하여 출력하는 단계;
분리된 영상 데이터는 영상 데이터 디코더를 통하여 TS 가 가지고 있는 정보들이 해석되고 디스플레이 컨트롤러부에서 정보 데이터 처리부에서 처리된 데이터 정보와 동기화되게 되며, 정보 데이터와 동기화된 비디오 정보는 모니터를 통해 사용자의 컴퓨터 단말기에 표시진다. 음성 데이터는 음성 데이터 디코더를 통하여 데이터의 정보들이 해석되고 오디오 컨트롤러부에서 정보 데이터와 동기화 되며, 정보 데이터와 동기화된 음성 데이터는 사용자의 컴퓨터 단말기 스피커를 통하여 사용자에게 전달된다.
한편, 사용자의 요구사항이나 정보의 입력을 위하여 정보 데이터 처리부에서 마우스나 키보드 등의 사용자의 컴퓨터 단말기의 입력 장치를 통하여 데이터를 입력받고, 입력된 데이터를 다시 인터넷망을 이용하여 서버로 송신하고, 서버에서는 송신된 정보에 따라 소정의 처리 사항이 발생되게 된다.
상기와 같은 구성을 가지고 있는 본 발명의 디지털 방송용 컨텐츠 데이터의 재활용 방법 및 시스템은 사용자가 본 발명에 의한 서버에 접속하여 시청하는 것은 물론이고, 사용자가 본 발명에 의한 서버를 구비하고 직접 컨텐츠 데이터를 처리하여 이용하는 것도 가능하다. 사용자에 의한 직접적인 컨텐츠 데이터의 처리가 적용될 수 있는 분야는 교육분야, 인터넷 방송분야, 일반 회사의 홍보 또는 광고 분야 등에 특히 유용한데, 교육 분야에서는 본 발명에 의한 서버에서 교육용 컨텐츠를 과목별로 저장을 하고 적절한 편집을 통하여 새로운 교육용 컨텐츠로의 전환이 가능하므로 일반 학생들은 원하는 시간에 원하는 컨텐츠에 접속하여 자기 수준에 맞는 학습을 할 수 있고 다시 이런 컨텐츠를 이용해 자신만의 자료를 만들 수 있는 것은 물론 인터넷상에서의 교육자와 피교육자간의 자료 교환이 쉽게 이루어 질 수 있다.
또한, 인터넷상에서 각종의 영상, 음성물을 실시간으로 송출하는 소위 인터넷 방송국에 있어서는 사용자들이 원하는 특정 분야의 컨텐츠를 획득 및 가공이 좀더 용이하게 된다.
또한, 일반 회사에 있어서는 방송국에서 송출되는 각종의 회사 관련 자료, 대외 홍보용 자료 및 부서별 전문 컨텐츠 등의 자료를 쉽게 확보할 수 있고 또 이를 재가공하여 전체적인 회사의 홍보 및 광고 비용을 감소시킬 수 있다.
상기와 같은 구성을 가진 본 발명의 효과는, 디지털 방송용 컨텐츠 데이터의 재활용을 통하여 정보의 재생 및 가공에 있어서, 정보 컨텐츠 제작에 소요되는 비용을 절감하고 다양한 컨텐츠의 확보 및 재가공이 용이하게 이루어질수 있는 효과가 있다.
본 발명의 또 다른 효과는, 일회성으로 그치는 방송용 컨텐츠 데이터를 사용자가 소망하는 대로의 정보의 저장 및 재편집이 가능하므로 적극적인 컨텐츠의 이용이 이루어 질 수 있는 효과가 있다.

Claims (6)

  1. 서버에서 디지털 방송망으로부터 송신되는 컨텐츠 데이터를 수신하고, 데이터베이스에 저장하여 필요에 따라 재편집한 후, 인터넷망을 통하여 저장된 컨텐츠 데이터를 사용자의 컴퓨터 단말기에 전송하고, 전송된 컨텐츠 데이터를 사용자의 컴퓨터 단말기를 사용하여 시청하는 디지털 방송용 컨텐츠의 재활용 방법에 있어서,
    튜너부에서 디지털 방송망으로부터 전송되는 전송 스트림을 수신하는 단계; 수신된 전송 스트림을 리멀티플렉서부에서 각 방송 채널별로 분리하는 단계; 분리된 채널별 전송 스트림을 서버가 각 컨텐츠별 데이터로 데이터베이스에 저장하는 단계; 저장된 컨텐츠 데이터를 인터넷망을 통하여 사용자에게 전송하는 단계; 로 구성되는 서버에서의 컨텐츠 데이터의 재전송 수순, 및
    사용자 단말기에서 인터넷망으로부터 재전송된 컨텐츠 데이터를 수신하는 단계; 수신된 컨텐츠 데이터를 디멀티플렉서를 통하여 영상, 음성 및 정보 데이터로 분리하는 단계; 분리된 영상 및 음성 신호가 영상 디코더 및 음성 디코더에 의하여 디코딩되고, 정보 데이터는 정보 처리부를 통하여 해석되는 단계; 영상 디코더 및 음성 디코더의 출력 데이터를 정보 처리부에서의 출력 데이터와 동기화하여 출력하는 단계; 로 구성되는 사용자 단말기에서의 컨텐츠 데이터의 출력 수순, 으로 구성되어 있는 것을 특징으로 하는 디지털 방송용 컨텐츠 데이터의 재활용 방법.
  2. 제 1 항에 있어서,
    분리된 채널별 전송 스트림을 서버가 각 컨텐츠별 데이터로 데이터베이스에 저장한 후,
    디코더부에서 저장된 각 컨텐츠별 데이터를 디코딩하여 컨텐츠 데이터를 해석하는 단계; 서버 시스템 운영자가 해석된 컨텐츠 데이터를 필요에 따라 컨텐츠 저작도구를 사용하여 재편집하는 단계; 서버에서 재편집된 컨텐츠 데이터를 인코딩하여 데이터베이스에 저장하는 단계; 를 더 포함하는 것을 특징으로 하는 디지털 방송용 컨텐츠 데이터의 재활용 방법.
  3. 제 1 항 또는 제 2 항중 어느 한 항에 있어서,
    사용자에게 전송되는 컨텐츠 데이터의 포맷은 송출 스트림(TS)인 것을 특징으로하는 디지털 방송용 컨텐츠 데이터의 재활용 방법.
  4. 방송국으로부터 송신되는 송출 스트림을 수신하기 위한 튜너부; 튜너부에서 수신된 송출 스트림으로부터 각각의 컨텐츠 데이터를 분리하는 리멀티플렉서; 리멀티플렉서로부터 분리된 각각의 컨텐츠 데이터를 저장하는 데이터베이스; 데이터베이스에 저장된 컨텐츠 데이터를 재가공하기 위한 포맷으로 변환을 하는 디코더부; 디코딩된 컨텐츠 데이터를 재편집하기 위한 데이터 편집부; 재편집된 컨텐츠 데이터를 시청자에게 송출할 수 있는 포맷인 TS 포맷의 컨텐츠 데이터로 변환하는 인코더부; 를 포함하는 서버, 및
    인터넷 망을 통하여 전송되는 상기 TS 포맷의 컨텐츠 데이터를 수신하기 위한 수신부; 수신부로부터의 TS 포맷된 컨텐츠 데이터를 영상, 음성 및 정보 데이터로 분리하는 디멀티플렉서부; 분리된 영상 및 음성 데이터를 각각 디코딩하는 영상 데이터 디코더부 및 음성 데이터 디코더부와 분리된 정보 데이터를 디코딩하고 영상 및 음성 데이터와의 동기화 정보들을 해석하는 정보 데이터 처리부; 상기 정보 데이터 처리부에서 해석된 정보 데이터들과 연동되고, 디코딩된 영상 데이터 및 음성 데이터와 상기 정보 데이터를 동기화하고, 사용자의 화면에 출력하기 위한 디스플레이 컨트롤러부 및 오디오 컨트롤러부; 를 포함하는 TS 브라우져를 부설한 컴퓨터 단말기, 로 구성되어 있는 것을 특징으로 하는 디지털 방송용 컨텐츠 데이터의 재활용 시스템.
  5. 제 4 항에 있어서,
    상기 정보 데이터 처리부는,
    사용자의 컴퓨터 단말기로부터 소정의 데이터를 입력받아 이를 인터넷망에 전송하기 위한 송신부; 와 연결되어 있는 것을 특징으로 하는 디지털 방송용 컨텐츠 데이터의 재활용 시스템.
  6. 삭제
KR10-2000-0073040A 2000-12-04 2000-12-04 디지털 방송용 컨텐츠 데이터의 재활용 방법 및 시스템 KR100436088B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR10-2000-0073040A KR100436088B1 (ko) 2000-12-04 2000-12-04 디지털 방송용 컨텐츠 데이터의 재활용 방법 및 시스템
GB0129017A GB2372896A (en) 2000-12-04 2001-12-04 Method for re-utilizing contents data for digital broadcasting
FR0115626A FR2817696B1 (fr) 2000-12-04 2001-12-04 Procede de reutilisation de donnees de contenu pour une diffusion numerique et son systeme
US10/004,922 US20020069414A1 (en) 2000-12-04 2001-12-04 Method for re-utilizing contents data for digital broadcasting and system therefor
DE10159305A DE10159305A1 (de) 2000-12-04 2001-12-04 Verfahren und Vorrichtung zum Wiederverwenden von Dateninhalten für eine digitale Nachrichtenübertragung

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR10-2000-0073040A KR100436088B1 (ko) 2000-12-04 2000-12-04 디지털 방송용 컨텐츠 데이터의 재활용 방법 및 시스템

Publications (2)

Publication Number Publication Date
KR20020043385A KR20020043385A (ko) 2002-06-10
KR100436088B1 true KR100436088B1 (ko) 2004-06-14

Family

ID=19702647

Family Applications (1)

Application Number Title Priority Date Filing Date
KR10-2000-0073040A KR100436088B1 (ko) 2000-12-04 2000-12-04 디지털 방송용 컨텐츠 데이터의 재활용 방법 및 시스템

Country Status (5)

Country Link
US (1) US20020069414A1 (ko)
KR (1) KR100436088B1 (ko)
DE (1) DE10159305A1 (ko)
FR (1) FR2817696B1 (ko)
GB (1) GB2372896A (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8194732B2 (en) 2007-07-30 2012-06-05 Broadcom Corporation Integrated circuit with conversion capability for portable media player
US8582643B2 (en) 2007-07-30 2013-11-12 Broadcom Corporation Integrated circuit with conversion capability for portable medial player

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100409224B1 (ko) * 2001-02-23 2003-12-06 주식회사 에어코드 데이터 방송용 컨텐츠 제작 시스템 및 그 제작 방법
US20030046702A1 (en) * 2001-09-03 2003-03-06 Gen Sasaki Program server and a receiver
KR100439339B1 (ko) * 2002-01-15 2004-07-07 한국전자통신연구원 데이터 방송 서버 제어 장치 및 그 방법
KR100439338B1 (ko) * 2002-01-16 2004-07-07 한국전자통신연구원 디지털 지상파 데이터 방송을 위한 데이터 부호화 장치 및그 방법
KR100800690B1 (ko) * 2006-02-10 2008-02-01 삼성전자주식회사 디지털 방송 서비스 시스템에서 방송 데이터 전송 장치 및방법
DE102007026531A1 (de) * 2006-10-31 2008-05-08 Siemens Ag Verfahren zur Synchronisierung von Szene-Datenfiles und Mediendatenströmen in einem unidirektionalen Datenübertragungssystem
WO2008059511A2 (en) * 2006-11-13 2008-05-22 Alok Singh Remote multimedia for network computing
KR100780003B1 (ko) * 2007-03-27 2007-11-27 주식회사 문화방송 컨텐츠 편집 서비스 시스템 및 그 방법
KR102437726B1 (ko) * 2020-10-12 2022-08-26 세종대학교 산학협력단 스낵 컬처 컨텐츠 저장 방법 및 장치

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0942601A2 (en) * 1998-03-10 1999-09-15 Matsushita Electric Industrial Co., Ltd. Program receiving/storage device
EP0969666A2 (en) * 1998-06-30 2000-01-05 Tokyo Broadcasting System Inc. Broadcasting apparatus and terminal apparatus for digital broadcasting service
KR20000017754A (ko) * 1999-11-08 2000-04-06 황영헌 방송 포털 서비스 시스템
KR20000030833A (ko) * 2000-03-20 2000-06-05 이장욱 쌍방향 티브이 방송 서비스 시스템 및 방법

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2151462C (en) * 1992-12-09 2004-02-24 John S. Hendricks Television program delivery system
US5861906A (en) * 1995-05-05 1999-01-19 Microsoft Corporation Interactive entertainment network system and method for customizing operation thereof according to viewer preferences
US6031577A (en) * 1997-07-10 2000-02-29 Thomson Consumer Electronics, Inc. System for forming and processing program specific information containing text data for terrestrial, cable or satellite broadcast
US6115035A (en) * 1997-07-21 2000-09-05 Mediaone Group, Inc. System and method for automated audio/video archive and distribution
US6209130B1 (en) * 1997-10-10 2001-03-27 United Video Properties, Inc. System for collecting television program data
US7152236B1 (en) * 1998-01-05 2006-12-19 Gateway Inc. Integration of internet sources into an electronic program database list
US20050028206A1 (en) * 1998-06-04 2005-02-03 Imagictv, Inc. Digital interactive delivery system for TV/multimedia/internet
CN100382498C (zh) * 1998-07-14 2008-04-16 索尼公司 数据发送控制方法、数据发送方法和设备以及接收设备
US6233389B1 (en) * 1998-07-30 2001-05-15 Tivo, Inc. Multimedia time warping system
AUPP612998A0 (en) * 1998-09-23 1998-10-15 Canon Kabushiki Kaisha Multiview multimedia generation system
US6349329B1 (en) * 1998-09-29 2002-02-19 Radiowave.Com, Inc. Coordinating delivery of supplemental materials with radio broadcast material
GB9828591D0 (en) * 1998-12-23 1999-02-17 Ntl Group Limited Electronic programme scheduling system
US6611654B1 (en) * 1999-04-01 2003-08-26 Koninklijke Philips Electronics Nv Time- and location-driven personalized TV
AU5147800A (en) * 1999-05-21 2000-12-12 Quokka Sports, Inc. An architecture for controlling the flow and transformation of multimedia data
US6845485B1 (en) * 1999-07-15 2005-01-18 Hotv, Inc. Method and apparatus for indicating story-line changes by mining closed-caption-text
JP2001092744A (ja) * 1999-09-17 2001-04-06 Sony Corp 放送番組情報処理装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0942601A2 (en) * 1998-03-10 1999-09-15 Matsushita Electric Industrial Co., Ltd. Program receiving/storage device
EP0969666A2 (en) * 1998-06-30 2000-01-05 Tokyo Broadcasting System Inc. Broadcasting apparatus and terminal apparatus for digital broadcasting service
KR20000017754A (ko) * 1999-11-08 2000-04-06 황영헌 방송 포털 서비스 시스템
KR20000030833A (ko) * 2000-03-20 2000-06-05 이장욱 쌍방향 티브이 방송 서비스 시스템 및 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8194732B2 (en) 2007-07-30 2012-06-05 Broadcom Corporation Integrated circuit with conversion capability for portable media player
US8582643B2 (en) 2007-07-30 2013-11-12 Broadcom Corporation Integrated circuit with conversion capability for portable medial player

Also Published As

Publication number Publication date
FR2817696B1 (fr) 2005-12-09
DE10159305A1 (de) 2002-08-14
US20020069414A1 (en) 2002-06-06
GB0129017D0 (en) 2002-01-23
GB2372896A (en) 2002-09-04
FR2817696A1 (fr) 2002-06-07
KR20020043385A (ko) 2002-06-10

Similar Documents

Publication Publication Date Title
TW456151B (en) Simulating two way connectivity for one way data streams for multiple parties
KR100427814B1 (ko) 단방향 데이터 스트림을 위한 양방향 접속을 시뮬레이션하기 위한 호스트 장치
JP4169180B2 (ja) 一方向データ・ストリームに対し双方向接続をシミュレートする携帯通信装置
CN1331348C (zh) 广播接收机
US6751800B1 (en) Information processing apparatus, method, and computer-readable medium
CN1146238C (zh) 发送和接收电视节目的方法和装置
JPH09162821A (ja) 多重放送システムとこのシステムで使用される放送送信装置および放送受信装置
US20050021805A1 (en) System and method for transmitting multimedia information streams, for instance for remote teaching
EP0805591B1 (en) Apparatus for transmitting television broadcasting program and apparatus for receiving television broadcasting program
KR100436088B1 (ko) 디지털 방송용 컨텐츠 데이터의 재활용 방법 및 시스템
US7518656B2 (en) Signal processing apparatus, signal processing method, signal processing program, program reproducing apparatus, image display apparatus and image display method
US6665318B1 (en) Stream decoder
JP2000138877A (ja) デジタル放送送信装置および受信装置
JP4719390B2 (ja) 予め定められたテレビジョン番組のインターラクティブ再生を伴なうディジタルテレビジョン受信器／復号器
Bais et al. Customized television: standards compliant advanced digital television
KR20070010653A (ko) 디지털 방송 시스템에서 광고를 제공하는 방법 및 장치
JPH11177944A (ja) 電子番組案内
JPH11284968A (ja) デジタルｔｖ放送送信装置、デジタルｔｖ放送受信装置及びデジタルｔｖ放送送受信システム並びにコンピュ―タ読み取り可能な記録媒体
KR20070082460A (ko) 방송 수신 장치, 방송 프로그램 정보 송수신방법 및 방송프로그램 정보를 전송하기 위한 데이터 구조
JP3882208B2 (ja) 送信装置および受信装置
KR100779117B1 (ko) 장애인 시청각 지원 시스템
JP6855193B2 (ja) 放送受信システム
JP2003111035A (ja) コンテンツ送信制御方法、受信制御方法およびコンテンツ送信制御装置、受信制御装置ならびにコンテンツ送信制御プログラム、受信制御プログラム
JP2021106423A (ja) 放送受信システム
JP6855195B2 (ja) 放送受信システム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130604

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20140526

Year of fee payment: 11

FPAY Annual fee payment

Payment date: 20150601

Year of fee payment: 12

FPAY Annual fee payment

Payment date: 20160511

Year of fee payment: 13

FPAY Annual fee payment

Payment date: 20170324

Year of fee payment: 14

FPAY Annual fee payment

Payment date: 20180416

Year of fee payment: 15

FPAY Annual fee payment

Payment date: 20190326

Year of fee payment: 16