KR20070037918A - 디지털 멀티미디어 방송 서비스 중 방송 다시보기를 위한디지털 멀티미디어 방송 단말기 및 방법 - Google Patents

디지털 멀티미디어 방송 서비스 중 방송 다시보기를 위한디지털 멀티미디어 방송 단말기 및 방법 Download PDF

Info

Publication number
KR20070037918A
KR20070037918A KR1020050093083A KR20050093083A KR20070037918A KR 20070037918 A KR20070037918 A KR 20070037918A KR 1020050093083 A KR1020050093083 A KR 1020050093083A KR 20050093083 A KR20050093083 A KR 20050093083A KR 20070037918 A KR20070037918 A KR 20070037918A
Authority
KR
South Korea
Prior art keywords
broadcast
replay
digital multimedia
multimedia broadcasting
time
Prior art date
Application number
KR1020050093083A
Other languages
English (en)
Other versions
KR100754588B1 (ko
Inventor
박진
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020050093083A priority Critical patent/KR100754588B1/ko
Priority to US11/541,745 priority patent/US20070077026A1/en
Priority to JP2006272136A priority patent/JP2007104679A/ja
Priority to EP06121740A priority patent/EP1804486A3/en
Priority to CN200610142047A priority patent/CN100586172C/zh
Publication of KR20070037918A publication Critical patent/KR20070037918A/ko
Application granted granted Critical
Publication of KR100754588B1 publication Critical patent/KR100754588B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4333Processing operations in response to a pause request
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/658Transmission by the client directed to the server
    • H04N21/6587Control parameters, e.g. trick play commands, viewpoint selection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/27Arrangements for recording or accumulating broadcast information or broadcast-related information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/426Internal components of the client ; Characteristics thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4331Caching operations, e.g. of an advertisement for later insertion during playback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/45Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/907Television signal recording using static stores, e.g. storage tubes or semiconductor memories

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Circuits Of Receivers In General (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

본 발명은 디지털 멀티미디어 방송 데이터 재생을 위한 디지털 멀티미디어 방송 단말기 및 방법에 관한 것이다.
이를 위한 본 발명은 디지털 멀티미디어 방송 서비스 중인 디지털 멀티미디어 방송 데이터 중 일부를 리플레이용 버퍼에 저장하고, 디지털 멀티미디어 방송 서비스 중 방송 다시보기 요구가 있으면 다시보기 요구 시각과 단위 시간 이전의 시각 내의 방송 데이터를 리플레이용 버퍼로부터 검색하여 화면에 디스플레이 한다.
디지털 멀티미디어 방송 서비스, 다시보기, 재시청.

Description

디지털 멀티미디어 방송 서비스 중 방송 다시보기를 위한 디지털 멀티미디어 방송 단말기 및 방법{DIGITAL MULTIMEDIA BROADCASTING TERMINAL AND METHOD FOR CONTROLLING A REPLAY OF DIGITAL MULTIMEDIA BROADCASTING ON DIGITAL MULTIMEDIA BROADCASTING SERVICE}
도 1은 본 발명의 실시 예에 따른 DMB 단말기의 내부 블록 구성도,
도 2는 본 발명의 실시 예에 따라 방송 서비스 중 방송 다시보기 요구에 따른 제어 과정을 나타내는 제어 흐름도,
도 3은 본 발명의 실시 예에 따라 역방향 검색된 방송에 대한 다시보기 모드를 수행하기 위한 과정을 나타내는 제어 흐름도,
도 4는 본 발명의 실시 예에 따라 다시보기용 방송 데이터를 저장하는 리플레이용 버퍼를 도시하는 도면,
도 5는 본 발명의 실시 예에 따라 방송 서비스 중 방송 다시보기용 데이터가 본방송과 동시에 디스플레이 되는 화면을 도시하는 화면 예시도.
본 발명은 디지털 멀티미디어 방송 데이터에 관한 것으로, 특히 디지털 멀티미디어 방송 데이터 재생을 위한 디지털 멀티미디어 방송 단말기 및 방법에 관한 것이다.
통상적으로 디지털 방송이라 함은 종래의 아날로그 방송을 대체하여 고화질과 고음질, 그리고 보다 높은 서비스를 사용자에게 제공하는 방송 서비스를 말한다. 최근에는 디지털 방송 기술 및 이동 통신 기술의 발달에 따라 이동 중에도 디지털 방송을 시청할 수 있도록 하기 위한 디지털 방송 서비스에 대한 관심이 높아지고 있다. 특히 이동 통신 단말기를 이용한 디지털 멀티미디어 방송(DMB : Digital Multimedia Broadcasting 이하, 디지털 멀티미디어 방송을 ‘DMB’와 같은 의미로 사용하도록 함.) 서비스에 대한 관심이 높아지고 있다. 이 디지털 멀티미디어 방송이란 무지향성 수신 안테나를 장착한 개인 휴대용 수신기 또는 차량용 수신기 등을 통해 이동 중에도 다양한 멀티미디어 방송을 다채널로 시청할 수 있도록 하는 방송 서비스를 말한다.
이러한 디지털 멀티미디어 방송이 가능한 단말기에서는 실시간 방송을 제공하는데, 사용자가 자신이 원하는 시간에 실시간 방송을 시청하지 못했다면 방송국의 재방송을 시청하거나 미리 방송을 녹화해 두었다가 원하는 시간에 다시 볼 수 있다. 최근 인터넷의 보편화로 사용자는 단말기에서 인터넷이나 이동 통신망을 통해 VOD(Video on demand) 서버에 접속하여 컨텐츠화 된 해당 방송 프로그램을 검색한 후 다운로드하거나 스트리밍으로 원하는 방송 채널에 대한 재시청을 할 수 있 다. 즉, 현재에는 실시간 방송을 재시청하기 위해서는 해당 방송 프로그램이 종료된 후, 사용자가 단말기를 통해 상기와 같이 방송 채널을 제공하는 서버에 접속하여 재시청하고자 하는 컨텐츠를 찾아 다시 볼 수 있다.
상기와 같이 위성 및 지상파 DMB 방송의 시청자는 고정된 위치에 유선기기를 통해 시청하던 수준에서 벗어나 옥외 혹은 이동 중에 무선 기기인 DMB 단말기를 통해 방송을 시청할 수 있으므로 시청자가 이동 중 시청하지 못한 부분이 발생할 수 있다. 예를 들어, 옥외 이동 중 DMB 단말기를 통해 DMB 방송을 시청하는 시청자는 옥내 즉, 고정된 위치에서 방송을 시청할 때 보다 집중하여 시청할 수 없는 경우가 많다. 이런 경우 시청자는 일정 순간의 부주의로 인해 특정 순간의 방송수신을 보지 못하게 되는 경우가 발생하고, 이에 시청하지 못한 부분의 방송에 대하여 다시 보기를 즉시 수행하고픈 욕구가 발생한다.
그러나, 현재의 방송 재시청을 위한 서비스는 일반적인 재방송인 경우 방송국의 프로그램 편성되기까지 일정시간 기다려야 하고, VOD 서비스는 프로그램이 종료된 다음 해당 방송에 대한 컨텐츠가 서버에 저장된 후에 가능하므로 대기시간이 길다. 또한, 사용자가 DMB 단말기 방송 서비스 중 방송을 녹화하여 재시청을 할 수 있지만, 이는 사용자가 미리 녹화 시점을 정해 녹화설정을 해야 하는 주의를 기울여야 한다. 이뿐만 아니라, 프로그램 녹화를 마칠 때까지 기다려야 하며, 녹화하고픈 일부분을 선택적으로 녹화할 수도 없다.
상술한 바와 같이 종래에는 DMB 방송 서비스 중 DMB 방송을 일부 재시청하고자 하는 경우 해당 방송 프로그램이 종료된 후에 가능하였기 때문에 시청자가 방송 시청 중 부주의 등으로 인해 시청을 놓친 부분을 재시청하고자 하는 경우 즉시 다시 볼 수 있는 방법이 없었다.
따라서 본 발명의 목적은 DMB 방송 서비스 중 DMB 방송을 일부 재시청할 수 있도록 하기 위한 디지털 멀티미디어 방송 단말기 및 방법을 제공하는 데 있다.
본 발명의 다른 목적은 DMB 방송 서비스 중 방송 다시보기 요구 시 다시보기용 방송을 현재 서비스중인 방송과 동시에 화면에 디스플레이 할 수 있도록 하기 위한 디지털 멀티미디어 방송 단말기 및 방법을 제공하는 데 있다.
상술한 바를 달성하기 위한 본 발명은 디지털 멀티미디어 방송 서비스 중 방송 다시보기를 위한 디지털 멀티미디어 방송 단말기에 있어서, 디지털 멀티미디어 방송 신호를 수신하여 방송 데이터로 변환하는 디지털 방송 수신부와, 상기 방송 데이터를 버퍼링하여 출력하는 버퍼와, 상기 버퍼로부터 출력되는 방송 데이터를 저장하고 제어신호에 따라 상기 저장된 방송 데이터의 일부를 출력하는 리플레이용 버퍼와, 상기 버퍼 및 리플레이용 버퍼로부터 출력되는 방송 데이터를 디스플레이 하는 표시부와, 상기 리플레이용 버퍼에 저장된 방송 데이터를 역방향 검색하기 위한 단위 시간을 저장하는 메모리부와, 상기 디지털 멀티미디어 방송 서비스 중 방송 다시보기 요구가 있으면 상기 다시보기 요구 시각과 상기 단위 시간 이전의 시 각 내의 방송 데이터를 상기 리플레이용 버퍼에서 검색하여 상기 표시부로 출력하는 제어부로 포함하여 이루어진 것을 특징으로 한다.
또한 본 발명은 디지털 멀티미디어 방송 단말기에서 디지털 멀티미디어 방송 서비스 중 방송 다시보기를 위한 방법에 있어서, 상기 방송 서비스 중인 디지털 멀티미디어 방송 데이터 중 일부를 리플레이용 버퍼에 저장하는 과정과, 상기 디지털 멀티미디어 방송 서비스 중 방송 다시보기 요구가 있으면 상기 다시보기 요구 시각과 단위 시간 이전의 시각 내의 방송 데이터를 상기 리플레이용 버퍼로부터 검색하여 화면에 디스플레이 하는 과정을 포함함을 특징으로 한다.
이하 본 발명의 바람직한 실시 예들을 첨부한 도면을 참조하여 상세히 설명한다. 도면들 중 동일한 구성요소들은 가능한 한 어느 곳에서든지 동일한 부호들로 나타내고 있음에 유의해야 한다. 또한 본 발명의 요지를 불필요하게 흐릴 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략한다.
그러면, 본 발명의 실시 예에 따른 DMB 단말기의 구성 및 동작에 대하여 도 1을 참조하여 살펴보도록 한다. 도 1은 본 발명의 실시 예에 따른 디지털 멀티미디어 방송 단말기의 내부 블록 구성도이다.
제어부(110)는 디지털 멀티미디어 방송 단말기의 전반적인 제어 동작을 수행한다. 제어부(110)는 디지털 방송 수신부(102)로부터 수신된 방송 데이터를 버퍼(104)와 리플레이용 버퍼(106)에 동시에 저장하도록 제어한다.
이후, 제어부(110)는 방송을 재생하는 중에 사용자로부터 방송 일부분를 다시보기 위한 소정키가 입력되면, 상기 소정키가 입력된 시점으로부터 미리 설정된 단위시간 전의 방송 데이터부터 소정키가 입력된 시점까지의 방송 데이터를 리플레이용 버퍼(106)로부터 재생한다. 이때, 제어부(110)는 다시보기 모드를 위한 소정키의 입력 횟수에 따라 다시보기용 방송 데이터가 저장된 시점을 결정하게 된다. 만약 단위시간을 6초라고 설정한 상태에서 상기의 소정키 입력이 1번 입력되면 현 시점에서 6초에 저장된 방송 데이터를 리플레이용 버퍼(106)로부터 읽어 재생하도록 제어하고, 상기의 소정키 입력이 3번 입력되면 현 시점에서 18초 전에 저장된 방송 데이터를 리플레이용 버퍼(106)로부터 읽어 재생하도록 제어하도록 한다.
그리고, 제어부(110)는 디지털 방송 수신부(102)를 통해 실시간으로 수신되는 방송 데이터가 버퍼(104)와 멀티미디어부(100)를 통해 영상 및 오디오 데이터로 파싱 처리하고, 해당 영상 및 오디오 데이터가 표시부(130) 및 스피커로 출력되도록 제어한다. 또한, 제어부(110)는 다시보기 모드 요구에 따라 리플레이용 버퍼(106)로부터의 방송 데이터를 영상 및 오디오 데이터로 파싱하여 해당 영상 및 오디오 데이터가 표시부(130) 및 스피커로 출력되도록 제어한다.
상기와 같이 DMB 방송 서비스 수행 중에 다시보기 모드 요구가 있는 경우, 제어부(110)는 실시간으로 수신되는 방송 서비스의 영상을 주화면으로 표시하도록 제어하고, 다시보기 모드에 따른 다시보기용 방송 영상을 부화면으로 표시하도록 제어한다. 이때, 설정에 따라 현재 수행 중인 방송 서비스의 영상을 부화면으로 표시하고, 다시보기 모드에 따른 다시보기용 방송 영상을 주화면으로 표시하도록 제어할 수도 있다. 즉, 본 발명은 실시간으로 수신되는 방송 서비스의 영상과 다시보기 영상의 2개의 영상을 화면에 표시하기 위해 단말기의 화면을 픽쳐인픽쳐(PIP : Picture In Picture)방식을 적용하여 주화면과 부화면으로 분할하여 디스플레이 한다.
한편, 디지털 방송 수신부(102)는 안테나를 통해 디지털 방송 데이터(이하, 방송 데이터)를 수신하여 전송 패킷을 역다중화한 후 디코딩 과정을 통해 방송 데이터를 영상 및 오디오 데이터로 파싱한다.
버퍼(104)는 디지털 방송 수신부(102)로부터 입력되는 영상 및 오디오 데이터를 각각 저장하기 위한 비디오 버퍼와 오디오 버퍼를 포함하여 구성되고, 입력된 영상 및 오디오 데이터를 버퍼링하여 출력한다.
리플레이용 버퍼(106)는 원형버퍼의 형태로 구성되고, 다시보기용 방송 데이터를 저장한다. 이때, 다시보기용 방송 데이터는 실시간 DMB 방송 중에 현 시점 이전의 일정시간 동안의 방송 데이터를 말한다. 이와 같은 리플레이용 버퍼(106)의 크기는 각 시스템에서 허용하는 메모리 자원에 따라 다르며 리플레이용 버퍼(106) 크기 이상의 DMB 방송 데이터는 겹쳐 씌어지므로 용량이 허용하는 일정 시간 내 방송만을 검색 및 재 시청 할 수 있다.
멀티미디어부(100)는 디지털 방송 서비스 시 제어부로서의 기능을 수행하며, 디지털 방송 수신부(102)를 통해 전달되는 각각의 영상 및 오디오 데이터를 표시부(108) 및 오디오 처리부(109)로 출력하는 역할을 수행한다. 이러한 멀티미디어부(100)는 코덱을 포함하고, 본 발명에서는 현재 서비스 중인 방송 데이터를 처리하기 위한 비디오/오디오 코덱과 다시보기용 방송 데이터을 처리하기 위한 비디오 비디오/오디오 코덱을 별도로 구비한다. 그러나, 별도의 코덱을 구비하지 않고 단일 코덱을 사용할 수도 있다. 만약, 단일 코덱을 사용하게 되면, 현재 서비스 중인 방송 데이터를 주화면에서 출력시키지 않고, 다시보기용 데이터만을 출력할 수 있다. 또한, 만약 디코딩이 수행된 프레임 버퍼 데이터를 리플레이용 버퍼(106)에 저장할 경우 별도의 코덱을 사용하지 않아도 현재 서비스 중인 방송 데이터를 주화면으로 출력할 수 있다.
표시부(108)는 제어부(110)의 제어 하에 키입력부(112)로부터 입력된 키입력 데이터에 대한 표시 데이터를 입력받아 디스플레이 하거나, 사용자가 필요한 기능을 설정하거나 구동시킴에 있어 그 상태를 가시적으로 알 수 있도록 한다. 그리고 본 발명에 따른 표시부(108)는 DMB 제어부(100)의 제어 하에 방송 서비스 수행에 따른 영상을 표시하면서 방송 서비스 수행 중 다시보기 모드 동작 시에는 픽쳐인픽쳐 형태로 서비스중인 방송 영상과 다시보기를 위한 방송 영상을 동시에 표시한다.
그리고 오디오 처리부(150)는 마이크로폰(MIC) 및 스피커(SPK)와 접속되며, DMB 제어부(100)로부터 전달되는 오디오 신호를 변환하여 스피커(SPK)를 통해 출력하고, 마이크로폰(MIC)으로부터 수신되는 오디오 신호를 데이터화하여 DMB 제어부(100)로 전달한다. 특히 본 발명에서 오디오 처리부(109)는 리플레이용 버퍼(106)로부터 출력되는 오디오 신호와 버퍼(104)로부터 출력되는 오디오 신호를 각각 재생하기 위해 독립된 코덱이 사용하여 서로 다른 영상에 대응되어 출력되는 오디오 신호를 이어폰의 레프트 단자(L)와 라이트 단자(R)에 각각 출력할 수 있다.
키입력부(112)는 사용자와의 인터페이스를 위한 장치로써 구비된 각 키의 입력에 따라 그 고유의 키입력 데이터를 출력하고, 키입력부(112)에서 출력되는 키입 력 데이터는 제어부(110)에 인가되어 이러한 키입력 데이터가 어떠한 키 입력에 따른 키입력 데이터가 되는 지가 검출되어, 그 결과에 따라 제어부(110)는 해당 동작을 수행한다. 그리고 본 발명에 따라 키입력부(112)는 다시보기 모드를 수행하기 위한 역방향 검색키를 포함한다. 본 발명에 따른 다시보기 모드를 위한 역방향 검색키는 기존의 다른 기능을 수행하기 위한 기능키에 의해 구현될 수도 있으며, 별도로 구비되는 키에 의해 구현될 수 있다.
메모리(114)는 디지털 멀티미디어 방송 수신용 단말기의 전반적인 기능들과 관련된 정보를 저장함과 동시에 방송 서비스 제공과 관련된 정보도 저장한다. 특히, 본 발명의 실시 예에 따른 메모리(114)는 다시보기 모드를 수행하기 위한 역방향 검색키 입력 시 리플레이용 버퍼(106)에 저장된 방송 데이터를 검색하기 위한 단위시간을 저장한다. 이때, 단위시간(Granule)은 역방향 검색(Backward Search)을 위한 키 입력이 한 번 있을 때마다 현재시점에서 얼마만큼의 이전 시점으로 검색해야 하는 지에 대한 시간 단위를 말한다.
무선부(116)는 제어부(110)의 제어하에 안테나(ANT)를 통해 기지국과 RF신호를 송/수신한다.
그러면, 이제 상기한 도 1과 같이 구성되는 DMB 단말기에서 디지털 방송 서비스 중 사용자의 방송 다시보기 요청에 따라 방송 다시보기 모드를 수행하기 위한 과정을 도 2를 참조하여 살펴보도록 한다. 도 2는 본 발명의 실시 예에 따라 방송 서비스 중 방송 다시보기 요구에 따른 제어 과정을 나타내는 제어 흐름도이다.
도 2를 참조하면, 먼저 제어부(110)는 200단계에서 대기상태를 유지하다가 202단계에서 방송 서비스 모드 요청이 있으면 204단계로 진행한다. 이에 따라 디지털 방송 수신부(102)를 통해 수신되는 방송 데이터가 영상 및 오디오 데이터로 파싱되면, 제어부(110)는 204단계에서 실시간 수신된 방송 데이터를 버퍼(104) 및 리플레이용 버퍼(106)에 저장한다.
이후, 제어부(110)는 206단계에서 현재 방송 서비스 모드 수행에 따라 파싱된 방송 데이터 즉, 영상 및 오디오 데이터가 저장된 버퍼(104)로부터 출력되는 데이터를 표시부(108) 및 스피커를 통해 출력되도록 제어한다. 이와 같이 영상 및 오디오 데이터가 출력되는 상태에서 제어부(110)는 208단계에서 역방향 검색키가 입력되는지를 검사한다.
검사 결과, 역방향 검색키가 입력되었으면 제어부(110)는 210단계로 진행하여 방송 다시보기 모드를 수행한다. 여기서, 방송 다시보기 모드는 제어부(110)가 현재 실시간 수신되는 방송 데이터를 주화면에 출력함과 동시에 역방향 검색키에 따라 리플레이용 버퍼(106)로부터 현시점에서 미리 설정된 단위 시간만큼 이전 시점에 저장된 미리보기용 방송 데이터를 부화면에 출력하는 모드이다.
본 발명의 실시 예에서는 단위시간을 6초로 설정함을 가정하고 설명하도록 한다. 즉, 한 번의 역방향 검색키가 입력되면 현 시점에서 6초 전에 저장된 방송부터 역방향 검색키가 입력된 시점에 저장된 방송까지 다시 볼 수 있도록 한다. 만약, 역방향 검색키 입력이 2번 있어 다시보기 모드를 수행하는 경우에는 현 시점에서 12초 전의 방송을 다시 볼 수 있도록 하는 것이다. 그러나, 만약 검색하고자 하는 시간의 방송 데이터가 이미 리플레이용 버퍼(106)에서 겹쳐 쓰기(Overwrite)된 후라면, 리플레이용 버퍼(106) 내에서 가장 오랜 시간 전의 데이터가 선택된다. 예를 들어, 도 5를 참조하여 설명하면, DMB 실시간 방송으로 드라마 시청 중인 사용자가 잠시 다른 관심용무를 본 다음, 20:01:06초에 다시 방송을 보게 되면 이전에 무슨일이 있었는지 궁금할 수 있다. 이와 같은 경우 사용자는 시청하지 못한 부분에 대해 다시 보기 위해 역방향 검색(Short Backward Search)키를 입력함으로써 500 화면과 같이 미리 설정된 단위시간인 6초전 20:01:00초의 방송 내용을 현재 서비스 받는 방송과 함께 시청할 수 있도록 한다. 이때, 사용자는 다시보기 모드시 녹화키를 통해 다시보기 시점부터 방송 데이터를 녹화를 수행할 수도 있다.
이하, 도 3의 설명에서 방송 다시보기 모드를 수행하기 위한 과정에 대하여 더 구체적으로 설명하도록 한다.
이후, 제어부(110)는 212단계로 진행하여 다시보기 모드가 종료되는지를 검사한다. 이때 다시보기 모드의 종료의 판단 기준은 현재 재생중인 다시보기 방송 데이터에 대한 시각이 208단계에서의 역방향 검색키를 입력한 시점의 시각 이후이면 다시보기 모드를 종료하는 것이다. 즉, 역방향 검색키의 입력에 따라 현재 시점에서 단위 시간만큼의 이전 시점부터 현재 시점까지의 다시보기용 방송 데이터를 재생한 후 다시보기 모드를 종료하는 것이다.
212단계 검사결과 다시보기 모드가 종료되지 않으면 제어부(110)는 210단계로 진행하여 210단계에서의 방송 다시보기 모드를 계속하여 수행한다.
그러면, 상기의 210단계에서의 방송 다시보기 모드 수행 시 제어부(110)의 제어 과정을 도 3을 참조하여 구체적으로 살펴보도록 한다.
우선, 사용자로부터 역방향 검색키 입력이 있어 방송 다시보기 모드로 진입하면, 300단계에서 제어부(110)는 역방향 검색키가 입력된 시점의 현재 시각을 다시보기 시작 시각으로 설정한다. 이후, 제어부(110)는 302단계에서 리플레이용 버퍼(106)에서 다시보기 시작 시각으로부터 미리 설정된 단위시간 이전 시각부터 다시보기 시작 시각까지 저장된 다시보기용 데이터를 검색한 후, 304단계로 진행하여 검색하고자 하는 시점의 다시보기용 데이터가 겹쳐 쓰기가 되었는지를 검사한다.
만약, 304단계 검사결과 검색하고자 하는 시점의 방송 데이터가 겹쳐 쓰기가 된 상태이면, 제어부(110)는 308단계로 진행하여 가장 오랜 시간 이전에 저장된 데이터를 표시부(108)의 부화면에 디스플레이한 후 310단계로 진행한다. 이때, 다시보기 모드 수행에 따른 방송이 부화면에 디스플레이 될 시 현재 서비스 중인 방송 데이터는 주화면에 디스플레이 되는 상태이다.
그러나, 304단계 검사결과 검색하고자 하는 시점의 방송 데이터가 리플레이용 버퍼(106)에 저장되어 있으면, 제어부(110)는 306단계로 진행하여 단위시간 전에 해당하는 방송 데이터를 표시부(108)의 부화면에 디스플레이 한 후 310단계로 진행한다. 예를 들어 도 4(a)를 참조하면, 현재 시각이 “20시 1분 6초”일 때 한번의 역방향 검색키가 입력되면 6초 전인 “20시 1분”의 방송 데이터부터 “20시 1분 6초”에 대한 방송 데이터까지 재생된다.
한편, 306단계와 308단계에서 진행한 310단계에서 제어부(110)는 현재 다시보기 모드 수행 중에 또 다시 역방향 검색키 입력이 있는지를 검사한다.
310단계 검사결과, 역방향 검색키 입력이 있으면 311단계로 진행하여 제어부 (110)는 현재 다시보기 수행중인 데이터에 대한 시각을 다시보기 시작 시각으로 설정한 후 302단계 내지 310단계를 반복 수행한다.
예를 들어 도 4의 (b)를 참조하면, “20시 1분 6초”일 때 한번의 역방향 검색키가 입력으로 6초 전의 방송을 다시보기를 3초간 시청한 상태 즉 “20시 1분 3초”에서 또 한번 검색키를 입력하였다면 현재 다시보기 수행 중인 데이터에 대한 시각인 “20시 1분 3초”으로부터 6초 전인 “20시 0분 57초”에 대응되는 데이터부터 재생된다. 즉, 최초 역방향 검색키 입력 시점으로부터 9초 전의 데이터를 볼 수 있다.
또한, 도 4의 (c)를 참조하면, 한번의 역방향 검색키 입력 후 짧은 시간 간격 내 연속적인 키 입력이 반복될 경우, 소정시간(예컨데, 키 입력횟수 * 단위시간) 만큼의 이전 방송 데이터부터 볼 수 있다. 이때, 다시보기 시작 시각은 최초 검색키 입력시간이다.
한편, 310단계 검사결과 역방향 검색키가 입력되지 않았으면 312단계로 진행하여 현재 재생중인 다시보기 방송 데이터의 시각이 최초 다시보기 시작 시각보다 이전인지를 검사한다.
312단계 검사결과 현재 재생중인 다시보기 방송 데이터 시각이 최초 다시보기 시작 시각보다 이전이면 제어부(110)는 316단계로 진행하여 계속하여 다음 위치의 방송 데이터를 부화면에 디스플레이 한다.
그러나 만약 현재 재생중인 다시보기 방송 데이터 시각이 최초 다시보기 시작시각 이후이면 제어부(110)는 314단계로 진행하여 다시보기 모드를 종료한다. 이 때, 다시보기 모드가 종료되면 제어부(110)는 활성화된 부화면을 비활성화 시킨다.
상기와 같이 본 발명은 DMB 방송 서비스 중 수신되는 방송 데이터를 재생함과 동시에 현시점 이전의 일정부분을 별도의 리플레이용 버퍼에 저장하고, 다시보기 요구에 따라 리플레이용 버퍼에 저장된 방송 데이터를 역방향 검색하여 현재 서비스중인 방송 서비스와 동시에 화면에 재생할 수 있도록 한다.
상술한 바와 같이 본 발명은 DMB 방송 서비스 중 일부 방송 다시보기 요구에 따라 다시보기용 방송을 현재 서비스중인 방송과 동시에 화면에 디스플레이 함으로써 사용자로 하여금 관심있는 이벤트를 실시간 방송 중에 즉시 확인시킬 수 있다. 또한, 사용자는 역방향 검색된 내용을 녹화할 수 있으므로 관심있는 일부 이벤트만을 선택적으로 녹화할 수 있는 효과가 있다.

Claims (13)

  1. 디지털 멀티미디어 방송 서비스 중 방송 다시보기를 위한 디지털 멀티미디어 방송 단말기에 있어서,
    디지털 멀티미디어 방송 신호를 수신하여 방송 데이터로 변환하는 디지털 방송 수신부와,
    상기 방송 데이터를 버퍼링하여 출력하는 버퍼와,
    상기 버퍼로부터 출력되는 방송 데이터를 저장하고 제어신호에 따라 상기 저장된 방송 데이터의 일부를 출력하는 리플레이용 버퍼와,
    상기 버퍼 및 리플레이용 버퍼로부터 출력되는 방송 데이터를 디스플레이 하는 표시부와,
    상기 리플레이용 버퍼에 저장된 방송 데이터를 역방향 검색하기 위한 단위 시간을 저장하는 메모리부와,
    상기 디지털 멀티미디어 방송 서비스 중 방송 다시보기 요구가 있으면 상기 다시보기 요구 시각과 상기 단위 시간 이전의 시각 내의 방송 데이터를 상기 리플레이용 버퍼에서 검색하여 상기 표시부로 출력하도록 제어하는 제어부로 구성됨을 특징으로 하는 디지털 멀티미디어 방송 단말기.
  2. 제1 항에 있어서, 상기 리플레이용 버퍼가 설정된 크기 이상의 방송 데이터 는 겹쳐 씌어(Rewrite)지는 것을 특징으로 하는 디지털 멀티미디어 방송 단말기.
  3. 제1항에 있어서, 상기 제어부가,
    상기 버퍼로부터 출력되는 방송 데이터는 상기 표시부의 주화면에 표시하도록 제어하고, 상기 방송 다시보기 요구에 따라 출력되는 방송 데이터는 상기 표시부의 부화면에 표시하도록 제어함을 더 포함하여 구성되는 것을 특징으로 하는 디지털 멀티미디어 방송 단말기.
  4. 제1항에 있어서, 상기 제어부가,
    상기 방송 다시보기 요구에 따른 방송 데이터를 출력 중 추가적인 방송 다시보기 요구가 있으면, 상기 추가적인 다시보기 요구 시각으로부터 단위 시간 전의 시각과 상기 최초 다시보기 요구 시각 내의 방송 데이터를 출력하도록 제어함을 더 포함하여 구성되는 것을 특징으로 하는 디지털 멀티미디어 방송 단말기.
  5. 디지털 멀티미디어 방송 단말기에서 디지털 멀티미디어 방송 서비스 중 방송 다시보기를 위한 방법에 있어서,
    상기 방송 서비스 중인 디지털 멀티미디어 방송 데이터 중 일부를 리플레이 용 버퍼에 저장하는 과정과,
    상기 디지털 멀티미디어 방송 서비스 중 방송 다시보기 요구가 있으면 상기 다시보기 요구 시각과 단위 시간 이전의 시각 내의 방송 데이터를 상기 리플레이용 버퍼로부터 검색하여 화면에 디스플레이 하는 과정을 포함하여 이루어진 것을 특징으로 하는 디지털 멀티미디어 방송 서비스 중 방송 다시보기를 위한 방법.
  6. 제5 항에 있어서, 상기 방송 서비스 중인 디지털 멀티미디어 방송 데이터 중 일부를 리플레이용 버퍼에 저장하는 과정은,
    방송 서비스 중인 디지털 멀티미디어 방송 데이터를 상기 리플레이용 버퍼에 저장하고, 상기 디지털 멀티미디어 방송 데이터중 상기 리플레이용 버퍼의 크기 이상의 방송 데이터에 대하여는 겹쳐 쓰도록(Rewrite)하는 과정임을 특징으로 하는 디지털 멀티미디어 방송 서비스 중 방송 다시보기를 위한 방법.
  7. 제5 항에 있어서, 상기 방송 데이터를 화면에 디스플레이 하는 과정은,
    현재 서비스 중인 방송 데이터는 주화면에 표시함과 동시에 상기 방송 다시보기 요구에 따른 방송 데이터는 부화면에 표시하는 과정임을 특징으로 하는 디지털 멀티미디어 방송 서비스 중 방송 다시보기를 위한 방법.
  8. 제5 항에 있어서,
    상기 방송 다시보기 요구에 따른 방송 데이터를 출력 중 추가적인 방송 다시보기 요구가 있으면, 상기 추가적인 다시보기 요구 시각으로부터 단위 시간 전의 시각과 상기 최초 다시보기 요구 시각 내의 방송 데이터를 상기 부화면에 표시하는 과정을 더 포함하여 이루어진 것을 특징으로 하는 디지털 멀티미디어 방송 서비스 중 방송 다시보기를 위한 방법.
  9. 방송 다시보기를 위한 디지털 멀티미디어 방송 단말기에 있어서,
    수신되는 방송 데이터의 일부를 저장하는 리플레이용 버퍼와,
    방송 다시보기 요구가 있으면 상기 다시보기 요구 시각으로부터 소정의 단위 시간 이전의 시각 내의 방송 데이터를 상기 리플레이용 버퍼에서 검색하여 디스플레이 하도록 제어하는 제어부로 구성됨을 특징으로 하는 디지털 멀티미디어 방송 단말기.
  10. 제 9항에 있어서,
    상기 방송 데이터를 실시간으로 버퍼링하여 출력하는 버퍼와,
    상기 리플레이용 버퍼에 저장된 방송 데이터를 역방향 검색하기 위한 단위 시간을 저장하는 메모리부를 더 포함하여 구성됨을 특징으로 하는 디지털 멀티미디어 방송 단말기.
  11. 제9 항에 있어서, 상기 리플레이용 버퍼가 설정된 크기 이상의 방송 데이터는 겹쳐 씌어(Rewrite)지는 것을 특징으로 하는 디지털 멀티미디어 방송 단말기.
  12. 제10 항에 있어서, 상기 제어부가,
    상기 방송 다시보기 요구에 따른 방송 데이터를 출력 중 추가적인 방송 다시보기 요구가 있으면, 상기 추가적인 다시보기 요구 시각으로부터 상기 단위 시간 전의 시각과 상기 최초 다시보기 요구 시각 내의 방송 데이터를 출력하도록 제어함을 더 포함하여 구성되는 것을 특징으로 하는 디지털 멀티미디어 방송 단말기.
  13. 제10 항에 있어서, 상기 제어부가,
    상기 버퍼로부터 출력되는 방송 데이터는 주화면에 표시하도록 제어하고, 상기 방송 다시보기 요구에 따라 출력되는 방송 데이터는 부화면에 표시하도록 제어함을 더 포함하여 구성되는 것을 특징으로 하는 디지털 멀티미디어 방송 단말기.
KR1020050093083A 2005-10-04 2005-10-04 디지털 멀티미디어 방송 서비스 중 방송 다시보기를 위한디지털 멀티미디어 방송 단말기 및 방법 KR100754588B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020050093083A KR100754588B1 (ko) 2005-10-04 2005-10-04 디지털 멀티미디어 방송 서비스 중 방송 다시보기를 위한디지털 멀티미디어 방송 단말기 및 방법
US11/541,745 US20070077026A1 (en) 2005-10-04 2006-10-02 Method of replaying DMB data during DMB service and DMB terminal implementing the same
JP2006272136A JP2007104679A (ja) 2005-10-04 2006-10-03 Dmbサービス中におけるdmbデータの再生のためのdmb端末機及び方法
EP06121740A EP1804486A3 (en) 2005-10-04 2006-10-04 Method of replaying DMB data during DMB service and DMB terminal implementing same
CN200610142047A CN100586172C (zh) 2005-10-04 2006-10-08 重放dmb数据的方法及实现该方法的dmb终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020050093083A KR100754588B1 (ko) 2005-10-04 2005-10-04 디지털 멀티미디어 방송 서비스 중 방송 다시보기를 위한디지털 멀티미디어 방송 단말기 및 방법

Publications (2)

Publication Number Publication Date
KR20070037918A true KR20070037918A (ko) 2007-04-09
KR100754588B1 KR100754588B1 (ko) 2007-09-05

Family

ID=37902045

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020050093083A KR100754588B1 (ko) 2005-10-04 2005-10-04 디지털 멀티미디어 방송 서비스 중 방송 다시보기를 위한디지털 멀티미디어 방송 단말기 및 방법

Country Status (5)

Country Link
US (1) US20070077026A1 (ko)
EP (1) EP1804486A3 (ko)
JP (1) JP2007104679A (ko)
KR (1) KR100754588B1 (ko)
CN (1) CN100586172C (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101506657B1 (ko) * 2013-10-16 2015-03-31 한양대학교 에리카산학협력단 탐색바 로딩모듈을 갖는 스마트 디스플레이를 이용한 광고 방법

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100735235B1 (ko) * 2005-10-12 2007-07-03 삼성전자주식회사 지상파 dmb 단말 장치에서 pip 기능을 이용한 이종서비스 제공 방법
US8014446B2 (en) 2006-12-22 2011-09-06 Ibiquity Digital Corporation Method and apparatus for store and replay functions in a digital radio broadcasting receiver
US20100043038A1 (en) * 2008-08-14 2010-02-18 Zoran Corporation System and method for efficient video and audio instant replay for digital television
KR101146431B1 (ko) 2009-11-23 2012-05-18 에스케이플래닛 주식회사 방송 서비스 시스템 및 방송 서비스 방법
KR101146422B1 (ko) 2009-11-24 2012-05-17 에스케이플래닛 주식회사 방송 서비스 시스템 및 방송 서비스 방법
CN101778273A (zh) * 2010-01-20 2010-07-14 中兴通讯股份有限公司 多媒体广播节目转录方法及装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0965225A (ja) * 1995-08-24 1997-03-07 Hitachi Ltd テレビジョン装置及びその表示方法
US20010033343A1 (en) * 2000-03-23 2001-10-25 Adrian Yap Multi-tuner DVR
DE10146036B4 (de) * 2001-09-18 2012-07-26 Robert Bosch Gmbh Verfahren zur Umwandlung eines Video-und /oder Audio-Datenstromes
KR100564452B1 (ko) * 2003-04-03 2006-03-29 엘지전자 주식회사 영상 녹화 및 재생 장치 및 방법
US7509021B2 (en) * 2005-06-27 2009-03-24 Streaming Networks (Pvt.) Ltd. Method and system for providing instant replay

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101506657B1 (ko) * 2013-10-16 2015-03-31 한양대학교 에리카산학협력단 탐색바 로딩모듈을 갖는 스마트 디스플레이를 이용한 광고 방법

Also Published As

Publication number Publication date
EP1804486A3 (en) 2010-09-08
CN1946172A (zh) 2007-04-11
JP2007104679A (ja) 2007-04-19
KR100754588B1 (ko) 2007-09-05
EP1804486A2 (en) 2007-07-04
US20070077026A1 (en) 2007-04-05
CN100586172C (zh) 2010-01-27

Similar Documents

Publication Publication Date Title
KR100754676B1 (ko) 디지털 방송 수신 단말기의 전자 프로그램 가이드 데이터관리 장치 및 방법
KR100829113B1 (ko) 디지털 멀티미디어 방송 서비스에서 방송 데이터 제공 장치및 방법
KR101855540B1 (ko) 콘텐츠 공급 장치, 콘텐츠 공급 방법, 콘텐츠 재생 장치, 콘텐츠 재생 방법, 프로그램 및 콘텐츠 시청 시스템
RU2343637C2 (ru) Способ воспроизведения данных широковещания в приемнике
KR100807735B1 (ko) 디지털 멀티미디어 방송 단말기에서 방송 데이터 처리 장치 및 방법
KR100754588B1 (ko) 디지털 멀티미디어 방송 서비스 중 방송 다시보기를 위한디지털 멀티미디어 방송 단말기 및 방법
US7861265B2 (en) Electronic apparatus having broadcast receiving function and method for displaying electronic program guide therein
US7768578B2 (en) Apparatus and method of receiving digital multimedia broadcasting
JP2012130048A (ja) テレビ放送視聴装置及びプログラム
KR100800834B1 (ko) 디지털 방송을 재생하는 이동 통신 단말기 및 그 방법
US20080037416A1 (en) Portable terminal and method for multitasking
JP2009152927A (ja) コンテンツの再生方法および再生システム
KR20070079370A (ko) 이동 방송 수신기 및 이동 방송 수신 데이터 처리방법
US20140075471A1 (en) Apparatus, systems and methods for accessing supplemental information pertaining to a news segment
KR20050052859A (ko) 디지털 멀티미디어 방송 수신장치
JP2008042234A (ja) テレビ放送視聴装置及びプログラム
KR100848495B1 (ko) 동영상 탐색 시스템 및 그 방법.
KR100836611B1 (ko) 방송 프로그램을 배경화면으로 설정하는 방법 및 장치,이를 이용한 휴대용 단말기
KR100678057B1 (ko) 휴대용 단말기에서 동영상의 퀵 뷰어 실행방법
KR100407837B1 (ko) 스틸 이미지를 캡쳐할 수 있는 셋탑 박스 및 이를 이용한스틸 이미지 캡쳐 방법
KR100737097B1 (ko) 디지털 멀티미디어 방송 저장 시스템 및 그 제어 방법
KR100892465B1 (ko) 방송 신호의 재생/녹화 장치 및 방법, 이를 가지는 휴대용단말기
KR20070023464A (ko) 가상 pvr 서비스 시스템 및 그 방법
KR100892466B1 (ko) 방송 신호의 재생/녹화 장치, 이 장치를 가지는 휴대용단말기
KR100737071B1 (ko) Pvr 시스템의 타임쉬프트 구동 장치 및 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
G170 Publication of correction
FPAY Annual fee payment

Payment date: 20120730

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20130730

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20140730

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20150730

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20160728

Year of fee payment: 10

LAPS Lapse due to unpaid annual fee