KR20040041662A - 인트라 화상을 이용한 역방향 트릭 모드 - Google Patents

인트라 화상을 이용한 역방향 트릭 모드 Download PDF

Info

Publication number
KR20040041662A
KR20040041662A KR10-2004-7004944A KR20047004944A KR20040041662A KR 20040041662 A KR20040041662 A KR 20040041662A KR 20047004944 A KR20047004944 A KR 20047004944A KR 20040041662 A KR20040041662 A KR 20040041662A
Authority
KR
South Korea
Prior art keywords
field
intra picture
picture
trick mode
flag
Prior art date
Application number
KR10-2004-7004944A
Other languages
English (en)
Other versions
KR100961784B1 (ko
Inventor
슈 린
도날드헨리 윌리스
Original Assignee
톰슨 라이센싱 소시에떼 아노님
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 톰슨 라이센싱 소시에떼 아노님 filed Critical 톰슨 라이센싱 소시에떼 아노님
Publication of KR20040041662A publication Critical patent/KR20040041662A/ko
Application granted granted Critical
Publication of KR100961784B1 publication Critical patent/KR100961784B1/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/78—Television signal recording using magnetic recording
    • H04N5/782—Television signal recording using magnetic recording on tape
    • H04N5/783—Adaptations for reproducing at a rate different from the recording rate
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00—Image coding
    • G06T9/004—Predictors, e.g. intraframe, interframe coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432—Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325—Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440281—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/78—Television signal recording using magnetic recording
    • H04N5/782—Television signal recording using magnetic recording on tape
    • H04N5/7824—Television signal recording using magnetic recording on tape with rotating magnetic heads
    • H04N5/7828—Television signal recording using magnetic recording on tape with rotating magnetic heads involving transversal scanning of the magnetic tape
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/775—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television receiver
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/84—Television signal recording using optical recording
    • H04N5/85—Television signal recording using optical recording on discs or drums

Abstract

본 발명은 트릭 모드 명령에 응답하여 트릭 모드를 수행하는 방법(200) 및 시스템(100)에 관한 것이다. 상기 방법(200)은, 적어도 하나의 인트라 화상의 제 2 필드가 적어도 하나의 인트라 화상의 제 1 필드 이전에 디스플레이되게 할 수 있도록 하기 위해서 인트라 화상을 포함하는 비디오 신호내에 적어도 제 1 필드 및 제 2 필드를 갖는 적어도 하나의 인트라 화상의 필드 디스플레이 순서 표시기를 변경하는 단계(216), 및 적어도 하나의 변경된 인트라 화상을 디코딩하는 단계(218)를 포함할 수 있다. 한 장치에서, 상기 디코딩 단계는 원격 디코더에서 수행될 수 있고, 상기 비디오 신호는 비-인트라 화상을 포함할 수 있다.

Description

인트라 화상을 이용한 역방향 트릭 모드{REVERSE TRICK MODES USING INTRA PICTURES}
오늘날의 가전 시장에서 디지털 텔레비전(DTV) 및 고선명 텔레비전(HDTV)이 인기를 얻고 있다. 이러한 유형의 텔레비전의 많은 구매자들은 또한 미리 레코딩된 프로그램을 시청하거나 그들이 선호하는 프로그램을 레코딩할 목적으로, 디지털 비디오 디스크(DVD) 레코더 또는 플레이어와 같은 디지털 비디오 레코더 또는 플레이어를 구매한다. 그중에서도 특히, DTV(또는 HDTV)와 디지털 비디오 레코더 또는 플레이어의 결합은 홈 시어터 엔터테인먼트 시스템의 필수적인 부분이 될 수 있다.
디지털 비디오 레코더 또는 플레이어는 일반적으로 레코더 또는 플레이어가 재생하는 디스크상에 저장되는, 디지털 방식으로 인코딩된 멀티미디어 데이터를 디코딩하기 위해 MPEG(Moving Pictures Expert Group) 디코더를 포함한다. 디지털 비디오 레코더 또는 플레이어가 종래의 텔레비전(비-DTV 또는 비-HDTV)에 연결되면, 디지털 방식으로 인코딩된 신호는 종래의 텔레비전상에 디스플레이되기전에 디지털 비디오 레코더 또는 플레이어의 MPEG 디코더에 의해 디코딩될 것이다. 그러나, 많은 DTV가 그 자체 MPEG 디코더를 포함한다는 점이 중요하다. 이와 같이, 디지털 비디오 레코더 또는 플레이어가 DTV에 연결되면, 디스크로부터 판독된 비디오 신호는 DTV의 디코더에 의해 원격으로 디코딩되고, 상기 디코더는 일반적으로 디지털 비디오 레코더 또는 플레이어의 마이크로프로세서의 제어하에 있지 않다. 이러한 구성은 원격 디코더 장치로서 언급될 수 있다.
그러나, 디지털 방식으로 인코딩된 신호를 원격 DTV 디코더에서 디코딩할 때 중요한 단점이 있다. 즉, 이러한 유형의 장치에서 트릭 모드를 수행하기가 매우 어렵다. 트릭 모드는 정상적인 속도나 역방향으로 재생이 수행되지 않는 임의의 비디오 재생일 수 있다. 특히, 원격 디코더가 디스플레이를 위해 디코딩된 화상을 역순으로 배치하도록 지시받을 수 없기 때문에 원격 디코더 장치에서 역방향 트릭 모드를 수행하는 것이 사실상 불가능하다. 따라서, 시스템 비용 또는 복잡성을 증가시키지 않고서 원격 디코더 장치에서 역방향 트릭 모드를 수행하는 방법을 제공하는 것이 바람직하다.
본 발명의 장치는 일반적으로 비디오 시스템에 관한 것으로, 더 상세하게 디지털 방식으로 인코딩된 비디오 시퀀스를 레코딩하거나 재생하는 비디오 시스템에 관한 것이다.
본 출원은 U.S.C. 35조 119(e)항에 의거하여 2001년 10월 23일자로 출원된 미국 가 특허출원 제60/334,914호에 대해 우선권을 청구한다.
도 1은 본 발명의 장치에 따른 인트라 화상을 이용하여 역방향 트릭 모드를 수행할 수 있는 시스템의 블럭도.
도 2는 본 발명의 장치에 따른 인트라 화상을 이용하여 역방향 트릭 모드를 수행하는 동작을 예시하는 플로우차트.
도 3은 비-프로그레시브 화상, 및 상기 비-프로그레시브 화상 중 하나를 위한 MPEG 신택스의 일부를 포함하는 MPEG 비디오 신호내에서의 일반적인 화상 그룹 구조를 예시하는 도면.
본 발명은 트릭 모드를 수행하는 방법에 관한 것으로, 상기 방법은 트릭 모드 명령에 응답하여, 적어도 하나의 인트라 화상의 제 2 필드가 상기 적어도 하나의 인트라 화상의 제 1 필드 이전에 디스플레이되게 할 수 있도록 하기 위해서, 인트라 화상 및 비-인트라 화상을 포함하는 비디오 신호내에 적어도 제 1 필드 및 제 2 필드를 갖는 적어도 하나의 인트라 화상의 필드 디스플레이 순서 표시기를 변경하는 단계, 및 상기 적어도 하나의 인트라 화상을 디코딩하는 단계를 포함한다. 한 장치에서, 상기 디코딩 단계는 원격 디코더에서 수행될 수 있고, 상기 비디오 신호는 비-인트라 화상을 포함한다. 상기 비-인트라 화상은 양방향 예측 또는 예측 화상을 포함할 수 있다.
한 양상에서, 상기 필드 디스플레이 순서 표시기는 top_field_first flag일 수 있다. 또한, 상기 제 1 필드는 상위 필드일 수 있고, 상기 제 2 필드는 바닥 필드일 수 있다. 상기 변경 단계는 상기 바닥 필드가 상기 상위 필드 이전에 디스플레이되도록 상기 top_field_first flag를 "1"의 값에서 "0"의 값으로 전환하는 단계를 포함할 수 있다. 대안적으로, 상기 제 1 필드는 바닥 필드일 수 있고, 상기 제 2 필드는 상위 필드일 수 있다. 이러한 장치에서, 상기 변경 단계는 상기 상위 필드가 상기 바닥 필드 이전에 디스플레이되도록 상기 top_field_first flag를 "0"의 값에서 "1"의 값으로 전환하는 단계를 포함할 수 있다. 다른 양상에서, 상기 트릭 모드 명령은 역방향 트릭 모드 명령일 수 있다.
본 발명은 또한 트릭 모드를 수행하는 시스템에 관한 것이다. 상기 시스템은 저장 매체로부터 데이터를 판독하고, 인트라 화상 및 비-인트라 화상을 포함하는 비디오 신호를 출력하기 위한 제어기로서, 여기서 상기 인트라 화상은 적어도 제 1 필드 및 제 2 필드를 포함하는, 제어기, 및 트릭 모드 명령에 응답하여, 적어도 하나의 인트라 화상의 제 2 필드가 상기 적어도 하나의 인트라 화상의 제 1 필드 이전에 디스플레이되게 할 수 있도록 하기 위해서 상기 비디오 신호내의 상기 적어도 하나의 인트라 화상의 필드 디스플레이 순서 표시기를 변경하도록 프로그래밍되는 프로세서를 포함한다. 상기 시스템은 또한 상기 적어도 하나의 인트라 화상을 디코딩하기 위한 디코더를 포함한다. 상기 시스템은 또한 전술한 바와 같은 방법을 구현하기 위해 적절한 소프트웨어 및 회로를 포함한다.
본 발명의 장치에 따른 개선된 다양한 동작 특징을 구현하는 시스템(100)이 도 1에 블럭도 형태로 도시되어 있다. 그러나, 본 발명은 도 1에 예시된 특정 시스템에 제한되지 않는데, 이는 본 발명이 디지털 방식으로 인코딩된 신호를 수신하고 상기 신호를 디스플레이 디바이스로 전송할 수 있는 임의의 다른 시스템에서 실행될 수 있기 때문이다. 또한, 상기 시스템(100)은 임의의 특정 유형의 저장 매체로부터 데이터를 판독하거나 상기 매체에 데이터를 기록하는데 제한되지 않는데, 이는 디지털 방식으로 인코딩된 데이터를 저장할 수 있는 임의의 저장 매체가 시스템(100)에서 사용될 수 있기 때문이다.
상기 시스템(100)은 저장 매체(112)로부터 데이터를 판독하고, 상기 매체에 데이터를 기록하기 위한 제어기(110)를 포함할 수 있다. 상기 시스템(100)은 또한 탐색 엔진(114), 마이크로프로세서(116), 전송 버퍼(117), 및 디스플레이 디바이스(118)를 구비할 수 있다. 탐색 엔진(114)은 저장 매체(112)로부터 판독된 비디오 신호내에서 하나 이상의 특정 유형의 화상을 찾기 위한 적절한 소프트웨어 및 회로를 포함할 수 있다. 제어 및 데이터 인터페이스는 또한 마이크로프로세서(116)가 탐색 엔진(114) 및 제어기(110)의 동작을 제어하도록 허용하기 위해 제공될 수 있다. 마이크로프로세서(116)에 의해 수행되는 종래의 동작을 위해 메모리내에 적절한 소프트웨어 또는 펌웨어가 제공될 수 있다. 또한, 프로그램 루틴은 본 발명의 장치에 따라 마이크로프로세서(116)에 제공될 수 있다.
마이크로프로세서(116) 및 탐색 엔진(114)의 전부 또는 일부가 본 발명의 구상내에서 프로세서(120)가 될 수 있다는 점을 이해해야 한다. 또한, 제어기(110), 탐색 엔진(114), 마이크로프로세서(116) 및 전송 버퍼(117)의 전부 또는 일부는 본 발명의 구상내에서 비트스트림 소스(122)가 될 수 있다. 한 장치에서, 디스플레이 디바이스(118)는 저장 매체(112)로부터 판독되고 비트스트림 소스(122)에 의해 처리되는 임의의 비디오 신호의 전부 또는 일부를 디코딩하기 위해 그 자체 디코더(119)를 포함할 수 있다. 이러한 특정 장치에서, 비트스트림 소스(122)내 디코더(미도시)는 일반적으로 저장 매체(112)로부터 판독된 비디오 신호를 디코딩하지 않는다. 이러한 특정 실시예는 원격 디코더 장치로서 언급될 수 있다. 그러나, 본 발명은 이러한 장치에 제한되지 않는다는 점에 유의해야 하는데, 이는 본 발명이 다른 적절한 시스템에서 실행될 수 있기 때문이다.
동작시에, 제어기(110)는 저장 매체(112)로부터 비디오 신호를 판독할 수 있다. 한 장치에서, 이러한 비디오 신호는 적어도 제 1 필드 및 제 2 필드를 갖는 하나 이상의 인트라(I) 화상을 포함하는 비-프로그레시브 비디오 신호일 수 있다. 마이크로프로세서(116)가 역방향 트릭 모드 명령과 같은 트릭 모드 명령을 수신하면, 마이크로프로세서(116)는 추가적인 처리를 위해 비디오 신호내에서 하나 이상의 적절한 화상을 찾도록 탐색 엔진(114)으로 신호를 보낼 수 있다. 한 실시예에서, 그리고 제한없이, 이러한 적절한 화상은 I 화상일 수 있다.
일단 적절한 화상이 발견되면, 탐색 엔진(114)은 마이크로프로세서(116)로 신호를 보낼 수 있고, 마이크로프로세서(116)는 화상내에 포함된 데이터의 특정 부분을 변경할 수 있다. 마이크로프로세서(116)는 변경된 화상을 디코더(119)로 전송할 수 있고, 상기 디코더는 디스플레이 디바이스(118)상에서의 디스플레이를 위해 상기 화상을 디코딩할 수 있다. 상기 화상 데이터의 변경은 디스플레이 디바이스(118)상에서 역방향 디스플레이를 생성할 수 있다. 본 발명의 전체 동작이 더 상세하게 후술될 것이다.
인트라 화상을 이용한 역방향 트릭 모드
도 2를 참조하면, 인트라 화상을 이용하여 역방향 트릭 모드와 같은 트릭 모드를 수행하는 한가지 방식을 예시하는 방법(200)이 예시되어 있다. 한 장치에서,본 발명은 원격 디코더 장치에서 실행될 수 있다. 본 발명의 목적을 위해, 원격 디코더 장치는, 비디오 신호내의 화상의 적어도 일부가 상기 화상을 디코더에 제공하는 비트스트림 소스에 대해 외부에 있고 상기 비트스트림 소스의 제어하에 있지 않은 디코더에 의해 디코딩될 수 있는 임의의 시스템일 수 있다.
예를 들어, 비트스트림 소스는 광 저장 매체로부터 멀티미디어 데이터를 판독하고 상기 데이터를 전송 채널을 통해, 그 자체 디코더를 포함하는 디지털 텔레비전으로, 전송하는 광 저장 매체 플레이어 또는 레코더일 수 있다. 그러나, 본 발명은 이러한 예시 또는 심지어 원격 디코더 장치에 제한되지 않는다는 점이 이해되는데, 이는 본 발명이 임의의 다른 적절한 시스템 또는 장치에서 실행될 수 있기 때문이다.
단계(210)에서, 프로세스가 시작될 수 있다. 단계(212)에서, 적어도 제 1 필드 및 제 2 필드를 갖는 적어도 하나의 I 화상을 포함하는 비디오 신호가 판독될 수 있다. 비디오 신호는 또한 양방향 예측(B) 화상 또는 예측(P) 화상과 같은 비-인트라(비-I) 화상을 포함할 수 있다. 제 1 필드는 상기 특정 화상의 정상적인 재생 동안 먼저 정상적으로 디스플레이되는 I 화상의 필드일 수 있다. 또한, 제 2 필드는 I 화상의 제 1 필드의 디스플레이 이후에 정상적으로 디스플레이되는 I 화상의 필드일 수 있다. 예를 들어, 제 1 필드는 상위 필드일 수 있고, 제 2 필드는 바닥 필드일 수 있다. 그러나, 본 발명은 이렇게 제한되지 않는데, 이는 제 1 필드가 또한 바닥 필드일 수 있고, 제 2 필드가 상위 필드일 수 있기 때문이다.
단계(214)에서, 트릭 모드 명령이 수신될 수 있다. 한 장치에서, 트릭 모드명령은 역방향 트릭 모드 명령일 수 있다. 본 발명의 목적을 위해, 역방향 트릭 모드 명령은 비디오 신호내의 하나 이상의 화상이 역순으로 디스플레이되는 임의의 명령일 수 있다. 단계(216)에서 도시된 바와 같이, 하나 이상의 I 화상은 I 화상의 제 2 필드가 I 화상의 제 1 필드 이전에 디스플레이되게 할 수 있도록 변경될 수 있다. I 화상의 적어도 제 1 필드 및 제 2 필드의 디스플레이 순서를 전환하면 디스플레이 디바이스상에서 역방향 디스플레이를 생성할 수 있다. 단계(218)에서, 변경된 I 화상은 디스플레이를 위해 디코딩될 수 있다.
도 3을 참조하면, 비-프로그레시브 화상을 포함하는 일반적인 화상 그룹(GOP)(300)이 디스플레이 순서로 도시되어 있다. 아래첨자 숫자는 각각의 화상이 정상적인 재생 속도에서 GOP내의 다른 화상과 관련하여 디스플레이될 시기를 나타낸다. 소문자 "t"는 상위 필드를 나타낼 수 있고, 소문자 "b"는 바닥 필드를 나타낼 수 있다. 이러한 GOP(300)는 비디오 신호내의 많은 GOP 중 하나일 수 있다. 본 발명이 이러한 특정 GOP 구조에 제한되지 않지만, GOP(300)는 역방향 트릭 모드가 방법(200)의 단계(216,218)에 따라 수행될 수 있는 방법을 예시하는 역할을 할 것이다.
이러한 예시에서, 화상 I2는 제 1 필드로서 상위 필드 I2t를, 제 2 필드로서 바닥 필드 I2b를 가질 수 있다. 이러한 특정 GOP(300)에서, 정상적인 재생 동안, 그리고 화상 I2가 디스플레이될 준비가 된 경우에, 상위 필드 I2t가 먼저 디스플레이되고, 바닥 필드 I2b가 다음에 디스플레이된다. 일단 역방향 트릭 모드 명령이 수신되면, 화상 I2은 본 발명의 장치에 따라 변경될 수 있다.
화상 I2은 필드 디스플레이 순서 표시기를 포함할 수 있고, 상기 표시기는 화상 I2의 필드가 어떤 순서로 디스플레이될지에 대해 디코더에게 지시하는데 사용될 수 있다. 화상 I2의 데이터 구조를 포함하는 신택스의 일부가 도 3에 도시되어 있다. 화상 I2은 화상 코딩 확장 헤더(310)를 포함할 수 있고, 필드 디스플레이 순서 표시기는 이러한 헤더(310)내에 포함될 수 있다. 한 장치에서, 필드 디스플레이 순서 표시기는 top_field_first flag(312)일 수 있다. 정상적인 재생 동안, 화상 I2의 top_field_first flag(312)는, 제 1 필드, 이러한 경우에 상위 필드 I2t가 제 2 필드, 즉 바닥 필드 I2b이전에 디스플레이된다는 것을 나타내기 위해, 일반적으로 "1"의 값으로 설정된다.
그러나, 역방향 트릭 모드의 개시에 이어서, top_field_first flag의 값은 "1"의 값에서 "0"의 값으로 전환될 수 있다. 이러한 전환은 제 2 필드, 이 예시에서 바닥 필드 I2b가 제 1 필드, 즉 상위 필드 I2t이전에 디스플레이되게 할 수 있다. 일단 top_field_first flag가 변경되면, 화상 I2이 디코딩될 수 있고, 필드 I2t및 I2b가 따라서 디스플레이될 수 있다. 이러한 프로세스는, 이러한 I 화상의 제 2 필드가 역방향 트릭 모드 명령 동안 제 1 필드 이전에 디스플레이되도록 임의의 수의 GOP내의 임의의 수의 선행하는 I 화상에서 계속될 수 있다.
도 3과 관련된 논의는 단지 예시인 것으로 이해되는데, 이는 본 발명이 임의의 다른 적절한 GOP 및 임의의 다른 적절한 수의 I 화상에서 실행될 수 있기 때문이다. 또한, I 화상은 제 1 및 제 2 필드만을 갖는 것으로 제한되지 않고, I 화상은 이러한 특정 변경에 제한되지 않는다. 예를 들어, 정상적인 디스플레이를 위해, top_field_first flag는 바닥 필드가 상위 필드 이전에 디스플레이된다는 것을 반영하기 위해 "0"의 값을 가질 수 있다. 그러나, 역방향 트릭 모드 명령 동안, top_field_first flag는, 이러한 경우에 제 2 필드인 상위 필드가 이 시나리오에서 제 1 필드인 바닥 필드 이전에 디스플레이되는 것을 나타내기 위해 "0" 값에서 "1"의 값으로 전환될 수 있다.
방법(200)을 다시 참조하면, 결정 블럭(220)에 도시된 바와 같이, 트릭 모드가 계속되는지가 결정될 수 있다. 계속된다면, 상기 방법(200)은 단계(216)에서 재개될 수 있다. 계속되지 않는다면, 단계(222)에서 정상적인 재생이 재개될 수 있다. 상기 방법(200)은 이러한 관점에 제한되지 않는다는 점이 이해되는데, 이는 결정 블럭(220)이 상기 방법(200)에서 임의의 다른 적절한 위치에 배치될 수 있기 때문이다.
본 발명이 본 명세서에 개시된 실시예와 관련하여 설명되었지만, 전술한 설명은 예시적인 것이고, 청구의 범위에 의해 한정되는 본 발명의 범주를 제한하지 않는다는 점을 이해해야 한다.
전술한 바와 같이, 본 발명은 디지털 방식으로 인코딩된 비디오 시퀀스를 레코딩하거나 재생하는 비디오 시스템에서 이용가능하다.

Claims (18)

  1. 트릭 모드를 수행하는 방법으로서,
    트릭 모드 명령에 응답하여, 적어도 하나의 인트라 화상의 제 2 필드가 상기 적어도 하나의 인트라 화상의 제 1 필드 이전에 디스플레이되게 할 수 있도록 하기 위해서, 인트라 화상을 포함하는 비디오 신호내에 적어도 제 1 필드 및 제 2 필드를 갖는 적어도 하나의 인트라 화상의 필드 디스플레이 순서 표시기를 변경하는 단계; 및 상기 적어도 하나의 변경된 인트라 화상을 디코딩하는 단계를 포함하는, 트릭 모드를 수행하는 방법.
  2. 제 1항에 있어서, 상기 디코딩 단계는 원격 디코더에서 수행되는, 트릭 모드를 수행하는 방법.
  3. 제 1항에 있어서, 상기 비디오 신호는 비-인트라 화상을 포함하는, 트릭 모드를 수행하는 방법.
  4. 제 3항에 있어서, 상기 비-인트라 화상은 양방향 예측 화상을 포함하는, 트릭 모드를 수행하는 방법.
  5. 제 3항에 있어서, 상기 비-인트라 화상은 예측 화상을 포함하는, 트릭 모드를 수행하는 방법.
  6. 제 1항에 있어서, 상기 필드 디스플레이 순서 표시기는 top_field_first flag를 포함하는, 트릭 모드를 수행하는 방법.
  7. 제 6항에 있어서, 상기 제 1 필드는 상위 필드를 포함하고, 상기 제 2 필드는 바닥 필드를 포함하며, 여기서 상기 변경 단계는 상기 바닥 필드가 상기 상위 필드 이전에 디스플레이되도록 상기 top_field_first flag를 "1"의 값에서 "0"의 값으로 전환하는 단계를 포함하는, 트릭 모드를 수행하는 방법.
  8. 제 6항에 있어서, 상기 제 1 필드는 바닥 필드를 포함하고, 상기 제 2 필드는 상위 필드를 포함하며, 여기서 상기 변경 단계는 상기 상위 필드가 상기 바닥 필드 이전에 디스플레이되도록 상기 top_field_first flag를 "0"의 값에서 "1"의 값으로 전환하는 단계를 포함하는, 트릭 모드를 수행하는 방법.
  9. 제 1항에 있어서, 상기 트릭 모드 명령은 역방향 트릭 모드 명령을 포함하는, 트릭 모드를 수행하는 방법.
  10. 트릭 모드를 수행하는 시스템으로서,
    저장 매체로부터 데이터를 판독하고, 인트라 화상을 포함하는 비디오 신호를출력하기 위한 제어기로서, 여기서 상기 인트라 화상은 적어도 제 1 필드 및 제 2 필드를 포함하는, 제어기;
    트릭 모드 명령에 응답하여, 적어도 하나의 인트라 화상의 제 2 필드가 상기 적어도 하나의 인트라 화상의 제 1 필드 이전에 디스플레이되게 할 수 있도록 하기 위해서 상기 비디오 신호내의 상기 적어도 하나의 인트라 화상의 필드 디스플레이 순서 표시기를 변경하도록 프로그래밍되는 프로세서; 및
    상기 적어도 하나의 변경된 인트라 화상을 디코딩하기 위한 디코더를 포함하는, 트릭 모드를 수행하는 시스템.
  11. 제 10항에 있어서, 상기 디코더는 원격 디코더를 포함하고, 이러한 구성에 의해 상기 디코더는 상기 프로세서의 직접적인 제어하에 있지 않은, 트릭 모드를 수행하는 시스템.
  12. 제 10항에 있어서, 상기 비디오 신호는 비-인트라 화상을 포함하는, 트릭 모드를 수행하는 시스템.
  13. 제 12항에 있어서, 상기 비-인트라 화상은 양방향 예측 화상을 포함하는, 트릭 모드를 수행하는 시스템.
  14. 제 12항에 있어서, 상기 비-인트라 화상은 예측 화상을 포함하는, 트릭 모드를 수행하는 시스템.
  15. 제 11항에 있어서, 상기 필드 디스플레이 순서 표시기는 top_field_first flag를 포함하는, 트릭 모드를 수행하는 시스템.
  16. 제 15항에 있어서, 상기 제 1 필드는 상위 필드를 포함하고, 상기 제 2 필드는 바닥 필드를 포함하며, 여기서 상기 프로세서는 상기 바닥 필드가 상기 상위 필드 이전에 디스플레이되도록 상기 top_field_first flag를 "1"의 값에서 "0"의 값으로 전환함으로써 상기 변경 단계를 수행하도록 추가로 프로그래밍되는, 트릭 모드를 수행하는 시스템.
  17. 제 15항에 있어서, 상기 제 1 필드는 바닥 필드를 포함하고, 상기 제 2 필드는 상위 필드를 포함하며, 여기서 상기 프로세서는 상기 상위 필드가 상기 바닥 필드 이전에 디스플레이되도록 상기 top_field_first flag를 "0"의 값에서 "1"의 값으로 전환함으로써 상기 변경 단계를 수행하도록 추가로 프로그래밍되는, 트릭 모드를 수행하는 시스템.
  18. 제 10항에 있어서, 상기 트릭 모드 명령은 역방향 트릭 모드 명령을 포함하는, 트릭 모드를 수행하는 시스템.
KR1020047004944A 2001-10-23 2002-10-22 트릭 모드를 수행하는 방법 및 시스템 KR100961784B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US33491401P 2001-10-23 2001-10-23
US60/334,914 2001-10-23
PCT/US2002/033821 WO2003036956A1 (en) 2001-10-23 2002-10-22 Reverse trick modes using intra pictures

Publications (2)

Publication Number Publication Date
KR20040041662A true KR20040041662A (ko) 2004-05-17
KR100961784B1 KR100961784B1 (ko) 2010-06-07

Family

ID=23309417

Family Applications (5)

Application Number Title Priority Date Filing Date
KR1020047005756A KR100923960B1 (ko) 2001-10-23 2002-10-22 더미 쌍방향 예측 필드 화상의 생성 방법 및 시스템
KR1020047005833A KR100940032B1 (ko) 2001-10-23 2002-10-22 트릭 모드를 수행하는 방법 및 시스템
KR1020047004944A KR100961784B1 (ko) 2001-10-23 2002-10-22 트릭 모드를 수행하는 방법 및 시스템
KR1020047005967A KR100931625B1 (ko) 2001-10-23 2002-10-22 트릭 모드를 수행하는 방법 및 시스템
KR1020047005829A KR100929400B1 (ko) 2001-10-23 2002-10-22 복수의 원 화상을 포함하는 비디오 신호에 대해 트릭 모드를 수행하는 방법 및 시스템

Family Applications Before (2)

Application Number Title Priority Date Filing Date
KR1020047005756A KR100923960B1 (ko) 2001-10-23 2002-10-22 더미 쌍방향 예측 필드 화상의 생성 방법 및 시스템
KR1020047005833A KR100940032B1 (ko) 2001-10-23 2002-10-22 트릭 모드를 수행하는 방법 및 시스템

Family Applications After (2)

Application Number Title Priority Date Filing Date
KR1020047005967A KR100931625B1 (ko) 2001-10-23 2002-10-22 트릭 모드를 수행하는 방법 및 시스템
KR1020047005829A KR100929400B1 (ko) 2001-10-23 2002-10-22 복수의 원 화상을 포함하는 비디오 신호에 대해 트릭 모드를 수행하는 방법 및 시스템

Country Status (9)

Country Link
US (2) US20030159152A1 (ko)
EP (5) EP1438843A4 (ko)
JP (5) JP4733920B2 (ko)
KR (5) KR100923960B1 (ko)
CN (7) CN101222643A (ko)
AU (1) AU2002348005A1 (ko)
MX (5) MXPA04003577A (ko)
MY (5) MY143118A (ko)
WO (5) WO2003036809A1 (ko)

Families Citing this family (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6020189A (en) * 1996-08-30 2000-02-01 The Johns Hopkins University School Of Medicine Fibroblast growth factor homologous factors (FHFs) and methods of use
US7730300B2 (en) 1999-03-30 2010-06-01 Sony Corporation Method and apparatus for protecting the transfer of data
US6697489B1 (en) 1999-03-30 2004-02-24 Sony Corporation Method and apparatus for securing control words
US7039614B1 (en) 1999-11-09 2006-05-02 Sony Corporation Method for simulcrypting scrambled data to a plurality of conditional access devices
US7747853B2 (en) 2001-06-06 2010-06-29 Sony Corporation IP delivery of secure digital content
US7124303B2 (en) 2001-06-06 2006-10-17 Sony Corporation Elementary stream partial encryption
US7895616B2 (en) 2001-06-06 2011-02-22 Sony Corporation Reconstitution of program streams split across multiple packet identifiers
US6990147B2 (en) * 2001-10-23 2006-01-24 Thomson Licensing Generating a non-progressive dummy bidirectional predictive picture
US20030159152A1 (en) * 2001-10-23 2003-08-21 Shu Lin Fast motion trick mode using dummy bidirectional predictive pictures
US7257312B2 (en) * 2001-10-23 2007-08-14 Thomson Licensing Fast motion trick mode using dummy predictive pictures
US7787746B2 (en) 2001-10-23 2010-08-31 Thomson Licensing Fast motion trick mode using non-progressive dummy bidirectional predictive pictures
US7174086B2 (en) * 2001-10-23 2007-02-06 Thomson Licensing Trick mode using dummy predictive pictures
US6990287B2 (en) * 2001-10-23 2006-01-24 Thomson Licensing Fast motion trick mode using dummy bidirectional predictive pictures
US8705947B2 (en) * 2001-10-23 2014-04-22 Thomson Licensing Trick mode on bidirectional predictive frames
US7149410B2 (en) * 2001-10-23 2006-12-12 Thomson Licensing Trick modes using non-progressive dummy bidirectional predictive pictures
US7765567B2 (en) 2002-01-02 2010-07-27 Sony Corporation Content replacement by PID mapping
US7823174B2 (en) 2002-01-02 2010-10-26 Sony Corporation Macro-block based content replacement by PID mapping
US8818896B2 (en) 2002-09-09 2014-08-26 Sony Corporation Selective encryption with coverage encryption
US7724907B2 (en) 2002-11-05 2010-05-25 Sony Corporation Mechanism for protecting the transfer of digital content
US8572408B2 (en) 2002-11-05 2013-10-29 Sony Corporation Digital rights management of a digital device
US8667525B2 (en) 2002-12-13 2014-03-04 Sony Corporation Targeted advertisement selection from a digital stream
US8645988B2 (en) 2002-12-13 2014-02-04 Sony Corporation Content personalization for digital content
CN100423581C (zh) * 2002-12-30 2008-10-01 Nxp股份有限公司 动态图形的编码/解码方法及其设备
US7853980B2 (en) 2003-10-31 2010-12-14 Sony Corporation Bi-directional indices for trick mode video-on-demand
US8315307B2 (en) * 2004-04-07 2012-11-20 Qualcomm Incorporated Method and apparatus for frame prediction in hybrid video compression to enable temporal scalability
US20060013554A1 (en) * 2004-07-01 2006-01-19 Thomas Poslinski Commercial storage and retrieval
US20060013556A1 (en) * 2004-07-01 2006-01-19 Thomas Poslinski Commercial information and guide
US20060013557A1 (en) * 2004-07-01 2006-01-19 Thomas Poslinski Suppression of trick modes in commercial playback
US20060013555A1 (en) * 2004-07-01 2006-01-19 Thomas Poslinski Commercial progress bar
US7729590B2 (en) * 2004-08-03 2010-06-01 Sony Corporation Digital video stream trick play
US8041190B2 (en) 2004-12-15 2011-10-18 Sony Corporation System and method for the creation, synchronization and delivery of alternate content
US7895617B2 (en) 2004-12-15 2011-02-22 Sony Corporation Content substitution editor
US20070094691A1 (en) * 2005-10-24 2007-04-26 Gazdzinski Robert F Method and apparatus for on-demand content transmission and control over networks
US7596300B2 (en) * 2005-12-07 2009-09-29 Sony Corporation System and method for smooth fast playback of video
US8185921B2 (en) * 2006-02-28 2012-05-22 Sony Corporation Parental control of displayed content using closed captioning
KR100813063B1 (ko) * 2006-05-11 2008-03-14 엘지전자 주식회사 고속 포워딩 및 리와인딩 디스플레이 기능을 갖는 영상장치 및 그 방법
US8483551B2 (en) * 2006-12-04 2013-07-09 Electronics And Telecommunications Research Institute Method for generating double-speed IDR-unit for trick play, and trick play system and method using the same
WO2008102794A1 (ja) * 2007-02-21 2008-08-28 Nec Corporation 動画像ストリーム加工装置及び該装置を備えた動画像再生装置並びに方法とプログラム
US8189676B2 (en) * 2007-04-05 2012-05-29 Hong Kong University Of Science & Technology Advance macro-block entropy coding for advanced video standards
US20100061709A1 (en) * 2008-09-05 2010-03-11 Davender Agnihotri Ad Menu for skipped advertisements
US20120057640A1 (en) 2010-09-02 2012-03-08 Fang Shi Video Analytics for Security Systems and Methods
CN102447902B (zh) * 2011-09-30 2014-04-16 广州柯维新数码科技有限公司 选择参考场及获取时域运动矢量的方法
US20170055001A1 (en) * 2014-05-08 2017-02-23 Mitsubishi Electric Corporation Image encoding apparatus and image decoding apparatus
US11232686B2 (en) * 2019-12-30 2022-01-25 Axis Ab Real-time deviation in video monitoring

Family Cites Families (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2288520B (en) 1994-03-24 1998-10-14 Discovision Ass Pipeline
US5461420A (en) * 1992-09-18 1995-10-24 Sony Corporation Apparatus for coding and decoding a digital video signal derived from a motion picture film source
US5805762A (en) * 1993-01-13 1998-09-08 Hitachi America, Ltd. Video recording device compatible transmitter
US5377051A (en) * 1993-01-13 1994-12-27 Hitachi America, Ltd. Digital video recorder compatible receiver with trick play image enhancement
KR0178819B1 (ko) * 1993-03-16 1999-05-01 보조 다꾸로 고능률 부호화된 동화상 데이타의 비월재생방법
DE69422960T2 (de) * 1993-12-01 2000-06-15 Matsushita Electric Ind Co Ltd Verfahren und Vorrichtung zum Editieren oder zur Mischung von komprimierten Bildern
JP3097437B2 (ja) * 1994-03-14 2000-10-10 松下電器産業株式会社 圧縮動画像の記録方法と再生装置
US5768539A (en) * 1994-05-27 1998-06-16 Bell Atlantic Network Services, Inc. Downloading applications software through a broadcast channel
US5592299A (en) * 1994-09-26 1997-01-07 Hitachi America, Ltd. Method and apparatus for reducing the amount of data required to represent a video frame
GB9421206D0 (en) * 1994-10-20 1994-12-07 Thomson Consumer Electronics Digital VCR MPEG- trick play processing
JP3491366B2 (ja) * 1995-01-31 2004-01-26 ソニー株式会社 符号化データの特殊再生方法および特殊再生装置
WO1996029822A1 (fr) * 1995-03-20 1996-09-26 Matsushita Electric Industrial Co., Ltd. Dispositif et procede pour enregistrer des informations relatives a l'image
US5694170A (en) * 1995-04-06 1997-12-02 International Business Machines Corporation Video compression using multiple computing agents
US5978542A (en) * 1995-06-07 1999-11-02 Industrial Technology Research Institute VTR tape format for compressed digital video using overlapped areas for forward and reverse high speed playback
US5793927A (en) * 1995-06-07 1998-08-11 Hitachi America, Ltd. Methods for monitoring and modifying a trick play data stream to insure MPEG compliance
JP3319678B2 (ja) * 1995-08-11 2002-09-03 ケイディーディーアイ株式会社 動画像の高速ブラウジング装置
JPH09107547A (ja) 1995-10-09 1997-04-22 Hitachi Ltd 既圧縮動画データ量削減装置および既圧縮動画データ量削減システムならびに既圧縮動画データ量削減方法
US5956088A (en) 1995-11-21 1999-09-21 Imedia Corporation Method and apparatus for modifying encoded digital video for improved channel utilization
US5739862A (en) * 1996-12-23 1998-04-14 Tektronix, Inc. Reverse playback of MPEG video
JP4069474B2 (ja) * 1997-01-21 2008-04-02 ヤマハ株式会社 画像記録再生装置
US6222532B1 (en) * 1997-02-03 2001-04-24 U.S. Philips Corporation Method and device for navigating through video matter by means of displaying a plurality of key-frames in parallel
US6201927B1 (en) * 1997-02-18 2001-03-13 Mary Lafuze Comer Trick play reproduction of MPEG encoded signals
US6118491A (en) * 1997-02-20 2000-09-12 Lsi Logic Corporation System and method for enforcing interlaced field synchronization in the presence of broken alternation in an MPEG video datastream
EP0914740B1 (en) * 1997-04-24 2003-06-04 Koninklijke Philips Electronics N.V. Method of and arrangement for reproducing video images
US6219381B1 (en) * 1997-05-26 2001-04-17 Kabushiki Kaisha Toshiba Image processing apparatus and method for realizing trick play
US5987179A (en) 1997-09-05 1999-11-16 Eastman Kodak Company Method and apparatus for encoding high-fidelity still images in MPEG bitstreams
JP3197855B2 (ja) * 1997-11-06 2001-08-13 三洋電機株式会社 Ｍｐｅｇデータの再生装置
JPH11220694A (ja) * 1998-02-02 1999-08-10 Sony Corp 信号伝送方法、信号伝送装置及び信号記録媒体
JPH11244929A (ja) * 1998-03-03 1999-09-14 Nippon Steel Corp 鋼板の冷間圧延方法
AU3842999A (en) * 1998-06-11 1999-12-30 Koninklijke Philips Electronics N.V. Trick play signal generation for a digital video recorder
FR2782437B1 (fr) * 1998-08-14 2000-10-13 Thomson Multimedia Sa Procede de commutation de flux mpeg
JP2002529024A (ja) * 1998-10-26 2002-09-03 ソニー エレクトロニクス インク ビデオデータのトリック再生の管理
JP2000236547A (ja) * 1998-12-15 2000-08-29 Sony Corp 画像情報変換装置及び画像情報変換方法
JP3789048B2 (ja) * 1999-02-22 2006-06-21 株式会社東芝 動画像再符号化装置
US6865747B1 (en) * 1999-04-01 2005-03-08 Digital Video Express, L.P. High definition media storage structure and playback mechanism
JP2001028748A (ja) * 1999-07-12 2001-01-30 Sony Corp データ再生伝送装置及びデータ再生伝送方法
US6678332B1 (en) * 2000-01-04 2004-01-13 Emc Corporation Seamless splicing of encoded MPEG video and audio
CN100551009C (zh) * 2001-04-24 2009-10-14 皇家菲利浦电子有限公司 用于产生视频信号的方法和设备
US7787746B2 (en) * 2001-10-23 2010-08-31 Thomson Licensing Fast motion trick mode using non-progressive dummy bidirectional predictive pictures
US7149410B2 (en) * 2001-10-23 2006-12-12 Thomson Licensing Trick modes using non-progressive dummy bidirectional predictive pictures
US20030159152A1 (en) * 2001-10-23 2003-08-21 Shu Lin Fast motion trick mode using dummy bidirectional predictive pictures
US6990147B2 (en) * 2001-10-23 2006-01-24 Thomson Licensing Generating a non-progressive dummy bidirectional predictive picture

Also Published As

Publication number Publication date
MXPA04003579A (es) 2004-07-30
MXPA04003577A (es) 2004-07-30
JP2005507215A (ja) 2005-03-10
CN1575552B (zh) 2010-04-14
MXPA04003581A (es) 2004-07-30
US7505517B2 (en) 2009-03-17
CN101222643A (zh) 2008-07-16
KR20040045881A (ko) 2004-06-02
MY128889A (en) 2007-02-28
KR100940032B1 (ko) 2010-02-04
KR20040045880A (ko) 2004-06-02
JP2005507204A (ja) 2005-03-10
EP1438850A1 (en) 2004-07-21
WO2003053053A1 (en) 2003-06-26
EP1438843A1 (en) 2004-07-21
CN101242504A (zh) 2008-08-13
MY136898A (en) 2008-11-28
JP4296089B2 (ja) 2009-07-15
KR100931625B1 (ko) 2009-12-14
EP1438844B1 (en) 2011-09-21
CN100521759C (zh) 2009-07-29
WO2003036956A1 (en) 2003-05-01
KR20040045906A (ko) 2004-06-02
CN1575591A (zh) 2005-02-02
CN1575552A (zh) 2005-02-02
MY143118A (en) 2011-03-15
JP2005507219A (ja) 2005-03-10
KR20040045870A (ko) 2004-06-02
MY135236A (en) 2008-03-31
AU2002348005A1 (en) 2003-06-30
EP1438845A1 (en) 2004-07-21
CN1575593A (zh) 2005-02-02
US20030159152A1 (en) 2003-08-21
JP4719418B2 (ja) 2011-07-06
EP1438845A4 (en) 2010-05-12
EP1438843A4 (en) 2010-05-05
JP2005527131A (ja) 2005-09-08
US20040196908A1 (en) 2004-10-07
JP4733920B2 (ja) 2011-07-27
WO2003036963A1 (en) 2003-05-01
CN1305305C (zh) 2007-03-14
EP1438844A1 (en) 2004-07-21
KR100929400B1 (ko) 2009-12-02
EP1438790A4 (en) 2010-01-06
MY140373A (en) 2009-12-31
MXPA04003583A (es) 2004-07-30
JP2005507214A (ja) 2005-03-10
WO2003036809A1 (en) 2003-05-01
KR100923960B1 (ko) 2009-10-29
CN101242504B (zh) 2011-01-12
EP1438790A1 (en) 2004-07-21
KR100961784B1 (ko) 2010-06-07
CN1575592A (zh) 2005-02-02
CN1575594A (zh) 2005-02-02
EP1438850A4 (en) 2010-05-05
EP1438844A4 (en) 2010-01-13
MXPA04003889A (es) 2004-07-08
EP1438845B1 (en) 2017-07-26
CN1293750C (zh) 2007-01-03
WO2003036953A1 (en) 2003-05-01

Similar Documents

Publication Publication Date Title
KR100961784B1 (ko) 트릭 모드를 수행하는 방법 및 시스템
US7257312B2 (en) Fast motion trick mode using dummy predictive pictures
US7174086B2 (en) Trick mode using dummy predictive pictures
US6990287B2 (en) Fast motion trick mode using dummy bidirectional predictive pictures
KR100954070B1 (ko) 신호 발생 및 전송 방법 및 부호화된 디지털 비디오 신호 발생 및 전송 장치
US20030079228A1 (en) Searching for frames to perform a trick mode
US7596301B2 (en) Reverse trick mode using intra pictures
KR100939487B1 (ko) 양방향 예측 프레임에 대한 트릭 모드
KR100967312B1 (ko) 더미 양방향 예측 화상들을 사용하는 트릭 모드

Legal Events

Date Code Title Description
A201 Request for examination
AMND Amendment
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
J201 Request for trial against refusal decision
B701 Decision to grant
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130430

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20140502

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20150430

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20160427

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20170504

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20180427

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20190430

Year of fee payment: 10