KR20090118174A - 동영상 부호화 장치 및 방법 - Google Patents

동영상 부호화 장치 및 방법 Download PDF

Info

Publication number
KR20090118174A
KR20090118174A KR1020080043801A KR20080043801A KR20090118174A KR 20090118174 A KR20090118174 A KR 20090118174A KR 1020080043801 A KR1020080043801 A KR 1020080043801A KR 20080043801 A KR20080043801 A KR 20080043801A KR 20090118174 A KR20090118174 A KR 20090118174A
Authority
KR
South Korea
Prior art keywords
video
editing
unit
section
data
Prior art date
Application number
KR1020080043801A
Other languages
English (en)
Other versions
KR100980195B1 (ko
Inventor
배태면
Original Assignee
에스케이 텔레콤주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이 텔레콤주식회사 filed Critical 에스케이 텔레콤주식회사
Priority to KR1020080043801A priority Critical patent/KR100980195B1/ko
Priority to PCT/KR2008/006657 priority patent/WO2009139528A1/en
Priority to CN2008801303659A priority patent/CN102090060B/zh
Priority to US12/737,714 priority patent/US20110182350A1/en
Publication of KR20090118174A publication Critical patent/KR20090118174A/ko
Application granted granted Critical
Publication of KR100980195B1 publication Critical patent/KR100980195B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/92—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/177—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a group of pictures [GOP]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

본 발명은 동영상을 편집하고 있는 동안에 동영상 편집 과정과 병렬적으로 이미 편집된 동영상에 대해 부호화를 동시에 수행함으로써, 동영상의 부호화 시 소요되는 시간을 대폭 단축시킬 수 있도록 하는, 동영상 부호화 장치 및 방법에 관한 것이다.
본 발명에 따른 동영상 부호화 장치는, 동영상 데이터에 관한 편집 명령을 입력하는 입력부; 상기 편집 명령에 따라 상기 동영상 데이터를 편집하는 동영상 편집부; 상기 편집된 동영상 데이터를 부호화하는 동영상 부호화부; 상기 부호화된 동영상 데이터를 저장하기 위한 저장부; 및 상기 동영상 편집부를 통해 상기 동영상 데이터를 편집하는 동안에, 상기 편집된 동영상 데이터가 상기 동영상 부호화부를 통해 동시에 부호화되도록 제어하는 제어부를 포함한다.
본 발명에 의하면, 대용량의 멀티미디어 데이터를 편집한 후 부호화 할 때 소요되는 시간을 대폭 단축시킬 수 있으며, 사용자가 동영상에 대해 원하는 편집을 수행한 후 짧은 시간에 동영상을 부호화하여 저장해 둘 수 있다.
동영상, 편집, 부호화, 멀티미디어, 픽쳐, GOP, 장면

Description

동영상 부호화 장치 및 방법{Motion picture coding device and method}
본 발명은 동영상 부호화 장치 및 방법에 관한 것으로서, 더욱 자세하게는 동영상에서 필요없는 장면을 삭제하거나 새로운 장면을 추가하는 기능과 영상 처리 효과를 적용하는 기능 이외에 최종적으로 편집된 동영상을 저장하기 위해 부호화를 수행할 때, 동영상을 편집하고 있는 동안에 동영상 편집 과정과 병렬적으로 이미 편집된 동영상에 대해 부호화를 동시에 수행함으로써, 동영상의 부호화 시 소요되는 시간을 대폭 단축시킬 수 있도록 하는, 동영상 부호화 장치 및 방법에 관한 것이다.
최근, 정보통신 기술의 발달에 따라 문자나 음악, 영상 등 다양한 형태의 정보를 수용할 수 있는 멀티미디어 서비스가 증가하고 있다.
그런데, 멀티미디어 데이터는 그 양이 방대하여 대용량의 저장 매체를 필요로 하며, 사용자가 필요에 따라 멀티미디어 데이터를 편집한 경우에 편집한 멀티미디어 데이터를 보관하기 위해 저장할 때는 부호화 과정이 필요하게 된다.
그러나, 멀티미디어 데이터는 대용량의 데이터이므로, 멀티미디어 데이터에 대해 일부 구간만 편집하였더라도 그 편집 구간이 포함된 전체 용량의 멀티미디어 데이터를 부호화하게 됨에 따라 대단히 많은 시간이 소요되는 단점이 있다.
전술한 문제점을 해결하기 위한 본 발명은, 동영상에서 필요없는 장면을 삭제하거나 새로운 장면을 추가하는 기능과 영상 처리 효과를 적용하는 기능 이외에 최종적으로 편집된 동영상을 저장하기 위해 부호화를 수행할 때, 동영상을 편집하고 있는 동안에 동영상 편집 과정과 병렬적으로 이미 편집된 동영상에 대해 부호화를 동시에 수행함으로써, 동영상의 부호화 시 소요되는 시간을 대폭 단축시킬 수 있도록 하는, 동영상 부호화 장치 및 방법을 제공함에 그 목적이 있다.
전술한 목적을 달성하기 위한 본 발명에 따른 동영상 부호화 장치는, 동영상 데이터에 관한 편집 명령을 입력하는 입력부; 상기 편집 명령에 따라 상기 동영상 데이터를 편집하는 동영상 편집부; 상기 편집된 동영상 데이터를 부호화하는 동영상 부호화부; 상기 부호화된 동영상 데이터를 저장하기 위한 저장부; 및 상기 동영상 편집부를 통해 상기 동영상 데이터를 편집하는 동안에, 상기 편집된 동영상 데이터가 상기 동영상 부호화부를 통해 동시에 부호화되도록 제어하는 제어부를 포함한다.
여기서, 상기 동영상 편집부와 상기 동영상 부호화부는 병렬적으로 동시에 동작하게 된다.
또한, 상기 제어부는, 상기 동영상 데이터가 부호화 된 동영상인지 아닌지를 판단하여 부호화되지 않은 동영상 데이터인 경우에, 상기 동영상 부호화부를 통해 동영상의 처음 장면부터 마지막 장면까지 부호화를 수행하게 된다.
또한, 상기 제어부는, 부호화하려는 상기 동영상 데이터에 대해, 상기 동영상 편집부를 통해 편집하고 있는 부분의 영상 구간을 제외한 상기 동영상 데이터가 상기 동영상 부호화부를 통해 부호화되도록 제어하게 된다.
또한, 상기 제어부는, 상기 동영상 편집부가 상기 동영상 데이터의 일정 영상 구간에 대한 편집을 마치고 다른 영상 구간을 편집할 때, 이전에 편집한 상기 동영상 데이터의 일정 영상 구간이 상기 동영상 부호화부를 통해 부호화되도록 제어하게 된다.
또한, 상기 제어부는, 상기 동영상 편집부를 통해 편집하고 있는 상기 동영상 데이터의 편집 구간에서 편집이 일어나지 않는 경우에, 상기 편집 구간에 대해 상기 동영상 부호화부를 통해 부호화되도록 제어하게 된다.
또한, 상기 제어부는, 상기 동영상 부호화부를 통해 부호화가 이루어진 영상 구간에 대해서 상기 동영상 편집부를 통해 편집이 이루어진 경우에, 상기 편집이 이루어진 상기 영상 구간에 대해 상기 동영상 부호화부를 통해 재부호화가 되도록 제어하게 된다.
또한, 상기 동영상 데이터가 MPEG 기반의 동영상 데이터인 경우에, 상기 동영상 부호화부는 상기 MPEG 기반의 동영상 데이터에 대해 GOP 단위로 부호화를 수행하는 것을 특징으로 하는 동영상 부호화 장치.
그리고, 상기 동영상 편집부를 통해 편집하는 영상 구간과 상기 GOP 단위가 다른 경우, 상기 동영상 편집부는 하나 이상의 GOP를 묶어서 편집 구간으로 설정하고, 상기 동영상 부호화부는 묶여진 GOP 구간들을 부호화하게 된다.
한편, 전술한 목적을 달성하기 위한 본 발명에 따른 동영상 부호화 방법은, (a) 동영상 데이터의 편집 명령을 입력받는 단계; (b) 상기 편집 명령에 따라 상기 동영상 데이터를 편집함과 더불어, 병렬적으로 상기 동영상 데이터를 동시에 부호화하는 단계; 및 (c) 상기 부호화된 동영상 데이터를 저장하는 단계를 포함한다.
또한, 상기 (b) 단계는, 상기 동영상 데이터가 부호화 된 동영상인지 아닌지를 판단하여 부호화되지 않은 동영상 데이터인 경우에, 상기 동영상 부호화부를 통해 동영상의 처음 장면부터 마지막 장면까지 부호화를 수행하게 된다.
또한, 상기 (b) 단계는, 상기 동영상 편집부를 통해 편집하고 있는 부분의 영상 구간을 제외한 상기 동영상 데이터를 상기 동영상 부호화부를 통해 부호화하게 된다.
또한, 상기 (b) 단계는, 상기 동영상 편집부가 상기 동영상 데이터의 일정 영상 구간에 대한 편집을 마치고 다른 영상 구간을 편집할 때, 이전에 편집된 상기 동영상 데이터의 일정 영상 구간을 상기 동영상 부호화부를 통해 부호화하게 된다.
또한, 상기 (b) 단계는, 상기 동영상 편집부를 통해 편집하고 있는 상기 동영상 데이터의 편집 구간에서 편집이 일어나지 않는 경우에, 편집이 일어나지 않는 상기 편집 구간에 대해 상기 동영상 부호화부를 통해 부호화하게 된다.
또한, 상기 (b) 단계는, 상기 동영상 부호화부를 통해 부호화가 이루어진 영 상 구간에 대해 상기 동영상 편집부를 통해 편집이 이루어진 경우에, 상기 편집이 이루어진 영상 구간에 대해 상기 동영상 부호화부를 통해 재부호화하게 된다.
또한, 상기 (b) 단계는, 상기 동영상 데이터가 MPEG 기반의 동영상 데이터인 경우에, 상기 MPEG 기반의 동영상 데이터에 대해 상기 동영상 부호화부를 통해 GOP 단위로 부호화를 수행하게 된다.
그리고, 상기 동영상 편집부를 통해 편집하는 영상 구간과 상기 GOP 단위가 다른 경우, 상기 동영상 편집부를 통해 하나 이상의 GOP를 묶어서 편집 구간으로 설정하고, 상기 동영상 부호화부를 통해 묶여진 GOP 구간들을 부호화하게 된다.
한편, 전술한 목적을 달성하기 위한 본 발명에 따른 기록매체는, (a) 동영상 데이터의 편집 명령을 입력받는 단계; (b) 상기 편집 명령에 따라 상기 동영상 데이터를 편집함과 더불어, 병렬적으로 상기 동영상 데이터를 동시에 부호화하는 단계; 및 (c) 상기 부호화된 동영상 데이터를 저장하는 단계를 처리하는 프로그램이 기록되어 있다.
또한, 상기 (b) 단계는, 상기 동영상 데이터가 부호화 된 동영상인지 아닌지를 판단하여 부호화되지 않은 동영상 데이터인 경우에, 상기 동영상 부호화부를 통해 동영상의 처음 장면부터 마지막 장면까지 부호화를 수행하는 것을 특징으로 하는 프로그램이다.
또한, 상기 (b) 단계는, 상기 동영상 편집부를 통해 편집하고 있는 부분의 영상 구간을 제외한 상기 동영상 데이터를 상기 동영상 부호화부를 통해 부호화하 는 것을 특징으로 하는 프로그램이다.
또한, 상기 (b) 단계는, 상기 동영상 편집부가 상기 동영상 데이터의 일정 영상 구간에 대한 편집을 마치고 다른 영상 구간을 편집할 때, 이전에 편집된 상기 동영상 데이터의 일정 영상 구간을 상기 동영상 부호화부를 통해 부호화하는 것을 특징으로 하는 프로그램이다.
또한, 상기 (b) 단계는, 상기 동영상 편집부를 통해 편집하고 있는 상기 동영상 데이터의 편집 구간에서 편집이 일어나지 않는 경우에, 편집이 일어나지 않는 상기 편집 구간에 대해 상기 동영상 부호화부를 통해 부호화하는 것을 특징으로 하는 프로그램이다.
또한, 상기 (b) 단계는, 상기 동영상 부호화부를 통해 부호화가 이루어진 영상 구간에 대해 상기 동영상 편집부를 통해 편집이 이루어진 경우에, 상기 편집이 이루어진 영상 구간에 대해 상기 동영상 부호화부를 통해 재부호화하는 것을 특징으로 하는 프로그램이다.
또한, 상기 (b) 단계는, 상기 동영상 데이터가 MPEG 기반의 동영상 데이터인 경우에, 상기 MPEG 기반의 동영상 데이터에 대해 상기 동영상 부호화부를 통해 GOP 단위로 부호화를 수행하는 것을 특징으로 하는 프로그램이다.
그리고, 상기 동영상 편집부를 통해 편집하는 영상 구간과 상기 GOP 단위가 다른 경우, 상기 동영상 편집부를 통해 하나 이상의 GOP를 묶어서 편집 구간으로 설정하고, 상기 동영상 부호화부를 통해 묶여진 GOP 구간들을 부호화하는 것을 특징으로 하는 프로그램이다.
본 발명에 의하면, 대용량의 멀티미디어 데이터를 편집한 후 부호화 할 때 소요되는 시간을 대폭 단축시킬 수 있다.
또한, 사용자가 동영상에 대해 원하는 편집을 수행한 후 짧은 시간에 동영상을 부호화하여 저장해 둘 수 있다.
본 발명의 목적과 기술적 구성 및 그에 따른 작용 효과에 관한 자세한 사항은 본 발명의 명세서에 첨부된 도면에 의거한 이하 상세한 설명에 의해 보다 명확하게 이해될 것이다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 실시예를 상세하게 설명한다.
도 1은 본 발명의 실시예에 따른 동영상 부호화 장치의 내부 구성을 개략적으로 나타낸 구성도이다.
도 1을 참조하면, 본 발명이 적용된 동영상 부호화 장치(100)는, 입력부(110), 동영상 편집부(120), 동영상 부호화부(130), 저장부(140), 표시부(150) 및 제어부(160)를 포함한다.
여기서, 동영상 부호화 장치(100)는 유선 통신이나 무선 통신에 상관 없이 멀티미디어 데이터를 재생할 수 있는 개인용 컴퓨터(PC)나 이동통신 단말기, PDA 등의 단말기 장치에 적용할 수 있다.
입력부(110)는 사용자로부터 동영상 데이터에 관한 편집 명령을 입력한다. 또한, 입력부(110)는 장치의 동작에 관한 명령을 입력하기 위한 문자나 숫자, 기호 등의 다수의 버튼을 구비한다.
동영상 편집부(120)는 편집 명령에 따라 동영상 데이터를 편집한다. 이때, 동영상 편집부(120)에서 수행하는 편집 동작은, 동영상 데이터에 대해 필요없는 장면(Scene)을 삭제하거나 새로운 장면을 추가하는 동작, 영상 처리 효과를 적용하는 동작 등을 포함한다.
동영상 부호화부(130)는 제어부(160)의 제어에 따라 동영상 편집부(120)를 통해 편집된 동영상 데이터를 부호화한다. 또한, 동영상 부호화부(130)는 편집되고 있지 않은 동영상 데이터를 부호화한다.
여기서, 동영상 편집부(120)와 동영상 부호화부(130)는 병렬적으로 동시에 동작하게 된다.
저장부(140)는 부호화된 동영상 데이터를 저장한다. 또한, 저장부(140)는 다른 저장 영역을 통해 편집 대상의 소스가 되는 동영상 데이터를 제목이나 재생 시간, 용량 등에 따라 분류하여 다수로 저장하고 있다.
표시부(150)는 동영상 데이터의 재생 장면을 디스플레이하거나, 장치의 동작 상태를 표시한다.
제어부(160)는 동영상 편집부(120)를 통해 동영상 데이터를 편집하는 동안에, 편집된 동영상 데이터 또는 편집되지 않고 있는 동영상 데이터가 동영상 부호화부(130)를 통해 동시에 부호화되도록 제어한다.
또한, 제어부(160)는 동영상 데이터가 부호화 된 동영상인지 아닌지를 판단하여 부호화되지 않은 동영상 데이터인 경우에, 동영상 부호화부(130)를 통해 동영상의 처음 장면부터 마지막 장면까지 부호화가 수행되도록 제어하게 된다.
또한, 제어부(160)는 부호화하려는 동영상 데이터에 대해, 동영상 편집부(120)를 통해 편집하고 있는 부분의 영상 구간을 제외한 동영상 데이터가 동영상 부호화부(130)를 통해 부호화되도록 제어하게 된다.
또한, 제어부(160)는 동영상 편집부(120)가 동영상 데이터의 일정 영상 구간 에 대한 편집을 마치고 다른 영상 구간을 편집할 때, 이전에 편집된 동영상 데이터의 일정 영상 구간이 동영상 부호화부(130)를 통해 부호화되도록 제어하게 된다.
또한, 제어부(160)는, 동영상 편집부(120)를 통해 편집하고 있는 동영상 데이터의 편집 구간에서 편집이 일어나지 않는 경우에, 편집이 일어나지 않는 편집 구간에 대해 동영상 부호화부(130)를 통해 부호화되도록 제어하게 된다.
또한, 제어부(160)는 동영상 부호화부(130)를 통해 부호화가 이루어진 영상 구간에 대해 동영상 편집부(120)를 통해 편집이 이루어진 경우에, 이미 편집이 이루어진 영상 구간에 대해서도 동영상 부호화부(130)를 통해 재부호화가 되도록 제어하게 된다.
한편, 동영상 데이터가 MPEG 기반의 동영상 데이터인 경우에, 동영상 부호화부(130)는 MPEG 기반의 동영상 데이터에 대해 GOP(Group Of Picture) 단위로 부호화를 수행하게 된다.
이때, 동영상 편집부(120)를 통해 편집하는 영상 구간과 GOP 단위가 다른 경우, 동영상 편집부(120)는 하나 이상의 GOP를 묶어서 편집 구간으로 설정하고, 동영상 부호화부(130)는 묶여진 GOP 구간들을 부호화하게 된다.
도 2는 본 발명의 실시예에 따른 동영상 부호화 방법을 설명하기 위한 흐름도이다.
도 2를 참조하면, 사용자는 입력부(110)를 통해 동영상 데이터를 편집하는 명령을 입력하게 되고, 제어부(160)로부터 동영상 데이터의 편집 명령을 입력받는 다(S202).
즉, 사용자는 입력부(110)를 통해 동영상 편집 메뉴를 선택하고, 편집하고자 하는 동영상 데이터를 선택하게 된다.
이에 따라, 제어부(160)는 저장부(140)로부터 사용자가 선택한 편집 대상 동영상 데이터를 불러와 버퍼(Buffer) 상으로 로딩(Loading)하게 된다(S204).
그리고, 제어부(160)는 로딩한 동영상 데이터를 도 3의 (a)에 도시된 바와 같이 표시부(150)를 통해 각각의 정지된 영상으로 표시한다. 여기서, 도 3은 본 발명의 실시예에 따라 편집할 대상의 동영상 데이터와 편집된 동영상 데이터 및 부호화하는 동영상 데이터를 나타낸 도면이다.
도 3의 (a)에 도시된 동영상 데이터는 예컨대, MPEG(Moving Picture Expert Group) 기반의 동영상으로서, 서로 다른 크키를 가지며 서로 다른 종류의 I 픽쳐, P 픽쳐, B 픽쳐가 GOP(Group Of Picture) 단위로 이루어져 있다. I 픽쳐의 경우 다른 픽쳐를 참조하지 않고 스스로 재생이 가능하며 가장 많은 비트를 요구한다. P 픽쳐는 I 픽쳐나 다른 P 픽쳐를 단방향으로 참조하여 차이나는 부분으로 이루어지며, I 픽쳐보다 더 적은 비트를 필요로 한다. B 픽쳐는 I 픽쳐나 P 픽쳐를 양방향으로 참조하여 차이나는 부분으로 이루어지며, 가장 적은 비트를 필요로 한다.
사용자는 입력부(110)를 조작하여 도 3의 (b)에 도시된 바와 같이 예컨대, 제2 GOP에 해당하는 편집 구간을 지정하게 되고, 제어부(160)는 편집 구간에 해당하는 제2 GOP의 동영상 데이터를 표시부(150)를 통해 화면 상으로 표시하게 된다(S206).
이어, 사용자는 입력부(110)를 통해 동영상 데이터의 편집 구간에 대해 도 3의 (b)에 도시된 바와 같이 필요없는 영상을 삭제하는 편집을 수행하게 되고, 제어부(160)는 동영상 편집부(120)를 통해 도 3의 (b)에 도시된 편집 구간에 해당하는 제2 GOP 중에서 2번 B 픽쳐와 4번 B 픽쳐를 삭제하여 편집을 수행한다(S208).
이때, 제어부(160)는 동영상 편집부(120)를 통해 전술한 동영상 편집 동작을 수행함과 동시에, 편집 구간에 포함되지 않아(S206-NO) 동영상 편집이 수행되지 않고 있는 동영상 데이터, 즉 도 3의 (d)에 도시된 바와 같이 동영상 편집 대상의 제2 GOP를 제외한 제1 GOP와 제3 GOP 및 제n GOP를 동영상 부호화부(130)를 통해 부호화한다(S208).
이때, 동영상 부호화부(130)는 편집 구간에 포함되지 않은 제1 GOP와 제3 GOP 및 제n GOP에 대해 동영상의 처음 장면부터 마지막 장면까지 부호화를 수행하게 된다.
제어부(160)는 동영상 편집부(120)를 통해 동영상 데이터의 제2 GOP 편집 구간에 대해 편집이 종료되지 않은 경우에(S210-NO), 편집 구간 내 편집하지 않고 있는 동영상이 존재하는지 판단한다(S212). 즉, 제어부(160)는 도 3의 (b)에 도시된 바와 같이 편집 구간에 해당하는 제2 GOP 중 I 픽쳐나 P 픽쳐와 같이 편집하고 있지 않은 동영상이 존재하는지를 판단하는 것이다. 도 3의 (b)에 도시된 바와 같이 편집 구간 내에 I 픽쳐나 P 픽쳐와 같이 편집하고 있지 않은 동영상이 존재하는 경우(S214), 제어부(160)는 편집 구간 내 편집하고 있지 않는 GOP를 부호화부(130)를 통해 부호화하게 된다(S220).
제어부(160)는 동영상 편집부(120)를 통해 동영상 데이터의 편집 구간에 대해 편집하지 않고 있는 동영상이 존재하지 않는 경우에(S214-NO), 편집 구간의 제2 GOP를 편집하는 동작(S208)을 반복한다.
한편, 제어부(160)는 동영상 편집부(120)를 통해 동영상 데이터의 제2 GOP 편집 구간에 대해 도 3의 (b)에 도시된 바와 같이 편집이 종료된 경우에(S210-YES), 도 3의 (c)에 도시된 바와 같이 편집이 종료된 제2 GOP를 동영상 부호화부(130)를 통해 부호화한다(S220).
즉, 제어부(160)는 편집 구간 내 편집하지 않고 있는 GOP를 부호화(S220)함과 동시에 병렬적으로 편집 구간의 GOP를 부호화(S220)하게 된다.
또한, 제어부(160)는 제1 GOP와 제2 GOP 및 제3 GOP를 편집 구간으로 설정한 경우, 현재 편집하고 있는 제2 GOP를 제외한 편집 구간 내에서 편집을 하고 있지 않은 제1 GOP 및 제3 GOP에 대해 동영상 부호화부(130)를 통해 부호화 할 수 있다(S220).
또한, 제어부(160)는 동영상 편집부(120)가 동영상 데이터의 일정 영상 구간, 즉 제2 GOP에 대한 편집을 마치고 다른 영상 구간을 편집할 때, 이전에 편집된 동영상 데이터의 제2 GOP 구간을 동영상 부호화부(130)를 통해 부호화하게 된다.
또한, 제어부(160)는 동영상 부호화부(130)를 통해 부호화가 이루어진 제2 GOP 구간에 대해 동영상 편집부(120)를 통해 다시 편집이 이루어진 경우에, 다시 편집이 이루어진 제2 GOP 구간에 대해 동영상 부호화부(130)를 통해 재부호화하게 된다.
그리고, 제어부(160)는 동영상 편집부(120)를 통해 편집하는 영상 구간과 GOP 단위가 다른 경우, 동영상 편집부(120)를 통해 하나 이상의 GOP를 묶어서 편집 구간으로 설정하고, 동영상 부호화부(130)를 통해 묶여진 GOP 구간들을 부호화 할 수 있다.
제어부(160)는 전술한 바와 같은 과정으로 부호화 된 동영상 데이터를 저장부(140)에 저장한다(S230).
한편, 본 발명에 따른 동영상 부호화 방법은, 동영상 데이터를 동영상 편집부(120)를 통해 편집하고, 편집된 동영상 데이터를 동영상 부호화부(130)를 통해 부호화하는 프로그램으로 기록매체에 기록할 수 있다. 이때, 프로그램은 (a) 동영상 데이터의 편집 명령을 입력받는 단계; (b) 편집 명령에 따라 동영상 편집부(120)를 통해 동영상 데이터를 편집함과 더불어, 병렬적으로 동영상 데이터를 동영상 부호화부(130)를 통해 동시에 부호화하는 단계; 및 (c) 부호화된 동영상 데이터를 저장하는 단계를 처리하는 프로그램이다.
여기서, (b) 단계는, 동영상 데이터가 부호화 된 동영상인지 아닌지를 판단하여 부호화되지 않은 동영상 데이터인 경우에, 동영상 부호화부(130)를 통해 동영상의 처음 장면부터 마지막 장면까지 부호화를 수행하는 것을 특징으로 하는 프로그램이다.
또한, (b) 단계는, 동영상 편집부(120)를 통해 편집하고 있는 부분의 영상 구간을 제외한 동영상 데이터를 동영상 부호화부(130)를 통해 부호화하는 것을 특징으로 하는 프로그램이다.
또한, (b) 단계는, 동영상 편집부(120)가 동영상 데이터의 일정 영상 구간에 대한 편집을 마치고 다른 영상 구간을 편집할 때, 이전에 편집된 동영상 데이터의 일정 영상 구간을 동영상 부호화부(130)를 통해 부호화하는 것을 특징으로 하는 프로그램이다.
또한, (b) 단계는, 동영상 편집부(120)를 통해 편집하고 있는 동영상 데이터의 편집 구간에서 편집이 일어나지 않는 경우에, 편집이 일어나지 않는 편집 구간에 대해 동영상 부호화부(130)를 통해 부호화하는 것을 특징으로 하는 프로그램이다.
또한, (b) 단계는, 동영상 부호화부(130)를 통해 부호화가 이루어진 영상 구간에 대해 동영상 편집부(120)를 통해 편집이 이루어진 경우에, 편집이 이루어진 영상 구간에 대해 동영상 부호화부(130)를 통해 재부호화하는 것을 특징으로 하는 프로그램이다.
또한, (b) 단계는, 동영상 데이터가 MPEG 기반의 동영상 데이터인 경우에, MPEG 기반의 동영상 데이터에 대해 동영상 부호화부(130)를 통해 GOP 단위로 부호화를 수행하는 것을 특징으로 하는 프로그램이다.
그리고, 동영상 편집부(120)를 통해 편집하는 영상 구간과 GOP 단위가 다른 경우, 동영상 편집부(120)를 통해 하나 이상의 GOP를 묶어서 편집 구간으로 설정하고, 동영상 부호화부(130)를 통해 묶여진 GOP 구간들을 부호화하는 것을 특징으로 하는 프로그램이다.
전술한 바와 같이 본 발명에 의하면, 동영상에서 필요없는 장면을 삭제하거 나 새로운 장면을 추가하는 기능과 영상 처리 효과를 적용하는 기능 이외에 최종적으로 편집된 동영상을 저장하기 위해 부호화를 수행할 때, 동영상을 편집하고 있는 동안에 동영상 편집 과정과 병렬적으로 이미 편집된 동영상에 대해 부호화를 동시에 수행함으로써, 동영상의 부호화 시 소요되는 시간을 대폭 단축시킬 수 있도록 하는, 동영상 부호화 장치 및 방법을 실현할 수 있다.
본 발명이 속하는 기술분야의 당업자는 본 발명이 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있으므로, 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적인 것이 아닌 것으로서 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 등가개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
본 발명은 멀티미디어 데이터를 스트리밍 형태로 수신하여 디스플레이하는 PDA나 이동통신 단말기 등의 통신용 단말기에 적용할 수 있다.
또한, 멀티미디어 데이터를 다운로드하여 저장하여 두었다가 사용자가 필요없는 장면을 삭제하거나 원하는 장면을 추가하는 편집 과정을 수행한 후 부호화하여 저장해 두는 개인용 컴퓨터나 PMP, 노트북 컴퓨터 등의 단말기 장치에 적용할 수 있다.
그리고, 디지털 형태로 저장된 비디오에 영상 처리를 수행하거나 편집을 수행할 수 있는 디지털 동영상 편집기나 방송사의 영상 편집 시스템에 적용할 수 있다.
도 1은 본 발명의 실시예에 따른 동영상 부호화 장치의 내부 구성을 개략적으로 나타낸 구성도이다.
도 2는 본 발명의 실시예에 따른 동영상 부호화 방법을 설명하기 위한 흐름도이다.
도 3은 본 발명의 실시예에 따라 편집할 대상의 동영상 데이터와 편집된 동영상 데이터 및 부호화하는 동영상 데이터를 나타낸 도면이다.
< 도면의 주요 부분에 대한 부호의 설명 >
100 : 동영상 부호화 장치 110 : 입력부
120 : 동영상 편집부 130 : 동영상 부호화부
140 : 저장부 150 : 표시부
160 : 제어부

Claims (25)

  1. 동영상 데이터에 관한 편집 명령을 입력하는 입력부;
    상기 편집 명령에 따라 상기 동영상 데이터를 편집하는 동영상 편집부;
    상기 편집된 동영상 데이터를 부호화하는 동영상 부호화부;
    상기 부호화된 동영상 데이터를 저장하기 위한 저장부; 및
    상기 동영상 편집부를 통해 상기 동영상 데이터를 편집하는 동안에, 상기 편집된 동영상 데이터가 상기 동영상 부호화부를 통해 동시에 부호화되도록 제어하는 제어부;
    를 포함하는 동영상 부호화 장치.
  2. 제 1 항에 있어서,
    상기 동영상 편집부와 상기 동영상 부호화부는 병렬적으로 동시에 동작하는 것을 특징으로 하는 동영상 부호화 장치.
  3. 제 1 항에 있어서,
    상기 제어부는, 상기 동영상 데이터가 부호화 된 동영상인지 아닌지를 판단하여 부호화되지 않은 동영상 데이터인 경우에, 상기 동영상 부호화부를 통해 동영 상의 처음 장면부터 마지막 장면까지 부호화를 수행하는 것을 특징으로 하는 동영상 부호화 장치.
  4. 제 1 항에 있어서,
    상기 제어부는, 부호화하려는 상기 동영상 데이터에 대해, 상기 동영상 편집부를 통해 편집하고 있는 부분의 영상 구간을 제외한 상기 동영상 데이터가 상기 동영상 부호화부를 통해 부호화되도록 제어하는 것을 특징으로 하는 동영상 부호화 장치.
  5. 제 1 항에 있어서,
    상기 제어부는, 상기 동영상 편집부가 상기 동영상 데이터의 일정 영상 구간에 대한 편집을 마치고 다른 영상 구간을 편집할 때, 이전에 편집한 상기 동영상 데이터의 일정 영상 구간이 상기 동영상 부호화부를 통해 부호화되도록 제어하는 것을 특징으로 하는 동영상 부호화 장치.
  6. 제 1 항에 있어서,
    상기 제어부는, 상기 동영상 편집부를 통해 편집하고 있는 상기 동영상 데이 터의 편집 구간에서 편집이 일어나지 않는 경우에, 상기 편집 구간에 대해 상기 동영상 부호화부를 통해 부호화되도록 제어하는 것을 특징으로 하는 동영상 부호화 장치.
  7. 제 1 항에 있어서,
    상기 제어부는, 상기 동영상 부호화부를 통해 부호화가 이루어진 영상 구간에 대해서 상기 동영상 편집부를 통해 편집이 이루어진 경우에, 상기 편집이 이루어진 상기 영상 구간에 대해 상기 동영상 부호화부를 통해 재부호화가 되도록 제어하는 것을 특징으로 하는 동영상 부호화 장치.
  8. 제 1 항에 있어서,
    상기 동영상 데이터가 MPEG 기반의 동영상 데이터인 경우에, 상기 동영상 부호화부는 상기 MPEG 기반의 동영상 데이터에 대해 GOP(Group Of Picture) 단위로 부호화를 수행하는 것을 특징으로 하는 동영상 부호화 장치.
  9. 제 8 항에 있어서,
    상기 동영상 편집부를 통해 편집하는 영상 구간과 상기 GOP 단위가 다른 경 우, 상기 동영상 편집부는 하나 이상의 GOP를 묶어서 편집 구간으로 설정하고, 상기 동영상 부호화부는 묶여진 GOP 구간들을 부호화하는 것을 특징으로 하는 동영상 부호화 장치.
  10. (a) 동영상 데이터의 편집 명령을 입력받는 단계;
    (b) 상기 편집 명령에 따라 상기 동영상 데이터를 편집함과 더불어, 병렬적으로 상기 동영상 데이터를 동시에 부호화하는 단계; 및
    (c) 상기 부호화된 동영상 데이터를 저장하는 단계;
    를 포함하는 동영상 부호화 방법.
  11. 제 10 항에 있어서,
    상기 (b) 단계는, 상기 동영상 데이터가 부호화 된 동영상인지 아닌지를 판단하여 부호화되지 않은 동영상 데이터인 경우에, 상기 동영상 부호화부를 통해 동영상의 처음 장면부터 마지막 장면까지 부호화를 수행하는 것을 특징으로 하는 동영상 부호화 방법.
  12. 제 10 항에 있어서,
    상기 (b) 단계는, 상기 동영상 편집부를 통해 편집하고 있는 부분의 영상 구간을 제외한 상기 동영상 데이터를 상기 동영상 부호화부를 통해 부호화하는 것을 특징으로 하는 동영상 부호화 방법.
  13. 제 10 항에 있어서,
    상기 (b) 단계는, 상기 동영상 편집부가 상기 동영상 데이터의 일정 영상 구간에 대한 편집을 마치고 다른 영상 구간을 편집할 때, 이전에 편집된 상기 동영상 데이터의 일정 영상 구간을 상기 동영상 부호화부를 통해 부호화하는 것을 특징으로 하는 동영상 부호화 방법.
  14. 제 10 항에 있어서,
    상기 (b) 단계는, 상기 동영상 편집부를 통해 편집하고 있는 상기 동영상 데이터의 편집 구간에서 편집이 일어나지 않는 경우에, 편집이 일어나지 않는 상기 편집 구간에 대해 상기 동영상 부호화부를 통해 부호화하는 것을 특징으로 하는 동영상 부호화 방법.
  15. 제 10 항에 있어서,
    상기 (b) 단계는, 상기 동영상 부호화부를 통해 부호화가 이루어진 영상 구간에 대해 상기 동영상 편집부를 통해 편집이 이루어진 경우에, 상기 편집이 이루어진 영상 구간에 대해 상기 동영상 부호화부를 통해 재부호화하는 것을 특징으로 하는 동영상 부호화 방법.
  16. 제 10 항에 있어서,
    상기 (b) 단계는, 상기 동영상 데이터가 MPEG 기반의 동영상 데이터인 경우에, 상기 MPEG 기반의 동영상 데이터에 대해 상기 동영상 부호화부를 통해 GOP(Group Of Picture) 단위로 부호화를 수행하는 것을 특징으로 하는 동영상 부호화 방법.
  17. 제 16 항에 있어서,
    상기 동영상 편집부를 통해 편집하는 영상 구간과 상기 GOP 단위가 다른 경우, 상기 동영상 편집부를 통해 하나 이상의 GOP를 묶어서 편집 구간으로 설정하고, 상기 동영상 부호화부를 통해 묶여진 GOP 구간들을 부호화하는 것을 특징으로 하는 동영상 부호화 방법.
  18. (a) 동영상 데이터의 편집 명령을 입력받는 단계;
    (b) 상기 편집 명령에 따라 상기 동영상 데이터를 편집함과 더불어, 병렬적으로 상기 동영상 데이터를 동시에 부호화하는 단계; 및
    (c) 상기 부호화된 동영상 데이터를 저장하는 단계;
    를 처리하는 프로그램이 기록된 기록매체.
  19. 제 18 항에 있어서,
    상기 (b) 단계는, 상기 동영상 데이터가 부호화 된 동영상인지 아닌지를 판단하여 부호화되지 않은 동영상 데이터인 경우에, 상기 동영상 부호화부를 통해 동영상의 처음 장면부터 마지막 장면까지 부호화를 수행하는 것을 특징으로 하는 프로그램이 기록된 기록매체.
  20. 제 18 항에 있어서,
    상기 (b) 단계는, 상기 동영상 편집부를 통해 편집하고 있는 부분의 영상 구간을 제외한 상기 동영상 데이터를 상기 동영상 부호화부를 통해 부호화하는 것을 특징으로 하는 프로그램이 기록된 기록매체.
  21. 제 18 항에 있어서,
    상기 (b) 단계는, 상기 동영상 편집부가 상기 동영상 데이터의 일정 영상 구간에 대한 편집을 마치고 다른 영상 구간을 편집할 때, 이전에 편집된 상기 동영상 데이터의 일정 영상 구간을 상기 동영상 부호화부를 통해 부호화하는 것을 특징으로 하는 프로그램이 기록된 기록매체.
  22. 제 18 항에 있어서,
    상기 (b) 단계는, 상기 동영상 편집부를 통해 편집하고 있는 상기 동영상 데이터의 편집 구간에서 편집이 일어나지 않는 경우에, 편집이 일어나지 않는 상기 편집 구간에 대해 상기 동영상 부호화부를 통해 부호화하는 것을 특징으로 하는 프로그램이 기록된 기록매체.
  23. 제 18 항에 있어서,
    상기 (b) 단계는, 상기 동영상 부호화부를 통해 부호화가 이루어진 영상 구간에 대해 상기 동영상 편집부를 통해 편집이 이루어진 경우에, 상기 편집이 이루어진 영상 구간에 대해 상기 동영상 부호화부를 통해 재부호화하는 것을 특징으로 하는 프로그램이 기록된 기록매체.
  24. 제 18 항에 있어서,
    상기 (b) 단계는, 상기 동영상 데이터가 MPEG 기반의 동영상 데이터인 경우에, 상기 MPEG 기반의 동영상 데이터에 대해 상기 동영상 부호화부를 통해 GOP(Group Of Picture) 단위로 부호화를 수행하는 것을 특징으로 하는 프로그램이 기록된 기록매체.
  25. 제 24 항에 있어서,
    상기 동영상 편집부를 통해 편집하는 영상 구간과 상기 GOP 단위가 다른 경우, 상기 동영상 편집부를 통해 하나 이상의 GOP를 묶어서 편집 구간으로 설정하고, 상기 동영상 부호화부를 통해 묶여진 GOP 구간들을 부호화하는 것을 특징으로 하는 프로그램이 기록된 기록매체.
KR1020080043801A 2008-05-13 2008-05-13 동영상 부호화 장치 및 방법 KR100980195B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020080043801A KR100980195B1 (ko) 2008-05-13 2008-05-13 동영상 부호화 장치 및 방법
PCT/KR2008/006657 WO2009139528A1 (en) 2008-05-13 2008-11-12 Motion picture coding device and method
CN2008801303659A CN102090060B (zh) 2008-05-13 2008-11-12 运动图像编码装置及方法
US12/737,714 US20110182350A1 (en) 2008-05-13 2008-11-12 Motion picture coding device and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080043801A KR100980195B1 (ko) 2008-05-13 2008-05-13 동영상 부호화 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20090118174A true KR20090118174A (ko) 2009-11-18
KR100980195B1 KR100980195B1 (ko) 2010-09-03

Family

ID=41318867

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080043801A KR100980195B1 (ko) 2008-05-13 2008-05-13 동영상 부호화 장치 및 방법

Country Status (4)

Country Link
US (1) US20110182350A1 (ko)
KR (1) KR100980195B1 (ko)
CN (1) CN102090060B (ko)
WO (1) WO2009139528A1 (ko)

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0549026A (ja) * 1991-08-13 1993-02-26 Nippon Telegr & Teleph Corp <Ntt> 映像編集再生方法
US5438438A (en) * 1992-05-29 1995-08-01 Goldstar Co., Ltd. Apparatus for synthesizing videos
JPH08331567A (ja) * 1995-06-02 1996-12-13 Sony Corp 画像情報符号化装置、画像情報復号化装置及び画像情報記録再生システム
JP3014031B2 (ja) * 1995-07-17 2000-02-28 日本電気株式会社 動画圧縮装置
JPH10178586A (ja) * 1996-12-17 1998-06-30 Sony Corp 編集装置
WO1998029873A1 (fr) * 1996-12-25 1998-07-09 Sony Corporation Systeme et procede d'edition
EP2819123A1 (en) * 2003-01-02 2014-12-31 Samsung Electronics Co., Ltd Multimedia apparatus with "slide-show" accompanied audio output
JP4329416B2 (ja) * 2003-06-06 2009-09-09 ソニー株式会社 データ処理装置及びデータ処理方法、編集処理装置及び編集処理方法、プログラム、記録媒体
JP2005348228A (ja) * 2004-06-04 2005-12-15 Hitachi Ltd 動画像編集システム
KR101194967B1 (ko) * 2004-08-25 2012-10-25 소니 주식회사 정보 처리 장치 및 정보 처리 방법, 및 기록 매체
JP4838253B2 (ja) * 2004-10-07 2011-12-14 パナソニック株式会社 画像符号化装置、画像符号化方法、画像復号化装置、画像復号化方法、および記録方法

Also Published As

Publication number Publication date
KR100980195B1 (ko) 2010-09-03
US20110182350A1 (en) 2011-07-28
CN102090060B (zh) 2013-04-24
CN102090060A (zh) 2011-06-08
WO2009139528A1 (en) 2009-11-19

Similar Documents

Publication Publication Date Title
US20240321317A1 (en) Generation and use of user-selected scenes playlist from distributed digital content
US7734660B2 (en) Data processing device
EP2104105A1 (en) Digital audio and video clip encoding
JP2010219983A (ja) 画像処理装置および方法
JP2003009044A (ja) 記録装置、再生装置及びその方法
JP4096310B2 (ja) 情報作成装置および方法、再生装置および方法、並びにプログラム
KR101323331B1 (ko) 불연속 동영상 데이터의 재생 방법 및 장치
JP5635265B2 (ja) 編集装置および編集方法
CN102132593A (zh) 在两个设备之间连续播放运动图像的系统和方法
EP2104103A1 (en) Digital audio and video clip assembling
JP5120981B2 (ja) 特殊再生用のビデオデータの生成方法
US7584206B2 (en) File recording method and file recording apparatus
KR101678394B1 (ko) Ｖｏｄ 서비스를 제공하는 디지털 방송 시스템에서 데이터 저장 방법 및 그를 수행하는 장치
US20120251081A1 (en) Image editing device, image editing method, and program
EP1016083B1 (en) Editing of digital video information signals
WO2005064935A1 (ja) ファイル記録装置、ファイル記録方法、ファイル記録方法のプログラム、ファイル記録方法のプログラムを記録した記録媒体、ファイル再生装置、ファイル再生方法、ファイル再生方法のプログラム及びファイル再生方法のプログラムを記録した記録媒体
US6944390B1 (en) Method and apparatus for signal processing and recording medium
KR100980195B1 (ko) 동영상 부호화 장치 및 방법
US8200067B2 (en) Processing of scalable compressed video data formats for nonlinear video editing systems
US8086089B2 (en) Recording apparatus
CN1528087A (zh) 通过转换非帧内图像来修改视频信号
JP4401876B2 (ja) 再生装置
JP4654161B2 (ja) 記録装置及び記録方法
JP2006121267A (ja) 連続再生システム
JP2007282258A (ja) 画像再生装置、画像再生方法及びプログラム記録媒体

Legal Events

Date Code Title Description
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20080513

A201 Request for examination
PA0201 Request for examination

Patent event code: PA02012R01D

Patent event date: 20090309

Comment text: Request for Examination of Application

Patent event code: PA02011R01I

Patent event date: 20080513

Comment text: Patent Application

PG1501 Laying open of application
E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20100222

Patent event code: PE09021S01D

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

Patent event code: PE07011S01D

Comment text: Decision to Grant Registration

Patent event date: 20100819

GRNT Written decision to grant
PR0701 Registration of establishment

Comment text: Registration of Establishment

Patent event date: 20100830

Patent event code: PR07011E01D

PR1002 Payment of registration fee

Payment date: 20100830

End annual number: 3

Start annual number: 1

PG1601 Publication of registration
FPAY Annual fee payment

Payment date: 20130731

Year of fee payment: 4

PR1001 Payment of annual fee

Payment date: 20130731

Start annual number: 4

End annual number: 4

FPAY Annual fee payment

Payment date: 20140731

Year of fee payment: 5

PR1001 Payment of annual fee

Payment date: 20140731

Start annual number: 5

End annual number: 5

FPAY Annual fee payment

Payment date: 20150728

Year of fee payment: 6

PR1001 Payment of annual fee

Payment date: 20150728

Start annual number: 6

End annual number: 6

FPAY Annual fee payment

Payment date: 20160802

Year of fee payment: 7

PR1001 Payment of annual fee

Payment date: 20160802

Start annual number: 7

End annual number: 7

FPAY Annual fee payment

Payment date: 20170802

Year of fee payment: 8

PR1001 Payment of annual fee

Payment date: 20170802

Start annual number: 8

End annual number: 8

FPAY Annual fee payment

Payment date: 20180802

Year of fee payment: 9

PR1001 Payment of annual fee

Payment date: 20180802

Start annual number: 9

End annual number: 9

PR1001 Payment of annual fee

Payment date: 20200730

Start annual number: 11

End annual number: 11

PR1001 Payment of annual fee

Payment date: 20210803

Start annual number: 12

End annual number: 12