KR101263056B1 - 영상 재생 장치 및 방법 - Google Patents

영상 재생 장치 및 방법 Download PDF

Info

Publication number
KR101263056B1
KR101263056B1 KR1020070013974A KR20070013974A KR101263056B1 KR 101263056 B1 KR101263056 B1 KR 101263056B1 KR 1020070013974 A KR1020070013974 A KR 1020070013974A KR 20070013974 A KR20070013974 A KR 20070013974A KR 101263056 B1 KR101263056 B1 KR 101263056B1
Authority
KR
South Korea
Prior art keywords
image
idr
frames
frame
image frames
Prior art date
Application number
KR1020070013974A
Other languages
English (en)
Other versions
KR20080074618A (ko
Inventor
오준환
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020070013974A priority Critical patent/KR101263056B1/ko
Publication of KR20080074618A publication Critical patent/KR20080074618A/ko
Application granted granted Critical
Publication of KR101263056B1 publication Critical patent/KR101263056B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

본 발명은 부호화된 영상 스트림을 역방향으로 재생할 수 있는 영상 재생 장치 및 방법에 관한 것이다.
본 발명의 영상 재생 장치는 저장된 동영상을 재생 중에 역방향 검색 명령이 입력되는 경우, 부호화된 영상 스트림 내에 포함되어 있는 영상 프레임들 중에서 역방향 검색 명령에 따라 설정된 종료 포인트부터 역방향으로 IDR(Instantaneous Decoding Refresh) 프레임을 검색하고, 검색한 IDR 프레임부터 명령이 입력된 시점의 영상 프레임까지 영상 프레임들을 디코딩한다. 그리고 디코딩한 영상 프레임들 중에서 재생 배속 정보에 따라 적어도 하나 이상씩을 건너뛰며 미리 설정된 개수의 영상 프레임을 추출하고, 추출한 영상 프레임들을 시간상 재생 순서의 역순으로 읽어들여 화면에 출력한다. 이에 따라 소용량의 버퍼를 이용하여 자연스러운 역방향 재생이 가능해진다.
Figure R1020070013974
IDR 프레임, 표본

Description

영상 재생 장치 및 방법{APPARATUS AND METHOD FOR REPRODUCING IMAGE}
도 1은 본 발명에 따른 영상 재생 장치의 구성을 보여주는 블럭도.
도 2는 본 발명에 따른 영상 재생 장치에서 역방향 재생을 위한 영상 프레임들의 디코딩 순서 및 출력 순서를 일 예를 들어 보여주는 도면.
도 3은 본 발명에 따른 영상 재생 방법을 보여주는 흐름도.
* 도면의 주요부분에 대한 부호의 설명
102 : 사용자 인터페이스부 104 : 제어부
100 : 영상 검색 및 추출부 106 : IDR 검색부
108 : 영상 추출부 110 : 디코더
112 : 영상 프레임 버퍼 114 : 표본화부
116 : 표본 영상 프레임 버퍼 118 : 재생 방향 제어부
120 : 독출부
본 발명은 부호화된 영상 스트림을 역방향으로 재생하는 영상 재생 장치 및 방법에 관한 것이다.
고효율 부호화 기술인 H.264는 기본적으로 NAL(Network Abstract Layer) 단위(unit)로 구성되어 있다.
영상 데이터를 포함하고 있는 NAL 타입은 크게 IDR NAL과 non-IDR NAL의 2가지로 구성되며, 이 중에서 IDR(Instantaneous Decoding Refresh) NAL은 I 타입 슬라이스(I type slice)로 구성되고, 랜덤 억세스가 가능한 지점이다. 또한, 시간적 중복성(temporal redundancy)을 사용하지 않고 공간적 중복성(spatial redundancy)만을 이용하여 부호화함과 동시에 IDR NAL의 IDR 프레임 이전에 들어온 모든 프레임은 버퍼에서 제거되어 더 이상 부호화를 위해서 참조되지 않는다.
그에 비해서 non-IDR NAL은 I 타입 슬라이스, P 타입 슬라이스(P type slice) 또는 B 타입 슬라이스(B type slice)로 구성된다. 이 중에서 I 타입 슬라이스는 기본적으로 IDR NAL과 마찬가지로 공간적인 중복성만을 사용하여 부호화되어 있으나, 프레임 버퍼의 프레임들을 소거하지 않는다는 점에서 차이가 있다. 이렇게 프레임 버퍼의 프레임들을 소거하지 않는 이유는 I 타입 슬라이스의 I 프레임 이후에 들어오는 P 타입 슬라이스의 P 프레임 또는 B 타입 슬라이스의 B 프레임이 I 프레임 이전의 프레임들을 참조할 수 있기 때문이다.
그래서 IDR NAL의 IDR 프레임은 동영상 재생시의 순방향/역방향 (FF/REW) 검색 모드에서 랜덤 억세스가 가능한 지점로 사용되고 있고, 이로 인해 영상 재생 장치에서 사용자가 역방향 재생을 선택하면, 부호화된 영상 스트림에서 랜덤 억세스 가 가능한 IDR 프레임만을 찾아 디코딩하여 화면에 출력하는 방법을 적용하고 있다.
그러나, IDR 프레임만을 디코딩하여 화면에 출력하게 되면, IDR 프레임 간에복호되지 않은 I 프레임, B 프레임 또는 P 프레임 등의 영상 프레임들로 인해 불연속적인 장면이 화면상에 출력되는 문제점이 생겼다.
이에 따라 본 발명의 목적은 역방향으로 재생할 시에 랜덤 억세스 가능한 IDR 프레임뿐만 아니라 랜덤 억세스가 가능하지 않은 영상 프레임까지 출력하여 자연스럽게 영상이 재생되도록 하는 영상 재생 장치 및 방법을 제공하는 데 있다.
본 발명의 다른 목적은 디코딩한 영상 프레임들 중에서 재생 배속 정보에 따라 미리 설정된 개수의 영상 프레임을 추출하고, 추출한 영상 프레임들을 출력하는 영상 재생 장치 및 방법을 제공하는 데 있다.
본 발명의 다른 목적은 디코딩할 시에 미리 설정된 개수의 출력할 영상 프레임이 추출되면, 현재 디코딩 동작을 정지시키는 영상 재생 장치 및 방법을 제공하는 데 있다.
이러한 목적을 달성하기 위한 본 발명의 영상 재생 장치는, 부호화된 영상 스트림 내에 포함되어 있는 영상 프레임들 중에서 역방향 재생 정보에 따라 설정된 종료 포인트부터 역방향으로 IDR 프레임을 검색하는 IDR 검색부; 상기 역방향 재생 정보가 입력되는 경우에 부호화된 영상 스트림 내에 포함되어 있는 영상 프레임들 중에서 상기 입력된 역방향 재생 정보에 따라 종료 포인트를 설정하고, 상기 IDR 검색부가 검색한 IDR 프레임부터 상기 설정한 종료 포인트까지의 영상 프레임들을 추출하는 영상 추출부; 상기 영상 추출부가 추출한 영상 프레임들을 디코딩하는 디코더; 상기 디코더가 디코딩한 영상 프레임들을 저장하는 영상 프레임 버퍼; 상기 영상 프레임 버퍼에 저장된 영상 프레임들의 출력 순서를 제어하는 재생 방향 제어부; 및 상기 재생 방향 제어부의 제어에 따라 상기 영상 프레임 버퍼에 저장된 영상 프레임들을 읽어들여 화면에 출력하는 독출부;를 포함하여 이루어진다.
상기 영상 추출부의 종료 포인트 설정은 상기 역방향 재생 정보가 입력된 시점 또는 이전 IDR 프레임의 시작 지점을 종료 포인트로 설정하는 것을 특징으로 한다.
상기 영상 프레임 버퍼에 저장된 영상 프레임들 중에서 재생 배속 정보에 따라 적어도 하나 이상씩을 건너뛰며 추출할 영상 프레임을 선별하여 미리 설정된 개수의 영상 프레임을 추출하는 표본화부 및 상기 표본화부가 추출한 영상 프레임들을 저장하는 표본 영상 프레임 버퍼를 더 포함하고, 상기 재생 방향 제어부는 상기 표본 영상 프레임 버퍼에 저장된 영상 프레임들의 출력 순서를 제어하고, 상기 독출부는 상기 재생 방향 제어부의 제어에 따라 상기 표본 영상 프레임 버퍼에 저장된 영상 프레임들을 읽어들여 화면에 출력하는 것을 특징으로 한다.
상기 디코더는 상기 IDR 검색부가 검색한 IDR 프레임부터 디코딩을 시작하 고, 상기 표본화부가 재생 배속 정보에 따라 미리 설정된 개수의 영상 프레임을 추출할 경우에 상기 디코딩을 종료하는 것을 특징으로 한다.
상기 표본화부의 미리 설정된 개수의 영상 프레임 추출은 상기 IDR 검색부가 검색한 IDR 프레임을 포함하는 것을 특징으로 한다.
상기 영상 프레임 버퍼 및 표본 영상 프레임 버퍼는 각각 저장한 영상 프레임들이 상기 부호화된 영상 스트림에서 어느 시간 위치에 속하는지에 대한 부가정보를 더 포함하여 저장하는 것을 특징으로 한다.
본 발명의 영상 재생 방법은, 역방향 검색 명령이 입력되는 경우에 부호화된 영상 스트림 내에 포함되어 있는 영상 프레임들 중에서 상기 입력된 역방향 검색 명령에 따른 역방향 재생 정보에 따라 설정된 종료 포인트부터 역방향으로 IDR 프레임을 검색하는 단계; 상기 검색한 IDR 프레임부터 상기 설정된 종료 포인트까지의 영상 프레임들을 추출하고, 추출한 영상 프레임들을 디코딩하는 단계; 및 상기 디코딩한 영상 프레임들을 재생 순서의 역순으로 독출하여 화면에 출력하는 단계;를 포함하여 이루어진다.
상기 설정된 종료 포인트는 상기 역방향 검색 명령이 입력된 시점 또는 이전 IDR 프레임의 시작 지점이 종료 포인트로 설정된 것을 특징으로 한다.
상기 역방향 검색 명령은 역방향 재생 정보와 재생 배속 정보를 포함하는 것을 특징으로 한다.
상기 추출한 영상 프레임들을 디코딩하는 단계 후에, 상기 디코딩한 영상 프레임들 중에서 상기 재생 배속 정보에 따라 적어도 하나 이상씩을 건너뛰며 추출할 영상 프레임을 선별하여 미리 설정된 개수의 영상 프레임을 추출하는 단계 및 상기 추출한 영상 프레임들을 재생 순서의 역순으로 독출하여 화면에 출력하는 단계를 더 포함하는 것을 특징으로 한다.
상기 영상 프레임들의 디코딩은 상기 재생 배속 정보에 따라 미리 설정된 개수의 영상 프레임을 추출할 경우에 상기 디코딩을 종료하는 것을 특징으로 한다.
상기에서 미리 설정된 개수의 영상 프레임 추출은 상기에서 디코딩한 영상 프레임들 중에서 IDR 프레임을 포함하여 미리 설정된 개수의 영상 프레임을 추출하는 것을 특징으로 한다.
이하, 첨부한 도면들을 참조하여 본 발명을 상세히 설명한다.
다만, 본 발명을 설명함에 있어, 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그에 대한 상세한 설명은 생략한다.
도 1은 본 발명의 영상 재생 장치의 구성을 나타내는 블럭도이다.
도 1을 참조하면, 영상 재생 장치는 사용자 인터페이스부(102)와, 제어부(104)와, 영상 검색 및 추출부(100)와, 디코더(110)와, 영상 프레임 버퍼(112)와, 표본화부(114)와, 표본 영상 프레임 버퍼(116)와, 재생 방향 제어부(118) 및 독출부(120)를 포함한다.
사용자 인터페이스부(102)는 사용자 조작에 따른 동작 명령을 발생한다.
제어부(104)는 사용자가 상기 사용자 인터페이스부(102)를 통해 발생하는 동 작 명령이 수행되도록 각 부를 제어한다. 상기 제어부(104)는 사용자 인터페이스부(102)를 통해 역방향 검색 명령이 입력되면, 그에 따른 역방향 재생 정보 및 재생 배속 정보를 출력한다. 재생 배속 정보는 1배속도 포함됨이 바람직하다.
영상 검색 및 추출부(100)는 동영상 즉, 부호화된 영상 스트림 내에 포함되어 있는 영상 프레임들 중에서 상기 제어부(104)에 의해 입력되는 역방향 재생 정보에 따라 설정된 종료 포인트부터 역방향으로 IDR(Instantaneous Decoding Refresh) 프레임을 검색하고, 검색한 IDR 프레임부터 상기 설정된 종료 포인트까지의 영상 프레임들을 추출한다. 또한, 상기 영상 검색 및 추출부(100)는 IDR 검색부(106) 및 영상 추출부(108)로 구성된다. 그리고, 상기의 동영상은 PVR 등의 저장부에 저장되어 있음이 바람직하다.
상세히 살펴보면, IDR 검색부(106)는 부호화된 영상 스트림 내에 포함되어 있는 영상 프레임들 중에서 역방향 재생 정보에 따라 설정된 종료 포인트부터 역방향으로 영상 프레임들을 판별하여 IDR 프레임을 검색한다. 상기에서 설정된 종료 포인트은 사용자가 사용자 인터페이스부(102)를 통해 역방향 검색 명령을 입력한 지점 또는 이전 IDR 프레임의 시작 지점을 의미한다. 또한, IDR 프레임은 랜덤 억세스 가능한 영상 프레임으로 I 프레임에 해당하고, 상기 I 프레임이 꼭 IDR 프레임인 것은 아니다. 그리고, IDR 프레임은 IDR 프레임 이후에 입력되는 I 프레임, P 프레임 또는 B 프레임이 참조하는 영상 프레임이므로, IDR 프레임을 디코딩해야지만 후속 I 프레임, P 프레임 또는 B 프레임을 디코딩할 수 있게 된다.
영상 추출부(108)는 상기 제어부(104)에 의해 역방향 재생 정보가 입력되는 경우에 부호화된 영상 스트림 내에 포함되어 있는 영상 프레임들 중에서 상기 입력된 역방향 재생 정보에 따라 종료 포인트를 설정하고, 상기 IDR 검색부(106)가 검색한 IDR 프레임부터 상기 설정한 종료 포인트까지의 영상 프레임들을 추출한다. 상기 영상 추출부(108)는 역방향 재생 정보를 상기 IDR 검색부(106)로 전달한다.
디코더(110)는 상기 영상 추출부(108)가 추출한 영상 프레임들을 기 설정된 디코딩 순서에 따라 디코딩한다. 상기 디코더(110)는 상기 영상 추출부(108)가 추출한 영상 프레임들 중에서 IDR 프레임을 먼저 디코딩하고, 상기 IDR 프레임을 참조하는 순서에 따라 I, P 또는 B 프레임을 디코딩한다.
영상 프레임 버퍼(112)는 상기 디코더(110)가 디코딩한 영상 프레임들을 저장한다. 상기 영상 프레임 버퍼(112)는 디코딩된 영상 프레임들을 저장하므로 DPB(Decoded Picture Buffer)라 한다.
또한, 영상 프레임 버퍼(112)는 디코딩된 영상 프레임들이 부호화된 영상 스트림 상에서 어느 시간 위치에 속하는지에 대한 부가정보를 더 저장한다.
표본화부(114)는 상기 제어부(104)로부터 입력되는 재생 배속 정보에 따라 상기 영상 프레임 버퍼(112)에 저장된 영상 프레임들 중에서 적어도 하나 이상씩을 건너뛰며 추출할 영상 프레임을 선별하여 미리 설정된 개수의 영상 프레임을 추출한다. 상기 미리 설정된 개수에는 항시 IDR 프레임이 포함된다.
표본 영상 프레임 버퍼(116)는 상기 표본화부(114)가 추출한 영상 프레임들을 저장한다. 상기 표본 영상 프레임 버퍼(116)는 화면에 표시할 영상 프레임들을 저장하므로 DFB(Display Frame Buffer)라 한다.
또한, 표본 영상 프레임 버퍼(116)는 디코딩된 영상 프레임들이 부호화된 영상 스트림 상에서 어느 시간 위치에 속하는지에 대한 부가정보를 더 저장한다.
재생 방향 제어부(118)는 상기 표본 영상 프레임 버퍼(116)에 저장된 영상 프레임들의 출력 순서를 제어한다.
독출부(120)는 상기 재생 방향 제어부(118)의 제어에 따라 상기 표본 영상 프레임 버퍼(116)에 저장된 영상 프레임들을 독출하여 재생한다. 즉, 독출부(120)는 상기 표본 영상 프레임 버퍼(116)에 저장된 영상 프레임들을 시간상 재생 순서의 역순으로 읽어들여 화면에 출력한다.
여기서, 도 2를 참조하여 본 발명의 영상 재생 장치에서 역방향으로 재생할 경우를 상세히 살펴보도록 하겠다.
도 2는 본 발명에 따른 영상 재생 장치에서 역방향 재생을 위한 영상 프레임들의 디코딩 순서 및 출력 순서를 일 예를 들어 보여주는 도면이다.
도 2를 참조하면, 부호화된 영상 스트림 내에서 NAL 유닛 타입은 크게 IDR NAL 유닛과 non-IDR NAL 유닛의 2가지로 구성되며, 이 중에서 IDR(Instantaneous Decoding Refresh) NAL 유닛은 랜덤 억세스가 가능한 지점이다.
IDR NAL 유닛에 대해서 좀 더 살펴보면, IDR NAL 유닛의 IDR 프레임은 동영상 재생시 순방향/역방향 검색(FF/REW)을 할 경우에 랜덤 억세스가 가능한 지점로 사용되는 영상 프레임이고, 참조 영상으로 사용되어 IDR 프레임 이후에 들어온 영상 프레임들(I 프레임,P 프레임, B 프레임)은 상기 IDR 프레임을 참조하여 디코딩 된다. 그러므로 IDR 프레임 이전에 들어온 모든 영상 프레임들은 버퍼에서 제거되어도 디코딩하는데 문제가 되지 않는다.
또한, IDR NAL 유닛은 I 타입 슬라이스가 해당되고, non-IDR NAL에는 I 타입 슬라이스, P 타입 슬라이스 또는 B 타입 슬라이스(B type slice)가 해당된다.
결국, 부호화된 영상 스트림 내에 포함된 영상 프레임들에는 IDR 프레임, I 프레임, P 프레임, B 프레임 등이 포함되고, 상기 IDR 프레임을 우선 디코딩해야지만 후에 입력되는 I 프레임, P 프레임 또는 B 프레임이 상기 IDR 프레임을 참조하여 디코딩된다.
상기와 같이 구성된 부호화된 영상 스트림에는 순서가 있는데 이를 "POC(Pccture Order Count)"라 한다.
본 발명에 따른 영상 재생 장치의 역방향 재생 동작을 살펴보면, 사용자가 부호화된 영상 스트림을 재생하는 중에 사용자 인터페이스(102)를 통해 역방향 검색 명령을 입력하는 경우에, 제어부(104)는 그에 따라 동작 제어 정보를 생성하여 각 부에 전달한다. 상기 동작 제어 정보는 역방향 재생 정보와 재생 배속 정보를 포함한다.
IDR 검색부(106)는 부호화된 영상 스트림 내에 포함되어 있는 영상 프레임들 중에서 역방향 재생 정보에 따라 설정된 종료 포인트부터 역방향으로 IDR 프레임을 검색한다. 그리고, 영상 추출부(108)는 상기 역방향 재생 정보가 입력되면, 부호화된 영상 스트림 내에 포함되어 있는 영상 프레임들 중에서 상기 입력된 역방향 재 생 정보에 따라 종료 포인트를 설정하고, 상기 IDR 검색부(106)가 검색한 IDR 프레임부터 상기 설정한 종료 포인트까지의 영상 프레임들을 추출한다.
그리고 디코더(110)는 상기 영상 추출부(108)가 추출한 영상 프레임들을 디코딩하고, 디코딩한 영상 프레임들을 영상 프레임 버퍼(112)에 저장한다. 도 2를 예를 들어보면, 영상 추출부(108)가 IDR 검색부(106)에 의해 검색된 IDR 프레임부터 역방향 검색 명령이 입력된 시점까지 IDR 프레임과 4개의 P 프레임을 추출하면, 디코더(110)의 디코딩 순서는 IDR 프레임이 "1"번이 되고, 상기 IDR 프레임과 이웃하여 IDR 프레임을 참조하는 P 프레임이 "2"번이 되고, 그리고 순차적으로 마지막 P 프레임이 "5"번이 되어 디코더(110)는 1번부터 5번까지 영상 프레임들을 디코딩한다. 여기서, 만약 상기 역방향 검색 명령에 따른 재생 배속 정보가 1배속이라면, 독출부(120)가 상기 영상 프레임 버퍼(112)에 저장된 영상 프레임을 재생 방향 제어부(118)의 제어에 따라 읽어들여 화면에 출력함이 바람직하다.
그리고, 표본화부(114)가 영상 프레임 버퍼(112)에 저장된 영상 프레임들 중에서 상기 역방향 고속 검색명령에 따른 재생 배속 정보에 따라 적어도 하나 이상씩을 건너뛰며 추출할 영상 프레임을 선별하여 미리 설정한 개수의 영상 프레임을 추출하고, 추출한 영상 프레임들을 표본 영상 프레임 버퍼(116)에 저장한다. 상기 표본화부(114)는 IDR 프레임을 포함하여 미리 설정한 개수의 프레임을 추출함이 바람직하다.
또한, 독출부(120)가 재생 방향 제어부(118)의 제어에 따라 표본 영상 프레임 버퍼(116)에 저장된 프레임들을 시간상 재생 순서의 역순으로 읽어들여 재생한 다. 도 2를 예를 들어보면, 표본화부(114)가 5개의 프레임 중에서 재생 배속 정보에 따라 추출할 프레임이 3개라면, 그에 따라 하나씩을 건너뛰며 3개("1"번 IDR 프레임, "3"번 P 프레임, "5"번 P 프레임)의 영상 프레임을 선별하고, 선별한 영상 프레임을 추출(sampling)하는데, IDR 프레임은 항상 추출된다. 그리고, 독출부(120)가 재생 방향 제어부(118)의 역방향 재생 정보에 따라 표본 영상 프레임 버퍼(116)에 저장된 영상 프레임("1"번 IDR 프레임, "3"번 P 프레임, "5"번 P 프레임)들을 시간상 재생 순서의 역순으로 "5"번 P 프레임을 먼저 읽어 화면에 출력하고, "3"번 P 프레임을 읽어 화면에 출력하고, "1"번 IDR 프레임을 읽어 화면에 출력함으로써 역방향으로 영상이 재생되도록 한다.
그리고, 역방향 검색 명령이 종료될 때까지 영상 추출부(108)는 이전 IDR 프레임의 시작 지점을 종료 포인트으로 설정하고, 상기 IDR 검색부(106)가 IDR 프레임을 검색하면, 검색한 IDR 프레임부터 상기 설정한 종료 포인트까지의 영상 프레임들을 추출하며, 각 부의 동작이 반복된다. 도 2를 예를 들어보면, 영상 추출부(108)가 IDR 검색부(106)에 의해 검색된 IDR 프레임부터 역방향 검색 명령이 입력된 시점까지 IDR 프레임과 7개의 P 프레임을 추출한다. 동일한 동작이 반복되므로 상세한 설명은 생략하기로 하겠다.
여기서, 표본화부(114)는 미리 설정된 개수의 영상 프레임을 추출한 경우에 이를 제어부(104)에 알리고, 제어부(104)에서 디코더(110)가 디코딩 동작을 멈추도록 한다. 이는 디코더(110)가 IDR 프레임부터 디코딩을 시작하여 영상 추출부(108) 를 통해 추출한 영상 프레임들을 전체 다 디코딩하지 않도록 하기 위해서다. 도 2를 예를 들어보면, 디코더(110)가 영상 추출부(108)를 통해 추출한 영상 프레임들을 디코딩 순서에 따라 "6"번부터 "13"까지의 영상 프레임들을 순차적으로 디코딩하고, 디코딩한 영상들이 순차적으로 영상 프레임 버퍼(112)에 저장되면, 표본화부(114)에서 상기 영상 프레임 버퍼(112)로부터 디코딩한 "6"번, "8"번 영상 프레임을 순차적으로 추출하고, 마지막 "11"번 영상 프레임을 추출하여 미리 설정된 3개의 영상 프레임을 추출한다. 그리고, 표본화부(114)는 추출할 3개의 영상 프레임을 추출하였음을 제어부(104)에 알리고, 상기 제어부(104)에서 영상 추출부(108)를 통해 디코더(110)로 디코딩 종료 명령을 전달하여 상기 디코더(110)가 "13"번의 영상 프레임까지 디코딩을 하지 않도록 한다. 이에 따라 디코더(110)는 불필요한 디코딩 동작을 할 필요가 없게 된다.
한편, 상기에서는 본 발명의 영상 재생 장치에서 역방향 재생일 경우를 예를 들어 상세히 설명하였으나, 순방향 재생일 경우에도 본 발명을 적용할 수 있음은 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 용이하게 알 수 있다.
도 3은 본 발명에 따른 영상 재생 방법을 보여주는 흐름도이다.
동영상 즉, 부호화된 영상 스트림을 재생 중에(S300), 사용자가 사용자 인터페이스(102)를 통해 역방향 검색 명령을 입력하면(S302), 영상 재생 장치는 부호화된 영상 스트림 상에서 역방향 검색 명령이 입력된 시점의 영상 프레임에 종료 포인트를 설정한다(S304). 상기 역방향 검색 명령에는 역방향 재생 정보와 재생 배속 정보가 포함된다. 상기의 동영상은 PVR 등의 저장부에 저장되어 있음이 바람직하다.
그리고, 영상 재생 장치는 상기에서 설정한 종료 포인트의 영상 프레임부터 역방향으로 IDR 프레임을 검색한다(S306).
영상 재생 장치는 상기의 IDR 프레임 검색에 따라 IDR 프레임을 검색하면(S308), 검색한 IDR 프레임부터 종료 포인트까지의 영상 프레임들을 추출하고, 추출한 영상 프레임들을 디코딩 순서대로 디코딩한다(S310).
영상 재생 장치는 상기에서 디코딩한 영상 프레임들 중에서 상기 역방향 검색 명령에 따른 재생 배속 정보에 따라 미리 설정된 영상 프레임을 IDR 프레임을 포함하여 선별하고, 선별한 영상 프레임들을 추출한다(S312).
여기서 영상 재생 장치는 상기에서 디코딩한 영상 프레임들 중에서 적어도 하나 이상씩을 건너뛰며 추출할 영상 프레임을 선별하는데, IDR 프레임은 항상 선별되며, 이에 따라 미리 설정한 개수의 영상 프레임을 추출한다. 또한, 영상 재생 장치는 미리 설정한 개수의 영상 프레임이 추출되면, 종료 포인트의 영상 프레임까지 디코딩을 하지 않고, 현재 디코딩 동작을 정지한다. 이는 화면에 출력할 영상 프레임들을 추출하였으므로 나머지 영상 프레임들은 디코딩할 필요가 없기 때문이다.
영상 재생 장치는 상기에서 추출한 영상 프레임들을 시간상 재생 순서의 역순으로 화면에 출력한다(S314).
영상 재생 장치는 역방향 검색 명령이 종료(S316)될 때까지 이전 IDR 프레임 의 시작 지점에 종료 포인트를 설정(S318)하여 상기의 단계들(S306~S314)을 반복한다.
한편, 상기에서는 본 발명을 특정의 바람직한 실시 예에 관련하여 도시하고 설명하였으나, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 상술한 실시 예에 대하여 본 발명의 범주에서 벗어나지 않는 한도 내에서 다양하게 개조 및 변화될 수 있다는 것을 용이하게 알 수 있다. 그러므로 본 발명의 권리범위는 설명된 실시 예에 국한되어 정해져서는 안 되며, 후술하는 특허청구범위뿐만 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.
이상에서 상세히 설명한 바와 같이 본 발명에 따르면, 역방향 검색 명령이 입력되는 경우에 그 명령이 입력된 시점부터 역방향으로 IDR 프레임을 검색하고, 검색한 IDR 프레임과 IDR 프레임을 참조하는 영상 프레임들을 추출하여 디코딩한다. 그리고 디코딩한 영상 프레임 중에서 미리 설정된 개수의 영상 프레임을 추출하고, 추출한 영상 프레임들을 시간상 재생 순서의 역순으로 출력한다.
이로 인해 랜덤 억세스가 가능한 IDR 프레임뿐만 아니라 랜덤 억세스가 가능하지 않은 영상 프레임들을 시간상 등간격으로 추출하여 화면에 출력함으로써 자연스럽게 역방향 재생이 가능해진다.
또한, 재생 배속 정보에 따라 미리 설정된 개수의 영상 프레임을 추출함으로 소용량의 버퍼로도 자연스럽게 역방향 재생이 가능해진다.
또한, 미리 설정된 개수의 영상 프레임이 추출되면, 디코딩 동작이 정지되도록 하므로 불필요한 디코딩 동작이 없어진다.

Claims (12)

  1. 부호화된 영상 스트림 내에 포함되어 있는 영상 프레임들 중에서 역방향 재생 정보에 따라 설정된 종료 포인트부터 역방향으로 IDR(Instantaneous Decoding Refresh) 프레임을 검색하는 IDR 검색부;
    상기 역방향 재생 정보가 입력되는 경우에 부호화된 영상 스트림 내에 포함되어 있는 영상 프레임들 중에서 상기 입력된 역방향 재생 정보에 따라 종료 포인트를 설정하고, 상기 IDR 검색부가 검색한 IDR 프레임부터 상기 설정한 종료 포인트까지의 영상 프레임들을 추출하는 영상 추출부;
    상기 영상 추출부가 추출한 영상 프레임들을 디코딩하는 디코더;
    상기 디코더가 디코딩한 영상 프레임들을 저장하는 영상 프레임 버퍼;
    상기 영상 프레임 버퍼에 저장된 영상 프레임들의 출력 순서를 제어하는 재생 방향 제어부; 및
    상기 재생 방향 제어부의 제어에 따라 상기 영상 프레임 버퍼에 저장된 영상 프레임들을 읽어들여 화면에 출력하는 독출부;를 포함하여 이루어지는 영상 재생 장치.
  2. 제 1항에 있어서,
    상기 영상 추출부의 종료 포인트 설정은
    상기 역방향 재생 정보가 입력된 시점 또는 이전 IDR 프레임의 시작 지점을 종료 포인트로 설정하는 것을 특징으로 하는 영상 재생 장치.
  3. 제 1항에 있어서,
    상기 영상 프레임 버퍼에 저장된 영상 프레임들 중에서 재생 배속 정보에 따라 적어도 하나 이상씩을 건너뛰며 추출할 영상 프레임을 선별하여 미리 설정된 개수의 영상 프레임을 추출하는 표본화부 및
    상기 표본화부가 추출한 영상 프레임들을 저장하는 표본 영상 프레임 버퍼를 더 포함하고,
    상기 재생 방향 제어부는 상기 표본 영상 프레임 버퍼에 저장된 영상 프레임들의 출력 순서를 제어하고,
    상기 독출부는 상기 재생 방향 제어부의 제어에 따라 상기 표본 영상 프레임 버퍼에 저장된 영상 프레임들을 읽어들여 화면에 출력하는 것을 특징으로 하는 영상 재생 장치.
  4. 제 3항에 있어서,
    상기 디코더는 상기 IDR 검색부가 검색한 IDR 프레임부터 디코딩을 시작하고, 상기 표본화부가 재생 배속 정보에 따라 미리 설정된 개수의 영상 프레임을 추출할 경우에 상기 디코딩을 종료하는 것을 특징으로 하는 영상 재생 장치.
  5. 제 3항에 있어서,
    상기 표본화부의 미리 설정된 개수의 영상 프레임 추출은 상기 IDR 검색부가 검색한 IDR 프레임을 포함하는 것을 특징으로 하는 영상 재생 장치.
  6. 제 1항에 있어서,
    상기 영상 프레임 버퍼 및 표본 영상 프레임 버퍼는 각각 저장한 영상 프레임들이 상기 부호화된 영상 스트림에서 어느 시간 위치에 속하는지에 대한 부가정보를 더 포함하여 저장하는 것을 특징으로 하는 영상 재생 장치.
  7. 역방향 검색 명령이 입력되는 경우에 부호화된 영상 스트림 내에 포함되어 있는 영상 프레임들 중에서 상기 입력된 역방향 검색 명령에 따른 역방향 재생 정보에 따라 설정된 종료 포인트부터 역방향으로 IDR 프레임을 검색하는 단계;
    상기 검색한 IDR 프레임부터 상기 설정된 종료 포인트까지의 영상 프레임들을 추출하고, 추출한 영상 프레임들을 디코딩하는 단계; 및
    상기 디코딩한 영상 프레임들을 재생 순서의 역순으로 독출하여 화면에 출력하는 단계;를 포함하여 이루어지는 영상 재생 방법.
  8. 제 7항에 있어서,
    상기 설정된 종료 포인트는
    상기 역방향 검색 명령이 입력된 시점 또는 이전 IDR 프레임의 시작 지점이 종료 포인트로 설정된 것을 특징으로 하는 영상 재생 방법.
  9. 제 7항에 있어서,
    상기 역방향 검색 명령은
    역방향 재생 정보와 재생 배속 정보를 포함하는 것을 특징으로 하는 영상 재생 방법.
  10. 제 9항에 있어서,
    상기 추출한 영상 프레임들을 디코딩하는 단계 후에,
    상기 디코딩한 영상 프레임들 중에서 상기 재생 배속 정보에 따라 적어도 하나 이상씩을 건너뛰며 추출할 영상 프레임을 선별하여 미리 설정된 개수의 영상 프레임을 추출하는 단계 및
    상기 추출한 영상 프레임들을 재생 순서의 역순으로 독출하여 화면에 출력하는 단계를 더 포함하는 것을 특징으로 하는 영상 재생 방법.
  11. 제 10항에 있어서,
    상기 영상 프레임들의 디코딩은
    상기 재생 배속 정보에 따라 미리 설정된 개수의 영상 프레임을 추출할 경우에 상기 디코딩을 종료하는 것을 특징으로 하는 영상 재생 방법.
  12. 제 10항에 있어서,
    상기에서 미리 설정된 개수의 영상 프레임 추출은
    상기에서 디코딩한 영상 프레임들 중에서 IDR 프레임을 포함하여 미리 설정된 개수의 영상 프레임을 추출하는 것을 특징으로 하는 영상 재생 방법.
KR1020070013974A 2007-02-09 2007-02-09 영상 재생 장치 및 방법 KR101263056B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020070013974A KR101263056B1 (ko) 2007-02-09 2007-02-09 영상 재생 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070013974A KR101263056B1 (ko) 2007-02-09 2007-02-09 영상 재생 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20080074618A KR20080074618A (ko) 2008-08-13
KR101263056B1 true KR101263056B1 (ko) 2013-05-09

Family

ID=39883917

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070013974A KR101263056B1 (ko) 2007-02-09 2007-02-09 영상 재생 장치 및 방법

Country Status (1)

Country Link
KR (1) KR101263056B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024128628A1 (ko) * 2022-12-13 2024-06-20 삼성전자 주식회사 전자 장치 및 상기 전자 장치에서 동영상을 역방향으로 재생하는 방법

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101225037B1 (ko) * 2009-12-18 2013-01-23 한국전자통신연구원 인터넷 텔레비전을 이용한 영상 고속 재생방법 및 그 장치

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024128628A1 (ko) * 2022-12-13 2024-06-20 삼성전자 주식회사 전자 장치 및 상기 전자 장치에서 동영상을 역방향으로 재생하는 방법

Also Published As

Publication number Publication date
KR20080074618A (ko) 2008-08-13

Similar Documents

Publication Publication Date Title
US20070031110A1 (en) Method of recording and of replaying and video recording and replay systems
KR20080090934A (ko) 정속 역 재생 방법 및 장치
KR101323331B1 (ko) 불연속 동영상 데이터의 재생 방법 및 장치
KR960030196A (ko) 화상 압축 기록 매체 재생 장치
JP2010022003A (ja) 動画ファイル再生装置、動画ファイル再生方法、プログラム
JP4362510B2 (ja) 録画再生編集装置
US8340196B2 (en) Video motion menu generation in a low memory environment
KR101263056B1 (ko) 영상 재생 장치 및 방법
US20090074375A1 (en) Method and apparatus for frame accurate editing audio- visual streams
KR19990088644A (ko) 트릭플레이형태를갖는디지털영상플레이백
KR20120133987A (ko) 비디오 서버 및 데이터 수록 재생 방법
JP2000101969A (ja) 再生装置及び再生方法
EP1643764A1 (en) Video reproducing apparatus
TW571588B (en) Modifying video signals by converting non-intra pictures
KR100883119B1 (ko) 동영상 파일 목록 편집 방법
US9263090B2 (en) Image processing apparatus, image processing method, and program
JP2001119661A (ja) 動画編集システムおよび記録媒体
JP4784466B2 (ja) 映像情報再生方法
JP2005080073A (ja) 画像再生装置および画像データの逆方向再生方法
JP4350585B2 (ja) 再生装置
JP2001238208A (ja) 動画像復号化方法および動画像復号化装置
KR100813980B1 (ko) 영상 처리 장치 및 방법, 그리고 상기 영상 처리 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체
JP2007158901A (ja) 映像処理装置及びコンピュータプログラム
KR20000035681A (ko) 엠피이지 재생 장치 및 엠피이지 재생 방법
DK1474920T3 (en) DEVICE AND RECORD CARRIER AND METHOD OF RECORDING A SEQUENCE OF VIDEO DATA SIGNALS

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20160422

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20170414

Year of fee payment: 5