KR100898769B1 - 실시간 스트리밍 서비스를 위한 ｓｖｃ 비디오 데이터추출기 및 방법 - Google Patents

실시간 스트리밍 서비스를 위한 ｓｖｃ 비디오 데이터추출기 및 방법 Download PDF

Info

Publication number
KR100898769B1
KR100898769B1 KR1020070095510A KR20070095510A KR100898769B1 KR 100898769 B1 KR100898769 B1 KR 100898769B1 KR 1020070095510 A KR1020070095510 A KR 1020070095510A KR 20070095510 A KR20070095510 A KR 20070095510A KR 100898769 B1 KR100898769 B1 KR 100898769B1
Authority
KR
South Korea
Prior art keywords
data
svc
video data
nal
video
Prior art date
Application number
KR1020070095510A
Other languages
English (en)
Other versions
KR20090030150A (ko
Inventor
김제우
신화선
명진수
Original Assignee
전자부품연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 전자부품연구원 filed Critical 전자부품연구원
Priority to KR1020070095510A priority Critical patent/KR100898769B1/ko
Publication of KR20090030150A publication Critical patent/KR20090030150A/ko
Application granted granted Critical
Publication of KR100898769B1 publication Critical patent/KR100898769B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/187—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scalable video layer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/70—Media network packetisation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명은 실시간 SVC 스트리밍 서비스를 위한 비디오 데이터 추출기 및 방법에 대하여 개시한다. 본 발명은 입력된 SVC(Scalable Video Coding) 비디오 데이터의 SEI 데이터를 분석하여 입력 레이어의 정보를 얻는 SEI 데이터 분석모듈과, 사용자의 요구에 따라 추출할 SVC 비디오 데이터의 레이어 정보를 계산하는 타깃 레이어 정보 생성모듈과, 상기 계산된 레이어의 정보에 부합하는 SEI 데이터를 생성하는 SEI 데이터 생성모듈과, 상기 입력된 SVC 비디오 데이터로부터 상기 생성한 SEI 데이터에 기록된 타깃 레이어를 추출하는 타깃 레이어 추출모듈을 포함하고, NAL 단위로 상기 입력된 SVC 비디오 데이터의 타깃 레이어 추출하여 출력하는 점에 그 특징이 있다.
본 발명은 SVC 비디오 부호화 방법을 사용하는 스트리밍 서비스 환경에서 서버와 사용자간의 시간적 딜레이를 최소화하여 사용자 요구 화질의 SVC 비디오 데이터 실시간으로 추출하여 제공할 수 있다.
비디오 데이터 추출기, SVC, SEI, NAL

Description

실시간 스트리밍 서비스를 위한 ＳＶＣ 비디오 데이터 추출기 및 방법 {SVC VIDEO EXTRACTION APPARATUS FOR REAL-TIME VIDEO STREAM AND THE METHOD THEREOF}
본 발명은 실시간 SVC 스트리밍 서비스를 위한 비디오 데이터 추출기 및 방법에 관한 것으로, 특히 SVC 비디오 부호화 방법을 사용하는 스트리밍 서비스 환경에서 실시간으로 SVC 비디오 데이터로부터 사용자 요구 화질의 SVC 비디오 데이터를 추출하여 전송할 수 있는 실시간 SVC 스트리밍 서비스를 위한 비디오 데이터 추출기 및 방법에 관한 것이다.
통신기술의 발달과 더불어, 네트워크 환경은 더욱 복잡해지고 있으며, 서로 다른 종류의 네트워크와 단말을 통하여 다양한 멀티미디어 콘텐츠가 소비되는 시대가 도래하였다. 이러한 환경과 더불어, 집안에서는 고화질(HD)의 비디오를 소비할 수 있으며, 집 밖에서는 DMB 혹은 이동통신의 무선 네트워크를 통하여 움직이면서 혹은 차량에서 비디오를 즐길 수 있게 되었다.
이동통신 네트워크에서는 PDA, 핸드폰 그리고 노트북에 이르는 다양한 단말에 서비스가 지원되고 있으며, ASDL과 같은 유선 네트워크에서는 PC등이 서비스되고, 머지않아 IP TV와 같은 더욱더 다양한 형태의 단말이 통합되는 네트워크에서 서비스를 지원받게 된다. 멀티미디어 콘텐츠를 다양하고 효율적으로 서비스하기 위한 MPEG-21 프레임워크에서는 저작권보호와 관련된 DRM(Digital Right Management), 적응변환 DIA(Digital Item Adaptation), 디지털 아이템 기술자 DID(Digital Item Declaration)등의 많은 기능을 통합시켜서 다양한 기능을 지원할 수 있도록 하였다.
이러한 서로 다른 네트워크 환경에서 다양한 단말에 비디오 스트리밍 서비스를 제공하기 위해서는 소비 환경에 맞는 품질의 고려가 필수적이며, 네트워크 대역폭, 단말의 종류 및 소비자의 선호도에 맞는 품질의 콘텐츠를 제공해야만 한다.
보다 효율적으로 다양한 소비환경에 멀티미디어 콘텐츠를 적응시키기 위하여 스케일러블 비디오 코딩(SVC, Scalable Video Coding) 기술이 현재 표준화가 진행 중이며, 비디오를 소비 환경에 적응시키기 위하여 다시 재생산을 수행할 필요 없이 비트스트림에서 직접 적응변환을 수행할 수 있도록 지원한다. 기존의 소비환경에 맞도록 재생산하는 방법에 비하여 더욱 효율적이고 빠르게 네트워크 및 컨텐츠 소비 환경에 맞게 적응변환을 수행할 수 있다.
도 1은 일반적인 SVC 비디오 데이터를 도시한 구조도이다. 도 1에 도시된 바와 같이, SVC 비디오 데이터는 여러 개의 비디오 계층을 하나의 비트열로 부호화한다.
SVC의 계층은 하나의 기본 계층(Base Layer)과 기본 계층 위에 연속적으로 쌓을 수 있는 하나 이상의 확장 계층(Enhancement Layer)으로 구성된다. 각 확장 계층은 하위 계층 정보를 기반으로 각각에게 주어진 최대의 비트율 (bit rate), 프 레임율(frame rate) 및 해상도(resolution)를 표현할 수 있다. SVC에서는 확장 계층을 연속적으로 많이 쌓을수록 다양한 비트율, 화면율, 해상도의 지원이 가능하다.
이처럼, SVC는 각종 방송망과 통신망이 혼재하는 다양한 망 환경에서 발생하는 대역폭의 다양성 문제, 수신 단말기 성능과 해상도의 다양성 문제, 콘텐츠 소비자의 다양한 선호도 문제 등을 복합적으로 해결할 수 있는 부호화 기술이다.
이러한 SVC 비디오 비트스트림은 아래의 예시와 같이, 해상도, 비트율, 프레임율 정보를 제공하는 SEI 데이터를 포함한다.
Figure 112007068023000-pat00001
SVC 비디오 데이터를 사용하는 스트리밍 서비스 제공을 위해서는 전체 해상도를 가지는 SVC 비디오 데이터를 분석하여 사용자가 요구하는 사양의 비디오 데이터를 추출하는 장치가 필요하며, 이를 “비디오 데이터 추출기”라고 한다.
도 2는 종래기술에 따른 비디오 데이터 추출기의 입출력을 도시한 도면이다. 도 2에 도시된 바와 같이, 비디오 데이터 추출기의 입력은 전체 해당도를 가지는 SVC 비디오 데이터이며, 비디오 데이터 추출기의 출력은 사용자가 요구하는 사양의 SVC 비디오 데이터이다.
예컨대, 사용자가 해상도 352×258, 프레임율 초당 7.5장, 비트율 1454의 영상을 요구하면, 비디오 데이터 추출기는 타깃 레이어 및 그에 종속된 하위 레이어를 추출하여 출력한다.
상세하게는, SVC NAL 확장 헤더 정보에 있는 해당 레이어의 D(Dependency), T(Temporal level), Q(Quality level) 정보를 분석한 결과, 사용자 요구한 영상을 출력하기 위해 추출할 타깃 레이어가 12이고, 그에 종속된 레이어가 0, 1, 2, 3, 4, 5, 9, 11임을 파악하고, 타깃 레이어 및 그에 종속된 레이어인 0, 1, 2, 3, 4, 5, 9, 11, 12를 추출하여 출력한다.
종래기술에 따른, 비디오 데이터 추출기는 입력되는 SVC 비디오 데이터를 전부 바이트별로 분석한 후에 사용자가 요청하는 레이어를 추출하므로 많은 시간적 딜레이가 발생한다.
또한, 연산단위가 AU(Access Unit)단위로 이루어지기 때문에 AU가 포함하고 있는 각 레이어에 대한 분리를 위해서는 전체 데이터를 분석이 필요하므로 데이터에 대한 접근이 많아 오버헤드가 크다.
이와 같이, 종래기술에 따른 비디오 데이터 추출기는 오버헤드가 크므로 적용된 프로세서(Processor)가 느리면 실시간 스트리밍은 불가능하다는 문제점이 있 다.
종래기술의 문헌정보
[문헌1] 출원번호 10-2007-0002188
[문헌2] 출원번호 10-2006-0097262
본 발명은 SVC 비디오 부호화 방법을 사용하는 스트리밍 서비스 환경에서 실시간으로 SVC 비디오 데이터로부터 사용자 요구 화질의 SVC 비디오 데이터 생성을 위한 데이터를 추출하여 비디오 데이터를 생성할 수 있는 실시간 SVC 스트리밍 서비스를 위한 비디오 데이터 추출기 및 방법을 제공함에 그 목적이 있다.
전술한 목적을 달성하기 위해서 본 발명에 따른 실시간 SVC 스트리밍 서비스를 위한 비디오 데이터 추출기는 입력된 SVC(Scalable Video Coding) 비디오 데이터의 SEI 데이터를 분석하여 입력 레이어의 정보를 얻는 SEI 데이터 분석모듈과, 사용자의 요구에 따라 추출할 SVC 비디오 데이터의 레이어 정보를 계산하는 타깃 레이어 정보 생성모듈과, 상기 계산된 레이어의 정보에 부합하는 SEI 데이터를 생성하는 SEI 데이터 생성모듈과, 상기 입력된 SVC 비디오 데이터로부터 상기 생성한 SEI 데이터에 기록된 타깃 레이어를 추출하는 타깃 레이어 추출모듈을 포함하고, NAL 단위로 상기 입력된 SVC 비디오 데이터의 타깃 레이어 추출하여 출력하는 점에 그 특징이 있다.
이때, 입력된 SVC 비디오 데이터는 실시간으로 스트리밍 또는 녹화된 데이터이며, 사양은 상기 SVC 비디오 데이터의 해상도, 프레임율, 비트율이며, SVC 비디오 데이터는 공통 데이터 구조(common data structure)인 SEI, SPS 및 PPS 비디오 정보 데이터와 Video_AU(NAL) 비디오 데이터로 구성된다.
그리고, 상기 비디오 정보 데이터는 상기 비디오 정보 데이터의 종류 정보, 길이정보, 타임정보 및 NAL 데이터로 구성되며, 비디오 정보 데이터의 타임정보는, 무효 시간정보이며, 0으로 세팅하는 것이 바람직하다.
또한, 비디오 데이터는 상기 비디오 데이터임을 나타내는 정보, 길이정보, 타임정보 및 NAL 데이터로 구성되며, 출력 SVC 비디오 데이터는 상기 생성한 SEI, 상기 입력된 SVC 비디오 데이터와 동일한 SPS 및 PPS NAL 및 상기 타깃 레이어에 해당하는 NAL 데이터만 추출된 Video_AU(NAL) 데이터로 구성된다.
본 발명의 다른 특징에 따른, (a) 비디오 데이터 추출기가 초기화되었는지 확인하는 단계와, (b) 초기화되었으면, 입력되는 NAL이 있는지 검색하는 단계와, (c) 상기 입력된 NAL 종류를 확인하는 단계와, (d) 상기 NAL 종류가 SPS 또는 PPS이면, 상기 SPS 또는 PPS를 그대로 출력하는 단계와, (e) 상기 NAL 종류가 SEI이면, 상기 SEI를 버리는 단계와, (f) 상기 NAL 종류가 Video_AU(NAL)이면, 상기 Video_AU(NAL)의 헤더를 분석하여 상기 타깃 레이어에 해당하는 NAL 데이터만 추출하여 출력하는 단계를 포함하고, 상기 단계를 실행하여 상기 타깃 레이어 및 그에 종속된 SVC 비디오 데이터를 출력하는 점에 그 특징이 있는 실시간 SVC 스트리밍 서비스를 위한 비디오 데이터 추출 방법이 제공된다.
여기서, 상기 (a)단계에서 확인결과 초기화되어 있지 않으면, (a-1) 입력된 SVC 비디오 데이터로부터 SEI 데이터를 파싱하는 단계와, (a-2) 상기 파싱된 SEI 데이터를 분석하여 상기 입력된 SVC 비디오 데이터의 레이어 정보를 얻는 단계와, (a-3) 사용자 요청에 따른 타깃 레이어의 정보를 계산하는 단계와, (a-4) 상기 입 력 SVC 비디오 데이터로부터 상기 타깃 레이어 추출에 필요한 SEI 데이터를 생성하는 단계와, (a-5) 초기화되었음을 표시하는 초기화 코드를 세팅하는 단계를 실행한다.
이때, (a-1)단계에서 상기 SEI 데이터가 파싱되기 전에 입력된 SVC 비디오 데이터는 무시하며, 상기 (f)단계는 (f-1) 상기 Video_AU(NAL)의 헤더를 분석하는 단계와, (f-2) 상기 분석결과 상기 Video_AU(NAL)가 타깃 레이어 또는 그에 종속되는 하위 레이어인지를 판단하는 단계와, (f-3) 타깃 레이어 및 그에 종속되는 NAL을 추출하여 출력하는 단계로 구성되는 것이 바람직하다.
한편, 상기 (f-2)단계에서, 상기 하위 레이어를 추출하는 방법을 선택하는 단계를 더 포함하고, 상기 선택된 방법에 따라 상기 (f-3)단계를 실행한다.
이때, 하위 레이어를 추출하는 방법은 상기 타깃 레이어에 종속된 모든 하위 레이어를 추출하는 방법 또는 상기 타깃 레이어가 사용하는 하위 레이어의 데이터만을 추출하는 방법일 수 있다.
본 발명에 따른 실시간 SVC 스트리밍 서비스를 위한 비디오 데이터 추출기 및 방법은 SVC 비디오 부호화 방법을 사용하는 스트리밍 서비스 환경에서 서버와 사용자간의 시간적 딜레이를 최소화하여 사용자 요구 화질의 SVC 비디오 데이터 실시간으로 추출하여 제공할 수 있다.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세히 설명하 기로 한다. 이하의 실시예에서는 이 기술 분야에서 통상적인 지식을 가진 자에게 본 발명이 충분히 이해되도록 제공되는 것으로서, 여러 가지 형태로 변형될 수 있으며, 본 발명의 범위가 다음에 기술되는 실시예에 한정되는 것은 아니다.
도 3은 본 발명의 일실시예에 따른 실시간 SVC 스트리밍 서비스를 위한 비디오 데이터 추출기를 도시한 블록도이다. 도 3에 도시된 바와 같이, 실시간 SVC 스트리밍 서비스를 위한 비디오 데이터 추출기는 입력된 SVC(Scalable Video Coding) 비디오 데이터의 SEI 데이터를 분석하여 입력 레이어의 정보를 얻는 SEI 데이터 분석모듈(310)과, 출력할 SVC 비디오 데이터의 레이어 정보를 계산하는 타깃 레이어 정보 생성모듈(320)과, 상기 계산된 레이어의 정보에 부합하는 SEI 데이터를 생성하는 SEI 데이터 생성모듈(330)과, 상기 입력된 SVC 비디오 데이터로부터 상기 생성한 SEI 데이터에 기록된 타깃 레이어(Target Layer)를 추출하는 타깃 레이어 추출모듈(340)로 구성된다.
본 발명에 따른 비디오 데이터 추출기는 SVC 비디오 데이터를 NAL(Network Abstraction Layer) 단위로 처리하여 처리시간이 빨라 실시간 처리가 가능하다.
SEI 데이터 분석모듈(310)은 입력된 SVC(Scalable Video Coding) 비디오 데이터의 SEI 데이터를 분석하여 입력 레이어의 정보를 얻는다.
이때, 입력되는 SVC 비디오 데이터는 실시간으로 스트리밍되는 데이터이거나 또는 녹화된 데이터일 수 있다.
타깃 레이어 정보 생성모듈(320)은 사용자의 요청에 따라 출력할 SVC 비디오 데이터의 레이어 정보를 계산한다.
SEI 데이터 생성모듈(330)은 타깃 레이어 정보 생성모듈(320)이 계산한 레이어의 정보에 부합하는 SEI 데이터를 생성한다.
타깃 레이어 추출모듈(340)은 입력된 SVC 비디오 데이터로부터 생성한 SEI 데이터에 기록된 타깃 레이어들을 추출한다.
상세하게는, 타깃 레이어 추출모듈(340)은 입력된 SVC 비디오 데이터 중에 전체 SPS 데이터 및 PPS 데이터, Video_AU(NAL) 데이터 중에서 타깃 레이어를 추출하며, 추출된 데이터와 생성된 SEI 데이터를 출력한다.
도 4는 본 발명의 일실시예에 따른 SVC 비디오 데이터에 포함된 데이터의 구조를 도시한 도면이다. 도 4에 도시된 바와 같이, SVC 비디오 데이터는 공통 데이터 구조(common data structure)인 비디오 정보 데이터(410) 및 비디오 데이터(420)로 구성된다.
비디오 정보 데이터(410)는 일종의 메타데이터로 SEI(Supplemental Enhancement Information), SPS(Sequence Parameter Set), PPS NAL 데이터가 있으며, 그 구조는 비디오 정보 데이터의 종류정보(411), 4바이트 데이터 길이정보(412), 4바이트 입력데이터의 타임정보(413) 및 실제 NAL 데이터로 구성된다.
이때, 비디오 정보 데이터(410)는 SVC 비디오 데이터의 메타데이터로 데이터 전송 초기에 전달되며, 실제적으로 시간에 상관없는 데이터이므로 타임정보는 0으로 세팅되는 것이 바람직하다.
비디오 데이터(420)는 실제 비디오 프레임을 구성하는 데이터로 그 구조는 비디오 데이터의 정보(421), 4바이트 데이터 길이정보(422), 4바이트 입력데이터의 타임정보 및 실제 NAL 데이터로 구성된다.
이때, NAL 데이터는 전체 레이어에 대한 NAL을 분석해야하는 AU단위가 아닌 단일 NAL 단위로 비디오 데이터를 처리할 수 있어 오버헤드가 적다.
도 5는 본 발명의 일실시예에 따른 실시간 SVC 스트리밍 서비스를 위한 비디오 데이터 추출기의 동작순서를 도시한 흐름도이다. 이하, 도 5를 참조하여 설명한다.
먼저, Init_Extractor 변수 값을 읽어 비디오 데이터 추출기의 초기화가 수행되었는지 여부를 확인한다(S510).
여기서, Init_Extractor 변수는 SEI 데이터 분석 및 타깃 레이어의 정보가 계산완료되면 세팅되는 값이다.
확인결과 Init_Extractor 변수가 세팅되어 있지 않으면(S510), 초기화 과정을 수행하기 위해 입력되는 SEI 데이터가 존재하는지를 모니터링한다(S520).
SEI 데이터가 입력되지 않으면, SEI 데이터가 입력될 때까지 입력되는 데이터를 버리는 동작을 수행한다(S520).
SEI 데이터가 입력되면(S520), 입력된 SEI 데이터를 SEI 데이터를 분석하여 입력 레이어의 정보를 얻는다(S530).
이어서, 사용자의 요청에 따라 추출할 SVC 비디오 데이터의 타깃 레이어 정보를 계산한다(S540).
그리고, 입력된 SVC 비디오 데이터로부터 타깃 레이어를 추출하기 위한 SEI 데이터를 생성한다(S550).
단계(S520) 내지 단계(S550)가 수행되면, 비디오 데이터 추출기의 초기화가 완료되어 Init_Extractor 변수가 1 세팅되고(S560), 단계(S510)로 돌아간다.
한편, 초기화가 완료되어 Init_Extractor 변수가 세팅되어 있으면(S510), NAL 데이터의 Start Code를 체크하여 입력되는 NAL이 있는지를 검색한다(S570).
입력되는 NAL이 있으면(S570), NAL 데이터의 종류(NAL Type)를 체크한다(S580).
그리고, 입력된 SVC 비디오 데이터의 데이터 종류에 따라 방법을 달리하여 SVC 비디오 데이터를 추출한다(S590).
도 6은 본 발명의 일실시예에 따른 실시간 SVC 스트리밍 서비스를 위한 비디오 데이터 추출기가 데이터를 추출하는 방법을 도시한 흐름도이다. 이하, 도 6을 참조하여 설명한다.
입력되는 NAL 데이터의 Start Code가 검출되면(S600), 입력되는 NAL 데이터의 종류를 확인한다(S610).
이어서, 입력되는 NAL Type이 SPS 또는 PPS NAL이면(S620), 필터링하는 절차를 거치지 않고 입력되는 데이터를 전부 출력한다(S630).
종래기술에 따른 비디오 데이터 추출기가 SPS 및 PPS NAL 데이터의 일부를 추출하여 출력했던 것과는 달리, 본 발명에 따른 비디오 데이터 추출기는 전체 SPS 및 PPS NAL 데이터를 출력한다.
SPS 및 PPS NAL 데이터는 비디오 데이터에 비해 매우 작은 데이터이므로 전체 SPS 및 PPS NAL 데이터를 전송해도 그 부하가 크지 않으므로 본 발명에서는 SPS 및 PPS NAL 데이터를 추출에 필요한 부하를 줄이는 방법을 택했다.
입력되는 NAL Type이 SEI NAL이면(S620), 이미 해석한 데이터이므로 출력하지 않고 버린다(S640).
입력되는 NAL Type이 Video_AU(NAL)이면(S620), NAL 헤더를 분석하여(S650) 타깃 레이어 및 그에 종속되지 않은(S660) NAL 데이터는 버리고(S680), 타깃 레이어에 해당하는(S660) NAL 데이터만 추출한다(S670).
이때, 비디오 데이터(Video_AU(NAL))는 SVC NAL Extension 헤더 정보만을 분석하여 타깃 레이어에 해당하는 D(Dependency level), T(Temporal level), Q(Quality level)에 따라 데이터를 추출하거나 버리는 역할을 수행한다.
한편, 실시간 SVC 스트리밍 서비스를 위한 비디오 데이터 추출기는 정해진 타깃 레이어에 대해서 실제 레이어 정보를 모두 전송하지 않고, 레이어가 사용하는 하위 레이어의 데이터들만 추출하여 전송할 수도 있다.
하지만, 단말기에서의 데이터 저장 또는 재사용을 위해서는 타깃 레이어를 포함한 하위 레이어 정보를 모두 전송할 필요가 있으므로 하위 레이어를 추출하는 방법을 선택할 필요가 있다.
따라서, 본 발명에서는 단계(S650) 수행시 reuse_flag의 세팅을 확인하여 하위 레이어를 추출하는 방법을 선택한다.
즉, reuse_flag가 세팅되어 있으면, 타깃 레이어를 포함한 하위 레이어에 대해서 전부 전송하고, reuse_flag가 세팅되어 있지 않으면, 타깃 레이어가 사용하는 하위 레이어의 데이터들만 추출하여 전송한다.
이상, 바람직한 실시예 및 첨부 도면을 통해 본 발명의 구성에 대하여 설명하였다. 그러나, 이는 예시에 불과한 것으로서 본 발명의 범위를 제한하기 위하여 사용된 것은 아니다. 본 기술 분야의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것인바, 본 발명의 진정한 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의해 정해져야 할 것이다.
도 1은 일반적인 SVC 비디오 데이터를 도시한 구조도.
도 2는 종래기술에 따른 비디오 데이터 추출기의 입출력을 도시한 도면.
도 3은 본 발명에 따른 실시간 SVC 스트리밍 서비스를 위한 비디오 데이터 추출기를 도시한 블록도.
도 4는 본 발명에 따른 SVC 비디오 데이터의 구조를 도시한 도면.
도 5는 본 발명에 따른 실시간 SVC 스트리밍 서비스를 위한 비디오 데이터 추출기의 동작순서를 도시한 흐름도.
도 6은 본 발명에 따른 실시간 SVC 스트리밍 서비스를 위한 비디오 데이터 추출기가 데이터를 추출하는 방법을 도시한 흐름도.
<도면의 주요부분에 대한 설명>
310: SEI 데이터 분석모듈 320: 타깃 레이어 정보 생성모듈
330: SEI 데이터 생성모듈 340: 타깃 레이어 추출모듈

Claims (14)

  1. 입력된 SVC(Scalable Video Coding) 비디오 데이터의 SEI 데이터를 분석하여 입력 레이어의 정보를 얻는 SEI 데이터 분석모듈과,
    사용자의 요구에 따라 추출할 SVC 비디오 데이터의 레이어 정보를 계산하는 타깃 레이어 정보 생성모듈과,
    상기 계산된 레이어의 정보에 부합하는 SEI 데이터를 생성하는 SEI 데이터 생성모듈과,
    상기 입력된 SVC 비디오 데이터로부터 상기 생성한 SEI 데이터에 기록된 타깃 레이어를 추출하는 타깃 레이어 추출모듈을 포함하고,
    NAL 단위로 상기 입력된 SVC 비디오 데이터의 타깃 레이어 추출하여 출력하며, 상기 입력된 SVC 비디오 데이터는 실시간으로 스트리밍 또는 녹화된 데이터인 것을 특징으로 하는 실시간 SVC 스트리밍 서비스를 위한 비디오 데이터 추출기.
  2. 삭제
  3. 제1항에 있어서, 상기 사용자의 요구는,
    상기 SVC 비디오 데이터의 해상도, 프레임율, 비트율 중 적어도 하나와 관련된 것을 특징으로 하는 실시간 SVC 스트리밍 서비스를 위한 비디오 데이터 추출기.
  4. 제1항에 있어서, 상기 SVC 비디오 데이터는,
    공통 데이터 구조(common data structure)인 SEI, SPS 및 PPS 비디오 정보 데이터와 Video_AU(NAL) 비디오 데이터
    로 구성되는 것을 특징으로 하는 실시간 SVC 스트리밍 서비스를 위한 비디오 데이터 추출기.
  5. 제4항에 있어서, 상기 비디오 정보 데이터는,
    상기 비디오 정보 데이터의 종류 정보, 길이정보, 타임정보 및 NAL 데이터
    로 구성되는 것을 특징으로 하는 실시간 SVC 스트리밍 서비스를 위한 비디오 데이터 추출기.
  6. 제5항에 있어서, 상기 타임정보는,
    0으로 세팅되는 것을 특징으로 하는 실시간 SVC 스트리밍 서비스를 위한 비디오 데이터 추출기.
  7. 제4항에 있어서, 상기 비디오 데이터는,
    상기 비디오 데이터임을 나타내는 정보, 길이정보, 타임정보 및 NAL 데이터
    로 구성되는 특징으로 하는 실시간 SVC 스트리밍 서비스를 위한 비디오 데이 터 추출기.
  8. 제1항에 있어서, 상기 출력 SVC 비디오 데이터는,
    상기 생성한 SEI, 상기 입력된 SVC 비디오 데이터와 동일한 SPS 및 PPS NAL 및 상기 타깃 레이어에 해당하는 NAL 데이터만 추출된 Video_AU(NAL) 데이터
    로 구성되는 것을 특징으로 하는 실시간 SVC 스트리밍 서비스를 위한 비디오 데이터 추출기.
  9. (a) 비디오 데이터 추출기가 초기화되었는지 확인하는 단계와,
    (b) 초기화되었으면, 입력되는 NAL이 있는지 검색하는 단계와,
    (c) 상기 입력된 NAL 종류를 확인하는 단계와,
    (d) 상기 NAL 종류가 SPS 또는 PPS이면, 상기 SPS 또는 PPS를 그대로 출력하는 단계와,
    (e) 상기 NAL 종류가 SEI이면, 상기 SEI를 버리는 단계와,
    (f) 상기 NAL 종류가 Video_AU(NAL)이면, 상기 Video_AU(NAL)의 헤더를 분석하여 상기 타깃 레이어에 해당하는 NAL 데이터만 추출하여 출력하는 단계를 포함하고,
    상기 단계를 실행하여 상기 타깃 레이어 및 그에 종속된 SVC 비디오 데이터를 출력하는 것을 특징으로 하는 실시간 SVC 스트리밍 서비스를 위한 비디오 데이터 추출 방법.
  10. 제9항에 있어서, 상기 (a)단계에서 확인결과 초기화되어 있지 않으면,
    (a-1) 입력된 SVC 비디오 데이터로부터 SEI 데이터를 파싱하는 단계와,
    (a-2) 상기 파싱된 SEI 데이터를 분석하여 상기 입력된 SVC 비디오 데이터의 레이어 정보를 얻는 단계와,
    (a-3) 사용자 요청에 따른 타깃 레이어의 정보를 계산하는 단계와,
    (a-4) 상기 입력 SVC 비디오 데이터로부터 상기 타깃 레이어 추출에 필요한 SEI 데이터를 생성하는 단계와,
    (a-5) 초기화되었음을 표시하는 초기화 코드를 세팅하는 단계
    를 포함하는 것을 특징으로 하는 실시간 SVC 스트리밍 서비스를 위한 비디오 데이터 추출 방법.
  11. 제10항에 있어서, 상기 (a-1)단계에서,
    상기 SEI 데이터가 파싱되기 전에 입력된 SVC 비디오 데이터는 무시하는 것을 특징으로 하는 실시간 SVC 스트리밍 서비스를 위한 비디오 데이터 추출 방법.
  12. 제10항에 있어서, 상기 (f)단계는,
    (f-1) 상기 Video_AU(NAL)의 헤더를 분석하는 단계와,
    (f-2) 상기 분석결과 상기 Video_AU(NAL)가 타깃 레이어 또는 그에 종속되는 하위 레이어인지를 판단하는 단계와,
    (f-3) 타깃 레이어 및 그에 종속되는 NAL을 추출하여 출력하는 단계
    로 구성되는 것을 특징으로 하는 실시간 SVC 스트리밍 서비스를 위한 비디오 데이터 추출 방법.
  13. 제12항에 있어서, 상기 (f-2)단계에서,
    상기 하위 레이어를 추출하는 방법을 선택하는 단계를 더 포함하고,
    상기 선택된 방법에 따라 상기 (f-3)단계를 실행하는 것을 특징으로 하는 실시간 SVC 스트리밍 서비스를 위한 비디오 데이터 추출 방법.
  14. 제13항에 있어서, 상기 하위 레이어를 추출하는 방법은,
    상기 타깃 레이어에 종속된 모든 하위 레이어를 추출하는 방법
    또는 상기 타깃 레이어가 사용하는 하위 레이어의 데이터만을 추출하는 방법
    인 것을 특징으로 하는 실시간 SVC 스트리밍 서비스를 위한 비디오 데이터 추출 방법.
KR1020070095510A 2007-09-19 2007-09-19 실시간 스트리밍 서비스를 위한 ｓｖｃ 비디오 데이터추출기 및 방법 KR100898769B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020070095510A KR100898769B1 (ko) 2007-09-19 2007-09-19 실시간 스트리밍 서비스를 위한 ｓｖｃ 비디오 데이터추출기 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070095510A KR100898769B1 (ko) 2007-09-19 2007-09-19 실시간 스트리밍 서비스를 위한 ｓｖｃ 비디오 데이터추출기 및 방법

Publications (2)

Publication Number Publication Date
KR20090030150A KR20090030150A (ko) 2009-03-24
KR100898769B1 true KR100898769B1 (ko) 2009-05-20

Family

ID=40696597

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070095510A KR100898769B1 (ko) 2007-09-19 2007-09-19 실시간 스트리밍 서비스를 위한 ｓｖｃ 비디오 데이터추출기 및 방법

Country Status (1)

Country Link
KR (1) KR100898769B1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9621906B2 (en) 2012-12-10 2017-04-11 Lg Electronics Inc. Method for decoding image and apparatus using same
CN107483949A (zh) * 2017-07-26 2017-12-15 千目聚云数码科技（上海）有限公司 增加svac svc实用性的方法及系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070062428A (ko) * 2005-12-12 2007-06-15 톰슨 라이센싱 비디오 데이터 코딩 장치, 방법, 시스템 및 비디오 데이터디코딩 방법
KR20070074503A (ko) * 2006-01-09 2007-07-12 한국전자통신연구원 날 유닛 타입 표시방법 및 그에 따른 비트스트림 전달장치및 리던던트 슬라이스 부호화 장치

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070062428A (ko) * 2005-12-12 2007-06-15 톰슨 라이센싱 비디오 데이터 코딩 장치, 방법, 시스템 및 비디오 데이터디코딩 방법
KR20070074503A (ko) * 2006-01-09 2007-07-12 한국전자통신연구원 날 유닛 타입 표시방법 및 그에 따른 비트스트림 전달장치및 리던던트 슬라이스 부호화 장치

Also Published As

Publication number Publication date
KR20090030150A (ko) 2009-03-24

Similar Documents

Publication Publication Date Title
US10764623B2 (en) Method and system for media adaption
KR100848310B1 (ko) 스케일러블 비디오 코딩 기술이 적용된 비트스트림적응변환 장치 및 방법
US6463445B1 (en) Multimedia information retrieval system and method including format conversion system and method
US10063812B2 (en) Systems and methods for media format transcoding
US8631143B2 (en) Apparatus and method for providing multimedia content
KR102332387B1 (ko) 수신 장치, 수신 방법, 송신 장치 및 송신 방법
WO2020211731A1 (zh) 一种视频播放方法及相关设备
US9369508B2 (en) Method for transmitting a scalable HTTP stream for natural reproduction upon the occurrence of expression-switching during HTTP streaming
US20050034166A1 (en) Apparatus and method for processing multimedia and general internet data via a home media gateway and a thin client server
US20120079544A1 (en) Systems and Methods Utilizing Efficient Video Compression Techniques for Providing Static Image Data
JP2006295586A (ja) コンテンツ変換装置及びトランスコードシステム
US9754353B2 (en) Method and system for video stream personalization
CN102450014A (zh) 用于质量感知视频优化的框架
WO2021143360A1 (zh) 资源传输方法及计算机设备
US20130111528A1 (en) Dynamic provisioning of closed captioning to user devices
CN107925798B (zh) 接收设备、发送设备和数据处理方法
KR100898769B1 (ko) 실시간 스트리밍 서비스를 위한 ｓｖｃ 비디오 데이터추출기 및 방법
US10321183B2 (en) Reception apparatus, reception method, transmission apparatus, and transmission method for controlling use of broadcast resource requested by application
US10547878B2 (en) Hybrid transmission protocol
KR101124723B1 (ko) 해상도 시그널링을 이용한 스케일러블 비디오 재생 시스템 및 방법
JP2011049895A (ja) メディア品質変換装置、メディア品質変換方法およびメディア品質変換プログラム
JP2018074348A (ja) 映像処理装置、映像処理方法および映像処理プログラム
KR101933034B1 (ko) 방송 수신 장치
KR100999224B1 (ko) 중요도 기반의 미디어 제공 시스템 및 방법, 그리고 이에적용되는 서버
WO2007043770A1 (en) Method and apparatus for scalable video adaptation using adaptation operators for scalable video

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130111

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20131231

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20150109

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20161208

Year of fee payment: 8

R401 Registration of restoration
FPAY Annual fee payment

Payment date: 20170512

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20180510

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20190513

Year of fee payment: 11