KR20120105969A - 고속 멀티트랙 비디오 인제스팅 오류 검출 방법 및 시스템 - Google Patents

고속 멀티트랙 비디오 인제스팅 오류 검출 방법 및 시스템 Download PDF

Info

Publication number
KR20120105969A
KR20120105969A KR1020110023739A KR20110023739A KR20120105969A KR 20120105969 A KR20120105969 A KR 20120105969A KR 1020110023739 A KR1020110023739 A KR 1020110023739A KR 20110023739 A KR20110023739 A KR 20110023739A KR 20120105969 A KR20120105969 A KR 20120105969A
Authority
KR
South Korea
Prior art keywords
video
mse
compressed
error
compressed video
Prior art date
Application number
KR1020110023739A
Other languages
English (en)
Other versions
KR101800384B1 (ko
Inventor
배태면
Original Assignee
에스케이플래닛 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이플래닛 주식회사 filed Critical 에스케이플래닛 주식회사
Priority to KR1020110023739A priority Critical patent/KR101800384B1/ko
Publication of KR20120105969A publication Critical patent/KR20120105969A/ko
Application granted granted Critical
Publication of KR101800384B1 publication Critical patent/KR101800384B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/89Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/53Multi-resolution motion estimation; Hierarchical motion estimation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637Control signals issued by the client directed to the server or network components
    • H04N21/6373Control signals issued by the client directed to the server or network components for rate control, e.g. request to the server to modify its transmission rate
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64784Data processing by the network
    • H04N21/64792Controlling the complexity of the content stream, e.g. by dropping packets

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

본 발명은 고속의 비디오 데이터에 대해 비디오의 해상도 스케일링, 프레임율 변환, 인코딩, 메타데이터 삽입, 패키징 과정 등 인제스팅(Ingesting)을 수행할 때, 원본 비디오를 멀티트랙 비디오 인코더를 통해 화질이 서로 다른 둘 이상 N 개의 압축비디오로 생성하고, 생성된 압축비디오 중 가장 화질이 높은 "압축비디오 1"과 가장 화질이 낮은 "압축비디오 N"에 오류가 있는지 화질 검사를 수행하여, 오류가 없으면 두 개의 압축비디오와 원본 비디오 간의 MSE를 계산하여 프레임별 MSE맵을 생성하며, 나머지 압축비디오들에 대해 MSE맵과의 비교를 통해 오류를 검사할 수 있도록 된, 고속 멀티트랙 비디오 인제스팅 오류 검출 방법 및 시스템에 관한 것이다.
본 발명에 따른 고속 멀티트랙 비디오 오류 검출 장치는, 원본 비디오를 입력받아 화질이 서로 다른 둘 이상의 압축비디오를 생성하는 멀티트랙 비디오 인코더; 상기 둘 이상의 압축비디오 중 가장 화질이 높은 "압축비디오 1"과 가장 화질이 낮은 "압축비디오 N"에 오류가 있는지를 검사하는 압축비디오 화질검사부; 상기 두 압축비디오에 오류가 없는 경우, 압축비디오 1 및 압축비디오 N과 원본 비디오의 MSE(Means Square Error)를 계산하여 프레임별 MSE맵을 생성하고, 상기 압축비디오 1 및 압축비디오 N을 제외한 나머지 압축비디오들을 상기 MSE맵과 비교하여 오류를 검출하는 오류검출 제어부; 및 상기 프레임별 MSE맵을 저장하는 저장부를 포함한다.

Description

고속 멀티트랙 비디오 인제스팅 오류 검출 방법 및 시스템{Defection of fast multi-track video ingest detection method and system}
본 발명은 고속 멀티트랙 비디오의 인제스팅 오류를 검출하는 방법 및 시스템에 관한 것으로서, 더욱 자세하게는 고속의 비디오 데이터를 사용자 단말기에 서비스 하기 위해 컨텐츠 제공자(CP)로부터 제공받은 비디오 데이터에 대해 비디오의 해상도 스케일링, 프레임율 변환, 인코딩, 메타데이터 삽입, 패키징 과정 등 인제스팅(Ingesting)을 수행할 때, 원본 비디오를 멀티트랙 비디오 인코더(Multi-track video encoder)를 통해 화질이 서로 다른 둘 이상 N 개의 압축비디오로 생성하고, 생성된 압축비디오 중 가장 화질이 높은 "압축비디오 1"과 가장 화질이 낮은 "압축비디오 N"에 오류가 있는지 화질 검사를 수행하여, 오류가 없으면 두 개의 압축비디오와 원본 비디오 간의 MSE(Means Square Error)를 계산하여 프레임별 MSE맵을 생성하며, 나머지 압축비디오들에 대해 MSE맵과의 비교를 통해 오류를 검사할 수 있도록 된 것이다.
인제스팅 시스템(Ingesting System)은 컨텐츠 제공자(CP)로부터 제공받은 비디오 및 오디오를 포함하는 컨텐츠를 사용자 단말기에 서비스하기 위해 기본적인 해상도 스케일링(Resolution Scaling), 프레임율 변환(frame rate conversion), 비디오/오디오 인코딩(Vidoe/audio Encoding), 메타데이터 삽입(Metadata Insertion), 패키징(Packaging) 등의 과정을 거친다.
이때, 비디오나 오디오를 포함하는 컨텐츠를 제공하는 컨텐츠 서버에서, 전술한 인제스팅 과정을 수행할 때 오류가 발생한 비디오를 사용자 단말기에 서비스하는 경우 사용자 단말기에서 재생할 때 문제가 발생하게 된다. 이를 방지하기 위해 최종 결과물을 재생하여 사람이 직접 확인하는 과정을 마지막으로 거치게 된다.
그러나, 컨텐츠 서버에서 사용자 단말기에 제공하는 대부분의 비디오는 그 양이 많거나 방대하므로 인제스팅 하기 위해서 사용자가 일일이 확인하는 과정은 오래 걸리거나 한계가 있으므로 사람에 의한 확인 과정을 자동화하여 좀 더 빠르게 수행하는 기술이 최근에 많이 제안되고 있다.
이와 함께 온라인 비디오 서비스는 서버에서 인터넷을 통해 단말기에 비디오를 스트리밍하면, 사용자가 단말기를 통해 비디오를 수신하여 재생할 수 있도록 하는데, 이 때 사용자의 네트워크 환경에 맞게 비디오 데이터량을 조절하면서 전송하는 적응적 비디오 스트리밍(adaptive video streaming) 기술을 통해 사용자에게 중간에 끊기거나 영상이 깨진 비디오를 시청하도록 하는 일을 방지하는 기술이 일반화되고 있다.
현재의 adaptive video streaming 기술은 하나의 원본 비디오에 대해 다양한 데이터 크기를 가지는 압축비디오를 만들어 두고 사용자의 네트워크 환경에 맞는 압축비디오를 선택하는 기술이 주를 이루고 있는데, 이러한 방법은 서비스 시스템이 하나의 비디오에 대해 여러 개의 압축 비디오(Multi-track video)를 ingesting 해야 하므로 adaptive video streaming 기술을 활용하기 전에 비해 ingesting 시간이 더 오래 걸리는 문제점이 있다.
전술한 문제점을 해결하기 위한 본 발명은, 고속의 비디오 데이터를 사용자 단말기에 서비스 하기 위해 컨텐츠 제공자(CP)로부터 제공받은 비디오 데이터에 대해 비디오의 해상도 스케일링, 프레임율 변환, 인코딩, 메타데이터 삽입, 패키징 과정 등 인제스팅(Ingesting)을 수행할 때, 원본 비디오를 멀티트랙 비디오 인코더를 통해 화질이 서로 다른 둘 이상 N 개의 압축비디오로 생성하고, 생성된 압축비디오 중 가장 화질이 높은 "압축비디오 1"과 가장 화질이 낮은 "압축비디오 N"에 오류가 있는지 화질 검사를 수행하여, 오류가 없으면 두 개의 압축비디오와 원본 비디오 간의 MSE를 계산하여 프레임별 MSE맵을 생성하며, 나머지 압축비디오들에 대해 MSE맵과의 비교를 통해 오류를 검사할 수 있도록 된, 고속 멀티트랙 비디오 인제스팅 오류 검출 방법 및 시스템을 제공함에 그 목적이 있다.
전술한 목적을 달성하기 위한 본 발명의 일 측면에 따르면, 입력된 원본 비디오를 둘 이상의 압축비디오로 생성하고, 생성된 압축비디오 중 가장 화질이 높은 압축비디오와 가장 화질이 낮은 압축비디오에 오류가 있는지를 검사하고, 오류가 없는 경우 두 개의 압축비디오와 원본 비디오의 MSE(Means Square Error)를 계산하여 프레임별 MSE맵을 생성하며, 나머지 압축비디오들을 MSE맵과 비교하여 오류를 검출하는 고속 멀티트랙 비디오 오류 검출 장치를 제공한다.
한편, 전술한 목적을 달성하기 위한 본 발명의 다른 측면에 따르면, 원본 비디오를 입력받아 화질이 서로 다른 둘 이상의 압축비디오를 생성하는 멀티트랙 비디오 인코더; 상기 둘 이상의 압축비디오 중 가장 화질이 높은 "압축비디오 1"과 가장 화질이 낮은 "압축비디오 N"에 오류가 있는지를 검사하는 압축비디오 화질검사부; 상기 두 압축비디오에 오류가 없는 경우, 압축비디오 1 및 압축비디오 N과 원본 비디오의 MSE(Means Square Error)를 계산하여 프레임별 MSE맵을 생성하고, 상기 압축비디오 1 및 압축비디오 N을 제외한 나머지 압축비디오들을 상기 MSE맵과 비교하여 오류를 검출하는 오류검출 제어부; 및 상기 프레임별 MSE맵을 저장하는 저장부를 포함하는 고속 멀티트랙 비디오 오류 검출 장치가 제공된다.
또한, 상기 압축비디오 화질검사부는, 상기 두 압축비디오에 오류가 있는 경우 두 압축 비디오 중 어떤 압축비디오에 오류가 있는 지를 알리고 화질 검사를 종료할 수 있다.
또한, 상기 압축비디오 화질검사부는, 상기 압축비디오를 디코딩(Decoding) 한 후 원본 비디오와 비교하여 PSNR(Peak Signal to Noise Ratio)을 계산하고, 계산한 값이 특정값 이상인 경우에 오류가 없는 것으로 출력할 수 있다.
또한, 상기 오류검출 제어부는, 상기 압축 비디오의 프레임이 중첩되지 않도록 작은 블록으로 나누고 각 블록에 대해 MSE를 구하여 프레임별 MSE맵을 생성해 저장부에 저장할 수 있다.
그리고, 상기 오류검출 제어부는, 상기 압축비디오 1의 MSE 값이 가장 작고, 상기 압축비디오 N의 MSE 값이 가장 크므로, 압축비디오 K의 t 시간째 프레임의 m 번째 MSE(K,t,m) 값이 모든 프레임의 블록에 대해 을 만족하면 오류가 없는 것으로 판단할 수 있다.
한편, 전술한 목적을 달성하기 위한 본 발명의 다른 측면에 따르면, 비디오 및 오디오를 포함하는 컨텐츠를 인제스팅 한 후 통신망을 통해 사용자 단말기에 전송하는 컨텐츠 장치의 고속 멀티트랙 비디오 인제스팅 오류 검출 방법으로서, (a) 원본 비디오를 입력받아 화질이 서로 다른 둘 이상의 압축비디오를 생성하는 단계; (b) 상기 둘 이상의 압축비디오 중 가장 화질이 높은 "압축비디오 1"과 가장 화질이 낮은 "압축비디오 N"에 오류가 있는지를 검사하는 단계; (c) 상기 두 압축비디오에 오류가 없는 경우, 압축비디오 1 및 압축비디오 N과 원본 비디오의 MSE(Means Square Error)를 계산하여 프레임별 MSE맵을 생성하는 단계; 및 (d) 상기 압축비디오 1 및 압축비디오 N을 제외한 나머지 압축비디오들을 상기 MSE맵과 비교하여 오류를 검출하는 단계를 포함하는 컨텐츠 장치의 고속 멀티트랙 비디오 인제스팅 오류 검출 방법이 제공된다.
또한, 상기 (b) 단계는, 상기 압축비디오를 디코딩(Decoding) 한 후 원본 비디오와 비교하여 PSNR(Peak Signal to Noise Ratio)을 계산하고, 계산한 값이 특정값 이상인 경우에 오류가 없는 것으로 출력할 수 있다.
또한, 상기 (c) 단계는, 상기 압축 비디오의 프레임이 중첩되지 않도록 작은 블록으로 나누고 각 블록에 대해 MSE를 구하여 프레임별 MSE맵을 생성하여 저장할 수 있다.
그리고, 상기 (d) 단계는, 상기 압축비디오 1의 MSE 값이 가장 작고, 상기 압축비디오 N의 MSE 값이 가장 크므로, 압축비디오 K의 t 시간째 프레임의 m 번째 MSE(K,t,m) 값이 모든 프레임의 블록에 대해 을 만족하면 오류가 없는 것으로 판단할 수 있다.
본 발명에 의하면, 멀티트랙 비디오의 인제스팅 시 오류를 검출할 수 있으며, 멀티트랙 비디오의 인제스팅 시간을 단축시켜 고속화를 가능하게 할 수 있다.
또한, 멀티트랙 비디오의 인제스팅 오류를 검출하게 됨에 따라 수신되는 컨텐츠의 품질을 향상시킬 수 있다.
도 1은 본 발명의 실시예에 따른 고속 멀티트랙 비디오 인제스팅 오류 검출 시스템의 전체적인 구성을 개략적으로 나타낸 구성도이다.
도 2는 본 발명의 실시예에 따른 컨텐츠 장치의 내부 구성을 개략적으로 나타낸 구성도이다.
도 3은 본 발명의 실시예에 따른 컨텐츠 장치의 고속 멀티트랙 비디오 인제스팅 오류 검출 방법을 설명하기 위한 동작 흐름도이다.
도 4는 본 발명의 실시예에 따른 멀티트랙 비디오 인코더가 원본 비디오를 N 개의 압축비디오로 생성하는 예를 나타낸 도면이다.
도 5는 본 발명의 실시예에 따른 컨텐츠 장치 내 화질 검사부의 기능 블럭을 나타낸 구성도이다.
본 발명의 목적과 기술적 구성 및 그에 따른 작용 효과에 관한 자세한 사항은 본 발명의 명세서에 첨부된 도면에 의거한 이하 상세한 설명에 의해 보다 명확하게 이해될 것이다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 실시예를 상세하게 설명한다.
H.261, MPEG1, 및 MPEG2 같은 멀티미디어 규격들은 블록 이동-보상된(block motion-compensated) 이산적 코사인 변환(Discrete Cosine Transform; DCT)에 의해 디지털 비디오 시퀀스의 압축을 제공한다. 이러한 비디오 부호화 기술은 2단계 프로세스를 사용하여 비디오 시퀀스 내에 존재하는 리던던시를 제거한다. 블록 매칭(BM), 이동 추정된(motion estimation) 및 보상 알고리즘은 2개의 시간적으로 인접한 프레임들 사이에 발생하는 이동을 추정된 한다. 이어서 프레임들은 추정된 이동에 대해서 보상되며 차동 이미지(difference image)를 형성하기 위해 비교된다. 시간적으로 인접한 프레임들 사이의 차분을 취함으로써, 존재하는 모든 시간적 리던던시가 제거된다. 잔류하는 유일한 정보는 이동 추정된 및 보상 알고리즘으로 보상될 수 없는 새로운 정보이다. 이러한 새로운 정보는 DCT를 이용하여 주파수 영역(frequency domain)으로 변환된다. DCT는 이러한 새로운 정보의 에너지를 몇 개의 저주파 성분으로 압축시키는 성질을 갖는다. 부호화된 고주파 정보의 양을 제한함으로써 비디오 시퀀스를 더 압축한다. 이러한 비디오 부호화에 의해 제공된 압축의 대부분은 이동 추정된 및 보상 알고리즘에 의해 획득된다. 즉, 세기(intensity) 및 컬러에 대한 정보가 아닌 비디오 시퀀스에 존재하는 이동에 관한 정보를 송신하는 것이 더 효율적이다. 이동 정보는 현재 세기 프레임(current intensity frame) 내의 특정 위치로부터 이전 세기 프레임 내에 위치한 동일한 위치까지의 벡터들을 사용하여 나타내어진다. 동일한 사이즈의 미리 결정된 논-오버래핑 블록들로 위치되어 있다. 이러한 블록들에 포함된 모든 화소들은 동일한 이동을 갖는 것으로 가정된다. 비디오 시퀀스의 현재 프레임 내의 특정 블록과 관련된 이동 벡터는 최상의 매치(best match)로서 이전의 시간적으로 인접한 프레임 내에서 미리 결정된 검색 영역 상에서 검색함으로써 발견된다. 최상의 매치는 일반적으로 2개의 블록들 간의 평균 제곱 오차(mean-squared error; MSE)를 사용하여 결정된다.
도 1은 본 발명의 실시예에 따른 고속 멀티트랙 비디오 인제스팅 오류 검출 시스템의 전체적인 구성을 개략적으로 나타낸 구성도이다.
도 1을 참조하면, 본 발명에 따른 고속 멀티트랙 비디오 인제스팅 오류 검출 시스템(100)은, 컨텐츠 장치(110), 통신망(120) 및 사용자 단말기(130) 등을 포함한다.
컨텐츠 장치(110)는 원본 비디오를 둘 이상의 압축비디오로 생성하여 가장 화질이 높은 압축비디오와 가장 화질이 낮은 압축비디오에 오류가 있는지를 검사하고, 오류가 없는 경우 두 개의 압축비디오와 원본 비디오의 MSE(Means Square Error)를 계산하여 프레임별 MSE맵을 생성하며, 나머지 압축비디오에 대해 MSE맵과의 비교를 통해 오류를 검출한다.
또한, 컨텐츠 장치(110)는 비디오와 오디오를 포함하는 원본 컨텐츠를 인제스팅(Ingesting)하고, 인제스팅 된 컨텐츠를 통신망(120)을 통해 사용자 단말기(130)에 전송한다.
여기서, 컨텐츠 장치(110)는 원본 비디오를 인제스팅하여 하나 이상의 사용자 단말기(130)에 전송해 주는 미디어 서버 등이 될 수 있으며, 원본 비디오를 입력받아 하나 이상 다수 개의 압축비디오로 나누어 인제스팅해서 통신망(120)을 통해 전송할 수 있는 전용 미디어 장치 등이 될 수 있다.
통신망(120)은 컨텐츠 장치(110)에서 사용자 단말기(130)로 비디오를 전송하는 전송 경로를 제공하고, 사용자 단말기(130)가 컨텐츠 장치(110)에 접속하기 위한 접속 경로를 제공한다. 여기서, 통신망(120)은 WCDMA, HDPA, 3G, 4G 등 이동 통신망과, 블루투스(Bluetooth)와 지그비(Zigbee), 와이파이(Wi-Fi) 등 근거리 통신망과, 인터넷이나 PSTN 등 유선 통신망 등을 포함한다.
사용자 단말기(130)는 컨텐츠 장치(110)로부터 인제스팅 된 컨텐츠를 수신하여 디코딩해서 디스플레이한다.
여기서, 사용자 단말기(130)는 컨텐츠 장치(110)로부터 비디오 데이터를 수신하여 디스플레이할 수 있는 IPTV, 셋탑박스(Settop Box) 등이 될 수 있으며, 사용자가 이동하면서 비디오 데이터를 재생하여 볼 수 있는 스마트 폰이나 이동통신 단말기 등이 될 수 있다.
도 2는 본 발명의 실시예에 따른 컨텐츠 장치의 내부 구성을 개략적으로 나타낸 구성도이다.
도 2를 참조하면, 본 발명에 따른 컨텐츠 장치(110)는, 통신 인터페이스부(210), 멀티트랙 비디오 인코더(Multi-track video encoder)(220), 화질 검사부(230), 오류검출 제어부(240) 및 저장부(250) 등을 포함한다.
통신 인터페이스부(210)는 사용자 단말기(130)와 통신망(120)을 통해 통신한다.
즉, 통신 인터페이스부(210)는 사용자 단말기(130)로부터 통신망(120)을 통해 컨텐츠 전송 요청을 수신하거나, 사용자 단말기(130)에 인제스팅(Ingesting) 된 컨텐츠를 전송한다.
멀티트랙 비디오 인코더(220)는 원본 비디오를 입력받아 도 4에 도시된 바와 같이 화질이 서로 다른 둘 이상 N 개의 압축비디오를 생성한다. 도 4는 본 발명의 실시예에 따른 멀티트랙 비디오 인코더가 원본 비디오를 N 개의 압축비디오로 생성하는 예를 나타낸 도면이다.
화질 검사부(230)는 N 개의 압축비디오 중 가장 화질이 높은 "압축비디오 1"과 가장 화질이 낮은 "압축비디오 N"에 오류가 있는지를 검사한다.
또한, 화질 검사부(230)는, 두 압축비디오에 오류가 있는 경우 두 압축비디오 중 어떤 압축비디오에 오류가 있는 지를 알리고 화질 검사를 종료한다.
또한, 화질 검사부(230)는, 압축비디오를 디코딩(Decoding) 한 후 원본 비디오와 비교하여 PSNR(Peak Signal to Noise Ratio)을 계산하고, 계산된 PSNR 값이 특정값 이상인 경우에 오류가 없는 것으로 출력할 수 있다.
오류검출 제어부(240)는 압축비디오 1과 압축비디오 N에 오류가 없는 경우, 압축비디오 1 및 압축비디오 N과 원본 비디오의 MSE(Means Square Error)를 계산하여 프레임별 MSE맵을 생성해 저장부(250)에 저장하고, 압축비디오 1 및 압축비디오 N을 제외한 나머지 압축비디오들에 대해 MSE맵과의 비교를 통해 오류를 검출한다.
여기서, 화질 검사부(230)는 도 5에 도시된 바와 같이 압축비디오 화질 검사부(510)와 MSE 맵(Map)(520) 및 MSE 맵 비교부(530)를 포함한 구성을 갖는다. 도 5는 본 발명의 실시예에 따른 컨텐츠 장치 내 화질 검사부의 기능 블럭을 나타낸 구성도이다.
따라서, 오류검출 제어부(240)는 압축비디오 화질 검사부(510)를 통해 원본 비디오와 최고 화질의 압축비디오를 비교하여 오류가 있는지에 대한 검수결과 1을 출력해 MSE 맵 비교부(530)에 입력시킨다. 또한, 오류검출 제어부(240)는 압축비디오 화질 검사부(510)를 통해 최저 화질의 압축비디오와 원본 비디오를 비교해 오류가 있는지에 대한 검수결과 N을 출력해 MSE 맵 비교부(530)에 입력시킨다. 이후, 오류검출 제어부(240)는 나머지 압축비디오 즉, 압축비디오 2부터 압축비디오 N-1까지 각각의 압축비디오를 MSE맵과 비교하여 나머지 압축비디오들에 대한 오류 검사 결과(2~(N-1))를 얻는다.
또한, 오류검출 제어부(240)는, 압축 비디오의 프레임이 중첩되지 않도록 작은 블록으로 나누고 각 블록에 대해 MSE를 구하여 프레임별 MSE맵을 생성하여 저장부(250)에 저장할 수 있다.
그리고, 오류검출 제어부(240)는, 가장 화질이 높은 압축비디오 1의 MSE 값이 가장 작고, 가장 화질이 낮은 압축비디오 N의 MSE 값이 가장 크므로, 압축비디오 K의 t 시간째 프레임의 m 번째 MSE(K,t,m) 값이 모든 프레임의 블록에 대해 을 만족하면 오류가 없는 것으로 판단할 수 있다.
저장부(250)는 다수의 컨텐츠를 종류별로 저장하고 있으며, 오류 검출 과정에 생성된 프레임별 MSE맵을 저장한다.
도 3은 본 발명의 실시예에 따른 컨텐츠 장치의 고속 멀티트랙 비디오 인제스팅 오류 검출 방법을 설명하기 위한 동작 흐름도이다.
도 3을 참조하면, 본 발명에 따른 컨텐츠 장치(110)는, 원본 비디오를 입력받아 도 4에 도시된 바와 같이 화질이 서로 다른 둘 이상 N 개의 압축비디오를 생성한다(S310).
이어, 컨텐츠 장치(110)는 N 개의 압축비디오 중 가장 화질이 높은 "압축비디오 1"과 가장 화질이 낮은 "압축비디오 N"에 오류가 있는지를 검사한다(S320).
이때, 컨텐츠 장치(110)는 압축비디오를 디코딩(Decoding) 한 후 원본 비디오와 비교하여 PSNR(Peak Signal to Noise Ratio)을 계산하고, 계산된 PSNR 값이 특정값 이상인 경우에 오류가 없는 것으로 출력할 수 있다. 또한, 이 외에 소리없음, 원본 비디오 상의 문제점 등을 검출하는 다양한 알고리즘 등을 적용할 수 있다.
이어, 컨텐츠 장치(110)는 두 압축비디오에 오류가 있는 경우(S330-예), 두 압축비디오 중 어떤 압축비디오에 오류가 있는 지를 알리고 화질 검사를 종료한다(S340).
그러나, 두 압축비디오에 오류가 없는 경우(S330-아니오), 컨텐츠 장치(110)는 압축비디오 1 및 압축비디오 N과 원본 비디오의 MSE(Means Square Error)를 계산하여 프레임별 MSE맵을 생성한다(S350).
이때, 컨텐츠 장치(110)는 압축 비디오의 프레임이 중첩되지 않도록 작은 블록으로 나누고 각 블록에 대해 MSE를 구하여 프레임별 MSE맵을 생성하여 저장할 수 있다.
이어, 컨텐츠 장치(110)는 압축비디오 1 및 압축비디오 N을 제외한 나머지 압축비디오들에 대해 MSE맵과의 비교를 통해 오류를 검출한다(S360).
이때, 컨텐츠 장치(110)는 가장 화질이 높은 압축비디오 1의 MSE 값이 가장 작고, 가장 화질이 낮은 압축비디오 N의 MSE 값이 가장 크므로, 압축비디오 K의 t 시간째 프레임의 m 번째 MSE(K,t,m) 값이 모든 프레임의 블록에 대해 다음 수학식1을 만족하면 오류가 없는 것으로 판단한다.
Figure pat00001
따라서, 본 발명에 따른 고속 멀티트랙 비디오 인제스팅 오류 검출 방법이 적용된 컨텐츠 장치는 멀티트랙 비디오의 인제스팅 시 오류를 검출할 수 있으며, 멀티트랙 비디오의 인제스팅 시간을 단축시켜 고속화를 가능하게 할 수 있다.
전술한 바와 같이 본 발명에 따르면, 고속의 비디오 데이터를 사용자 단말기에 서비스 하기 위해 컨텐츠 제공자(CP)로부터 제공받은 비디오 데이터에 대해 비디오의 해상도 스케일링, 프레임율 변환, 인코딩, 메타데이터 삽입, 패키징 과정 등 인제스팅(Ingesting)을 수행할 때, 원본 비디오를 멀티트랙 비디오 인코더(Multi-track video encoder)를 통해 화질이 서로 다른 둘 이상 N 개의 압축비디오로 생성하고, 생성된 압축비디오 중 가장 화질이 높은 "압축비디오 1"과 가장 화질이 낮은 "압축비디오 N"에 오류가 있는지 화질 검사를 수행하여, 오류가 없으면 두 개의 압축비디오와 원본 비디오 간의 MSE(Means Square Error)를 계산하여 프레임별 MSE맵을 생성하며, 나머지 압축비디오들에 대해 MSE맵과의 비교를 통해 오류를 검사할 수 있도록 된, 고속 멀티트랙 비디오 인제스팅 오류 검출 방법 및 시스템을 실현할 수 있다.
본 발명이 속하는 기술분야의 당업자는 본 발명이 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있으므로, 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적인 것이 아닌 것으로서 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 등가개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
본 발명은 컨텐츠 서버에서 사용자 단말기로 비디오 데이터를 포함하는 컨텐츠를 전송하는 서비스 및 시스템에 적용할 수 있다.
또한, 이동 단말기로 컨텐츠를 전송하기 위해 인제스팅 과정을 수행하는 컨텐츠 서버에 적용할 수 있다.
그리고, 비디오 및 오디오를 포함하는 컨텐츠를 통신망을 이용해 서비스하는 컨텐츠 서버 또는 컨텐츠를 수신하여 디스플레이하는 이동 단말기를 포함하는 컨텐츠 미디어 통신 시스템에 적용할 수 있다.
100 : 고속 멀티트랙 비디오 인제스팅 오류 검출 시스템
110 : 컨텐츠 장치 120 : 통신망
130 : 사용자 단말기 210 : 통신 인터페이스부
220 : 멀티트랙 비디오 인코더 230 : 화질 검사부
240 : 오류검출 제어부 250 : 저장부

Claims (10)

  1. 입력된 원본 비디오를 둘 이상의 압축비디오로 생성하고, 생성된 압축비디오 중 가장 화질이 높은 압축비디오와 가장 화질이 낮은 압축비디오에 오류가 있는지를 검사하고, 오류가 없는 경우 두 개의 압축비디오와 원본 비디오의 MSE(Means Square Error)를 계산하여 프레임별 MSE맵을 생성하며, 나머지 압축비디오들을 MSE맵과 비교하여 오류를 검출하는 고속 멀티트랙 비디오 오류 검출 장치.
  2. 원본 비디오를 입력받아 화질이 서로 다른 둘 이상의 압축비디오를 생성하는 멀티트랙 비디오 인코더;
    상기 둘 이상의 압축비디오 중 가장 화질이 높은 "압축비디오 1"과 가장 화질이 낮은 "압축비디오 N"에 오류가 있는지를 검사하는 압축비디오 화질검사부;
    상기 두 압축비디오에 오류가 없는 경우, 압축비디오 1 및 압축비디오 N과 원본 비디오의 MSE(Means Square Error)를 계산하여 프레임별 MSE맵을 생성하고, 상기 압축비디오 1 및 압축비디오 N을 제외한 나머지 압축비디오들을 상기 MSE맵과 비교하여 오류를 검출하는 오류검출 제어부; 및
    상기 프레임별 MSE맵을 저장하는 저장부;
    를 포함하는 고속 멀티트랙 비디오 오류 검출 장치.
  3. 제 2 항에 있어서,
    상기 압축비디오 화질검사부는, 상기 두 압축비디오에 오류가 있는 경우 두 압축 비디오 중 어떤 압축비디오에 오류가 있는 지를 알리고 화질 검사를 종료하는 것을 특징으로 하는 고속 멀티트랙 비디오 오류 검출 장치.
  4. 제 2 항에 있어서,
    상기 압축비디오 화질검사부는, 상기 압축비디오를 디코딩(Decoding) 한 후 원본 비디오와 비교하여 PSNR(Peak Signal to Noise Ratio)을 계산하고, 계산한 값이 특정값 이상인 경우에 오류가 없는 것으로 출력하는 것을 특징으로 하는 고속 멀티트랙 비디오 오류 검출 장치.
  5. 제 2 항에 있어서,
    상기 오류검출 제어부는, 상기 압축 비디오의 프레임이 중첩되지 않도록 작은 블록으로 나누고 각 블록에 대해 MSE를 구하여 프레임별 MSE맵을 생성해 저장부에 저장하는 것을 특징으로 하는 고속 멀티트랙 비디오 오류 검출 장치.
  6. 제 2 항에 있어서,
    상기 오류검출 제어부는, 상기 압축비디오 1의 MSE 값이 가장 작고, 상기 압축비디오 N의 MSE 값이 가장 크므로, 압축비디오 K의 t 시간째 프레임의 m 번째 MSE(K,t,m) 값이 모든 프레임의 블록에 대해 을 만족하면 오류가 없는 것으로 판단하는 것을 특징으로 하는 고속 멀티트랙 비디오 오류 검출 장치.
  7. 비디오 및 오디오를 포함하는 컨텐츠를 인제스팅 한 후 통신망을 통해 사용자 단말기에 전송하는 컨텐츠 장치의 고속 멀티트랙 비디오 인제스팅 오류 검출 방법으로서,
    (a) 원본 비디오를 입력받아 화질이 서로 다른 둘 이상의 압축비디오를 생성하는 단계;
    (b) 상기 둘 이상의 압축비디오 중 가장 화질이 높은 "압축비디오 1"과 가장 화질이 낮은 "압축비디오 N"에 오류가 있는지를 검사하는 단계;
    (c) 상기 두 압축비디오에 오류가 없는 경우, 압축비디오 1 및 압축비디오 N과 원본 비디오의 MSE(Means Square Error)를 계산하여 프레임별 MSE맵을 생성하는 단계; 및
    (d) 상기 압축비디오 1 및 압축비디오 N을 제외한 나머지 압축비디오들을 상기 MSE맵과 비교하여 오류를 검출하는 단계;
    를 포함하는 컨텐츠 장치의 고속 멀티트랙 비디오 인제스팅 오류 검출 방법.
  8. 제 7 항에 있어서,
    상기 (b) 단계는, 상기 압축비디오를 디코딩(Decoding) 한 후 원본 비디오와 비교하여 PSNR(Peak Signal to Noise Ratio)을 계산하고, 계산한 값이 특정값 이상인 경우에 오류가 없는 것으로 출력하는 것을 특징으로 하는 컨텐츠 장치의 고속 멀티트랙 비디오 인제스팅 오류 검출 방법.
  9. 제 7 항에 있어서,
    상기 (c) 단계는, 상기 압축 비디오의 프레임이 중첩되지 않도록 작은 블록으로 나누고 각 블록에 대해 MSE를 구하여 프레임별 MSE맵을 생성하여 저장하는 것을 특징으로 하는 컨텐츠 장치의 고속 멀티트랙 비디오 인제스팅 오류 검출 방법.
  10. 제 7 항에 있어서,
    상기 (d) 단계는, 상기 압축비디오 1의 MSE 값이 가장 작고, 상기 압축비디오 N의 MSE 값이 가장 크므로, 압축비디오 K의 t 시간째 프레임의 m 번째 MSE(K,t,m) 값이 모든 프레임의 블록에 대해 을 만족하면 오류가 없는 것으로 판단하는 것을 특징으로 하는 컨텐츠 장치의 고속 멀티트랙 비디오 인제스팅 오류 검출 방법.
KR1020110023739A 2011-03-17 2011-03-17 고속 멀티트랙 비디오 인제스팅 오류 검출 방법 및 시스템 KR101800384B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110023739A KR101800384B1 (ko) 2011-03-17 2011-03-17 고속 멀티트랙 비디오 인제스팅 오류 검출 방법 및 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110023739A KR101800384B1 (ko) 2011-03-17 2011-03-17 고속 멀티트랙 비디오 인제스팅 오류 검출 방법 및 시스템

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020160142462A Division KR101858043B1 (ko) 2016-10-28 2016-10-28 고속 멀티트랙 비디오 인제스팅 오류 검출 방법 및 시스템

Publications (2)

Publication Number Publication Date
KR20120105969A true KR20120105969A (ko) 2012-09-26
KR101800384B1 KR101800384B1 (ko) 2017-11-22

Family

ID=47112745

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110023739A KR101800384B1 (ko) 2011-03-17 2011-03-17 고속 멀티트랙 비디오 인제스팅 오류 검출 방법 및 시스템

Country Status (1)

Country Link
KR (1) KR101800384B1 (ko)

Also Published As

Publication number Publication date
KR101800384B1 (ko) 2017-11-22

Similar Documents

Publication Publication Date Title
US11423942B2 (en) Reference and non-reference video quality evaluation
KR101789086B1 (ko) 다양한 비트레이트에 대한 품질을 갖는 미디어 데이터 스트림의 품질 결정에 대한 개념
JP5955319B2 (ja) 映像ビットストリームと出力映像シーケンスとの間の時間的な同期のための方法および装置
US7710454B2 (en) Video bit stream test
RU2573257C2 (ru) Устройство декодирования сигнала изображения, способ декодирования сигнала изображения, устройство кодирования сигнала изображения, способ кодирования сигнала изображения и программа
US20150312575A1 (en) Advanced video coding method, system, apparatus, and storage medium
US20150341667A1 (en) Video quality model, method for training a video quality model, and method for determining video quality using a video quality model
US11064211B2 (en) Advanced video coding method, system, apparatus, and storage medium
US8780976B1 (en) Method and apparatus for encoding video using granular downsampling of frame resolution
CN113438501B (zh) 视频压缩方法、装置、计算机设备和存储介质
US20140056354A1 (en) Video processing apparatus and method
US20100061443A1 (en) Method and system for video streaming of a graphical display of an application
US9877056B1 (en) Compressed media with still images selected from a video stream
US20120027091A1 (en) Method and System for Encoding Video Frames Using a Plurality of Processors
US20130251033A1 (en) Method of compressing video frame using dual object extraction and object trajectory information in video encoding and decoding process
US11638051B2 (en) Real-time latency measurement of video streams
KR101372639B1 (ko) 광고 영상 검출 방법 및 장치
KR101858043B1 (ko) 고속 멀티트랙 비디오 인제스팅 오류 검출 방법 및 시스템
KR101800384B1 (ko) 고속 멀티트랙 비디오 인제스팅 오류 검출 방법 및 시스템
KR101800382B1 (ko) 비디오 압축 오류 검출 방법 및 장치
US11659217B1 (en) Event based audio-video sync detection
Cheon et al. Quality assessment of mobile videos
Yamada et al. No-reference quality estimation for video-streaming services based on error-concealment effectiveness
KR20230053210A (ko) 분산형 병렬 트랜스코딩 방법 및 장치
Norén Practical Aapplications for Client-Side Video-Transcoding

Legal Events

Date Code Title Description
N231 Notification of change of applicant
A201 Request for examination
A107 Divisional application of patent
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant