KR101150872B1 - 코드변환된 비디오의 시각 검사를 위한 방법, 장치 및 시스템 - Google Patents

코드변환된 비디오의 시각 검사를 위한 방법, 장치 및 시스템 Download PDF

Info

Publication number
KR101150872B1
KR101150872B1 KR1020077016687A KR20077016687A KR101150872B1 KR 101150872 B1 KR101150872 B1 KR 101150872B1 KR 1020077016687 A KR1020077016687 A KR 1020077016687A KR 20077016687 A KR20077016687 A KR 20077016687A KR 101150872 B1 KR101150872 B1 KR 101150872B1
Authority
KR
South Korea
Prior art keywords
video
frame
encoded
decoded
stream
Prior art date
Application number
KR1020077016687A
Other languages
English (en)
Other versions
KR20070097074A (ko
Inventor
가드 모쉐 베거
Original Assignee
톰슨 라이센싱 에스.에이.에스.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 톰슨 라이센싱 에스.에이.에스. filed Critical 톰슨 라이센싱 에스.에이.에스.
Publication of KR20070097074A publication Critical patent/KR20070097074A/ko
Application granted granted Critical
Publication of KR101150872B1 publication Critical patent/KR101150872B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H04N17/004—Diagnosis, testing or measuring for television systems or their details for digital television systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/154—Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream

Abstract

본 발명은, 예를 들면 또 다른 비디오 포맷으로 재-인코딩되는 비디오 파일을 자신의 소스와 시각적으로 비교하기 위한 방법, 장치 및 시스템을 제공한다. 본 발명의 일실시예에 따라, 비디오 프레임 및 대응하는 재-인코딩된 비디오 프레임은 단일 와이드 (결합된) 비디오 프레임으로 놓여, 예를 들면 동일한 프레임에서 나란히 각 이미지를 디스플레이한다. 소스 비디오 프레임을 재-인코딩된 비디오 프레임으로 동기화하고 이들을 동일한 와이드 비디오 프레임 상에 디스플레이함으로써, 예를 들면 인코딩 처리과정에 의해 야기된 차이는 비디오가 원하는 제 2 비디오 포맷으로 재-인코딩됨에 따라 시각적으로 결정될 수 있다.
인코딩, 코드변환, 스트림, 믹서기, 비디오

Description

코드변환된 비디오의 시각 검사를 위한 방법, 장치 및 시스템{METHOD, APPARATUS AND SYSTEM FOR VISUAL INSPECTION OF TRANSCODED VIDEO }
본 발명은 비디오 인코딩 시스템에 대한 것으로서, 더 상세하게는 예를 들면, 또 다른 비디오 포맷으로 재-인코딩되는 비디오 파일의 시각 검사를 위한 방법, 장치 및 시스템에 관한 것이다.
하나의 포맷으로부터 또 다른 포맷으로 비디오를 재-인코딩하는 경우, 다양한 인코딩 파라메터가 어떻게 합성 비디오 이미지에 영향을 끼치게 되는 지를 결정하는 것은 어렵다. 새롭게 인코딩된 상대물에 원래 비디오를 비교하는 일부 종래 기술의 해결방법은 비디오 스트림을 인코딩하는 단계와, 원래 비디오와 새롭게 인코딩된 비디오 둘 다를 분리하여 후속적으로 재생하여, 임의의 차이를 검출하는 단계를 포함한다. 그러나, 인코딩 처리과정은 장시간일 수 있으며, 인코딩 처리과정이 완료된 이후 비디오 스트림을 비교하기 위한 대기는 인코딩 처리과정에 실시간 조정을 허용하지 않아, 가장 효율적인 해소방법이 되지 못한다. 게다가, 이러한 종래기술의 해소방법에서, 비교를 위하여 비디오 스트림을 서로 동기화는 확실한 방법이 없다.
따라서, 본 발명은 코드변환된 비디오를 실시간으로 시각 검사하기 위한 방법, 장치 및 시스템을 제공함으로써 종래 기술의 단점을 해소한다.
본 발명의 일실시예에서,제 2 비디오 포맷으로 재-인코딩되는 비디오 스트림의 시각 검사를 위한 방법은, 디코딩된 비디오 스트림을 적어도 제 1 및 제 2 부분으로 분리하는 단계와, 상기 분리된 비디오 스트림의 제 1 부분을 상기 제 2 비디오 포맷으로 재-인코딩하는 단계와, 상기 분리된 비디오 스트림의 제 2 부분의 디코딩된 비디오의 한 프레임 및 상기 재-인코딩된 비디오의 대응하는 한 프레임을 결합된 하나의 비디오 프레임에 배열하여, 상기 디코딩된 비디오 프레임과 상기 대응하는 재-인코딩된 비디오 프레임이 상기 결합된 하나의 비디오 프레임에 함께 나타나도록 하는, 배열 단계를 포함한다.
본 발명의 대안적인 실시예에서, 제 2 비디오 포맷으로 재-인코딩되는 비디오 파일의 시각 검사를 가능하게 하는 비디오 믹서기는, 프로세서와 메모리풀을 포함하고, 이 비디오 믹서기는, 프레임 단위로 비디오 스트림의 디코딩되고 분리된 제 2 부분을 수신하는 단계와, 프레임 단위로 비디오 스트림의 대응하는 재-인코딩되고 분리된 제 1 부분을 수신하는 단계와, 상기 분리된 비디오 스트림의 제 2 부분의 디코딩된 비디오의 한 프레임 및 상기 재-인코딩된 비디오의 대응하는 한 프레임을 결합된 하나의 비디오 프레임에 배열하여, 상기 디코딩된 비디오의 한 프레임과 상기 대응하는 재-인코딩된 비디오의 한 프레임이 상기 결합된 비디오 프레임에 함께 나타나도록 하는, 배열 단계를 실행하도록 적응된다.
본 발명의 대안적인 실시예에서, 제 2 비디오 포맷으로 재-인코딩된 비디오 스트림의 시각 검사를 가능하게 하는 시스템은, 수신된 비디오 스트림을 디코딩하는 비디오 디코더와, 상기 디코딩된 비디오 스트림을 적어도 제 1 부분과 제 2 부분으로 분리하는 스트림 분리기와, 상기 분리되고 디코딩된 비디오 스트림의 제 1 부분을 수신하고 상기 디코딩된 비디오 스트림의 수신된 부분을 상기 제 2 비디오 포맷으로 재-인코딩하는 인코더와, 프로세서와 메모리를 포함하는 비디오 믹서기를 포함한다. 본 발명의 비디오 믹서기는, 상기 분리된 디코딩 비디오 스트림의 제 2 부분을 수신하는 단계와, 상기 인코더로부터 상기 비디오 스트림의 재-인코딩된 제 1 부분을 수신하는 단계와, 상기 분리된 비디오 포맷의 제 2 부분의 디코딩된 비디오의 한 프레임 및 상기 재-인코딩된 비디오의 대응하는 한 프레임을 결합된 비디오의 한 프레임에 배열하여, 상기 디코딩된 비디오의 한 프레임과 상기 대응하는 재-인코딩된 비디오의 한 프레임이 상기 결합된 비디오 프레임에 함께 나타나도록 하는, 배열단계를 실행하도록 적응된다. 본 발명의 시스템은, 상기 디코딩된 비디오의 프레임과 상기 재-인코딩된 비디오의 대응하는 프레임을 상기 결합된 비디오 프레임 내에 디스플레이하는 디스플레이 디바이스를 추가로 포함할 수 있다.
본 발명의 교지는 첨부된 도면과 연결하여 다음의 상세한 설명을 고려함으로써, 쉽게 이해될 것이다.
도 1은 본 발명의 실시예에 따른 비디오 인코딩 및 시각 비교 시스템(VEVC: Video Encoding and Visual Comparison)의 하이 레벨 블럭도.
도 2는 도 1의 VEVC 시스템(100)에서의 사용에 적합한 비디오 믹서기의 실시예의 하이 레벨 블럭도.
도 3은 대응하는 비디오 프레임이 실질적으로 동일한 방향으로 나란히 디스플레이된 동작 모드를 위한 비디오 믹서기의 출력을 그래픽적으로 기술한 도면.
도 4는 디코딩된 원래의 비디오 프레임이 보통으로 디스플레이되고 대응하는 재-인코딩 비디오 프레임이 x-축을 따라 플립(flip)하는 동작 모드를 위한 비디오 믹서기의 출력을 그래픽적으로 기술한 도면.
도 5는 본 발명의 실시예에 따른 비디오 믹서기에서 비디오 스트림 입력을 수신하고 시각(visual) 비교를 위한 디스플레이 디바이스에 완성된 와이드 프레임을 전송하는 방법의 흐름도.
이해를 돕기 위해, 가능한한, 동일한 참조 번호가 도면에 공통적인 동일한 구성요소를 나타내기 위해 사용된다.
본 발명은 코드변환된 비디오를 실시간으로 시각 검사하기 위한 방법, 장치 및 시스템을 유리하게 제공한다. 비록 본 발명이 디코딩된 원래 비디오 스트림과 재-인코딩된 비디오 스트림의 프레임에 대한 시각 비교의 범위 내에서 주로 기술될 지라도, 본 발명의 교지에 의해 정보를 취득한 당업자라면 본 발명의 개념이 3개 이상의 비디오 스트림에 대한 시각적 비교를 위해 적용될 수 있음을 이해할 것이다.
도 1은 본 발명의 실시예에 따른 비디오 인코딩 및 시각 비교(VEVC: Video Encoding and Visual Comparison) 시스템의 하이 레벨 블럭도를 도시한다. 도 1의 이 VEVC 시스템(100)은 실례로서 비디오 소스(102), 비디오 디코더(104), 비디오 스트림 분리기(106), 인코더(108), 비디오 믹서기(110) 및 디스플레이 디바이스(실례로서, 비디오 모니터)(112)를 포함한다. 도 1의 VEVC(100)에서, 비디오 소스(102)로부터 비디오 스트림은 비디오 디코더(104)로 전송된다. 비디오 디코더(104)에서, 비디오 스트림은, 예를 들면 RGB 또는 YUV로 디코딩되며, 이 디코딩된 비디오 스트림은 스트림 분리기(106)로 전송된다. 스트림 분리기(106)는 디코딩된 비디오 스트림을 2개의 실질적으로 동일한 스트림으로 분리한다. 첫 번째 스트림은 수신된 디코딩 비디오 스트림을 원하는 두 번째 비디오 포맷으로 인코딩하기 위한 인코더(108)에 전송된다. 스트림 분리기(106)로부터 두 번째 스트림이 비디오 믹서기(110)로 전송된다.
인코더(108)는 비디오 믹서기(110)에 재-인코딩된 미리보기 프레임의 세트를 제공하면서 또한, 새롭게 인코딩된 비트 스트림(bitstream)을 출력한다. 인코더(108)는 수신된 비디오 스트림의 프레임율을 조절하지 않고, 가령 비디오 믹서기(110)로 전송된 디코딩된 원래 비디오 스트림의 각 비디오 프레임은 인코더(108)로부터 비디오 믹서기로 전송된 동기화된 비디오 프레임을 가질 것이다. 도 1의 VEVC(100)에 도시된 바와 같이, 비디오 믹서기(110)는 2개의 입력(115 및 117)을 포함한다. 도 1의 VEVC(100)에서, 제 1 입력(115)에 전송된 비디오 스트림은 스트림 분리기(106)로부터 전송된 디코딩된 원래 비디오 스트림이고, 제 2 입력(117)으 로부터 전송된 비디오 스트림은 인코더(108)로부터 전송된 재-인코딩된 비디오 스트림이다. 비디오 믹서기(110)의 출력은 실질적으로 원래와 동일한 높이이지만 폭은 2배가 되는 단일 (결합된) 비디오 프레임을 포함한다. 이는 디코딩된 원래 비디오 스트림의 비디오 이미지와 재-인코딩된 비디오 스트림의 비디오 이미지가 임의 차이를 검출하기 위한 이미지의 시각 검사를 위한 비디오 모니터(112)에 의해 디스플레이될 결합된 비디오 프레임에 위치되는 것을 허용한다.
도 2는 도 1의 VEVC 시스템(100)에서의 사용에 적합한 비디오 믹서기(110)의 실시예에 대한 하이 레벨 블럭도를 도시한다. 도 2의 비디오 믹서기(110)는 프로세서(210)와, 제어 프로그램, 버퍼풀 및 기타 정보를 저장하기 위한 메모리(220)를 포함한다. 프로세서(210)는, 메모리(220)에 저장된 소프트웨어 루틴의 실행시 지원하는 회로뿐만 아니라 파워 서플라이, 클럭 회로, 캐시 메모리 등과 같은 종래의 지원 회로(230)와 협력한다. 위에서 말한바와 같이, 소프트웨어 처리과정으로 여기에 논의된 일부의 처리과정 단계는, 예를 들면 다양한 단계를 실행하기 위해 프로세서(210)와 협력하는 회로로서, 하드웨어 내에서 구현될 수 있다. 또한, 비디오 믹서기(110)는 비디오 믹서기(110)와 통신하는 다양한 기능적 구성요소 사이에 인터페이스를 형성하는 입-출력 회로(240)를 포함한다. 예를 들면, 도 1에 도시된 바와 같이, 비디오 믹서기(110)는 각기 제 1 경로(S1)와 제 2 경로(S2)를 경유하여 스트림 분리기(106)와 인코더(108)과 통신하고, 출력 경로(O1)를 경유하여 디스플레이 디바이스(112)와 통신한다.
비록 도 2의 비디오 믹서기(110)가 본 발명에 따른 다양한 제어 기능을 실행 하도록 프로그래밍된 일반 용도 컴퓨터로서 기술되었지만, 본 발명은, 예를 들면 주문형 반도체(ASIC: Application Specified Integrated Circuit)와 같은 하드웨어에서 구현될 수 있다. 위에서 말한 바와 같이, 여기에 기술된 처리과정 단계는 소프트웨어, 하드웨어, 또는 이들의 조합에 의해 등가적으로 실행되는 것으로 넓게 해석되는 것을 예정한다.
스트림 분리기(106) 및 인코더(108) 양쪽에 의한 비디오 믹서기(110)로의 연결은 비디오 샘플의 일정한 상세에 따라 결정된다. 즉, 비디오 믹서기(110)는 첫 번째 입력(115)은 (프레임율)을 가진 이미지(폭 x 높이)을 가지고, 두 번째 입력(117)은 (프레임율)을 가진 이미지(폭 x 높이)을 가지는 것으로 알려져 있다. 본 발명의 일실시예에서, 비디오 믹서기(110)로의 입력(예를 들면, 디코딩된 원래 비디오 스트림 및 재-인코딩된 비디오 스트림)은 동일한 높이 및 폭을 가지며, 재-코딩된 비디오 스트림은 적절한 동기화를 위한 디코딩된 원래 비디오 스트림의 프레임율을 유지한다. 이러한 구성은 디코딩된 원래 비디오 스트림과 재-인코딩된 비디오 스트림의 최선의 경우 비교를 돕는다. 더 상세하게는, 만일 비디오 믹서기(110)로의 입력이 동일 높이 및 폭을 가지고 재-인코딩된 비디오 스트림이 디코딩된 원래 비디오 스트림의 프레임율을 유지한다면, 출력 이미지는 실질적으로 동일한 치수로 구성되며 2개의 출력 비디오 이미지를 더 용이하게 만드는 대응하는 비디오 프레임을 디스플레이할 것이다.
비디오 믹서기(110)로의 입력(예를 들면, 디코딩된 원래 비디오 스트림 및 재-인코딩된 비디오 스트림)이 동일한 높이 및 폭을 가지고 있지 않고, 재-인코딩 된 비디오 스트림이 디코딩된 원래 비디오 스트림의 프레임율을 유지하지 못하는 경우, 도 1의 비디오 믹서기(100)와 같은, 본 발명의 비디오 믹서기는 대안적으로 입력을 거부하여 임의의 처리과정을 실행하지 않을 수 있거나, 또는 입력의 하나 또는 양쪽에 관해 크기조정(scale) 루틴을 실행할 수 있다. 즉, 후자의 경우, 비디오 믹서기는 입력의 특성(예를 들면, 높이, 폭 및 율)을 크기조정(scale)하기를 시도하여 출력 이미지가 실질적으로 동일한 치수로 구성되어 대응하는 비디오 프레임이 디스플레이되게 할 수 있다. 그러나, 이러한 실시예에서, 적응된 비디오 스트림은 결국 저하된 이미지가 될 수 있다.
이전에 언급한 바와 같이, 비디오 스트림을 위한 입력 특성들이 초기에 결정된다(예를 들면, 색공간, 높이, 폭, 프레임율 등). 다음으로, 와이드 (결합된) 프레임 버퍼풀(예를 들면, {입력 높이}x{입력 폭*2}x{양자화})이 비디오 믹서기(110)에서 생성된다. 비디오 믹서기(110)에 의해 수신된 각 프레임의 경우, 한 사본의 프레임이 버퍼풀로부터 선택된 와이드 프레임의 적당한 위치에 저장된다. 예를 들면, 첫번째 동작 모드의 경우, 디코딩된 원래 비디오 프레임 및 대응하는 재-인코딩된 비디오 프레임은 와이드 프레임의 각 위치로 복사된다. 이러한 첫 번째 동작 모드에서, 비디오 믹서기(110)는 디코딩된 원래 비디오 프레임과 대응하는 재-인코딩된 비디오 프레임이 와이드 출력 프레임에서 실질적으로 동일한 방향으로 나란히 비디오 모니터(112) 상에 디스플레이되도록 한다. 도 3은 그래픽적으로 이러한 동작 모드를 위한 비디오 믹서기(110)의 출력을 기술한다. 도 3에 도시된 바와 같이, 디코딩된 원래 비디오 프레임과 대응하는 재-인코딩된 비디오 프레임이 실질적으로 동일한 방향의 와이드 출력 프레임에서 디스플레이된다. 이러한 본 발명의 동작 모드는, 예를 들면 코드변환 처리과정으로 인해, 이미지 사이의 비교적 더 큰 차이를 검출하기 위하여 구현될 수 있다.
두 번째 동작 모드의 경우, 디코딩된 원래 비디오 프레임이 와이드 프레임의 적당한 위치로 복사되며, 대응하는 재-인코딩된 비디오 프레임은 비디오 모니터(112)상에 디스플레이되었을 때, 비디오 프레임이 서로에 대하여 x-축을 따라 반전되어 나타나도록 와이드 프레임의 위치로 복사된다. 즉, 이러한 두 번째 동작 모드의 경우, 비디오 믹서기(110)는 디코딩된 원래 비디오 프레임 및 대응하는 재-인코딩된 비디오 프레임이 서로 실질적으로 반대 방향에서 나란히 비디오 모니터(112)상에 디스플레이되도록 한다. 더 상세하게는, 이러한 두 번째 동작 모드에서, 비디오 프레임 중 하나는 정상적으로 디스플레이되고, 반면에 두 번째 비디오 프레임은 픽셀당 차이(differentiation)가 다소 더 명확하게 되도록 x-축을 따라 플립된다. 예를 들면, 본 발명의 일실시예에서, 디코딩된 원래 비디오 프레임은 정상적으로 디스플레이되고, 대응하는 재-인코딩된 비디오 프레임은 x-축을 따라 플립(flip)된다. 본 발명의 대안적인 실시예에서, 재-인코딩된 비디오 프레임은 정상적으로 디스플레이되고, 대응하는 디코딩되는 원래 프레임은 x-축을 따라 플립된다. 도 4는 그래픽적으로 디코딩된 원래 비디오 프레임이 정상적으로 디스플레이되고 대응하는 재-인코딩된 비디오 프레임이 x-축을 따라 플립되는 실시예의 경우, 이러한 모드를 위한 비디오 믹서기(110)의 출력을 기술한다.
본 발명의 대안적인 실시예, 즉 본 발명의 비디오 믹서기에서, 디코딩된 원 래 비디오 프레임 및 대응하는 재-인코딩된 비디오 프레임이 와이드 프레임에 있는 위치로 복사되므로 비디오 프레임은 디코딩된 원래 비디오 프레임의 절반이 대응하는 재-인코딩된 비디오 프레임의 각 절반 다음에 디스플레이될 수 있도록 접형 형태(butterfly configuration)로 비디오 모니터(112)상에 디스플레이된다. 즉, 와이드 프레임의 한 측면상(예를 들면, 좌측 절반)에, 디코딩된 원래 비디오 프레임의 첫 번째 반절은 대응하는 재-인코딩된 원래 비디오 프레임의 각 첫 번째 절반 다음에 디스플레이되며, 와이드 프레임의 한 측면상(예를 들면, 우측 절반)에, 디코딩된 원래 비디오 프레임의 두 번째 반절은 대응하는 재-인코딩된 비디오 프레임의 각 두 번째 절반 다음에 디스플레이된다. 그러나, 이러한 실시예는 비디오 프레임을 와이드 프레임 내로 적정하게 위치시키 위해 비디오 믹서기에서의 추가적인 처리단계를 요구한다.
도 1 및 도 2를 참조하면, 비디오 믹서기(110)에서, 큐(Queue)는 인입하는 비디오 프레임을 위한 순서를 한정하기 위한 버퍼풀의 와이드 프레임을 위해 구현된다. 일실시예에서, 큐는 와이드 프레임의 채워진 좌측 절반을 위한 하나와 와이드 프레임의 채워진 우측 절반을 위한 하나로 이루어진 2개의 부울린 식별자(Boolean Identifier)를 포함하며, 각 절반은 디코딩된 원래 비디오 스트림 또는 재-인코딩된 비디오 스트림 중 하나의 완전한 비디오 프레임을 나타낸다. 큐에서 프레임은 순차적적으로 번호가 부여되고, 큐는 각 프레임 그 자체로 취급된다. 와이드 프레임의 좌측 절반 및 우측 절반인 양쪽 측면이 채워지는 경우, 와이드 프레임에서의 이미지는 비디오 모니터(112)로 전송된다. 이후, 대기 시간은 큐에서의 다음 버퍼를 위해 증가된다.
도 5는 본 발명의 실시예에 따라 비디오 스트림 입력을 수신하고 시각 비교를 위한 디스플레이 디바이스에 완료된 와이드 프레임을 전송하기 위한 비디오 믹서기에서의 방법에 대한 흐름도를 서술한다. 도 5의 방법(500)은 단계(502)로 진입하며, 이 단계에서 본 발명의 비디오 믹서기는 비디오 프레임을 수신한다. 이후, 방법(500)은 단계(504)로 진행하게 된다. 도 5의 방법(500)의 단계는 디코딩된 원래 비디오 스트림 및 재-인코딩된 비디오 스트림 양쪽을 나타내는데, 왜냐하면 이들이 와이드 프레임의 동일한 버퍼풀(buffer pool)을 통해 동작하기 때문임을 주목해야 한다.
단계(504)에서, 비디오 믹서기는 버퍼 (와이드 프레임)가 수신된 비디오 프레임에 대하여 이용가능한 지를 결정한다. 만일 버퍼가 이용가능하지 않다면, 방법(500)은 단계(506)로 진행한다. 만일 버퍼가 이용가능하다면, 방법(500)은 단계(508)로 이동하게 된다.
단계(506)에서, 수신된 비디오 프레임은 버퍼가 이용가능할 때까지 차단된다. 이후, 방법(500)은 단계(508)로 진행한다.
단계(508)에서, 수신된 입력 비디오 프레임은 큐에서의 첫 번째 논리적 버퍼에서 저장된다. 이후, 방법(500)은 단계(510)로 진행한다.
단계(510)에서, 와이드 프레임의 좌측과 우측은 각기 수신된 입력 프레임으로 채워진다. 채워진 경우, 와이드 프레임의 각 절반은 각 절반이 채워짐을 비디오 믹서기에 표시한다. 이후, 방법(500)은 단계(512)로 진행한다.
단계(512)에서, 완료된 와이드 프레임은 디스플레이 디바이스로 전송된다. 이후, 방법(500)은 단계(514)로 진행한다.
단계(514)에서, 전송된 와이드 프레임과 관련된 버퍼는 큐에 양도된다. 이후 방법(500)은 종료된다.
본 발명의 대안적인 실시예에서, 본 발명에 따른 비디오 믹서기는 와이드 프레임 및 이러한 와이드 프레임의 각 측면이 채워지는지와 때를 결정하기 위해 큐를 모니터링하기 위해 별도의 쓰레드(thread)를 포함할 수 있다. 이러한 실시예에서, 와이드 프레임이 완전히 채워질때, 쓰레드는 이미지가 디스플레이로 보내지도록 할 것이며, 관련된 버퍼의 양도가 큐에 이루어지도록 할 것이다.
전술한 바가 본 발명의 다양한 실시예에 대한 것일 지라도, 본 발명의 다른 및 추가 실시예가 이의 기본 적인 범위를 벗어나지 않으면서도 안출될 수 있다. 위에서 기술한 바와 같이, 본 발명의 적절한 범위는 뒤따르는 청구항에 따라 결정되어야 한다.
위 기술에 따르면, 본 발명은 비디오 인코딩 시스템에 대한 것으로서, 더 상세하게는 예를 들면, 또 다른 비디오 포맷으로 재-인코딩되는 비디오 파일의 시각 검사를 위한 방법, 장치 및 시스템에 이용가능하다.

Claims (21)

  1. 제 2 비디오 포맷으로 재-인코딩되는 비디오 스트림의 실시간 시각 검사를 위한 방법으로서,
    디코딩된 비디오 스트림을 적어도 제 1 및 제 2 부분으로 분리하는 단계로서, 상기 제 1 및 제 2 부분은 동일한 스트림인, 분리하는 단계;
    상기 분리된 비디오 스트림의 제 1 부분을 상기 제 2 비디오 포맷으로 재-인코딩하는 단계;
    상기 분리된 비디오 스트림의 제 2 부분의 디코딩된 비디오의 한 프레임 및 상기 재-인코딩된 비디오의 대응하는 한 프레임을 결합된 하나의 비디오 프레임에 배열하여, 상기 디코딩된 비디오 프레임과 상기 대응하는 재-인코딩된 비디오 프레임이 상기 결합된 비디오 프레임에 함께 나타나도록 하는 단계
    를 포함하는, 재-인코딩되는 비디오 스트림의 실시간 시각 검사를 위한 방법.
  2. 제 1 항에 있어서,
    상기 비디오 스트림의 각 부분을 크기조정(scale)하기 위해 상기 비디오 스트림의 상기 디코딩된 부분 또는 상기 비디오 스트림의 상기 대응하는 재-인코딩된 부분 상에 크기조정(scale)하는 루틴을 실행하는 단계로서, 이를 통해 디스플레이된 이미지가 동일한 치수를 포함하는, 크기조정 루틴 실행 단계를 포함하는, 재-인코딩되는 비디오 스트림의 실시간 시각 검사를 위한 방법.
  3. 제 2 항에 있어서,
    상기 비디오 스트림 부분의 적어도 하나의 높이, 폭 또는 프레임율 중 적어도 하나가 크기조정(scale)되는, 재-인코딩되는 비디오 스트림의 실시간 시각 검사를 위한 방법.
  4. 제 1 항에 있어서,
    상기 디코딩된 비디오 프레임 및 대응하는 재-인코딩된 비디오 프레임은 결합된 비디오 프레임으로 배열되어 나란히 나타나는, 재-인코딩되는 비디오 스트림의 실시간 시각 검사를 위한 방법.
  5. 제 1 항에 있어서,
    상기 디코딩된 비디오 프레임 및 대응하는 재-인코딩된 비디오 프레임은 결합된 비디오 프레임으로 배열되어, 상기 비디오 프레임이 서로에 대하여 x-축을 따라 반전되어 나타나는, 재-인코딩되는 비디오 스트림의 실시간 시각 검사를 위한 방법.
  6. 제 1 항에 있어서,
    상기 디코딩된 비디오 프레임 및 대응하는 재-인코딩된 비디오 프레임은 상기 결합된 비디오 프레임으로 배열되어 상기 디코딩된 비디오 프레임의 절반이 상기 대응하는 재-인코딩된 비디오 프레임의 각 절반 다음에 나타나는, 재-인코딩되는 비디오 스트림의 실시간 시각 검사를 위한 방법.
  7. 제 1 항에 있어서,
    상기 결합 디코딩된 비디오 프레임 및 대응하는 재-인코딩된 비디오 프레임을 저장하는 와이드 프레임(wide frame)의 버퍼풀(buffer pool)을 유지하는 단계를 포함하는, 재-인코딩되는 비디오 스트림의 실시간 시각 검사를 위한 방법.
  8. 제 7 항에 있어서,
    저장된 비디오 프레임을 위한 순서를 한정하기 위해 상기 버퍼풀의 와이드 프레임을 위한 큐(queue)가 구현되는, 재-인코딩되는 비디오 스트림의 실시간 시각 검사를 위한 방법.
  9. 제 8 항에 있어서,
    상기 큐는, 상기 와이드 프레임의 채워진 좌측 절반을 위한 하나와 상기 와이드 프레임의 채워진 우측 절반을 위한 하나로 된 2개의 불대수(Boolean) 식별자를 포함하되, 각 절반은 상기 비디오 스트림의 디코딩된 부분 또는 상기 비디오 스트림의 재-인코딩된 부분 중 하나의 완전한 비디오 프레임을 표현하는, 재-인코딩되는 비디오 스트림의 실시간 시각 검사를 위한 방법.
  10. 프로세서 및 메모리를 포함하고, 제 2 비디오 포맷으로 재-인코딩되는 비디오 스트림의 실시간 시각 검사를 위한 장치로서,
    상기 비디오 스트림의 디코딩되고 분리된 제 2 부분을 수신하는 단계;
    상기 비디오 스트림의 디코딩되고 분리된 제 1 부분으로부터, 대응하는 재-인코딩된 부분을 수신하는 단계로서, 상기 제 1 및 제 2 부분은 동일한 스트림인, 수신하는 단계;
    상기 분리된 비디오 스트림의 제 2 부분의 디코딩되고 분리된 비디오의 한 프레임 및 상기 재-인코딩된 비디오 부분의 대응하는 한 프레임을 결합된 비디오의 한 프레임에 배열하여, 상기 디코딩된 비디오 프레임과 상기 대응하는 재-인코딩된 비디오 프레임이 상기 결합된 비디오 프레임에 함께 나타나도록 하는, 배열 단계를
    실행하도록 적응되는, 재-인코딩되는 비디오 스트림의 실시간 시각 검사를 위한 장치.
  11. 제 10 항에 있어서,
    상기 장치는, 상기 비디오 스트림의 각 부분을 크기 조정하기 위해 상기 비디오 스트림의 상기 수신되고 디코딩된 부분 또는 상기 비디오 스트림의 상기 수신되고 대응하는 재-인코딩된 부분 상에 크기 조정하는 루틴을 실행하여 디스플레이된 이미지가 동일한 치수를 포함하도록 추가로 적응되는, 재-인코딩되는 비디오 스트림의 실시간 시각 검사를 위한 장치.
  12. 제 10 항에 있어서,
    상기 메모리는, 상기 결합되고 디코딩된 비디오 프레임 및 대응하는 재-인코딩된 비디오 프레임을 저장하는 와이드 프레임의 버퍼풀을 포함하는, 재-인코딩되는 비디오 스트림의 실시간 시각 검사를 위한 장치.
  13. 제 12 항에 있어서,
    수신된 비디오 프레임를 위한 순서를 한정하기 위해 상기 버퍼풀의 와이드 프레임을 위한 큐가 구현되는, 재-인코딩되는 비디오 스트림의 실시간 시각 검사를 위한 장치.
  14. 제 12 항에 있어서,
    상기 장치는, 수신된 디코딩 비디오 프레임 및 수신된 대응 재-인코딩 비디오 프레임을 각 결합된 비디오 프레임으로 배열하여 나란히 나타내게 하는, 재-인코딩되는 비디오 스트림의 실시간 시각 검사를 위한 장치.
  15. 제 12 항에 있어서,
    상기 장치는, 수신된 디코딩 비디오 프레임 및 수신된 대응하는 재-인코딩 비디오 프레임을 각 결합된 비디오 프레임으로 배열하여, 비디오 프레임이 서로에 대하여 x-축을 따라 반전되어 나타나는, 재-인코딩되는 비디오 스트림의 실시간 시각 검사를 위한 장치.
  16. 제 12 항에 있어서,
    상기 장치는, 수신된 디코딩 비디오 프레임 및 수신된 대응 재-인코딩 비디오 프레임을 각 결합된 비디오 프레임으로 배열하여 디코딩된 비디오 프레임의 절반은 대응하는 재-인코딩 비디오 프레임의 각 절반 다음에 나타나는, 재-인코딩되는 비디오 스트림의 실시간 시각 검사를 위한 장치.
  17. 비디오 스트림이 제 2 비디오 포맷으로 재-인코딩될 때, 비디오 스트림의 실시간 시각 검사를 위한 시스템으로서,
    수신된 비디오 스트림을 디코딩하는 비디오 디코더와,
    상기 디코딩된 비디오 스트림을 적어도 제 1 부분과 제 2 부분으로 분리하는 스트림 분리기로서, 상기 제 1 및 제 2 부분은 동일한 스트림인, 스트림 분리기와,
    상기 디코딩되고 분리된 비디오 스트림의 제 1 부분을 수신하고, 상기 디코딩되고 분리된 비디오 스트림의 수신된 제 1 부분을 상기 제 2 비디오 포맷으로 재-인코딩하는 인코더와,
    프로세서와 메모리를 포함하는 비디오 믹서기로서,
    상기 디코딩되고 분리된 비디오 스트림의 제 2 부분을 수신하는 단계;
    상기 인코더로부터 상기 비디오 스트림의 재-인코딩된 제 1 부분을 수신하는 단계; 및
    상기 분리된 비디오 스트림의 제 2 부분의 디코딩된 비디오의 한 프레임 및 상기 재-인코딩된 비디오의 대응하는 한 프레임을 결합된 하나의 비디오 프레임에 배열하여, 상기 디코딩된 비디오 프레임과 상기 대응하는 재-인코딩된 비디오 프레임이 상기 결합된 비디오 프레임에 함께 나타나도록 하는 단계를
    실행하도록 적응되는, 비디오 믹서기와,
    상기 디코딩된 비디오의 프레임과 상기 재-인코딩된 비디오의 대응 프레임을 상기 결합된 비디오 프레임 내에 디스플레이하는 디스플레이 디바이스
    를 포함하는, 비디오 스트림의 실시간 시각 검사를 위한 시스템.
  18. 제 17 항에 있어서,
    상기 비디오 믹서기는, 상기 비디오 스트림의 각 부분을 크기 조정하기 위해 상기 비디오 스트림의 상기 수신되고 디코딩된 부분 또는 상기 비디오 스트림의 상기 대응하는 재-인코딩된 부분 상에 크기 조정하는 루틴을 실행하여 디스플레이된 이미지가 실질적으로 동일한 치수를 포함하도록 추가로 적응되는, 비디오 스트림의 실시간 시각 검사를 위한 시스템.
  19. 제 17 항에 있어서,
    상기 비디오 믹서기는, 수신된 디코딩 비디오 프레임 및 수신된 대응 재-인코딩 비디오 프레임을 각 결합된 비디오 프레임으로 배열하여, 상기 디스플레이 디바이스에 의해 디스플레이되는 경우, 상기 수신된 비디오 프레임이 나란히 나타나는, 비디오 스트림의 실시간 시각 검사를 위한 시스템.
  20. 제 17 항에 있어서,
    상기 비디오 믹서기는, 수신된 디코딩 비디오 프레임 및 수신된 대응하는 재-인코딩 비디오 프레임을 각 결합된 비디오 프레임으로 배열하여 상기 디스플레이 디바이스에 의해 디스플레이되는 경우, 비디오 프레임이 서로에 대하여 x-축을 따라 반전되어 나타나는, 비디오 스트림의 실시간 시각 검사를 위한 시스템.
  21. 제 17 항에 있어서,
    상기 비디오 믹서기는, 수신된 디코딩 비디오 프레임 및 수신된 대응 재-인코딩 프레임을 각 결합된 비디오 프레임으로 배열하여, 디코딩된 비디오 프레임의 절반이 상기 디스플레이 디바이스에 의해 디스플레이되는 경우, 대응하는 재-인코딩된 비디오 프레임의 각 절반 다음에 나타나는, 비디오 스트림의 실시간 시각 검사를 위한 시스템.
KR1020077016687A 2005-01-24 2005-05-31 코드변환된 비디오의 시각 검사를 위한 방법, 장치 및 시스템 KR101150872B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US64571605P 2005-01-24 2005-01-24
US60/645,716 2005-01-24
PCT/US2005/018822 WO2006080943A1 (en) 2005-01-24 2005-05-31 Method, apparatus and system for visual inspection of transcoded video

Publications (2)

Publication Number Publication Date
KR20070097074A KR20070097074A (ko) 2007-10-02
KR101150872B1 true KR101150872B1 (ko) 2012-06-13

Family

ID=35134389

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020077016687A KR101150872B1 (ko) 2005-01-24 2005-05-31 코드변환된 비디오의 시각 검사를 위한 방법, 장치 및 시스템

Country Status (9)

Country Link
US (1) US9185403B2 (ko)
EP (1) EP1842378A1 (ko)
JP (1) JP4756049B2 (ko)
KR (1) KR101150872B1 (ko)
CN (1) CN101107859B (ko)
BR (1) BRPI0519825A2 (ko)
CA (1) CA2595454C (ko)
HK (1) HK1109003A1 (ko)
WO (1) WO2006080943A1 (ko)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120314023A1 (en) * 2010-02-24 2012-12-13 Jesus Barcons-Palau Split screen for 3d
KR101833942B1 (ko) * 2017-01-05 2018-03-05 네이버 주식회사 실시간 영상 합성을 위한 트랜스코더
CN106803991A (zh) * 2017-02-14 2017-06-06 北京时间股份有限公司 视频处理方法及装置
CN110730364B (zh) * 2019-10-14 2021-08-31 广州微算互联信息技术有限公司 一种云手机数据传输方法、装置及存储介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001036844A (ja) 1999-07-16 2001-02-09 Nec Corp 画質確認装置、画質確認方法及びそのプログラムを記録した記録媒体

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5374963A (en) * 1990-06-01 1994-12-20 Thomson Consumer Electronics, Inc. Picture resolution enhancement with dithering and dedithering
US5262856A (en) * 1992-06-04 1993-11-16 Massachusetts Institute Of Technology Video image compositing techniques
US5243447A (en) * 1992-06-19 1993-09-07 Intel Corporation Enhanced single frame buffer display system
JPH0698288A (ja) * 1992-09-10 1994-04-08 Nikon Corp 静止画記憶装置
US5319793A (en) * 1992-10-21 1994-06-07 International Business Machines Corporation Method and apparatus for improved compression and recording of color video data in a personal computer using a plurality of lookup tables
US5450140A (en) * 1993-04-21 1995-09-12 Washino; Kinya Personal-computer-based video production system
US5625410A (en) * 1993-04-21 1997-04-29 Kinywa Washino Video monitoring and conferencing system
US5365277A (en) * 1993-10-08 1994-11-15 Genesis Microchip Inc. Apparatus with reduction/magnification image size processing for producing low-pass filtered images
WO1995028795A2 (en) * 1994-04-15 1995-10-26 Philips Electronics N.V. Arrangement for decoding digital video signals
EP0781485B1 (en) * 1994-09-16 2004-03-03 SBC Technology Resources, Inc. Versatile multipoint video composition and bridging system
JP4014263B2 (ja) * 1997-10-01 2007-11-28 松下電器産業株式会社 映像信号変換装置及び映像信号変換方法
US6597961B1 (en) * 1999-04-27 2003-07-22 Realnetworks, Inc. System and method for concealing errors in an audio transmission
US7194032B1 (en) * 1999-09-03 2007-03-20 Equator Technologies, Inc. Circuit and method for modifying a region of an encoded image
US6614441B1 (en) * 2000-01-07 2003-09-02 Intel Corporation Method and mechanism of automatic video buffer flipping and display sequence management
TW519840B (en) * 2000-06-02 2003-02-01 Sony Corp Image coding apparatus and method, image decoding apparatus and method, and recording medium
JP3825615B2 (ja) * 2000-08-11 2006-09-27 株式会社東芝 動画像符号化装置および動画像符号化方法およびプログラムを記録した媒体
JPWO2002067039A1 (ja) * 2001-02-19 2004-06-24 オリンパス株式会社 画像比較装置、画像比較方法及び画像比較をコンピュータに実行させるプログラム
JP2006237656A (ja) * 2003-02-28 2006-09-07 Secom Co Ltd 符号化信号分離・合成装置、差分符号化信号生成装置、差分符号化信号抽出装置、符号化信号分離・合成方法、符号化信号分離・合成プログラム
JP4066852B2 (ja) * 2003-03-04 2008-03-26 株式会社日立製作所 ビデオ符号化方式変換装置、変換方法、およびこれを用いたビデオ記録再生装置
US7133051B2 (en) * 2003-09-19 2006-11-07 Microsoft Corporation Full scale video with overlaid graphical user interface and scaled image
KR100526189B1 (ko) * 2004-02-14 2005-11-03 삼성전자주식회사 트랜스코딩 전후에 타이밍 파라미터를 일정하게유지시키는 트랜스코딩 시스템 및 방법
JP3753726B1 (ja) * 2004-10-13 2006-03-08 シャープ株式会社 動画像再符号化装置、動画像編集装置、プログラム、及び記録媒体

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001036844A (ja) 1999-07-16 2001-02-09 Nec Corp 画質確認装置、画質確認方法及びそのプログラムを記録した記録媒体

Also Published As

Publication number Publication date
JP4756049B2 (ja) 2011-08-24
KR20070097074A (ko) 2007-10-02
BRPI0519825A2 (pt) 2009-03-17
HK1109003A1 (en) 2008-05-23
EP1842378A1 (en) 2007-10-10
US9185403B2 (en) 2015-11-10
WO2006080943A1 (en) 2006-08-03
CN101107859B (zh) 2010-11-10
US20080144727A1 (en) 2008-06-19
CA2595454A1 (en) 2006-08-03
CA2595454C (en) 2015-01-20
CN101107859A (zh) 2008-01-16
JP2008529348A (ja) 2008-07-31

Similar Documents

Publication Publication Date Title
TWI603609B (zh) 簡化視訊隨機存取之限制及單元類型
US5706451A (en) Displaying a subsampled video image on a computer display
US8890874B2 (en) Changing visual content communication
JP7376647B2 (ja) 信頼性レベル及び混合コンテンツ情報を含む付加拡張情報
WO2020108091A1 (zh) 视频处理方法、装置、电子设备及存储介质
KR101150872B1 (ko) 코드변환된 비디오의 시각 검사를 위한 방법, 장치 및 시스템
KR20070105999A (ko) 고속 디코더
KR101090981B1 (ko) 3차원 영상신호 처리방법 및 이를 구현하는 휴대형 3차원 디스플레이 장치
CN115956364A (zh) 集成用于分层视频编码的解码器
CN102308319A (zh) 用于编码数据与三维渲染的系统与格式
US20120314023A1 (en) Split screen for 3d
CN109275019A (zh) 在播放3d视频时对当前显示画面截图的处理方法及装置
JP2006005527A (ja) 電子透かし埋め込みプログラム
TWI568247B (zh) 將視訊影像解碼的方法與設備
US11833419B2 (en) Method and apparatus for cloud gaming
KR101970787B1 (ko) 안드로이드 플랫폼 기반 듀얼 메모리를 이용한 비디오 디코딩 장치 및 방법
JP4393425B2 (ja) 映像機器、映像記録方法および映像再生方法
US7477264B2 (en) Compositing external images into a multimedia rendering pipeline
US7558718B2 (en) Method and system for design verification of video processing systems with unbalanced data flow
JP2001128194A (ja) 立体映像処理装置、立体映像処理方法及び記憶媒体
GB2483342A (en) Reducing reference frame data store bandwidth requirements in video decoders
CN113660529A (zh) 基于Tile编码的视频拼接、编码、解码方法及装置
JP2008066973A (ja) 画像符号化装置及び画像符号化方法並びに画像復号化装置及び画像復号化方法
JP2007329906A (ja) ビデオデータの生成および圧縮
JPWO2005117434A1 (ja) デジタル画像入力装置及びその方法

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20150416

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee