KR20030073254A - 시공간적 복잡도를 고려한 적응적 동영상 부호화 방법 및그 장치 - Google Patents

시공간적 복잡도를 고려한 적응적 동영상 부호화 방법 및그 장치 Download PDF

Info

Publication number
KR20030073254A
KR20030073254A KR1020020012727A KR20020012727A KR20030073254A KR 20030073254 A KR20030073254 A KR 20030073254A KR 1020020012727 A KR1020020012727 A KR 1020020012727A KR 20020012727 A KR20020012727 A KR 20020012727A KR 20030073254 A KR20030073254 A KR 20030073254A
Authority
KR
South Korea
Prior art keywords
image data
input image
complexity
resolution
spatial complexity
Prior art date
Application number
KR1020020012727A
Other languages
English (en)
Other versions
KR100850705B1 (ko
Inventor
송병철
천강욱
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR20020012727A priority Critical patent/KR100850705B1/ko
Priority to JP2003015419A priority patent/JP2003274415A/ja
Priority to CNB031034284A priority patent/CN1283100C/zh
Priority to DE2003103928 priority patent/DE10303928A1/de
Priority to US10/357,370 priority patent/US7280708B2/en
Publication of KR20030073254A publication Critical patent/KR20030073254A/ko
Priority to US11/418,261 priority patent/US20060210184A1/en
Application granted granted Critical
Publication of KR100850705B1 publication Critical patent/KR100850705B1/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/115—Selection of the code volume for a coding unit prior to coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139—Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/14—Coding unit complexity, e.g. amount of activity or edge presence estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/587—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Abstract

영상의 시공간적 복잡도를 고려하여 적응적으로 동영상의 부호화를 수행하기 위한 적응적 동영상 부호화 방법 및 그 장치가 개시되어 있다. 본 발명은 입력 영상의 시공간적 복잡도를 고려하여, 시공간적 해상도 및 프레임 레이트를 달리하여 부호화를 수행함으로써, 고효율로 영상 데이터를 저장할 수 있도록 하기 위한 것으로, 이를 위해 입력되는 영상 데이터의 시공간적 복잡도를 계산하는 단계와; 계산된 시공간적 복잡도와 선정된 임계값을 비교하여 해상도 및 프레임 레이트를 결정하는 단계와; 상기 결정된 해상도 및 프레임 레이트에 기초하여 입력되는 영상 데이터의 해상도 및 프레임 레이트를 변환하는 단계를 포함한다.

Description

시공간적 복잡도를 고려한 적응적 동영상 부호화 방법 및 그 장치{Method for adaptive encoding motion image based on the temperal and spatial complexity and apparatus thereof}
본 발명은 동영상 부호화 장치 및 방법에 관한 것으로서, 특히 입력 영상의시공간적 복잡도를 고려하여 적응적으로 동영상의 부호화를 수행하기 위한 적응적 동영상 부호화 방법 및 그 장치에 관한 것이다.
최근 DVR(digital video recorder)이나 PVR(personal video recorder)이 대중화 되면서, 영상 압축에 대한 연구 개발이 활발해지고 있다. 기존의 DVR이나 PVR에서는 입력 영상의 특성, 즉 시공간적 복잡도를 고려함이 없이 영상을 고정된 해상도로만 압축하기 때문에, 압축의 효율성이 떨어지는 문제점이 있었다.
도 1은 종래의 동영상 인코더를 도시하는 블록도이다.
먼저, 입력되는 영상 데이터는 8×8 화소의 블록으로 분해된다. DCT(Discrete Cosine Transform)부(110)는 공간적 상관성을 제거하기 위해 8 ×8 화소 블록 단위로 입력되는 영상 데이터에 대해 DCT 연산을 수행한다. 양자화부(Quantization: Q)(120)는 DCT부(120)에서 얻어진 DCT 계수에 대해 양자화를 수행하여, 몇 개의 대표 값으로 표현함으로써, 고효율 손실 압축을 수행한다. 가변 길이 부호화부(variable length coding: VLC)(130)는 양자화 처리된 DCT 변환 계수들에 대해 엔트로피 부호화를 수행하고, 엔트로피 부호화된 데이터 스트림을 출력한다.
역양자화부(Inverse Quantization: IQ)(140)는 양자화부(120)에서 양자화된 영상 데이터를 역양자화한다. 역DCT부(150)는 역양자화부(140)에서 역양자화된 영상 데이터에 대해 IDCT 변환을 수행한다. 프레임 메모리부(160)는 IDCT부(150)에서 IDCT 변환된된 영상 데이터를 프레임 단위로 저장한다. 움직임 추정부(Motion Estimation: ME)(170)는 입력되는 현재 프레임의 영상 데이터와 프레임메모리부(160)에 저장된 이전 프레임의 영상 데이터를 이용하여 시간적 상관성을 제거하기 위해 사용된다.
종래의 DVR이나 PVR에서는 데이터 압축을 위해, 도 1에 도시된 바와 같은 MPEG-2 부호기를 사용하였다. 입력되는 데이터가 압축되지 않은 데이터이면, MPEG-2 부호기를 통해 압축하여, HDD나 DVD와 같은 저장 매체에 비트 스트림을 저장하였다. 입력 영상 데이터가 압축된 비트 스트림인 경우에는, 도 2에 도시된 동영상 트랜스 코더를 이용하여 원하는 조건의 MPEG-2 스트림을 만들기 위해 MPEG-2 동영상 복호화를 수행한 후, 소정의 스케일 및 포맷 변환 후 MPEG-2 동영상 부호화하였다.
도 2는 종래의 동영상 트랜스 코더를 도시하는 블록도이다.
입력 데이터가 압축된 비트 스트림의 형태인 경우, 가변 길이 복호화부(222), 역양자화부(224), IDCT부(Inverse Discrete Cosine Transform: IDCT)(226), 프레임 메모리(228), 및 움직임 보상부(Motion Compensation: MC)(230)로 이루어진 동영상 디코더(220)에 의해, 입력 데이터를 복호하고, 원하는 조건의 MPEG-2 스트림을 만들기 위해 도 1에 도시된 동영상 인코더와 동일한 MPEG-2 인코더를 이용하여 주어진 해상도로 동영상을 인코딩한다. 이와 같은 과정을 트랜스 코딩(transcoding) 이라고 하며, 트랜스 코딩시 스케일 및 포맷 변환부(240)를 이용하여, 필요한 경우 동영상 디코더(220)에 의해 복호화된 영상의 스케일을 줄인다든지(down-scaling) 또는 스캔 포맷을 변환한 후, MPEG-2 인코더(260)를 사용하여, 주어진 해상도로 MPEG-2 인코딩을 수행한다.
이와 같이, 종래 기술에서는 MPEG-2 부호화시 항상 동일한 해상도로 인코딩을 수행한다. 따라서, 입력되는 동영상의 특성에 따라 공간적 복잡도가 작거나 큰 경우에도 항상 동일한 해상도로 인코딩을 수행하며, 또한 입력되는 동영상이 시간적으로 변화가 거의 없는 경우에도 30Hz의 높은 프레임 레이트(frame rate)를 유지해야 하기 때문에, 인코딩의 효율성이 떨어지게 되는 문제점이 있었다.
본 발명이 이루고자하는 기술적 과제는 입력 동영상의 특성을 고려하여 적응적으로 동영상 부호화를 수행하여, 부호화 효율을 향상시키기 위한 적응적 동영상 부호화 방법 및 장치를 제공하기 위한 것이다.
본 발명이 이루고자 하는 또 다른 기술적 과제는 동영상을 MPEG-2 압축 기법을 이용하여 HDD나 DVD에 저장하는 경우, 저장의 효율성을 극대화하기 위한 적응적 동영상 부호화 방법 및 장치를 제공하기 위한 것이다.
도 1은 종래의 동영상 부호화 시스템을 도시한 블록도이다.
도 2는 종래의 트랜스 코딩 장치를 도시하는 블록도이다.
도 3은 본 발명에 따른 공간적 복잡도를 고려한 적응적 동영상 부호화 장치를 도시하는 블록도이다.
도 4는 본 발명에 따른 공간적 복잡도를 고려한 적응적 트랜스 코딩 장치를 도시하는 블록도이다.
도 5는 본 발명에 따른 시간적 복잡도를 고려한 적응적 동영상 부호화 장치를 도시하는 블록도이다.
도 6은 본 발명에 따른 시간적 복잡도를 고려한 적응적 동영상 부호화 장치를 도시하는 블록도이다.
상기의 기술적 과제를 해결하기 위하여, 본 발명의 공간적 복잡도에 따른 적응적 영상 부호화 방법은 (a) 입력되는 영상 데이터의 공간적 복잡도를 계산하는 단계와; (b) 상기 계산된 공간적 복잡도와 선정된 임계값을 비교하여 해상도를 결정하는 단계와; (c) 상기 결정된 해상도에 기초하여 입력되는 영상 데이터의 해상도를 변환하는 단계를 포함하는 것을 특징으로 한다.
상기 기술적 과제를 해결하기 위한, 본 발명에 따른 공간적 복잡도에 따른 적응적 영상 부호화 장치는 (a) 입력되는 영상 데이터의 공간적 복잡도를 계산하기위한 공간적 복잡도 계산부와; (b) 상기 계산된 공간적 복잡도와 선정된 임계값을 비교하여 해상도를 결정하기 위한 해상도 결정부와; (c) 상기 결정된 해상도에 기초하여 입력되는 영상 데이터의 해상도를 변환하기 위한 해상도 변환부를 포함하는 것을 특징으로 한다.
상기 기술적 과제를 해결하기 위한, 본 발명에 따른 시간적 복잡도에 따른 적응적 동영상 부호화 방법은 (a) 입력되는 영상 데이터의 시간적 복잡도를 계산하는 단계와; (b) 상기 계산된 시간적 복잡도와 선정된 임계값을 비교하여 프레임 레이트를 결정하는 단계와; (c) 상기 결정된 프레임 레이트에 기초하여 입력되는 영상 데이터의 프레임 레이트를 변환하는 단계를 포함하는 것을 특징으로 한다.
상기 기술적 과제를 해결하기 위한, 본 발명에 따른 시간적 복잡도에 따른 적응적 동영상 부호화 장치는 (a) 입력되는 영상 데이터의 시간적 복잡도를 계산하기 위한 시간적 복잡도 계산부와; (b) 상기 계산된 시간적 복잡도와 선정된 임계값을 비교하여 프레임 레이트를 결정하기 위한 프레임 레이트 결정부와; (c) 상기 결정된 프레임 레이트에 기초하여 입력되는 영상 데이터의 프레임 레이트를 변환하기 위한 프레임 레이트 변환부를 포함하는 것을 특징으로 한다.
최근 DVR 이나 PVR에서는 영상 압축에 대한 연구 개발이 활발하다. 저장을 목적으로 하는 영상 압축의 핵심은 주어진 영상을 얼마나 고효율로 압축하느냐 이다. 기존의 DVR이나 PVR에서는 영상을 정해진 해상도로만 압축하여 저장한다.
본 발명은 이와 같이, 영상을 정해진 해상도로만 압축하여 저장함으로써 발생하는 문제점을 해결하기 위한 것으로서, 본 발명의 일 실시예에 따르면, 입력 동영상의 특성에 따라 시공간적 복잡도가 작은 경우 및 큰 경우가 존재하는 것을 고려하여, GOP 단위로 입력 영상의 시공간적 복잡도에 따라, 시공간적 해상도를 달리하여 부호화하는 방식을 채용하여, 고효율로 저장할 수 있도록 하는 것을 기술적 특징으로 하고 있다.
공간적 복잡도가 작은 GOP는 공간적 해상도를 떨어뜨려 부호화하고, 시간적 복잡도, 즉 움직임이 거의 없는 GOP에 대해서는 프레임 레이트를 떨어뜨려 부호화하여 효율을 높인다.
이하 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 설명하기로 한다.
도 3은 본 발명에 따른 공간적 복잡도를 고려한 적응적 동영상 부호화 장치의 전체 블록도이다.
본 발명에 따른 동영상 부호화 장치는 공간적 복잡도(spatial complexity) 계산부(320), 해상도 결정부(340), 해상도 변환부(360), 및 인코더부(380)가 단계적으로, 즉 캐스케이드(cascade) 방식으로 연결된 구성을 가진다.
공간적 복잡도 계산부(320)는 GOP 단위의 입력 영상에 대해 8 ×8 블록단위로 분산값을 구하여 평균을 계산한다. 본 발명에서는, 평균 분산값은 GOP 단위로 이루어졌지만, 선택적으로 다른 단위에 대해서 평균 분산값을 구하는 것도 가능하다.
해상도 결정부(340)는 평균 분산값 계산부(320)에서 계산된 평균 분산값과 선정된 문턱값을 비교하여, GOP 단위로 해상도를 결정한다. 예를 들어, 평균 분산값 계산부에서 계산된 평균 분산값이 선정된 문턱값 보다 큰 경우, 이 GOP는 해상도를 원래의 해상도로 하여 MPEG-2 부호화를 수행한다. 또한, 평균 분산값 계산부(320)에서 계산된 평균 분산값이 선정된 문턱값 보다 작은 경우에는, 이 GOP의 각 픽쳐는 해상도를 줄여서, 예를 들어 각 방향으로 1/2 줄여서, MPEG-2 부호화를 수행한다.
본 실시예에서는 GOP를 단위로 공간적 복잡도를 계산하여 해상도를 결정하였지만, 선택적으로 다른 단위, 예를 들어 시퀀스(sequence) 단위로 공간적 복잡도를 계산하여 해상도를 결정하도록 하는 것도 가능하다. 또한, 본 실시예에서는 MPEG-2 부호화를 위해 해상도를 변환하고 있지만, 선택적으로 MPEG-2 이외의 다른 부호화 방식에도 적용될 수 있다.
여기에서, 선정된 문턱값은 버퍼, 메모리 용량 등과 같은 시스템 환경 등을 고려하여, 초기에 설정되거나, 입력 영상의 종류에 따라 사용자가 임의로 설정하는 것도 가능하다.
또한, 선택적으로 문턱값은 고정값으로 선정하는 방식 대신, 적응적으로 결정되도록 하는 것도 가능하다. 예를 들어, 이전의 8 ×8 블록 단위 분산값을 모두 누적 평균을 내서 이 값을 기준으로 해상도를 줄일지 유지할 지 여부를 판단하도록 하는 것도 가능하다. 예를 들어, 단위 분산 값이 누적 평균보다 큰 경우에는 GOP는 해상도를 원래 원하는 해상도로 하여 MPEG-2 부호화를 수행한다. 또한, 단위 분산 값이 누적 평균 보다 작은 경우에는 GOP의 각 픽쳐는 해상도를 줄여서, 예를 들면 각 방향으로 1/2 줄여서 MPEG-2 부호화를 수행한다. 선택적으로, 누적 평균×α를 문턱값으로 결정하는 것도 가능하다. 이 경우, 상수값 α를 적절히 결정함으로써, 해상도를 줄여서 부호화되는 GOP의 비율을 조절할 수 있다.
상기와 같은 방식을 수행하는 경우, 처음 1 GOP의 지연 이후부터 부호화를 시작할 수 있기 때문에, 1 GOP의 지연(delay)은 불가피하게 된다. 이러한 지연을 피하거나 줄이기 위해서 GOP의 첫 픽쳐에 대해서만 평균 분산값을 구하여 해상도를 결정하도록 하는 것도 가능하다. 이는, 성능과 지연의 트레이드-오프(trade-off) 관계를 고려하여 사용자가 적절히 결정할 수 있다.
도 4는 본 발명에 따른 공간적 복잡도를 고려한 적응적 동영상 트랜스 코딩 장치를 도시하는 도면이다.
본 발명에 따른 동영상 트랜스 코딩 장치는 가변 길이 부호화부(422), 역양자화부(424), IDCT부(426), 프레임 메모리(428), 및 움직임 보상부(Motion Compensation: MC)(230)로 이루어진 동영상 디코더(420), 공간적 복잡도 계산부(440), 해상도 변환부(460), 및 인코더부(480)으로 이루어진다. 여기에서, 동영상 디코더(420) 및 인코더부(480)는 도 2에 도시된 종래의 동영상 트랜스 코딩 장치와 동일한 기능을 수행하므로 상세한 설명은 생략한다.
입력되는 영상 데이터가 압축 스트림인 경우에는, 입력 영상 데이터는 가변 길이 부호화부(422)에서 복호화된다.
공간적 복잡도 계산부(440)는 I, B, P 등 프레임 타입에 관계없이, 입력 영상에 대해 8 ×8 블록단위로 공간 영역에서 분산값을 구하여 GOP 단위로 평균을 계산한다. 본 발명에서는, 평균 분산값은 GOP 단위로 이루어졌지만, 선택적으로 다른 단위, 예를 들어 시퀀스(sequence) 단위에 대해서 평균 분산값을 구하는 것도 가능하다.
해상도 결정부(450)는 공간적 복잡도 계산부(440)에서 계산된 평균 분산 값과 선정된 문턱값과 비교하여 현재 GOP의 해상도를 결정한다.
예를 들어, 평균 분산값 계산부(440) 계산된 평균 분산값이 선정된 문턱값 보다 큰 경우, 이 GOP는 해상도를 원래의 해상도로 하여 MPEG-2 부호화를 수행한다. 또한, 평균 분산값 계산부(440)에서 계산된 평균 분산값이 선정된 문턱값 보다 큰 경우에는, 이 GOP의 각 픽쳐는 해상도를 줄여서, 예를 들어 각 방향으로 1/2 줄여서, MPEG-2 부호화를 수행한다.
본 실시예에서는 GOP를 단위로 공간적 복잡도를 계산하여 해상도를 결정하였지만, 선택적으로 다른 단위, 예를 들어 시퀀스 단위로 공간적 복잡도를 계산하여 해상도를 결정하도록 하는 것도 가능하다. 또한, 본 실시예에서는 MPEG-2 부호화를 위해 해상도를 변환하고 있지만, 선택적으로 MPEG-2 이외의 다른 부호화 방식에도 적용될 수 있다.
여기에서, 선정된 문턱값은 버퍼, 메모리 용량 등과 같은 시스템 환경 등을 고려하여, 초기에 설정되거나, 입력 영상의 종류에 따라 사용자가 임의로 설정하는 것도 가능하다.
또한, 선택적으로 문턱값을 고정값으로 선정하는 방식 대신, 적응적으로 결정되도록 하는 것도 가능하다. 예를 들어, 이전의 8 ×8 블록 단위 분산값을 모두 누적 평균을 내서 이 값을 기준으로 해상도를 줄일지 유지할 지 여부를 판단하도록하는 것도 가능하다.
상기와 같은 방식을 수행하는 경우, 처음 1 GOP의 지연 이후부터 부호화를 시작할 수 있기 때문에, 1 GOP의 지연은 불가피하게 된다. 이러한 지연을 피하거나 줄이기 위해서 GOP의 첫 픽쳐에 대해서만 평균 분산값을 구하여 해상도를 결정하도록 하는 것도 가능하다. 이는, 성능과 지연의 트레이드-오프 관계를 고려하여 사용자가 적절히 결정할 수 있다.
상기 방식은 트랜스 코딩 방식, 즉 저장의 효율성을 높이기 위해 비트 스트림을 변형하는 것인데, 원래 트랜스 코딩의 목적에 맞게 다른 비트율이나 다른 해상도나 다른 표준으로 변형하여 저장하는 것도 가능하다.
또한, 상기 설명한 공간적 복잡도를 고려하여 해상도를 달리하여 부호화함으로써, 고효율로 저장하는 것과 마찬가지로, 시간적 복잡도를 고려하여 프레임 레이트를 달리함으로써, 고효율로 저장하는 것이 가능하다.
도 5는 본 발명에 따른 시간적 복잡도를 고려한 적응적 동영상 부호화 장치를 도시한다.
본 발명에 따른 동영상 부호화 장치는 움직임 활성도(motion activity) 계산부(520), 프레임 레이트(frame rate) 결정부(540), 프레임 레이트 변환부(560), 및 인코더부(580)로 이루어진다.
움직임 활성도 계산부(520)에서는 GOP 내의 모든 매크로 블록(macro block)에 대해 움직임 벡터를 구하여, 이로부터 움직임 활성도를 계산하고, 매크로 블록 들의 평균 움직임 활성도를 계산한다. 본 실시예에서는, 하나의 매크로 블록의 움직임 벡터(MV)가 (MV1, MV2) 인 경우, 매크로 블록의 움직임 활성도는 MV12+ MV22로 정의한다.
프레임 레이트 결정부(540)에서는 움직임 활성도 계산부(520)에서 계산된 평균 움직임 활성도와 선정된 문턱값을 비교하여, GOP에 대한 프레임 레이트를 결정하여 부호화한다. 상기 문턱값을 적절히 조절함으로써, 프레임 레이트 조절 방식은 다양하게 이루어질 수 있다. 또한, 여러 문턱값을 두어 움직임 활성도와 비교 후 프레임 레이트를 조절하는 것도 가능하다. 예를 들면, 문턱값을 10, 20으로 두고, 움직임 활성도가 10보다 작은 경우, 10Hz, 20보다 작은 경우에는 20Hz, 20보다 큰 경우에는 30Hz로 하는 방식이 있다. 하지만, 움직임이 갑작스럽게 변화(motion jerkiness)하는 문제를 방지하기 위해서는 움직임 활성도가 거의 0에 가까운 경우에만 해당 GOP의 프레임 레이트를 상대적으로 낮게 조절하는 것이 바람직하다.
프레임 레이트 변환부(560)에서는 프레임 레이트 결정부(540)에서 결정된 프레임 레이트에 따라 입력 영상 데이터의 프레임 레이트를 조절하여, 인코더부(580)로 출력한다.
도 6은 본 발명에 따른 시간적 복잡도를 고려한 적응적 동영상 트랜스 코딩 장치를 도시하는 도면이다.
본 발명에 따른 적응적 동영상 트랜스 코딩 장치는 가변 길이 부호화부(622), 역양자화부(624), IDCT부(626), 프레임 메모리(628), 및 움직임 보상부(630)로 이루어진 동영상 디코더(620), 움직임 활성도 계산부(640), 스케일 변환부(660), 프레임 레이트 결정부(650), 및 인코더부(680)로 이루어진다.
입력되는 영상 데이터가 압축 스트림인 경우에는, 움직임 활성도 계산부(640)는 압축 스트림의 복호화 단계에서 얻어지는 움직임 벡터 정보를 이용하여, GOP 단위로 움직임 활성도를 계산한다. 예를 들어, 도 6에 도시된 바와 같이 본 발명에 따른 실시예에서는 움직임 활성도 계산부(640)는 가변 길이 부호화부(522)로부터 출력되는 움직인 벡터(MV)를 입력 받아 이로부터 각 매크로 블록의 움직임 활성도를 계산한다.
MPEG-2 스트림에서는 시퀀스 헤더(sequence header) 다음에 GOP 헤더가 오는데, 원래 시퀀스 헤더는 전체 시퀀스에 대해 맨 앞에 한번 놓이고, GOP 헤더는 GOP 마다 오게 된다. 그리고, 영상 크기 정보는 시퀀스 헤더에만 존재한다. 그런데, 실제 방송에서 MPEG-2 스트림을 전송할 때는 GOP 단위로 시퀀스 헤더를 보낸다. 따라서, 부호화시 GOP 단위로 시퀀스 헤더를 넣어 스트림을 만들면, 아무런 문제없이 복호화를 수행하는 것이 가능하게 된다.
본 발명은 상술한 실시예에 한정되지 않으며, 본 발명의 사상내에서 당업자에 의한 변형이 가능함은 물론이다.
본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 하드디스크, 플로피디스크, 플래쉬 메모리, 광데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다.또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드로서 저장되고 실행될 수 있다.
상술한 바와 같이 본 발명에 의하면, GOP 단위로 영상의 시공간적 복잡도를 계산하여, 상대적으로 시공간적 복잡도가 낮는 GOP는 원래 해상도보다 작게 낮게 부호화하고, 상대적으로 시공간적 복잡도가 높은 GOP는 원래 해상도대로 부호화하도록 함으로써, 저장 매체에 동영상을 보다 효율적으로 저장하는 것이 가능하게 된다.

Claims (28)

  1. 공간적 복잡도에 따른 적응적 영상 부호화 방법에 있어서,
    (a) 입력되는 영상 데이터의 공간적 복잡도를 계산하는 단계와;
    (b) 상기 계산된 공간적 복잡도와 선정된 임계값을 비교하여 해상도를 결정하는 단계와;
    (c) 상기 결정된 해상도에 기초하여 입력되는 영상 데이터의 해상도를 변환하는 단계를 포함하는 것을 특징으로 하는 적응적 영상 부호화 방법.
  2. 제1항에 있어서, 상기 공간적 복잡도는 입력되는 영상 데이터의 블록 당 평균 분산값에 기초하여 계산되는 것을 특징으로 하는 적응적 영상 부호화 방법.
  3. 제1항에 있어서, 상기 공간적 복잡도를 계산하고, 해상도를 결정하는 단계는 상기 입력되는 영상 데이터의 GOP(group of picture) 단위로 이루어지는 것을 특징으로 하는 적응적 영상 부호화 방법.
  4. 제1항에 있어서, 상기 공간적 복잡도를 계산하고, 해상도를 결정하는 단계는 상기 입력되는 영상 데이터의 시퀀스(sequence) 단위로 이루어지는 것을 특징으로 하는 적응적 영상 부호화 방법.
  5. 제1항 또는 제2항에 있어서, 상기 입력되는 영상 데이터가 압축된 영상 데이터인 경우, 복호화된 데이터로부터 공간적 복잡도를 측정하는 것을 특징으로 하는 적응적 영상 부호화 방법.
  6. 제1항 또는 제2항에 있어서, 상기 입력되는 영상 데이터가 압축된 영상 데이터인 경우, IDCT(inverse discrete cosine transform)된 데이터와 움직임 보상된 데이터로부터 얻어진 분산 값으로부터 공간적 복잡도를 계산하는 것을 특징으로 하는 적응적 영상 부호화 방법.
  7. 공간적 복잡도에 따른 적응적 영상 부호화 장치에 있어서,
    (a) 입력되는 영상 데이터의 공간적 복잡도를 계산하기 위한 공간적 복잡도 계산부와;
    (b) 상기 계산된 공간적 복잡도와 선정된 임계값을 비교하여 해상도를 결정하기 위한 해상도 결정부와;
    (c) 상기 결정된 해상도에 기초하여 입력되는 영상 데이터의 해상도를 변환하기 위한 해상도 변환부를 포함하는 것을 특징으로 하는 적응적 영상 부호화 장치.
  8. 제7항에 있어서, 상기 공간적 복잡도는 입력되는 영상 데이터의 블록 당 평균 분산값에 기초하여 계산되는 것을 특징으로 하는 적응적 영상 부호화 장치.
  9. 제7항에 있어서, 상기 공간적 복잡도의 계산 및 해상도의 결정은 상기 입력되는 영상 데이터의 GOP 단위로 이루어지는 것을 특징으로 하는 적응적 영상 부호화 장치.
  10. 제7항에 있어서, 상기 공간적 복잡도의 계산 및 해상도의 결정은 상기 입력되는 영상 데이터의 시퀀스(sequence) 단위로 이루어지는 것을 특징으로 하는 적응적 영상 부호화 장치.
  11. 제7항 또는 제8항에 있어서, 상기 입력되는 영상 데이터가 압축된 영상 데이터인 경우, 복호화된 데이터로부터 공간적 복잡도를 측정하는 것을 특징으로 하는 적응적 영상 부호화 장치.
  12. 제7항 또는 제8항에 있어서, 상기 입력되는 영상 데이터가 압축된 영상 데이터인 경우, IDCT된 데이터와 움직임 보상된 데이터로부터 얻어진 분산 값으로부터 공간적 복잡도를 계산하는 것을 특징으로 하는 적응적 영상 부호화 장치.
  13. 시간적 복잡도에 따른 적응적 동영상 부호화 방법에 있어서,
    (a) 입력되는 영상 데이터의 시간적 복잡도를 계산하는 단계와;
    (b) 상기 계산된 시간적 복잡도와 선정된 임계값을 비교하여 프레임 레이트를 결정하는 단계와;
    (c) 상기 결정된 프레임 레이트에 기초하여 입력되는 영상 데이터의 프레임 레이트를 변환하는 단계를 포함하는 것을 특징으로 하는 적응적 영상 부호화 방법.
  14. 제13항에 있어서, 상기 시간적 복잡도는 입력되는 영상 데이터의 매크로블록 당 움직임 활성도에 기초하여 계산되는 것을 특징으로 하는 적응적 영상 부호화 방법.
  15. 제14항에 있어서, 상기 움직임 활성도는 상기 매크로블록의 움직임 벡터의 크기인 것을 특징으로 하는 적응적 영상 부호화 방법.
  16. 제15항에 있어서, 상기 움직임 활성도는 매크로블록의 움직임 벡터가(MV1,MV2)인 경우, MV12+MV22인 것을 특징으로 하는 적응적 영상 부호화 방법.
  17. 제13항에 있어서, 상기 시간적 복잡도를 계산하고, 프레임 레이트를 결정하는 단계는 입력 영상 데이터의 GOP 단위로 이루어지는 것을 특징으로 하는 적응적 영상 부호화 방법.
  18. 제13항에 있어서, 상기 시간적 복잡도를 계산하고, 프레임 레이트를 결정하는 단계는 입력 영상 데이터의 시퀀스 단위로 이루어지는 것을 특징으로 하는 적응적 영상 부호화 방법.
  19. 제14항에 있어서, 상기 입력되는 영상 데이터가 압축된 영상 데이터인 경우, 복호화 단계에서 얻어지는 움직임 벡터를 이용해서 움직임 활성도를 계산하는 것을 특징으로 하는 적응적 영상 부호화 방법.
  20. 제13항에 있어서, 상기 시간적 복잡도는 입력되는 영상 데이터의 매크로블록 당 움직임 활성도에 기초하여 계산되는 것을 특징으로 하는 적응적 영상 부호화 방법.
  21. 시간적 복잡도에 따른 적응적 동영상 부호화 장치에 있어서,
    (a) 입력되는 영상 데이터의 시간적 복잡도를 계산하기 위한 시간적 복잡도계산부와;
    (b) 상기 계산된 시간적 복잡도와 선정된 임계값을 비교하여 프레임 레이트를 결정하기 위한 프레임 레이트 결정부와;
    (c) 상기 결정된 프레임 레이트에 기초하여 입력되는 영상 데이터의 프레임 레이트를 변환하기 위한 프레임 레이트 변환부를 포함하는 것을 특징으로 하는 적응적 영상 부호화 장치.
  22. 제21항에 있어서, 상기 시간적 복잡도는 입력되는 영상 데이터의 매크로블록 당 움직임 활성도에 기초하여 계산되는 것을 특징으로 하는 적응적 영상 부호화 장치.
  23. 제22항에 있어서, 상기 움직임 활성도는 상기 매크로블록의 움직임 벡터의 크기인 것을 특징으로 하는 적응적 영상 부호화 장치.
  24. 제23항에 있어서, 상기 움직임 활성도는 매크로블록의 움직임 벡터가 (MV1,MV2)인 경우, MV12+MV22인 것을 특징으로 하는 적응적 영상 부호화 장치.
  25. 제21항에 있어서, 상기 시간적 복잡도의 계산 및 프레임 레이트의 결정은 입력 영상 데이터의 GOP 단위로 이루어지는 것을 특징으로 하는 적응적 영상 부호화 장치.
  26. 제21항에 있어서, 상기 시간적 복잡도의 계산 및 프레임 레이트의 결정은 입력 영상 데이터의 시퀀스 단위로 이루어지는 것을 특징으로 하는 적응적 영상 부호화 장치.
  27. 제22항에 있어서, 상기 입력되는 영상 데이터가 압축된 영상 데이터인 경우, 복호화 단계에서 얻어지는 움직임 벡터를 이용해서 움직임 활성도를 계산하는 것을 특징으로 하는 적응적 영상 부호화 장치.
  28. 제21항에 있어서, 상기 시간적 복잡도는 입력되는 영상 데이터의 매크로블록 당 움직임 활성도에 기초하여 계산되는 것을 특징으로 하는 적응적 영상 부호화 장치.
KR20020012727A 2002-03-09 2002-03-09 시공간적 복잡도를 고려한 적응적 동영상 부호화 방법 및그 장치 KR100850705B1 (ko)

Priority Applications (6)

Application Number Priority Date Filing Date Title
KR20020012727A KR100850705B1 (ko) 2002-03-09 2002-03-09 시공간적 복잡도를 고려한 적응적 동영상 부호화 방법 및그 장치
JP2003015419A JP2003274415A (ja) 2002-03-09 2003-01-23 時空間的な複雑度に基づく適応的な動映像符号化方法及びその装置
CNB031034284A CN1283100C (zh) 2002-03-09 2003-01-30 基于时间和空间复杂性自适应编码运动图像的方法及装置
DE2003103928 DE10303928A1 (de) 2002-03-09 2003-01-31 Verfahren für das adaptive Kodieren eines Bewegtbildes auf der Basis zeitlicher und räumlicher Komplexität und dafür geeigente Vorrichtung
US10/357,370 US7280708B2 (en) 2002-03-09 2003-02-04 Method for adaptively encoding motion image based on temporal and spatial complexity and apparatus therefor
US11/418,261 US20060210184A1 (en) 2002-03-09 2006-05-05 Method for adaptively encoding motion image based on temporal and spatial complexity and apparatus therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR20020012727A KR100850705B1 (ko) 2002-03-09 2002-03-09 시공간적 복잡도를 고려한 적응적 동영상 부호화 방법 및그 장치

Publications (2)

Publication Number Publication Date
KR20030073254A true KR20030073254A (ko) 2003-09-19
KR100850705B1 KR100850705B1 (ko) 2008-08-06

Family

ID=27786012

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20020012727A KR100850705B1 (ko) 2002-03-09 2002-03-09 시공간적 복잡도를 고려한 적응적 동영상 부호화 방법 및그 장치

Country Status (5)

Country Link
US (2) US7280708B2 (ko)
JP (1) JP2003274415A (ko)
KR (1) KR100850705B1 (ko)
CN (1) CN1283100C (ko)
DE (1) DE10303928A1 (ko)

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100734314B1 (ko) * 2006-02-11 2007-07-02 삼성전자주식회사 움직임 보상 기반의 영상 압축 시스템에서의 영상 신호의공간 해상도 변환 방법
KR100775787B1 (ko) * 2005-08-03 2007-11-13 경희대학교 산학협력단 영역별 시공간적 특성을 이용한 동영상 부호화 장치 및 그방법
KR100950718B1 (ko) * 2008-04-03 2010-03-31 주식회사 창해에너지어링 인코딩 제어 방법 및 시스템
KR100968106B1 (ko) * 2005-09-27 2010-07-06 퀄컴 인코포레이티드 중복 데이터 인코딩 방법 및 장치
KR101016168B1 (ko) * 2004-07-20 2011-02-17 콸콤 인코포레이티드 비디오 압축에 대한 인코더 보조-프레임 레이트 업 컨버젼(ｅａ-ｆｒｕｃ)을 위한 방법 및 장치
US8369405B2 (en) 2004-05-04 2013-02-05 Qualcomm Incorporated Method and apparatus for motion compensated frame rate up conversion for block-based low bit rate video
US8553776B2 (en) 2004-07-21 2013-10-08 QUALCOMM Inorporated Method and apparatus for motion vector assignment
US8634463B2 (en) 2006-04-04 2014-01-21 Qualcomm Incorporated Apparatus and method of enhanced frame interpolation in video compression
US8654848B2 (en) 2005-10-17 2014-02-18 Qualcomm Incorporated Method and apparatus for shot detection in video streaming
US8750387B2 (en) 2006-04-04 2014-06-10 Qualcomm Incorporated Adaptive encoder-assisted frame rate up conversion
US8780957B2 (en) 2005-01-14 2014-07-15 Qualcomm Incorporated Optimal weights for MMSE space-time equalizer of multicode CDMA system
KR20140129777A (ko) * 2013-04-30 2014-11-07 삼성테크윈 주식회사 영상 재생 방법
US8948262B2 (en) 2004-07-01 2015-02-03 Qualcomm Incorporated Method and apparatus for using frame rate up conversion techniques in scalable video coding
US8948260B2 (en) 2005-10-17 2015-02-03 Qualcomm Incorporated Adaptive GOP structure in video streaming
US9131164B2 (en) 2006-04-04 2015-09-08 Qualcomm Incorporated Preprocessor method and apparatus
US9197912B2 (en) 2005-03-10 2015-11-24 Qualcomm Incorporated Content classification for multimedia processing
WO2023059034A1 (ko) * 2021-10-04 2023-04-13 엘지전자 주식회사 적응적으로 해상도를 변경하는 영상 부호화/복호화 방법, 장치, 및 비트스트림을 전송하는 방법

Families Citing this family (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100850705B1 (ko) * 2002-03-09 2008-08-06 삼성전자주식회사 시공간적 복잡도를 고려한 적응적 동영상 부호화 방법 및그 장치
KR100584603B1 (ko) 2004-08-03 2006-05-30 학교법인 대양학원 다시점 영상의 다이렉트 모드 움직임 예측 방법 및 장치
JP2006115470A (ja) * 2004-09-16 2006-04-27 Ntt Docomo Inc 映像評価装置、フレームレート決定装置、映像処理装置、映像評価方法、および映像評価プログラム
CN100515069C (zh) * 2004-09-16 2009-07-15 株式会社Ntt都科摩 视频评价装置及方法、帧速率确定装置、及视频处理装置
US8249070B2 (en) * 2005-12-29 2012-08-21 Cisco Technology, Inc. Methods and apparatuses for performing scene adaptive rate control
US20070230564A1 (en) * 2006-03-29 2007-10-04 Qualcomm Incorporated Video processing with scalability
JP5188033B2 (ja) * 2006-04-24 2013-04-24 株式会社日立製作所 記録再生装置、送出装置及び伝送システム。
KR100968204B1 (ko) 2007-01-11 2010-07-06 전자부품연구원 다시점 비디오 코덱에서의 영상 예측 방법 및 이를 위한프로그램을 기록한 컴퓨터로 판독 가능한 기록매체
US8296662B2 (en) * 2007-02-05 2012-10-23 Brother Kogyo Kabushiki Kaisha Image display device
US8879636B2 (en) * 2007-05-25 2014-11-04 Synopsys, Inc. Adaptive video encoding apparatus and methods
WO2009028101A1 (ja) * 2007-08-31 2009-03-05 Fujitsu Limited 信号出力装置、信号出力方法及び信号出力プログラム
KR100939435B1 (ko) * 2007-10-29 2010-01-28 에스케이 텔레콤주식회사 영상 분석 장치 및 방법
BRPI0820720A2 (pt) * 2007-12-11 2015-06-16 Thomson Licensing Métodos e sistemas para transcodificação dentro da cadeia de distribuição
KR100952340B1 (ko) * 2008-01-24 2010-04-09 에스케이 텔레콤주식회사 시공간적 복잡도를 이용한 부호화 모드 결정 방법 및 장치
WO2009150793A1 (ja) * 2008-06-09 2009-12-17 パナソニック株式会社 撮像装置、撮像方法
JP4636474B2 (ja) * 2008-11-17 2011-02-23 Ｎｅｃカシオモバイルコミュニケーションズ株式会社 映像変換装置、映像再生装置、映像変換再生システム及びプログラム
JP2010160304A (ja) 2009-01-08 2010-07-22 Seiko Epson Corp 画像データ処理方法及び画像表示システム
CN101778275B (zh) * 2009-01-09 2012-05-02 深圳市融创天下科技股份有限公司 一种自适应时间域和空间域分辨率框架的图像处理方法
US20110013692A1 (en) * 2009-03-29 2011-01-20 Cohen Robert A Adaptive Video Transcoding
US8346915B2 (en) * 2009-05-04 2013-01-01 Qualcomm Incorporated System and method of recording and sharing mobile application activities
US9286709B2 (en) * 2009-07-27 2016-03-15 Dreamworks Animation Llc Variable frame rate rendering and projection
RU2010144450A (ru) * 2010-10-29 2012-05-10 ЭлЭсАй Корпорейшн (US) Оценка движения для видео транскодера
US20120275511A1 (en) * 2011-04-29 2012-11-01 Google Inc. System and method for providing content aware video adaptation
US20130021488A1 (en) * 2011-07-20 2013-01-24 Broadcom Corporation Adjusting Image Capture Device Settings
KR101311143B1 (ko) 2012-03-28 2013-09-25 고려대학교 산학협력단 고속영상처리를 위한 부호화 장치 및 방법
JP6300440B2 (ja) * 2012-12-12 2018-03-28 三菱電機株式会社 画像符号化装置
US10432946B2 (en) * 2014-12-23 2019-10-01 Apple Inc. De-juddering techniques for coded video
US10735773B2 (en) 2015-06-04 2020-08-04 Apple Inc. Video coding techniques for high quality coding of low motion content
US9602762B2 (en) 2015-06-12 2017-03-21 Sharp Laboratories Of America, Inc. Fallback in frame rate conversion system
US10523939B2 (en) 2015-12-31 2019-12-31 Facebook, Inc. Dynamic codec adaption
CN107565971B (zh) * 2017-09-07 2020-04-14 华为技术有限公司 一种数据压缩方法及装置
CN110636303B (zh) * 2019-09-19 2022-12-06 深圳市梦网视讯有限公司 一种gop层率控调整方法和系统
CN113473041A (zh) * 2020-03-30 2021-10-01 杭州海康威视数字技术股份有限公司 一种处理超高清模拟视频图像的方法及硬盘录像设备

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS61247183A (ja) 1985-04-25 1986-11-04 Nippon Telegr & Teleph Corp <Ntt> 符号化サンプル数低減法
JPS63108879A (ja) 1986-10-25 1988-05-13 Nippon Telegr & Teleph Corp <Ntt> 映像符号化伝送装置
JP2588925B2 (ja) 1988-03-11 1997-03-12 富士通株式会社 可変ビットレート画像符号化装置
JPH01300780A (ja) 1988-05-30 1989-12-05 Toshiba Corp 画像伝送装置
GB2222500A (en) * 1988-09-05 1990-03-07 Philips Electronic Associated Picture motion measurement
JP2514114B2 (ja) 1991-01-31 1996-07-10 株式会社グラフィックス・コミュニケーション・テクノロジーズ 動画像符号化装置
US5544284A (en) * 1992-02-11 1996-08-06 Eastman Kodak Company Sequential product code quantization of digital color image
US6222881B1 (en) * 1994-10-18 2001-04-24 Intel Corporation Using numbers of non-zero quantized transform signals and signal differences to determine when to encode video signals using inter-frame or intra-frame encoding
KR100234247B1 (ko) * 1995-05-29 1999-12-15 윤종용 가변 비트율 동화상 부호화장치
US6314140B1 (en) * 1995-12-28 2001-11-06 Lucent Technologies Inc. Dynamic video focus control
JP3150627B2 (ja) 1996-10-04 2001-03-26 日本電信電話株式会社 復号信号の再符号化方法
JPH10164579A (ja) 1996-11-29 1998-06-19 Sanyo Electric Co Ltd 符号化制御方法およびその方法を用いた符号化制御装置
CN1156171C (zh) * 1997-04-07 2004-06-30 松下电器产业株式会社 提高处理效率的图象声音处理装置
FR2764156B1 (fr) * 1997-05-27 1999-11-05 Thomson Broadcast Systems Dispositif de pretraitement pour codage mpeg ii
US6122321A (en) 1998-05-12 2000-09-19 Hitachi America, Ltd. Methods and apparatus for reducing the complexity of inverse quantization operations
JP3185763B2 (ja) * 1998-07-13 2001-07-11 日本電気株式会社 動画像符号化装置
KR100336497B1 (ko) * 1999-12-27 2002-05-15 오길록 공간예측 오차 모델을 이용한 동영상 부호화기의 율제어장치 및 방법
US6493386B1 (en) * 2000-02-02 2002-12-10 Mitsubishi Electric Research Laboratories, Inc. Object based bitstream transcoder
US6650705B1 (en) * 2000-05-26 2003-11-18 Mitsubishi Electric Research Laboratories Inc. Method for encoding and transcoding multiple video objects with variable temporal resolution
EP1296525A4 (en) 2000-06-28 2006-07-26 Mitsubishi Electric Corp IMAGE ENCODER AND IMAGE ENCODING METHOD
EP1173003B1 (en) * 2000-07-12 2009-03-25 Canon Kabushiki Kaisha Image processing method and image processing apparatus
US6834080B1 (en) * 2000-09-05 2004-12-21 Kabushiki Kaisha Toshiba Video encoding method and video encoding apparatus
KR100394014B1 (ko) * 2001-06-23 2003-08-09 엘지전자 주식회사 영상 변환 부호화 장치
US7110452B2 (en) * 2001-03-05 2006-09-19 Intervideo, Inc. Systems and methods for detecting scene changes in a video data stream
US6680973B2 (en) * 2001-03-29 2004-01-20 Koninklijke Philips Electronics N.V. Scalable MPEG-2 video decoder with selective motion compensation
KR100850705B1 (ko) * 2002-03-09 2008-08-06 삼성전자주식회사 시공간적 복잡도를 고려한 적응적 동영상 부호화 방법 및그 장치
KR100850706B1 (ko) * 2002-05-22 2008-08-06 삼성전자주식회사 적응적 동영상 부호화 및 복호화 방법과 그 장치
KR20040076034A (ko) * 2003-02-24 2004-08-31 삼성전자주식회사 동 영상의 가변 비트율 부호화 방법 및 장치

Cited By (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8369405B2 (en) 2004-05-04 2013-02-05 Qualcomm Incorporated Method and apparatus for motion compensated frame rate up conversion for block-based low bit rate video
US8948262B2 (en) 2004-07-01 2015-02-03 Qualcomm Incorporated Method and apparatus for using frame rate up conversion techniques in scalable video coding
US9521411B2 (en) 2004-07-20 2016-12-13 Qualcomm Incorporated Method and apparatus for encoder assisted-frame rate up conversion (EA-FRUC) for video compression
US8374246B2 (en) 2004-07-20 2013-02-12 Qualcomm Incorporated Method and apparatus for encoder assisted-frame rate up conversion (EA-FRUC) for video compression
KR101016168B1 (ko) * 2004-07-20 2011-02-17 콸콤 인코포레이티드 비디오 압축에 대한 인코더 보조-프레임 레이트 업 컨버젼(ｅａ-ｆｒｕｃ)을 위한 방법 및 장치
US8553776B2 (en) 2004-07-21 2013-10-08 QUALCOMM Inorporated Method and apparatus for motion vector assignment
US8780957B2 (en) 2005-01-14 2014-07-15 Qualcomm Incorporated Optimal weights for MMSE space-time equalizer of multicode CDMA system
US9197912B2 (en) 2005-03-10 2015-11-24 Qualcomm Incorporated Content classification for multimedia processing
KR100775787B1 (ko) * 2005-08-03 2007-11-13 경희대학교 산학협력단 영역별 시공간적 특성을 이용한 동영상 부호화 장치 및 그방법
US9071822B2 (en) 2005-09-27 2015-06-30 Qualcomm Incorporated Methods and device for data alignment with time domain boundary
KR100988753B1 (ko) * 2005-09-27 2010-10-20 퀄컴 인코포레이티드 데이터를 시간 영역 경계와 정렬시키는 방법 및 장치
KR100968106B1 (ko) * 2005-09-27 2010-07-06 퀄컴 인코포레이티드 중복 데이터 인코딩 방법 및 장치
US9113147B2 (en) 2005-09-27 2015-08-18 Qualcomm Incorporated Scalability techniques based on content information
US8879857B2 (en) 2005-09-27 2014-11-04 Qualcomm Incorporated Redundant data encoding methods and device
US8879856B2 (en) 2005-09-27 2014-11-04 Qualcomm Incorporated Content driven transcoder that orchestrates multimedia transcoding using content information
US8879635B2 (en) 2005-09-27 2014-11-04 Qualcomm Incorporated Methods and device for data alignment with time domain boundary
US9088776B2 (en) 2005-09-27 2015-07-21 Qualcomm Incorporated Scalability techniques based on content information
US8948260B2 (en) 2005-10-17 2015-02-03 Qualcomm Incorporated Adaptive GOP structure in video streaming
US8654848B2 (en) 2005-10-17 2014-02-18 Qualcomm Incorporated Method and apparatus for shot detection in video streaming
KR100734314B1 (ko) * 2006-02-11 2007-07-02 삼성전자주식회사 움직임 보상 기반의 영상 압축 시스템에서의 영상 신호의공간 해상도 변환 방법
US9131164B2 (en) 2006-04-04 2015-09-08 Qualcomm Incorporated Preprocessor method and apparatus
US8634463B2 (en) 2006-04-04 2014-01-21 Qualcomm Incorporated Apparatus and method of enhanced frame interpolation in video compression
US8750387B2 (en) 2006-04-04 2014-06-10 Qualcomm Incorporated Adaptive encoder-assisted frame rate up conversion
KR100950718B1 (ko) * 2008-04-03 2010-03-31 주식회사 창해에너지어링 인코딩 제어 방법 및 시스템
KR20140129777A (ko) * 2013-04-30 2014-11-07 삼성테크윈 주식회사 영상 재생 방법
WO2023059034A1 (ko) * 2021-10-04 2023-04-13 엘지전자 주식회사 적응적으로 해상도를 변경하는 영상 부호화/복호화 방법, 장치, 및 비트스트림을 전송하는 방법

Also Published As

Publication number Publication date
KR100850705B1 (ko) 2008-08-06
CN1444397A (zh) 2003-09-24
CN1283100C (zh) 2006-11-01
US20030169933A1 (en) 2003-09-11
US7280708B2 (en) 2007-10-09
JP2003274415A (ja) 2003-09-26
DE10303928A1 (de) 2003-10-23
US20060210184A1 (en) 2006-09-21

Similar Documents

Publication Publication Date Title
KR100850705B1 (ko) 시공간적 복잡도를 고려한 적응적 동영상 부호화 방법 및그 장치
KR100850706B1 (ko) 적응적 동영상 부호화 및 복호화 방법과 그 장치
US9942570B2 (en) Resource efficient video processing via prediction error computational adjustments
KR101213513B1 (ko) 고속 매크로블록 델타 ｑｐ 판정
US7653129B2 (en) Method and apparatus for providing intra coding frame bit budget
US9055301B2 (en) Changing motion estimation precision to maintain encoding within desired time
US20020154227A1 (en) Dynamic complexity prediction and regulation of MPEG2 decoding in a media processor
US20050013500A1 (en) Intelligent differential quantization of video coding
JP2963416B2 (ja) 量子化活動度を用いてビット発生量を制御する映像符号化方法及び装置
US20050243919A1 (en) Picture encoding system conversion device and encoding rate conversion device
KR20050012782A (ko) 코딩 중에 이미지 선명도를 최적화하기 위한 방법과 시스템
KR20040079084A (ko) 시간적 복잡도를 고려한 적응적 동영상 부호화와 그 장치
US7236529B2 (en) Methods and systems for video transcoding in DCT domain with low complexity
KR100364748B1 (ko) 영상 변환 부호화 장치
KR100584422B1 (ko) 영상데이터의 압축 장치 및 방법
US20090290636A1 (en) Video encoding apparatuses and methods with decoupled data dependency
KR100924779B1 (ko) 적응적 동영상 부호화 및 복호화 방법과 그 장치
KR0128858B1 (ko) 화면 변화에 대한 부호화 모드 결정장치
KR100932727B1 (ko) 비디오 스트림 전환 장치 및 방법
KR20010104058A (ko) 동영상 부호화기의 부호화 모드에 따른 적응적 양자화기
KR0130167B1 (ko) 동영상 압축 부호화 장치
KR0124162B1 (ko) 예측 부호화 방법
KR100507441B1 (ko) 가변장 부호의 입력 특성을 이용한 영상 신호 압축 방법및 상기 방법을 수행하는 비디오 인코더
KR101307469B1 (ko) 비디오 인코더, 비디오 디코더, 비디오 인코딩 방법 및 비디오 디코딩 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130627

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20140627

Year of fee payment: 7

LAPS Lapse due to unpaid annual fee