KR20060006183A - 컬러 영상의 신축적 부호화, 복호화 방법 및 장치 - Google Patents

컬러 영상의 신축적 부호화, 복호화 방법 및 장치 Download PDF

Info

Publication number
KR20060006183A
KR20060006183A KR1020040055081A KR20040055081A KR20060006183A KR 20060006183 A KR20060006183 A KR 20060006183A KR 1020040055081 A KR1020040055081 A KR 1020040055081A KR 20040055081 A KR20040055081 A KR 20040055081A KR 20060006183 A KR20060006183 A KR 20060006183A
Authority
KR
South Korea
Prior art keywords
component
image
format
color
color difference
Prior art date
Application number
KR1020040055081A
Other languages
English (en)
Other versions
KR100657268B1 (ko
Inventor
김해광
Original Assignee
학교법인 대양학원
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 학교법인 대양학원, 삼성전자주식회사 filed Critical 학교법인 대양학원
Priority to KR1020040055081A priority Critical patent/KR100657268B1/ko
Priority to US11/178,343 priority patent/US20060013308A1/en
Priority to CN200510083192A priority patent/CN100579244C/zh
Priority to EP05254376A priority patent/EP1617679A3/en
Publication of KR20060006183A publication Critical patent/KR20060006183A/ko
Application granted granted Critical
Publication of KR100657268B1 publication Critical patent/KR100657268B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/33Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N11/00Colour television systems
    • H04N11/04Colour television systems using pulse code modulation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Color Television Systems (AREA)

Abstract

동영상의 색 정보에 기반을 둔 신축 부호화, 복호화 방법 및 장치가 개시된다. 본 발명에 따라, 컬러 영상 부호화 방법에 있어서, (a) 영상의 휘도성분을 입력받아 움직임 예측 부호화 방법에 따라 부호화하여, 부호화된 휘도성분 비트스트림을 출력하는 단계; 및 (b) 적어도 하나의 컬러포맷의 색차성분을 입력받아, 상기 움직임 예측 부호화 방법에 의해 생성된 움직임 벡터를 이용하여 부호화하여, 부호화된 색차성분 비트 스트림을 적어도 하나 출력하는 단계를 포함하는 것을 특징으로 한다. 이에 의해, 하나의 동영상을 다양한 컬러 포맷으로 부호화할 때 주변 여건에 따라 신축적으로 부호화하여, 효율적으로 저장, 전송, 재생할 수 있다.

Description

컬러 영상의 신축적 부호화, 복호화 방법 및 장치{Scalable encoding and decoding method of color video, and apparatus thereof}
도 1은 색의 공간 해상도를 떨어뜨려 손실 부호화하는 것을 설명하기 위한 도면,
도 2는 일반적인 컬러 동영상 부호화 장치의 블록도,
도 3은 본 발명의 일실시예에 따른 컬러 동영상 부호화 장치의 블록도,
도 4는 본 발명의 일실시예에 따른 동영상 복호화기의 블록도,
도 5는 본 발명의 컬러 영상 부호화 방법의 플로우차트,
도 6은 본 발명의 컬러 영상 복호화 방법의 플로우차트,
도 7은 본 발명의 다른 일실시예에 따른 컬러 동영상 부호화 장치의 블록도,
도 8은 본 발명의 일실시예에 따른 동영상 복호화 장치의 블록도,
도 9는 본 발명의 다른 실시예에 따른 신축적 컬러 영상 부호화 방법의 플로우차트,
도 10은 본 발명의 다른 실시예에 따른 신축적 컬러 영상 복호화 방법의 플로우차트이다.
본 발명은 동영상의 신축 부호화 및 복호화에 관한 것으로, 보다 상세하게는 동영상의 색 정보에 기반을 둔 신축 부호화, 복호화 방법 및 장치에 관한 것이다.
동영상을 부호화할 때, 동영상을 구성하는 픽처의 가로방향의 화소 라인에 포함되는 화소들의 휘도정보(luminance)와 색차정보(chrominance)의 비율을 표시함으로써, 동영상의 컬러포맷을 나타낸다. 이하에서는 휘도정보를 Y 로 표시하고, 색차정보를 Cb/Cr로 표시한다. 휘도란 영상의 밝기를 나타내는 정도로써, ITU-R 권고에서 하나의 화소의 휘도는 8 비트로 나타낸다. 색차란 영상의 색을 나타내는 정보로써, 두 개(Cb/Cr)의 8 비트값으로 화소의 색을 나타낸다. 색을 나타내는 좌표계를 색 공간(color space)이라고 부르는데, 동영상 부호화 표준인 MPEG에서는 Y, Cb, Cr 이라는 3개의 8 비트 정보로 동영상의 컬러 포맷을 표현한다.
Y, Cb, Cr을 사용하여 하나의 동영상을 표현하는데 있어, 그 비율에 따라서 여러 가지 컬러 포맷이 있을 수 있는데, 서로 다른 컬러 포맷의 경우에도 휘도성분인 Y 성분은 모두 동일하기 때문에, 서로 다른 컬러 포맷으로 동영상을 부호화하고자 하는 경우에도 그 때마다 Y 성분의 부호화를 다시 수행하는 것은 비효율적이다.
그러나, 종래의 MPEG-2, MPEG-4, JVT(Joint Video Team) 등 표준화 단체에서 제시하는 동영상 부호화 기술에서는, 하나의 동영상을 4:4:4 컬러 포맷, 4:2:2 컬러 포맷 및 4:2:0 컬러 포맷으로 각각 부호화 할 때 휘도성분 Y 의 부호화를 중복적으로 수행하기 때문에, 동영상을 다양한 컬러 포맷으로 부호화하여 저장하거나 전송할 때 데이터 양이 불필요하게 많아져서 비효율적이다.
그리고, 종래의 동영상 부호화 기술에서는, 컬러 영상의 포맷을 신축적으로 부호화하거나 복호화하는 것에 대하여 개시하고 있지 않다.
따라서, 본 발명이 이루고자 하는 기술적 과제는 다양한 컬러 포맷으로 동영상을 신축적으로 부호화하고 복호화하는 동영상의 신축적 부호화, 복호화 방법 및 그 장치를 제공하는 것이다.
상기 기술적 과제는 본 발명에 따라, 컬러 영상 부호화 방법에 있어서, (a) 영상의 휘도성분을 입력받아 움직임 예측 부호화 방법에 따라 부호화하여, 부호화된 휘도성분 비트스트림을 출력하는 단계; 및 (b) 적어도 하나의 컬러포맷의 색차성분을 입력받아, 상기 움직임 예측 부호화 방법에 의해 생성된 움직임 벡터를 이용하여 부호화하여, 부호화된 색차성분 비트 스트림을 적어도 하나 출력하는 단계를 포함하는 것을 특징으로 하는 부호화 방법에 의해 달성된다.
상기 (b) 단계는, 4:2:0, 4:2:2 및 4:4:4 컬러포맷의 색차성분을 각각 독립적으로 입력받아 부호화하는 것이 바람직하다.
또한, 상기 기술적 과제는 컬러 영상 부호화 방법에 있어서, (a) 원영상의 색차성분을 다운 샘플링하고 이를 다운샘플링하지 않은 휘도성분과 함께 움직임 예측 부호화 방법에 따라 부호화하여 부호화된 기본계층 비트 스트림을 생성하는 단계; 및 (b) 상기 생성된 기본계층 비트 스트림을 복호화하여 얻어진 색차성분을 업샘플링한 값과, 다운샘플링하지 않은 상기 원 영상의 색차성분값과의 차이인 차분 색차 성분을 부호화하여, 부호화된 향상계층 비트스트림을 출력하는 단계를 포함하는 것을 특징으로 하는 부호화 방법에 의해서도 달성된다.
또한, 상기 기술적 과제는 컬러 영상 복호화 방법에 있어서, (a) 영상의 휘도성분만을 가지고 움직임 예측 부호화 방법에 따라 부호화된 휘도성분 비트스트림을 입력받아 이를 복호화하여, 휘도 영상을 출력하는 단계; (b) 부호화된 색차성분 비트 스트림을 적어도 하나 입력받아 이를 복호화하여, 적어도 하나의 색차 영상을 출력하는 단계; 및 (c) 상기 복호화된 휘도영상과 색차영상을 합하여 적어도 하나의 컬러포맷의 영상을 출력하는 단계를 포함하는 것을 특징으로 하는 복호화 방법에 의해서도 달성된다.
또한, 상기 기술적 과제는 컬러 영상 복호화 방법에 있어서, (a) 영상의 색차성분을 다운 샘플링하고 다운샘플링하지 않은 휘도성분과 함께 움직임 예측 부호화 방법에 따라 부호화하여 만들어진 기본계층 비트 스트림을 수신하여 복호화하는 단계; (b) 상기 생성된 기본계층 비트 스트림을 복호화하여 얻은 색차성분을 업샘플링한 값과 다운샘플링하지 않은 상기 원 영상의 색차성분값과의 차이인 차분 색차 성분을 부호화하여 만들어진 향상계층 비트스트림을 수신하여 복호화하는 단계; 및 (c) 상기 (a) 단계의 기본계층 스트림으로부터 복호화한 색차영상과 상기 (b) 단계의 향상계층 스트림으로부터 복호화한 색차영상을 더하여 만들어진 색차영상을 상기 (a) 단계의 기본계층 스트림으로부터 복호화된 휘도영상과 합하여 적어도 하나의 향상계층 컬러포맷 영상을 출력하는 단계를 포함하는 것을 특징으로 하는 복호화 방법에 의해서도 달성된다.
한편, 본 발명의 다른 분야에 따르면, 상기 기술적 과제는 컬러 영상 부호화 장치에 있어서, 영상의 휘도성분을 입력받아 움직임 예측 부호화 방법에 따라 부호화하여, 부호화된 휘도성분 비트스트림을 출력하는 휘도성분 부호화부; 및 적어도 하나의 컬러포맷의 색차성분을 입력받아, 상기 움직임 예측 부호화 방법에 의해 생성된 움직임 벡터를 이용하여 부호화하여, 부호화된 색차성분 비트 스트림을 적어도 하나 출력하는 색차성분 부호화부를 포함하는 것을 특징으로 하는 부호화 장치에 의해서도 달성된다.
상기 색차성분 부호화부는, 4:2:0 컬러포맷의 색차성분을 입력받아 부호화하는 제1색차성분 부호화부; 4:2:2 컬러포맷의 색차성분을 입력받아 부호화하는 제2색차성분 부호화부; 및 4:4:4 컬러포맷의 색차성분을 입력받아 부호화하는 제3색차성분 부호화부를 포함하는 것이 바람직하다.
또한, 상기 기술적 과제는 컬러 영상 부호화 장치에 있어서, 원영상의 색차성분을 다운 샘플링하는 다운 샘플링부; 상기 다운 샘플링한 색차성분을 다운샘플링하지 않은 휘도성분과 함께 움직임 예측 부호화 방법에 따라 부호화하여 부호화된 기본계층 비트 스트림을 생성하는 기본계층 부호화부; 및 상기 생성된 기본계층 비트 스트림을 복호화하여 얻어진 색차성분을 업샘플링한 값과, 다운샘플링하지 않은 상기 원 영상의 색차성분값과의 차이인 차분 색차 성분을 부호화하여 부호화된 향상계층 비트스트림을 출력하는 향상계층 부호화부를 포함하는 것을 특징으로 하는 부호화 장치에 의해서도 달성된다.
한편, 본 발명의 다른 분야에 따르면, 상기 기술적 과제는 컬러 영상 복호화 장치에 있어서, 영상의 휘도성분만을 가지고 움직임 예측 부호화 방법에 따라 부호화된 휘도성분 비트스트림을 입력받아 이를 복호화하여, 휘도 영상을 출력하는 휘도성분 복호화부; 및 부호화된 색차성분 비트 스트림을 적어도 하나 입력받아 이를 복호화하여, 적어도 하나의 색차 영상을 생성하고, 이를 상기 복호화된 휘도영상과 합하여 적어도 하나의 컬러포맷의 영상을 출력하는 색차성분 복호화부를 포함하는 것을 특징으로 하는 복호화 장치에 의해서도 달성된다.
또한, 상기 기술적 과제는 컬러 영상 복호화 장치에 있어서, 영상의 색차성분을 다운 샘플링하고 다운샘플링하지 않은 휘도성분과 함께 움직임 예측 부호화 방법에 따라 부호화하여 만들어진 기본계층 비트 스트림을 수신하여 복호화하는 기본계층 복호화부; 상기 생성된 기본계층 비트 스트림을 복호화하여 얻은 색차성분을 업샘플링한 값과 다운샘플링하지 않은 상기 원 영상의 색차성분값과의 차이인 차분 색차 성분을 부호화하여 만들어진 향상계층 비트스트림을 수신하여 복호화하는 향상계층 복호화부; 및 상기 기본계층 스트림으로부터 복호화한 색차영상과 상기 향상계층 스트림으로부터 복호화한 색차영상을 더하여 만들어진 색차영상을 상기 기본계층 스트림으로부터 복호화된 휘도영상과 합하여 적어도 하나의 향상계층 컬러포맷 영상을 출력하는 향상계층 컬러영상 출력부를 포함하는 것을 특징으로 하는 복호화 장치에 의해서도 달성된다.
한편, 본 발명의 다른 분야에 따르면, 상기 기술적 과제는 부호화된 컬러 영상을 기록한 정보저장매체에 있어서, 영상의 휘도성분을 입력받아 움직임 예측 부호화 방법에 따라 부호화하여, 부호화된 휘도성분 비트스트림; 및 적어도 하나의 컬러포맷의 색차성분을 입력받아, 상기 움직임 예측 부호화 방법에 의해 생성된 움직임 벡터를 이용하여 부호화하여, 부호화된 색차성분 비트 스트림을 포함하는 것을 특징으로 하는 정보저장매체에 의해서도 달성된다.
상기 휘도성분 비트 스트림은, 영상의 휘도성분을 입력받아 움직임 벡터를 찾고, 그 움직임 벡터에 기반을 둔 움직임 예측 부호화 방법에 따라 부호화하여 만들어진 휘도성분의 텍스쳐 정보와 상기 움직임 벡터를 다중화하여 만들어진 것이 바람직하다.
상기 색차성분 비트 스트림은, 4:2:0, 4:2:2 및 4:4:4 컬러포맷의 색차성분이 각각 독립적으로 부호화되어 있는 것이 바람직하다.
또한, 상기 기술적 과제는 부호화된 컬러 영상을 기록한 정보저장매체에 있어서, 원 영상의 색차성분을 다운 샘플링하고, 이를 다운샘플링하지 않은 휘도성분과 함께 움직임 예측 부호화 방법에 따라 부호화하여 만들어진 부호화된 기본계층 비트 스트림; 및 상기 부호화된 기본 계층 비트 스트림을 복호화하여 얻은 복호화된 색차성분을 업샘플링한 값과 다운샘플링하지 않은 상기 원 영상의 색차성분과의 차이인 차분 색차 성분을 부호화하여 만들어진 부호화된 향상계층 비트스트림을 포함하는 것을 특징으로 하는 정보저장매체에 의해서도 달성된다.
이하 첨부된 도면을 참조하여 본 발명의 바람직한 실시예에 대해 상세히 설명한다.
도 1은 색의 공간 해상도를 떨어뜨려 손실 부호화하는 것을 설명하기 위한 도면이다.
상술한 바와 같이 일반적으로 하나의 화소에 Y, Cb, Cr 각각 8 비트, 모두 24 비트를 할당하여 화소값을 표현하지만, 손실 부호화 방법에서는 인간의 시각이 밝기 정보보다 색 정보에 둔감한 특성을 고려하여 Y, Cb, Cr 중에서 색 정보인 Cb, Cr의 공간 해상도를 떨어뜨려 손실 부호화한다. 공간 해상도를 떨어뜨리지 않은 4:4:4 포맷 컬러 영상은, N X N 화소로 구성된 영상에서 밝기 정보(Y)과 색 정보(Cb/Cr)가 모두, N x N 화소의 크기를 가짐으로써 밝기 정보에 해당하는 색차 정보(Cb/Cr)가 하나씩 각각 존재하여 고화질의 색 정보를 유지하도록 한 영상이다.
반면, 4:2:2 포맷 컬러 영상은 4:4:4 포맷의 Cr, Cb의 색 정보를 수직방향은 원래대로 하고, 수평 방향으로 1/2 다운 샘플링하여 얻어진 영상이다. 따라서, 4:4:4 포맷의 Cb, Cr 영상의 크기가 NxN이면, 4:2:2 포맷의 Cb, Cr 영상의 크기는 N x (N/2)가 된다. 그리고, 4:2:0 포맷의 영상은 4:4:4 포맷의 Cr, Cb의 색 정보를 수직방향과 수평 방향 각각 1/2 다운 샘플링하여 얻어진 영상이다. 따라서, 4:4:4 포맷의 Cb, Cr 영상의 크기가 N x N이면, 4:2:0 포맷의 Cb, Cr 영상의 크기는 (N/2) x (N/2) 가 된다.
도 2는 일반적인 컬러 동영상 부호화 장치의 블록도이다.
동영상 부호화 장치에, Y, Cr, Cb로 구성된 4:4:4 포맷의 영상이 입력되면 4:4:4 포맷의 부호화된 비트 스트림이 출력되고, 4:2:2 포맷의 영상이 입력되면 4:2:2 포맷의 부호화된 비트 스트림이 출력되며, 4:2:0 포맷의 영상이 입력되면 4:2:0 포맷의 부호화된 비트 스트림이 출력된다.
동영상 부호화 장치는 휘도성분 부호화부(210), 색차성분 부호화부(220) 및 다중화부(230)를 포함한다. 입력되는 영상의 컬러 포맷에 따라서 색차성분 부호화부(320)에 입력되는 색차성분이 달라지고 휘도성분 부호화부(310)에 입력되는 휘도성분은 동일하다. 왜냐하면, 도 1을 참조하여 설명한 바와 같이 4:4:4, 4:2:2, 4:2:0 포맷 모두 휘도성분은 동일하기 때문이다. 휘도성분 부호화부(210)는 입력된 휘도성분 Y 신호로부터 움직임 벡터를 예측하여 움직임을 보상하고 보상된 영상을 DCT, 양자화, 엔트로피 코딩의 과정을 거쳐 얻어진 Y 성분의 텍스쳐 정보를 출력한다. 색차성분 부호화부(220)는 휘도성분 Y 신호로부터의 움직임벡터를 기반으로 움직임 보상하여 얻어진 Cb, Cr 성분의 텍스쳐 정보를 출력한다. 다중화부(230)는 움직임 벡터, Y 성분의 텍스쳐 정보 및 Cr, Cb 성분의 텍스쳐 정보를 다중화하여, 하나의 4:4:4 또는 4:2:2 또는 4:2:0 동영상 부호화 비트스트림을 생성한다.
휘도성분 부호화부(210)의 동작을 보다 상세하게 설명하면 다음과 같다. 움직임 추정부(201)는 현재 프레임의 매크로 블록의 움직임 예측치를 참조 프레임에서 찾아 그 움직임의 차이를 움직임 벡터로써 출력한다. 즉, 찾고자 하는 매크로 블록을 참조 프레임의 소정의 탐색영역내에서 탐색하여, 가장 유사한 매크로 블록을 찾아 그 이동정도를 움직임 벡터로써 출력한다. 움직임 보상부(202)는 구해진 움직임 벡터에 해당하는 예측 매크로 블럭을 참조 프레임으로부터 얻는다.
원 영상 프레임의 매크로 블록에서 움직임 보상이 수행된 참조 영상 프레임의 예측 매크로 블록을 빼서 그 차이를 DCT 수행부(203)에서 DCT하고, 그 DCT 계수가 양자화부(204)에 의해서 양자화되어 엔트로피 코딩부(205)를 거쳐 텍스쳐 정보로 출력된다. 이 텍스쳐 정보는 움직임 벡터와 함께 다중화부(230)에서 다중화되어 인코딩된 비트 스트림을 구성한다.
원 영상 프레임의 매크로 블록에서 움직임 보상된 참조영상 프레임의 매크로 블록을 뺀 것을 잔차(residual)이라고 하는데 인코딩시의 데이터량을 줄이기 위해서 이 잔차값을 부호화한다. 양자화 과정에서 에러가 발생하므로, 비트 스트림으로 만들어지는 동영상 데이터에는 DCT 및 양자화 과정에서 발생한 에러가 포함되어 있다.
그리고 참조 영상을 얻기 위해, 양자화된 잔차 신호는 역양자화부(206)와 IDCT 수행부(207)를 거쳐 움직임 예측 및 보상이 수행된 영상과 합쳐져 복호화된 Y 성분 저장부(208)에 저장된다. 따라서, 복호화된 Y 성분 저장부(208)에 저장된 참조영상은 원 영상에서 DCT 및 양자화 과정에서 발생한 부호화 에러를 포함한 영상이 된다. 색차성분 부호화부(220)도 휘도성분 부호화부(210)와 유사하게 색차성분인 Cb, Cr에 대해서 부호화를 수행한다.
만일, 하나의 원 동영상을 4:4:4 포맷, 4:2:2 포맷, 4:2:0 포맷으로 각각 부호화하고자 하는 경우에는 색차성분 부호화부(220)는 각각 4:4:4 포맷, 4:2:2 포맷, 4:2:0 포맷의 Cb/Cr 성분을 입력받아 부호화를 각각 수행한 후, 이를 Y 성분과 다중화하여야 하므로 Y 성분의 부호화를 중복적으로 수행하여야 한다.
도 3은 본 발명의 일실시예에 따른 컬러 동영상 부호화 장치의 블록도이다.
본 발명의 컬러 동영상 부호화 장치는 휘도성분 부호화부(310), 색차성분 부호화부(320) 및 다중화부(330)를 포함하며, 색차성분 부호화부(320)는 제1색차성분 부호화부(322), 제2색차성분 부호화부(324), 제3색차성분 부호화부(326)를 포함한 다.
휘도성분 부호화부(310)는 Y 성분을 입력받아 움직임 예측을 기반으로 한 부호화 방법에 따라 부호화하여 Y 성분의 텍스처 정보와 움직임 벡터를 출력한다. 부호화 과정은 도 2를 참조하여 상술한 바와 같다. 제1색차성분 부호화부(322)는 4:2:0 포맷의 Cb/Cr 성분을 입력받아, Y 성분의 움직임 벡터를 이용하여 움직임 보상하여 부호화하여 4:2:0 향상계층 비트 스트림을 출력한다. 제2색차성분 부호화부(324)는 4:2:2 포맷의 Cb/Cr 성분을 입력받아, Y 성분의 움직임 벡터를 이용하여 움직임 보상하여 부호화하여 4:2:2 향상계층 비트 스트림을 출력한다. 제3색차성분 부호화부(326)는 4:4:4 포맷의 Cb/Cr 성분을 입력받아, Y 성분의 움직임 벡터를 이용하여 움직임 보상하여 부호화하여 4:4:4 향상계층 비트 스트림을 출력한다. 이렇게 휘도성분 및 색차성분의 부호화에 사용되는 방법은 종래의 움직임 예측에 의한 부호화 방법들 중 어느 것이든 사용할 수 있다. 다중화부(330)는 부호화된 Y 성분의 텍스쳐 정보와 움직임 벡터를 다중화하여 기본계층 비트 스트림으로써 출력한다.
도 4는 본 발명의 일실시예에 따른 동영상 복호화기의 블록도이다.
본 발명의 동영상 복호화기는 휘도성분 복호화부(410), 색차성분 복호화부(420)를 포함하며 색차성분 복호화부(420)는 제1색차성분 복호화부(422), 제2색차성분 복호화부(424) 및 제3색차성분 복호화부(426)를 포함한다.
휘도성분 복호화부(410)는 휘도성분 부호화부(310)와 다중화부(330)에 의해 만들어진 기본계층 비트 스트림을 수신하여 움직임 벡터를 추출하고 이 움직임 벡 터를 사용해서, 엔트로피 디코딩, 역양자화, IDCT 변환 등의 복호화 과정을 거쳐, Y 성분만의 휘도영상을 출력한다.
제1색차성분 복호화부(422)는 4:2:0 컬러 포맷으로 만들어진 4:2:0 향상계층 비트 스트림을 입력받아, 휘도성분 복호화부(410)에서 만들어진 움직임 벡터를 이용하여 4:2:0 색차성분을 만들고, 휘도성분 복호화부(410)에서 출력된 휘도성분과 합하여 4:2:0 포맷의 컬러 영상을 출력한다.
제2색차성분 복호화부(424)는 4:2:2 컬러 포맷으로 만들어진 4:2:2 향상계층 비트 스트림을 입력받아, 휘도성분 복호화부(410)에서 만들어진 움직임 벡터를 이용하여 4:2:2 색차성분을 만들고, 휘도성분 복호화부(410)에서 출력된 휘도성분과 합하여 4:2:2 포맷의 컬러 영상을 출력한다.
제3색차성분 복호화부(426)는 4:4:4 컬러 포맷으로 만들어진 4:4:4 향상계층 비트 스트림을 입력받아, 휘도성분 복호화부(410)에서 만들어진 움직임 벡터를 이용하여 4:4:4 색차성분을 만들고, 휘도성분 복호화부(410)에서 출력된 휘도성분과 합하여 4:4:4 포맷의 컬러 영상을 출력한다.
도 5는 본 발명의 컬러 영상 부호화 방법의 플로우차트이다.
영상의 휘도성분을 입력받아 상술한 움직임 예측 부호화 방법들중 어느 한 가지 방법에 따라 부호화하여, 부호화된 휘도성분 비트 스트림을 출력한다(S510). 그리고, 4:2:0, 4:2:2 및 4:4:4 컬러 포맷의 색차성분을 각각 입력받아, 휘도성분 비트 스트림을 만들면서 검출된 움직임 벡터를 이용하여 각각 부호화한다(S520). 그러면, 4:2:0, 4:2:2 및 4:4:4 컬러 포맷의 색차성분 비트 스트림이 출력된다. 네 트워크의 상태가 좋지 않은 경우에는 색차성분의 비트 스트림을 전송하지 않기 때문에 주변 여건에 따른 신축적인 부호화가 가능하다.
도 6은 본 발명의 컬러 영상 복호화 방법의 플로우차트이다.
본 발명의 컬러 영상 부호화 방법에 따라 만들어진 부호화된 휘도성분 비트스트림을 입력받아 디코딩하여 휘도 영상을 출력한다(S610). 출력된 휘도 영상은 색차 성분이 포함되어 있지 않기 때문에 명암으로 구분되는 흑백영상이다. 다음으로, 4:2:0, 4:2:2, 4:4:4 컬러 포맷의 색차성분 비트 스트림을 각각 입력받아, 각각 디코딩하여 4:2:0, 4:2:2, 4:4:4 컬러 포맷의 색차영상을 만든다(S620). 이렇게 만든 색차영상을 미리 만든 휘도영상과 합하면, 4:2:0, 4:2:2, 4:4:4 컬러 포맷의 컬러영상이 생성된다(S630). 네트워크의 상태가 좋지 않아 색차성분 비트 스트림을 수신할 수 없는 경우 또는 수신된 색차성분 비트 스트림에 에러가 존재하는 경우에는 휘도 영상만으로 동영상을 출력한다. 따라서, 주변 여건에 따른 신축적인 복호화가 가능하다.
도 7은 본 발명의 다른 일실시예에 따른 컬러 동영상 부호화 장치의 블록도이다.
컬러 동영상 부호화 장치는 다운 샘플링부(710), 기본계층 부호화부(720), 제1향상계층 부호화부(730) 및 제2향상계층 부호화부(740)를 구비한다.
NxN 화소로 구성된 4:4:4 포맷의 Y, Cb, Cr 컬러 영상에서 Cb/Cr 성분은 제1다운샘플링부(712)에 의해서 N/2 x N/2 화소로 구성된 4:2:0 포맷의 Cb/Cr 영상으로 만들어지고, 제2다운샘플링부(714)에 의해서 N x N/2 화소로 구성된 4:2:2 포맷 의 Cb/Cr 영상으로 만들어진다. Y 성분과 제1다운샘플링에 의해 만들어진 4:2:0 포맷의 Cb/Cr 성분은 기본계층 부호화부(720)에 입력되어 4:2:0 포맷의 기본계층 비트 스트림으로 만들어진다. 이 과정에서 만들어진, 복호영상 저장부(722)에 저장된 복호화된 Cb/Cr 성분은 제1향상계층 부호화부(730)의 제1업샘플링부(732)로 입력된다. 제1업샘플링부(732)는 4:2:0 포맷의 복호화된 Cb/Cr 성분을 업샘플링하여 4:2:2 포맷의 Cb/Cr 영상으로 만든다. 제1업샘플링부(732)에서의 업샘플링은 MPEG 표준에서 사용하는 칼라 업샘플링 필터를 사용하여 수행될 수 있다.
제1향상계층 부호화부(730)는 제2다운샘플링부(714)에 의해서 다운샘플링된 4:2:2 포맷의 원영상 Cb/Cr 성분과 제1업샘플링부(732)에서 만들어진 4:2:2 포맷의 복호화된 Cb/Cr 성분과의 차이인 차분 영상에 대해 DCT, 양자화, 엔트로피 코딩을 수행하여 부호화하여 4:2:2 포맷의 Cb/Cr 비트 스트림을 만든다. 상기 4:2:2 포맷의 Cb/Cr 비트 스트림 생성과정에서 엔트로피 코딩부에 입력되는 색차 성분에 대해 역양자화와 IDCT를 수행하여 얻어진 색차 영상을 제1업샘플링부(732)에서 만들어진 4:2:2 포맷의 복호화된 Cb/Cr 영상과 합하여 복호 영상 저장부(734)에 저장한다.
복호영상 저장부(734)에 저장된 복호화된 Cb/Cr 성분은 제2향상계층 부호화부(740)의 제2업샘플링부(742)로 입력된다. 제2업샘플링부(742)는 4:2:2 포맷의 복호화된 Cb/Cr 성분을 업샘플링하여 4:4:4 포맷의 Cb/Cr 영상으로 만든다. 업샘플링은 MPEG 표준에서 사용하는 칼라 업샘플링 필터를 사용하여 수행할 수 있다. 제2향상계층 부호화부(740)는 4:4:4 포맷의 원영상 Cb/Cr 성분과 제2업샘플링부(742)에서 만들어진 4:4:4 포맷의 복호화된 Cb/Cr 성분과의 차이인 차분 영상에 대해 DCT, 양자화, 엔트로피 코딩을 수행하여 부호화하여 4:4:4 포맷의 Cb/Cr 비트 스트림을 만든다.
여기서 기본계층 부호화부(720), 제1향상계층 부호화부(730) 및 제2향상계층 부호화부(740)에서 수행되는 부호화 방법은 종래의 움직임 예측에 의한 부호화 방법들 중 어느 것이든 사용할 수 있다.
도 8은 본 발명의 일실시예에 따른 동영상 복호화 장치의 블록도이다.
동영상 복호화 장치는 기본계층 복호화부(810), 제1향상계층 복호화부(820), 제2향상계층 복호화부(830) 및 향상계층 컬러영상 출력부(840)를 구비한다.
수신된 4:2:0 포맷의 기본계층 비트스트림은 기본계층 복호화부(810)에 의해 복호화되어 4:2:0 포맷의 컬러영상으로 출력된다. 기본계층 복호화부(810)에 구비된 복호영상 저장부(812)에는 4:2:0 포맷의 Y 성분과 4:2:0 포맷의 Cb/Cr 성분이 저장된다. 이중 Cb/Cr 성분은 제1향상계층 복호화부(820)에 입력된다. 입력된 4:2:0 포맷의 디코딩된 Cb/Cr 성분은 제1업샘플링부(822)에 의해 4:2:2 포맷의 Cb/Cr 성분으로 만들어진다. 그리고, 제1향상계층 복호화부(820)는 인코딩된 4:2:2 포맷의 Cb/Cr 비트스트림을 수신하여, 엔트로피 디코딩, 역양자화 및 IDCT를 수행하고, 이를 상기 제1업샘플링부(822)에 의해 만들어진 4:2:2 포맷의 Cb/Cr 성분과 합하여 복호화된 Cb/Cr 영상을 만들어 디코딩된 Cb/Cr 성분 저장부(824)에 저장한다. 저장된 Cb/Cr 성분은 향상계층 컬러영상 출력부(840)로 입력되어 기본계층 복호화부(810)의 복호영상 저장부(812)에 저장된 Y 성분과 결합되어 4:2:2 포맷 컬러 영상을 출력한다.
제1향상계층 복호화부(820)의 디코딩된 Cb/Cr 성분 저장부(824)로부터 수신된 4:2:2 포맷의 복호화된 Cb/Cr 성분은 제2향상계층 복호화부(830)에 입력된다. 제2향상계층 복호화부(830)에 입력된 4:2:2 포맷의 디코딩된 Cb/Cr 성분은 제2업샘플링부(832)에 의해 4:4:4 포맷의 Cb/Cr 성분으로 만들어진다. 그리고, 제2향상계층 복호화부(830)는 인코딩된 4:4:4 포맷의 Cb/Cr 비트스트림을 수신하여, 엔트로피 디코딩, 역양자화 및 IDCT를 수행하여 4:4:4 포맷의 Cb/Cr 성분을 만들고, 이를 상기 업샘플링된 4:4:4 포맷의 Cb/Cr 성분과 합하여, 복호화된 4:4:4 포맷의 Cb/Cr 영상을 만들어 디코딩된 Cb/Cr 성분 저장부(834)에 저장한다. 저장된 Cb/Cr 성분은 향상계층 컬러영상 출력부(840)로 입력되어 기본계층 복호화부(810)의 복호영상 저장부(812)에 저장된 Y 영상과 결합되어 4:4:4 포맷 컬러 영상을 출력한다.
도 9는 본 발명의 다른 실시예에 따른 신축적 컬러 영상 부호화 방법의 플로우차트이다.
4:4:4 포맷의 원 동영상 데이터를 수신한다(S910). 원 동영상의 4:4:4 Cb/Cr 성분을 입력받아 다운 샘플링하여 4:2:2 포맷의 Cb/Cr 성분과 4:2:0 포맷의 Cb/Cr 성분을 만든다(S920). 4:2:0 포맷의 Cb/Cr 성분을 원 영상의 Y 성분과 함께 상술한 움직임 예측 부호화 방법에 따라 부호화하여 기본계층 비트 스트림을 생성한다(S930). 기본계층 비트 스트림 생성시에 만들어진 복호화된 4:2:0 포맷의 Cb/Cr 성분을 업샘플링하여 만들어진 4:2:2 포맷의 Cb/Cr 성분과, S920에서 만들어진 원래의 4:2:2 포맷의 Cb/Cr 성분의 차이인 차분 4:2:2 Cb/Cr 성분을 생성하고 이를 부호화하여 4:2:2 포맷의 제1향상계층 Cb/Cr 비트 스트림을 만든다(S940).
S940 단계에서 만들어진 제1향상계층 Cb/Cr 비트 스트림으로부터 복호화된 4:2:2 포맷의 Cb/Cr 성분과, 기본계층 비트 스트림 생성시에 만들어진 복호화된 4:2:0 포맷의 Cb/Cr 성분을 업샘플링하여 만들어진 4:2:2 포맷의 Cb/Cr 성분을 합하여 복호화된 4:2:2 Cb/Cr 성분을 생성한다(S950). S950에서 만들어진 4:2:2 포맷의 Cb/Cr 성분을 업샘플링하여 만들어진 4:4:4 포맷의 Cb/Cr 성분과 S920에서 만들어진 원래의 4:4:4 포맷의 Cb/Cr 성분의 차분 4:4:4 Cb/Cr 성분을 생성하고 이를 부호화하여 4:4:4 포맷의 제2향상계층 Cb/Cr 비트 스트림을 출력한다(S960).
도 10은 본 발명의 다른 실시예에 따른 신축적 컬러 영상 복호화 방법의 플로우차트이다.
4:2:0 포맷의 기본계층 비트 스트림을 수신하여 상술한 움직임 예측 복호화 방법에 따라 복호화하여 4:2:0 포맷의 컬러 영상을 출력한다(S1010). 상기 S1010 단계에서 만들어진 복호화된 4:2:0 포맷의 Cb/Cr 성분을 업샘플링하여 4:2:2 포맷의 Cb/Cr 성분으로 만든다(S1020). 제1향상계층 Cb/Cr 비트 스트림을 수신하여 4:2:2 포맷의 향상 계층 Cb/Cr 성분을 복호화한다(S1030). S1020에서 만들어진 4:2:2 포맷의 Cb/Cr 성분과 S1030에서 만들어진 4:2:2 포맷의 Cb/Cr 성분을 합하여 복호화된 4:2:2 포맷 Cb/Cr 성분을 생성한다(S1040). 상기 S1020 단계에서 만들어진 Y 성분과 상기 S1040 단계에서 만들어진 4:2:2 포맷 Cb/Cr 성분을 합쳐 4:2:2 포맷의 컬러영상을 출력한다(S1050).
상기 S1040 단계에서 만들어진 복호화된 4:2:2 포맷의 Cb/Cr 성분을 업샘플링하여 4:4:4 포맷의 Cb/Cr 성분으로 만든다(S1060). 제2향상계층 Cb/Cr 비트 스트 림을 수신하여 4:4:4 포맷의 향상 계층 Cb/Cr 성분을 복호화한다(S1070). 상기 S1060 단계에서 만들어진 4:4:4 포맷의 Cb/Cr 성분과 상기 S1070 단계에서 만들어진 4:4:4 포맷의 향상 계층 Cb/Cr 성분을 합하여 복호화된 4:4:4 포맷의 Cb/Cr 성분을 생성한다(S1080). 상기 S1020 단계에서 만들어진 Y 성분과 상기 S1080 단계에서 만들어진 4:4:4 포맷 Cb/Cr 성분을 합쳐 4:4:4 포맷의 컬러영상을 출력한다(S1090).
한편, 전술한 컬러영상 부호화 및 복호화 방법은 컴퓨터 프로그램으로 작성 가능하다. 상기 프로그램을 구성하는 코드들 및 코드 세그먼트들은 당해 분야의 컴퓨터 프로그래머에 의하여 용이하게 추론될 수 있다. 또한, 상기 프로그램은 컴퓨터가 읽을 수 있는 정보저장매체(computer readable media)에 저장되고, 컴퓨터에 의하여 읽혀지고 실행됨으로써 컬러영상 부호화 및 복호화 방법을 구현한다. 상기 정보저장매체는 자기 기록매체, 광 기록매체, 및 캐리어 웨이브 매체를 포함한다.
이제까지 본 발명에 대하여 그 바람직한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.
전술한 바와 같이 본 발명에 따르면, 하나의 동영상을 다양한 컬러 포맷으로 부호화할 때 주변 여건에 따라 신축적으로 부호화하여, 효율적으로 저장, 전송, 재생할 수 있다.

Claims (26)

  1. 컬러 영상 부호화 방법에 있어서,
    (a) 영상의 휘도성분을 입력받아 움직임 예측 부호화 방법에 따라 부호화하여, 부호화된 휘도성분 비트스트림을 출력하는 단계; 및
    (b) 적어도 하나의 컬러포맷의 색차성분을 입력받아, 상기 움직임 예측 부호화 방법에 의해 생성된 움직임 벡터를 이용하여 부호화하여, 부호화된 색차성분 비트 스트림을 적어도 하나 출력하는 단계를 포함하는 것을 특징으로 하는 부호화 방법.
  2. 제1항에 있어서, 상기 (a) 단계는
    영상의 휘도성분을 입력받아 움직임 벡터를 찾고, 그 움직임 벡터에 기반을 둔 움직임 예측 부호화 방법에 따라 부호화하여 만들어진 휘도성분의 텍스쳐 정보와 상기 움직임 벡터를 다중화하여 휘도성분 비트 스트림으로 출력하는 것을 특징으로 하는 부호화 방법.
  3. 제1항에 있어서, 상기 (b) 단계는
    4:2:0, 4:2:2 및 4:4:4 컬러포맷의 색차성분을 각각 독립적으로 입력받아 부호화하는 것을 특징으로 하는 부호화 방법.
  4. 컬러 영상 부호화 방법에 있어서,
    (a) 원영상의 색차성분을 다운 샘플링하고 이를 다운샘플링하지 않은 휘도성분과 함께 움직임 예측 부호화 방법에 따라 부호화하여 부호화된 기본계층 비트 스트림을 생성하는 단계; 및
    (b) 상기 생성된 기본계층 비트 스트림을 복호화하여 얻어진 색차성분을 업샘플링한 값과, 다운샘플링하지 않은 상기 원 영상의 색차성분값과의 차이인 차분 색차 성분을 부호화하여, 부호화된 향상계층 비트스트림을 출력하는 단계를 포함하는 것을 특징으로 하는 부호화 방법.
  5. 제4항에 있어서,
    상기 (a) 단계의 다운 샘플링은 영상의 4:4:4 포맷의 색차성분을 입력받아 4:2:0 포맷으로 다운 샘플링하는 것을 특징으로 하는 부호화 방법.
  6. 제5항에 있어서, 상기 (b) 단계는
    (b1) 상기 부호화된 기본계층 비트 스트림을 복호화하여 얻은 4:2:0 포맷의 색차성분을 업샘플링하여 4:2:2 포맷의 색차성분으로 만들고, 이와 상기 원영상의 색차성분을 4:2:2 포맷으로 다운 샘플링한 색차성분과의 차를 부호화하여, 부호화 된 4:2:2 포맷의 색차 비트스트림을 출력하는 단계; 및
    (b2) 상기 부호화된 4:2:2 포맷의 색차성분 비트 스트림을 복호화하여 얻은 4:2:2 포맷의 색차성분을 업샘플링하여 4:4:4 포맷의 색차성분으로 만들고, 이와 상기 원 영상의 색차성분과의 차를 부호화하여, 부호화된 4:4:4 포맷의 색차 비트스트림을 출력하는 단계를 포함하는 것을 특징으로 하는 부호화 방법.
  7. 컬러 영상 복호화 방법에 있어서,
    (a) 영상의 휘도성분만을 가지고 움직임 예측 부호화 방법에 따라 부호화된 휘도성분 비트스트림을 입력받아 이를 복호화하여, 휘도 영상을 출력하는 단계;
    (b) 부호화된 색차성분 비트 스트림을 적어도 하나 입력받아 이를 복호화하여, 적어도 하나의 색차 영상을 출력하는 단계; 및
    (c) 상기 복호화된 휘도영상과 색차영상을 합하여 적어도 하나의 컬러포맷의 영상을 출력하는 단계를 포함하는 것을 특징으로 하는 복호화 방법.
  8. 제7항에 있어서, 상기 (b) 단계는
    4:2:0, 4:2:2 및 4:4:4 컬러포맷의 부호화된 색차성분 비트 스트림을 각각 독립적으로 입력받아 복호화하는 것을 특징으로 하는 복호화 방법.
  9. 컬러 영상 복호화 방법에 있어서,
    (a) 영상의 색차성분을 다운 샘플링하고 다운샘플링하지 않은 휘도성분과 함 께 움직임 예측 부호화 방법에 따라 부호화하여 만들어진 기본계층 비트 스트림을 수신하여 복호화하는 단계;
    (b) 상기 생성된 기본계층 비트 스트림을 복호화하여 얻은 색차성분을 업샘플링한 값과 다운샘플링하지 않은 상기 원 영상의 색차성분값과의 차이인 차분 색차 성분을 부호화하여 만들어진 향상계층 비트스트림을 수신하여 복호화하는 단계; 및
    (c) 상기 (a) 단계의 기본계층 스트림으로부터 복호화한 색차영상과 상기 (b) 단계의 향상계층 스트림으로부터 복호화한 색차영상을 더하여 만들어진 색차영상을 상기 (a) 단계의 기본계층 스트림으로부터 복호화된 휘도영상과 합하여 적어도 하나의 향상계층 컬러포맷 영상을 출력하는 단계를 포함하는 것을 특징으로 하는 복호화 방법.
  10. 제9항에 있어서,
    상기 (a) 단계의 다운 샘플링은 영상의 4:4:4 포맷의 색차성분을 입력받아 4:2:0 포맷으로 다운 샘플링하는 것을 특징으로 하는 복호화 방법.
  11. 제10항에 있어서, 상기 (b) 단계는
    (b1) 상기 생성된 기본계층 비트 스트림을 복호화하여 얻은 4:2:0 포맷의 색차성분을 업샘플링하여 4:2:2 포맷으로 만들고, 4:2:2 포맷의 색차성분 비트 스트림을 복호화한 값과 합하여 4:2:2 포맷의 색차영상을 생성하는 단계; 및
    (b2) 상기 복호화된 4:2:2 포맷의 색차성분을 복호화한 후 업샘플링하여 4:4:4 포맷으로 만들고, 4:4:4 포맷의 색차성분 비트 스트림을 복호화한 값과 합하여 4:4:4 포맷의 색차영상을 생성하는 단계를 포함하는 것을 특징으로 하는 복호화 방법.
  12. 컬러 영상 부호화 장치에 있어서,
    영상의 휘도성분을 입력받아 움직임 예측 부호화 방법에 따라 부호화하여, 부호화된 휘도성분 비트스트림을 출력하는 휘도성분 부호화부; 및
    적어도 하나의 컬러포맷의 색차성분을 입력받아, 상기 움직임 예측 부호화 방법에 의해 생성된 움직임 벡터를 이용하여 부호화하여, 부호화된 색차성분 비트 스트림을 적어도 하나 출력하는 색차성분 부호화부를 포함하는 것을 특징으로 하는 부호화 장치.
  13. 제12항에 있어서, 상기 휘도성분 부호화부는
    영상의 휘도성분을 입력받아 움직임 벡터를 찾고, 그 움직임 벡터에 기반을 둔 움직임 예측 부호화 방법에 따라 부호화하여 만들어진 휘도성분의 텍스쳐 정보와 상기 움직임 벡터를 다중화하여 휘도성분 비트 스트림으로 출력하는 것을 특징으로 하는 부호화 장치.
  14. 제12항에 있어서, 상기 색차성분 부호화부는
    4:2:0, 4:2:2 및 4:4:4 컬러포맷의 색차성분을 각각 독립적으로 입력받아 부호화하는 것을 특징으로 하는 부호화 장치.
  15. 제14항에 있어서, 상기 색차성분 부호화부는
    4:2:0 컬러포맷의 색차성분을 입력받아 부호화하는 제1색차성분 부호화부;
    4:2:2 컬러포맷의 색차성분을 입력받아 부호화하는 제2색차성분 부호화부; 및
    4:4:4 컬러포맷의 색차성분을 입력받아 부호화하는 제3색차성분 부호화부를 포함하는 것을 특징으로 하는 부호화 장치.
  16. 컬러 영상 부호화 장치에 있어서,
    원영상의 색차성분을 다운 샘플링하는 다운 샘플링부;
    상기 다운 샘플링한 색차성분을 다운샘플링하지 않은 휘도성분과 함께 움직임 예측 부호화 방법에 따라 부호화하여 부호화된 기본계층 비트 스트림을 생성하는 기본계층 부호화부; 및
    상기 생성된 기본계층 비트 스트림을 복호화하여 얻어진 색차성분을 업샘플링한 값과, 다운샘플링하지 않은 상기 원 영상의 색차성분값과의 차이인 차분 색차 성분을 부호화하여 부호화된 향상계층 비트스트림을 출력하는 향상계층 부호화부를 포함하는 것을 특징으로 하는 부호화 장치.
  17. 제16항에 있어서, 상기 다운 샘플링부는
    영상의 4:4:4 포맷의 색차성분을 입력받아 4:2:0 포맷으로 다운 샘플링하는 제1다운 샘플링부; 및
    영상의 4:4:4 포맷의 색차성분을 입력받아 4:2:2 포맷으로 다운 샘플링하는 제2다운 샘플링부를 포함하는 것을 특징으로 하는 부호화 장치.
  18. 제16항에 있어서, 상기 향상계층 부호화부는
    (b1) 상기 부호화된 기본계층 비트 스트림을 복호화하여 얻은 4:2:0 포맷의 색차성분을 업샘플링하여 4:2:2 포맷의 색차성분으로 만들고, 이와 상기 원영상의 색차성분을 4:2:2 포맷으로 다운 샘플링한 색차성분과의 차를 부호화하여, 부호화된 4:2:2 포맷의 색차 비트스트림을 출력하는 제1향상계층 부호화부; 및
    상기 부호화된 4:2:2 포맷의 색차성분 비트 스트림을 복호화하여 얻은 4:2:2 포맷의 색차성분을 업샘플링하여 4:4:4 포맷의 색차성분으로 만들고, 이와 상기 원 영상의 색차성분과의 차를 부호화하여, 부호화된 4:4:4 포맷의 색차 비트스트림을 출력하는 제2향상계층 부호화부를 포함하는 것을 특징으로 하는 부호화 장치.
  19. 컬러 영상 복호화 장치에 있어서,
    영상의 휘도성분만을 가지고 움직임 예측 부호화 방법에 따라 부호화된 휘도성분 비트스트림을 입력받아 이를 복호화하여, 휘도 영상을 출력하는 휘도성분 복호화부; 및
    부호화된 색차성분 비트 스트림을 적어도 하나 입력받아 이를 복호화하여, 적어도 하나의 색차 영상을 생성하고, 이를 상기 복호화된 휘도영상과 합하여 적어도 하나의 컬러포맷의 영상을 출력하는 색차성분 복호화부를 포함하는 것을 특징으로 하는 복호화 장치.
  20. 제19항에 있어서, 상기 색차성분 복호화부는
    4:2:0, 4:2:2 및 4:4:4 컬러포맷의 부호화된 색차성분 비트 스트림을 각각 독립적으로 입력받아 복호화하는 것을 특징으로 하는 복호화 장치.
  21. 컬러 영상 복호화 장치에 있어서,
    영상의 색차성분을 다운 샘플링하고 다운샘플링하지 않은 휘도성분과 함께 움직임 예측 부호화 방법에 따라 부호화하여 만들어진 기본계층 비트 스트림을 수신하여 복호화하는 기본계층 복호화부;
    상기 생성된 기본계층 비트 스트림을 복호화하여 얻은 색차성분을 업샘플링한 값과 다운샘플링하지 않은 상기 원 영상의 색차성분값과의 차이인 차분 색차 성분을 부호화하여 만들어진 향상계층 비트스트림을 수신하여 복호화하는 향상계층 복호화부; 및
    상기 기본계층 스트림으로부터 복호화한 색차영상과 상기 향상계층 스트림으로부터 복호화한 색차영상을 더하여 만들어진 색차영상을 상기 기본계층 스트림으로부터 복호화된 휘도영상과 합하여 적어도 하나의 향상계층 컬러포맷 영상을 출력 하는 향상계층 컬러영상 출력부를 포함하는 것을 특징으로 하는 복호화 장치.
  22. 제21항에 있어서, 상기 향상계층 복호화부는
    상기 생성된 기본계층 비트 스트림을 복호화하여 얻은 4:2:0 포맷의 색차성분을 업샘플링하여 4:2:2 포맷으로 만들고, 4:2:2 포맷의 색차성분 비트 스트림을 복호화한 값과 합하여 4:2:2 포맷의 색차영상을 생성하는 제1향상계층 복호화부; 및
    상기 복호화된 4:2:2 포맷의 색차성분을 복호화한 후 업샘플링하여 4:4:4 포맷으로 만들고, 4:4:4 포맷의 색차성분 비트 스트림을 복호화한 값과 합하여 4:4:4 포맷의 색차영상을 생성하는 제2향상계층 복호화부를 포함하는 것을 특징으로 하는 복호화 장치.
  23. 부호화된 컬러 영상을 기록한 정보저장매체에 있어서,
    영상의 휘도성분을 입력받아 움직임 예측 부호화 방법에 따라 부호화하여, 부호화된 휘도성분 비트스트림; 및
    적어도 하나의 컬러포맷의 색차성분을 입력받아, 상기 움직임 예측 부호화 방법에 의해 생성된 움직임 벡터를 이용하여 부호화하여, 부호화된 색차성분 비트 스트림을 포함하는 것을 특징으로 하는 정보저장매체.
  24. 제23항에 있어서, 상기 휘도성분 비트 스트림은
    영상의 휘도성분을 입력받아 움직임 벡터를 찾고, 그 움직임 벡터에 기반을 둔 움직임 예측 부호화 방법에 따라 부호화하여 만들어진 휘도성분의 텍스쳐 정보와 상기 움직임 벡터를 다중화하여 만들어진 것을 특징으로 하는 정보저장매체.
  25. 제23항에 있어서, 상기 색차성분 비트 스트림은
    4:2:0, 4:2:2 및 4:4:4 컬러포맷의 색차성분이 각각 독립적으로 부호화되어 있는 것을 특징으로 하는 정보저장매체.
  26. 부호화된 컬러 영상을 기록한 정보저장매체에 있어서,
    원 영상의 색차성분을 다운 샘플링하고, 이를 다운샘플링하지 않은 휘도성분과 함께 움직임 예측 부호화 방법에 따라 부호화하여 만들어진 부호화된 기본계층 비트 스트림; 및
    상기 부호화된 기본 계층 비트 스트림을 복호화하여 얻은 복호화된 색차성분을 업샘플링한 값과 다운샘플링하지 않은 상기 원 영상의 색차성분과의 차이인 차분 색차 성분을 부호화하여 만들어진 부호화된 향상계층 비트스트림을 포함하는 것을 특징으로 하는 정보저장매체.
KR1020040055081A 2004-07-15 2004-07-15 컬러 영상의 신축적 부호화, 복호화 방법 및 장치 KR100657268B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020040055081A KR100657268B1 (ko) 2004-07-15 2004-07-15 컬러 영상의 신축적 부호화, 복호화 방법 및 장치
US11/178,343 US20060013308A1 (en) 2004-07-15 2005-07-12 Method and apparatus for scalably encoding and decoding color video
CN200510083192A CN100579244C (zh) 2004-07-15 2005-07-13 用于可伸缩编码和解码彩色视频的方法和设备
EP05254376A EP1617679A3 (en) 2004-07-15 2005-07-13 Method and apparatus for scalably encoding and decoding colour video

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020040055081A KR100657268B1 (ko) 2004-07-15 2004-07-15 컬러 영상의 신축적 부호화, 복호화 방법 및 장치

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020060080649A Division KR100708209B1 (ko) 2006-08-24 2006-08-24 컬러 영상의 신축적 부호화, 복호화 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20060006183A true KR20060006183A (ko) 2006-01-19
KR100657268B1 KR100657268B1 (ko) 2006-12-14

Family

ID=34941834

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020040055081A KR100657268B1 (ko) 2004-07-15 2004-07-15 컬러 영상의 신축적 부호화, 복호화 방법 및 장치

Country Status (4)

Country Link
US (1) US20060013308A1 (ko)
EP (1) EP1617679A3 (ko)
KR (1) KR100657268B1 (ko)
CN (1) CN100579244C (ko)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100900294B1 (ko) * 2006-11-09 2009-05-29 엘지전자 주식회사 비디오 신호의 디코딩/인코딩 방법 및 장치
KR100908062B1 (ko) * 2006-09-07 2009-07-15 엘지전자 주식회사 비디오 신호의 디코딩/인코딩 방법 및 장치
US7742532B2 (en) 2006-11-17 2010-06-22 Lg Electronics Inc. Method and apparatus for applying de-blocking filter to a video signal
WO2010074407A2 (ko) * 2008-12-23 2010-07-01 에스케이텔레콤 주식회사 컬러 영상 부호화/복호화 방법 및 장치
KR101023365B1 (ko) * 2005-09-20 2011-03-18 미쓰비시덴키 가부시키가이샤 화상 복호 장치 및 화상 복호 방법
KR101030638B1 (ko) * 2007-01-12 2011-04-20 미쓰비시덴키 가부시키가이샤 동화상 부호화 장치, 동화상 부호화 방법, 동화상 복호 장치 및 동화상 복호 방법
KR101219007B1 (ko) * 2010-10-08 2013-01-07 삼성전기주식회사 영상 신호의 압축 장치 및 방법
KR101311403B1 (ko) * 2006-07-04 2013-09-25 삼성전자주식회사 영상의 부호화 방법 및 장치, 복호화 방법 및 장치

Families Citing this family (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070038396A (ko) * 2005-10-05 2007-04-10 엘지전자 주식회사 영상 신호의 인코딩 및 디코딩 방법
KR100959541B1 (ko) * 2005-10-05 2010-05-27 엘지전자 주식회사 영상 신호의 인코딩/디코딩 방법 및 장치
KR100891663B1 (ko) * 2005-10-05 2009-04-02 엘지전자 주식회사 비디오 신호 디코딩 및 인코딩 방법
KR100891662B1 (ko) * 2005-10-05 2009-04-02 엘지전자 주식회사 비디오 신호 디코딩 및 인코딩 방법
KR20070096751A (ko) * 2006-03-24 2007-10-02 엘지전자 주식회사 영상 데이터를 코딩/디코딩하는 방법 및 장치
US7956930B2 (en) 2006-01-06 2011-06-07 Microsoft Corporation Resampling and picture resizing operations for multi-resolution video coding and decoding
KR101330630B1 (ko) * 2006-03-13 2013-11-22 삼성전자주식회사 최적인 예측 모드를 적응적으로 적용하여 동영상을부호화하는 방법 및 장치, 동영상을 복호화하는 방법 및장치
US8170116B2 (en) * 2006-03-27 2012-05-01 Nokia Corporation Reference picture marking in scalable video encoding and decoding
KR101366091B1 (ko) 2006-03-28 2014-02-21 삼성전자주식회사 영상 부호화 및 복호화 방법과 장치
JP5039142B2 (ja) 2006-10-25 2012-10-03 フラウンホーファー−ゲゼルシャフト・ツール・フェルデルング・デル・アンゲヴァンテン・フォルシュング・アインゲトラーゲネル・フェライン 品質スケーラブルな符号化方法
US20100202512A1 (en) * 2007-04-16 2010-08-12 Hae-Chul Choi Color video scalability encoding and decoding method and device thereof
TW200845723A (en) * 2007-04-23 2008-11-16 Thomson Licensing Method and apparatus for encoding video data, method and apparatus for decoding encoded video data and encoded video signal
KR20080114388A (ko) * 2007-06-27 2008-12-31 삼성전자주식회사 스케일러블 영상 부호화장치 및 방법과 그 영상 복호화장치및 방법
US8750390B2 (en) 2008-01-10 2014-06-10 Microsoft Corporation Filtering and dithering as pre-processing before encoding
US8953673B2 (en) 2008-02-29 2015-02-10 Microsoft Corporation Scalable video coding and decoding with sample bit depth and chroma high-pass residual layers
US8711948B2 (en) 2008-03-21 2014-04-29 Microsoft Corporation Motion-compensated prediction of inter-layer residuals
ES2602100T3 (es) 2008-04-16 2017-02-17 Ge Video Compression, Llc Escalabilidad de profundidad de bits
US9571856B2 (en) 2008-08-25 2017-02-14 Microsoft Technology Licensing, Llc Conversion operations in scalable video encoding and decoding
KR20110033679A (ko) * 2009-09-25 2011-03-31 삼성전자주식회사 네트워크 기반 로봇의 영상 전송 시스템 및 그 방법
ES2907203T3 (es) 2010-04-13 2022-04-22 Ge Video Compression Llc Codificación de vídeo que usa subdivisiones multiárbol de imágenes
CN102939750B (zh) 2010-04-13 2016-07-06 Ge视频压缩有限责任公司 跨平面预测
CN106454370B (zh) 2010-04-13 2019-11-01 Ge视频压缩有限责任公司 解码器、重建数组的方法、编码器、编码方法及数据流
CN105915918B (zh) * 2010-04-13 2019-09-06 Ge视频压缩有限责任公司 跨平面预测的方法和装置
JP5718453B2 (ja) 2010-04-13 2015-05-13 フラウンホーファー−ゲゼルシャフト・ツール・フェルデルング・デル・アンゲヴァンテン・フォルシュング・アインゲトラーゲネル・フェライン 復号化方法
US20120230410A1 (en) * 2011-03-09 2012-09-13 Vixs Systems, Inc. Multi-format video decoder and methods for use therewith
US9088793B2 (en) * 2011-03-09 2015-07-21 Vixs Systems, Inc. Multi-format video decoder with filter vector processing and methods for use therewith
TWI690211B (zh) 2011-04-15 2020-04-01 美商杜比實驗室特許公司 高動態範圍影像的解碼方法、其處理器非暫態可讀取媒體及電腦程式產品
US8334911B2 (en) 2011-04-15 2012-12-18 Dolby Laboratories Licensing Corporation Encoding, decoding, and representing high dynamic range images
US9036042B2 (en) 2011-04-15 2015-05-19 Dolby Laboratories Licensing Corporation Encoding, decoding, and representing high dynamic range images
US8971416B2 (en) * 2011-05-05 2015-03-03 Vixs Systems, Inc Video decoder with vector processor and methods for use therewith
US9294770B2 (en) 2011-06-24 2016-03-22 Lg Electronics Inc. Image information encoding and decoding method
CN106937113B (zh) * 2011-12-05 2020-06-02 同济大学 基于混合色度采样率的图像压缩方法和装置
US8934726B2 (en) 2011-12-19 2015-01-13 Dolby Laboratories Licensing Corporation Video codecs with integrated gamut management
CN109218730B (zh) * 2012-01-19 2023-07-28 华为技术有限公司 用于lm帧内预测的参考像素缩减
US10469851B2 (en) * 2012-04-16 2019-11-05 New Cinema, LLC Advanced video coding method, system, apparatus, and storage medium
AU2013275098B2 (en) * 2012-06-11 2016-05-05 Samsung Electronics Co., Ltd. Method and apparatus for encoding videos sharing SAO parameter according to color component
JP5873395B2 (ja) * 2012-06-14 2016-03-01 Kddi株式会社 動画像符号化装置、動画像復号装置、動画像符号化方法、動画像復号方法、およびプログラム
EP2868078A4 (en) * 2012-06-27 2016-07-27 Intel Corp PREDICTION OF RESIDUES BETWEEN LAYERS AND BETWEEN CHANNELS
CN103634603B (zh) * 2012-08-29 2017-07-07 中兴通讯股份有限公司 视频编解码方法、装置及系统
MX360669B (es) 2014-03-06 2018-11-13 Samsung Electronics Co Ltd Método de decodificación de imágenes y dispositivo para el mismo, y método de codificación de imágenes y dispositivo para el mismo.
CA2950964C (en) * 2014-06-19 2018-10-30 Hfi Innovation Inc. Method and apparatus of candidate generation for single sample mode in video coding
JP6409516B2 (ja) * 2014-11-13 2018-10-24 富士通株式会社 ピクチャ符号化プログラム、ピクチャ符号化方法及びピクチャ符号化装置
US10462475B2 (en) * 2014-12-19 2019-10-29 Hfi Innovation Inc. Methods of palette based prediction for non-444 color format in video and image coding
US9749646B2 (en) * 2015-01-16 2017-08-29 Microsoft Technology Licensing, Llc Encoding/decoding of high chroma resolution details
US10440025B2 (en) 2016-06-07 2019-10-08 Gryphon Online Safety, Inc Remotely controlling access to online content
US11301572B2 (en) 2016-02-27 2022-04-12 Gryphon Online Safety, Inc. Remotely controlling access to online content
JP6769231B2 (ja) * 2016-10-17 2020-10-14 富士通株式会社 動画像符号化装置、動画像符号化方法、動画像復号装置、動画像復号方法、及び動画像符号化用コンピュータプログラムならびに動画像復号用コンピュータプログラム
US10438328B1 (en) * 2016-12-15 2019-10-08 Google Llc Chroma blurring reduction in video and images
CN114125448B (zh) * 2020-08-31 2023-04-04 华为技术有限公司 视频编码方法、解码方法及相关装置
CN117956169A (zh) * 2022-10-31 2024-04-30 华为技术有限公司 图像编解码方法和装置

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4672427A (en) * 1985-02-08 1987-06-09 American Telephone And Telegraph Company Processing of analog video signals in digital transmission systems
GB2266635B (en) * 1992-02-28 1995-11-15 Sony Broadcast & Communication Image data compression
JP3381855B2 (ja) * 1992-12-28 2003-03-04 ソニー株式会社 画像信号符号化方法および画像信号符号化装置、並びに画像信号復号化方法および画像信号復号化装置
KR950006769B1 (ko) * 1992-12-31 1995-06-22 현대전자산업주식회사 고선명 텔레비젼의 색차신호 동벡터 추출방법 및 움직임 보상장치
JPH06343172A (ja) * 1993-06-01 1994-12-13 Matsushita Electric Ind Co Ltd 動きベクトル検出方法及び動きベクトル符号化方法
US5491343A (en) * 1994-03-25 1996-02-13 Brooker; Gary High-speed multiple wavelength illumination source, apparatus containing the same, and applications thereof to methods of irradiating luminescent samples and of quantitative luminescence ratio microscopy
KR0157570B1 (ko) * 1995-11-24 1999-02-18 김광호 복수경로를 통해 mpeg2 비트열을 복호하는 복호화장치
US6144698A (en) * 1996-10-31 2000-11-07 Mitsubishi Electric Information Technology Center America, Inc. (Ita) Digital video decoder and method of decoding a digital video signal
JPH10322722A (ja) * 1997-03-17 1998-12-04 Sony Corp 画像信号符号化装置および画像信号復号装置
US6829301B1 (en) * 1998-01-16 2004-12-07 Sarnoff Corporation Enhanced MPEG information distribution apparatus and method

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101023365B1 (ko) * 2005-09-20 2011-03-18 미쓰비시덴키 가부시키가이샤 화상 복호 장치 및 화상 복호 방법
US8553768B2 (en) 2006-07-04 2013-10-08 Samsung Electronics Co., Ltd. Image encoding/decoding method and apparatus
KR101311403B1 (ko) * 2006-07-04 2013-09-25 삼성전자주식회사 영상의 부호화 방법 및 장치, 복호화 방법 및 장치
US8401085B2 (en) 2006-09-07 2013-03-19 Lg Electronics Inc. Method and apparatus for decoding/encoding of a video signal
KR100908062B1 (ko) * 2006-09-07 2009-07-15 엘지전자 주식회사 비디오 신호의 디코딩/인코딩 방법 및 장치
KR101349837B1 (ko) * 2006-09-07 2014-01-10 엘지전자 주식회사 비디오 신호의 디코딩/인코딩 방법 및 장치
US8428144B2 (en) 2006-09-07 2013-04-23 Lg Electronics Inc. Method and apparatus for decoding/encoding of a video signal
US8054885B2 (en) 2006-11-09 2011-11-08 Lg Electronics Inc. Method and apparatus for decoding/encoding a video signal
KR100900294B1 (ko) * 2006-11-09 2009-05-29 엘지전자 주식회사 비디오 신호의 디코딩/인코딩 방법 및 장치
US8184698B2 (en) 2006-11-17 2012-05-22 Lg Electronics Inc. Method and apparatus for decoding/encoding a video signal using inter-layer prediction
US8229274B2 (en) 2006-11-17 2012-07-24 Lg Electronics Inc. Method and apparatus for decoding/encoding a video signal
US7742524B2 (en) 2006-11-17 2010-06-22 Lg Electronics Inc. Method and apparatus for decoding/encoding a video signal using inter-layer prediction
US7742532B2 (en) 2006-11-17 2010-06-22 Lg Electronics Inc. Method and apparatus for applying de-blocking filter to a video signal
KR101030638B1 (ko) * 2007-01-12 2011-04-20 미쓰비시덴키 가부시키가이샤 동화상 부호화 장치, 동화상 부호화 방법, 동화상 복호 장치 및 동화상 복호 방법
WO2010074407A3 (ko) * 2008-12-23 2010-08-26 에스케이텔레콤 주식회사 컬러 영상 부호화/복호화 방법 및 장치
WO2010074407A2 (ko) * 2008-12-23 2010-07-01 에스케이텔레콤 주식회사 컬러 영상 부호화/복호화 방법 및 장치
US8824562B2 (en) 2008-12-23 2014-09-02 Sk Telecom Co., Ltd. Method and apparatus for encoding/decoding color image
KR101219007B1 (ko) * 2010-10-08 2013-01-07 삼성전기주식회사 영상 신호의 압축 장치 및 방법

Also Published As

Publication number Publication date
US20060013308A1 (en) 2006-01-19
CN100579244C (zh) 2010-01-06
EP1617679A3 (en) 2006-02-08
EP1617679A2 (en) 2006-01-18
KR100657268B1 (ko) 2006-12-14
CN1728833A (zh) 2006-02-01

Similar Documents

Publication Publication Date Title
KR100657268B1 (ko) 컬러 영상의 신축적 부호화, 복호화 방법 및 장치
CN111869212B (zh) 视频解码方法、装置和可读介质
US8619854B2 (en) Scalable video encoding and decoding method using switching pictures and apparatus thereof
KR101053628B1 (ko) 영상 신호의 스케일러블 인코딩 및 디코딩 방법
KR101265371B1 (ko) 복호 장치, 복호 방법 및 기록 매체
KR100791299B1 (ko) 다 계층 기반의 비디오 인코딩 방법 및 장치
KR20060105409A (ko) 영상 신호의 스케일러블 인코딩 및 디코딩 방법
US8306342B2 (en) Method and apparatus to encode/decode image efficiently
KR20060088461A (ko) 영상신호의 엔코딩/디코딩시에 영상블록을 위한 모션벡터를베이스 레이어 픽처의 모션벡터로부터 유도하는 방법 및장치
TW200400767A (en) Method and apparatus for transcoding compressed video bitstreams
JP2005253088A (ja) グレイアルファチャンネルを含んだ映像の符号化/復号化装置および方法
KR20080093386A (ko) 컬러 동영상 신축 부호화와 복호화 방법 및 그 장치
JP6409516B2 (ja) ピクチャ符号化プログラム、ピクチャ符号化方法及びピクチャ符号化装置
KR100880640B1 (ko) 스케일러블 비디오 신호 인코딩 및 디코딩 방법
JP2007266749A (ja) 符号化方法
KR100883604B1 (ko) 스케일러블 비디오 신호 인코딩 및 디코딩 방법
KR100878824B1 (ko) 스케일러블 비디오 신호 인코딩 및 디코딩 방법
JP4660408B2 (ja) 符号化方法
KR100708209B1 (ko) 컬러 영상의 신축적 부호화, 복호화 방법 및 장치
KR100878825B1 (ko) 스케일러블 비디오 신호 인코딩 및 디코딩 방법
KR20050112587A (ko) 동영상 인코딩, 디코딩 장치 및 그 방법
CN112118452B (zh) 视频解码的方法和装置、计算机设备
KR20060059770A (ko) 영상신호의 엔코딩/디코딩시에 영상블록을 위한 모션벡터를베이스 레이어 픽처의 모션벡터로부터 유도하는 방법 및장치
JP4193252B2 (ja) 信号処理装置及び方法、信号復号装置、並びに信号符号化装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
J201 Request for trial against refusal decision
A107 Divisional application of patent
AMND Amendment
B701 Decision to grant
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20121129

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20131128

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20141127

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20151127

Year of fee payment: 10

LAPS Lapse due to unpaid annual fee