KR100809296B1 - 타입이 일치하지 않는 하위 계층의 정보를 사용하여인터레이스 비디오 신호를 인코딩/디코딩 하는 방법 및장치 - Google Patents

타입이 일치하지 않는 하위 계층의 정보를 사용하여인터레이스 비디오 신호를 인코딩/디코딩 하는 방법 및장치 Download PDF

Info

Publication number
KR100809296B1
KR100809296B1 KR1020060053130A KR20060053130A KR100809296B1 KR 100809296 B1 KR100809296 B1 KR 100809296B1 KR 1020060053130 A KR1020060053130 A KR 1020060053130A KR 20060053130 A KR20060053130 A KR 20060053130A KR 100809296 B1 KR100809296 B1 KR 100809296B1
Authority
KR
South Korea
Prior art keywords
macroblock
field
layer
current layer
frame
Prior art date
Application number
KR1020060053130A
Other languages
English (en)
Other versions
KR20070085003A (ko
Inventor
김소영
이교혁
한우진
이태미
마누 매튜
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020060053130A priority Critical patent/KR100809296B1/ko
Priority to JP2008556245A priority patent/JP2009527977A/ja
Priority to PCT/KR2007/000886 priority patent/WO2007097562A1/en
Priority to CN2007800065184A priority patent/CN101390402B/zh
Priority to US11/708,630 priority patent/US20070274389A1/en
Priority to EP07709035A priority patent/EP1992170A1/en
Publication of KR20070085003A publication Critical patent/KR20070085003A/ko
Application granted granted Critical
Publication of KR100809296B1 publication Critical patent/KR100809296B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/33—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/112—Selection of coding mode or of prediction mode according to a given display mode, e.g. for interlaced or progressive display mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/16—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter for a given display mode, e.g. for interlaced or progressive display mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

본 발명은 타입이 일치하지 않는 하위 계층의 정보를 사용하여 인터레이스 비디오 신호를 인코딩/디코딩 하는 방법 및 장치에 관한 발명으로서 본 발명의 일 실시예에 따른 인코딩 방법은 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 인코딩하는 방법에 있어서, 현재 계층의 매크로블록 한 쌍이 프레임 타입이며, 하위 계층의 해당 매크로블록 한 쌍이 필드 타입인지 검토하는 단계, 및 상기 하위 계층의 매크로블록 한 쌍이 필드타입이며, 상기 하위 계층의 해당 매크로블록 한 쌍의 상위 매크로블록과 하위 매크로블록이 서로 다른 매크로블록 모드로 코딩된 경우, 상기 상위 매크로블록 또는 하위 매크로블록의 정보를 보간하여 상기 현재 계층의 매크로블록을 예측하여 인코딩하는 단계를 포함한다.
인터레이스 비디오, 인코딩, 필드, 프레임, 잔차, 모션 예측

Description

타입이 일치하지 않는 하위 계층의 정보를 사용하여 인터레이스 비디오 신호를 인코딩/디코딩 하는 방법 및 장치{Method and apparatus for encoding/decoding interlaced video signal using low layer's information which has different type}
도 1은 종래의 프로그래시브 프레임과 인터레이스 필드를 비교한 도면이다
도 2는 현재 계층 매크로블록(210)이 프레임 타입이며 그 하위 계층인 기초 계층이 필드 타입인 두 경우를 보여준다.
도 3은 본 발명의 일 실시예에 따른 기초 계층의 매크로블록을 보간한 경우를 보여주는 도면이다.
도 4는 본 발명의 일 실시예에 따른 참조 인덱스의 설정을 보여주는 도면이다.
도 5는 본 발명의 다른 실시예에 따른 모션 벡터의 설정을 보여주는 도면이다.
도 6은 본 발명의 일 실시예에 따른, 매크로블록 프레임(650)을 통해 상위 필드와 하위 필드를 유추하는 과정을 보여주는 도면이다.
도 7은 본 발명의 일 실시예에 따른 기초 계층의 인트라 매크로블록을 통해 현재 계층의 필드 타입 매크로블록을 예측하는 과정이다.
도 8은 본 발명의 일 실시예에 따른 인코딩 과정을 보여주는 도면이다.
도 9는 본 발명의 일 실시예에 따른 비디오 인코더 중 향상 계층을 인코딩하는 향 상 계층 인코딩부(900)의 구성을 보여주는 도면이다.
도 10은 본 발명의 일 실시예에 따른 비디오 디코더 중 향상 계층을 디코딩하는 향상 계층 디코딩부(1000)의 구성을 보여주는 도면이다.
<도면의 주요 부분에 대한 부호의 설명>
900: 향상계층 인코딩부 910: 하위계층 매크로블록 프로세싱부
920: 필드/프레임 변환부 930: 상위계층 매크로블록 프로세싱부
960: 예측 인코딩부
1000: 향상계층 디코딩부 1010: 하위계층 매크로블록 프로세싱부
1020: 필드/프레임 변환부 1030: 상위계층 매크로블록 프로세싱부
본 발명은 비디오 신호의 인코딩/디코딩에 관한 것으로, 보다 상세하게는 타입이 일치하지 않는 하위 계층의 정보를 사용하여 인터레이스 비디오 신호를 인코딩/디코딩 하는 방법 및 장치에 관한 것이다.
아날로그 비디오 압축 기술로 인터레이스 필드 스캐닝(interlaced field scanning)이 소개되었다. 프로그래시브 방식이 더 나은 디지털 압축효과와 화질을 제공하지만, 기존의 많은 영상 장치에서는 인터레이스 필드 스캐닝 방식이 제공되어 왔었다. 인터레이스 필드 스캐닝이란, 하나의 화면을 구성하는 다수의 행(row) 중에서 짝수번째 행과 홀수번째 행을 분리하여 독자적으로 데이터를 송신하고, 이를 주사 하는 방식을 의미한다.
도 1은 종래의 프로그래시브 프레임과 인터레이스 필드를 비교한 도면이다. 110은 하나의 화면에 대한 이미지 정보를 모두 포함하는 프로그래시브 프레임(progressive frame)이며, 112는 110 프레임에서 짝수번째 필드만을 추출한 상위 필드(Top field)이며, 114는 110 프레임에서 홀수번째 필드만을 추출한 하위 필드(Bottom field)이다. 하나의 프로그래시브 프레임은 두 개의 인터레이스 필드로 나뉘어지며, 인터레이스 필드의 재생 시간은 소정 시간이하로 설정되도록 한다.
한편, 인터레이스 필드 스캐닝 방식이 비디오 코딩에 적용되면서, 프로그래시브 방식의 예측 및 보상등의 과정에 변화가 필요하게 되었다.
특히 모션 예측에 있어서 프로그래시브 방식과 달리, 인터레이스 방식의 경우 인접한 픽셀 또는 인접한 영역의 정보가 다른 필드에 속하게 되어 모션 예측에 어려움이 있어왔다. 따라서 인터레이스 방식에 적합하게 모션을 예측하는 과정이 필요하다.
본 발명은 상기한 문제점을 개선하기 위해 안출된 것으로, 본 발명은 인터레이스 방식의 비디오 인코딩 및 디코딩에서의 모션 예측을 수행하는 방법 및 장치를 제공하는데 목적이 있다.
본 발명의 목적들은 이상에서 언급한 목적들로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
본 발명의 일 실시예에 따른 인코딩 방법은 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 인코딩하는 방법에 있어서, 현재 계층의 매크로블록 한 쌍이 프레임 타입이며, 하위 계층의 해당 매크로블록 한 쌍이 필드 타입인지 검토하는 단계, 및 상기 하위 계층의 매크로블록 한 쌍이 필드타입이며, 상기 하위 계층의 해당 매크로블록 한 쌍의 상위 매크로블록과 하위 매크로블록이 서로 다른 매크로블록 모드로 코딩된 경우, 상기 상위 매크로블록 또는 하위 매크로블록의 정보를 보간하여 상기 현재 계층의 매크로블록을 예측하여 인코딩하는 단계를 포함한다.
본 발명의 일 실시예에 따른 디코딩 방법은 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 디코딩하는 방법에 있어서, 현재 계층의 매크로블록 한 쌍이 프레임 타입이며, 하위 계층의 해당 매크로블록 한 쌍이 필드 타입인지 검토하는 단계, 및 상기 하위 계층의 매크로블록이 필드타입이며, 상기 하위 계층의 해당 매크로블록의 한 쌍의 상위 매크로블록과 하위 하위 매크로블록이 서로 다른 매크로블록 모드로 코딩된 경우, 상기 상위 매크로블록 또는 하위 매크로블록의 정보를 보간하여 상기 현재 계층의 매크로블록을 예측하여 디코딩하는 단계를 포함한다.
본 발명의 다른 실시예에 따른 인코딩 방법은 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 인코딩하는 방법에 있어서, 현재 계층의 매크로블록이 필드 타입이며, 하위 계층의 매크로블록이 프레임 타입인지 검토하는 단계, 및 상기 현재 계층의 매크로블록이 필드타입인 경우, 상기 하위 계층의 매크로 블록 한 쌍의 상위 매크로블록과 하위 매크로블록이 서로 다른 매크로블록 모드로 코딩된 경우, 상기 하위 계층의 프레임 타입 인터 매크로블록의 서브블록을 참조하여 상기 현재 계층의 인터 매크로블록을 인코딩하는 단계를 포함한다.
본 발명의 다른 실시예에 따른 디코딩 방법은 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 디코딩하는 방법에 있어서, 현재 계층의 매크로블록이 필드 타입이며, 하위 계층의 매크로블록이 프레임 타입인지 검토하는 단계, 및 상기 현재 계층의 매크로블록이 필드타입인 경우, 상기 하위 계층의 매크로블록의 상위 매크로블록과 하위 매크로블록이 서로 다른 매크로블록 모드로 코딩된 경우, 상기 하위 계층의 프레임 타입 인터 매크로블록의 서브블록을 참조하여 상기 현재 계층의 인터 매크로블록을 디코딩하는 단계를 포함한다.
본 발명의 또다른 실시예에 따른 인코딩 방법은 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 인코딩하는 방법에 있어서, 현재 계층의 매크로블록 한 쌍이 필드 타입이며, 하위 계층의 매크로블록 한 쌍이 프레임 타입인지 검토하는 단계, 및 상기 현재 계층의 매크로블록이 필드 타입인 경우, 상기 하위 계층의 매크로블록의 인트라 코딩 또는 인터 코딩에 따라 상기 현재 계층의 매크로블록의 참조 인덱스를 2배로 설정하는 단계, 및 상기 설정된 참조 인덱스의 값을 사용하여 인코딩하는 단계를 포함한다.
본 발명의 또다른 실시예에 따른 디코딩 방법은 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 디코딩하는 방법에 있어서, 현재 계층의 매크로블록 한 쌍이 필드 타입이며, 하위 계층의 매크로블록 한 쌍이 프레임 타입인 지 검토하는 단계, 및 상기 현재 계층의 매크로블록이 필드 타입인 경우, 상기 하위 계층의 매크로블록의 인트라 코딩 또는 인터 코딩에 따라 상기 현재 계층의 매크로블록의 참조 인덱스를 2배로 설정하는 단계, 및 상기 설정된 참조 인덱스의 값을 사용하여 디코딩하는 단계를 포함한다.
본 발명의 또다른 실시예에 따른 인코딩 방법은 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 인코딩하는 방법에 있어서, 현재 계층의 매크로블록 한 쌍이 필드 타입이며, 하위 계층의 매크로블록 한 쌍이 프레임 타입인지 검토하는 단계, 및 상기 현재 계층의 매크로블록이 필드 타입인 경우, 상기 현재 계층의 제 1 필드 블록의 픽셀을 확장하여 상기 제 2 필드의 픽셀 값으로 설정하여 인코딩하는 단계를 포함한다.
본 발명의 또다른 실시예에 따른 디코딩 방법은 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 디코딩하는 방법에 있어서, 현재 계층의 매크로블록 한 쌍이 필드 타입이며, 하위 계층의 매크로블록 한 쌍이 프레임 타입인지 검토하는 단계, 및 상기 현재 계층의 매크로블록이 필드 타입인 경우, 상기 현재 계층의 제 1 필드 블록의 픽셀을 확장하여 상기 제 2 필드의 픽셀 값으로 설정하여 디코딩하는 단계를 포함한다.
본 발명의 일 실시예에 따른 인코딩 장치는 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 인코딩하는 장치에 있어서, 현재 계층의 매크로블록 한 쌍이 프레임 타입이며, 하위 계층의 매크로블록 한 쌍이 필드 타입인지 검토하여, 상기 하위 계층의 매크로블록이 필드타입이며, 상기 하위 계층의 매크로블 록의 상위 매크로블록과 하위 매크로블록이 서로 다른 매크로블록 모드로 코딩된 경우, 상기 현재 계층의 매크로블록을 예측하기 위하여 상기 상위 필드 또는 하위 필드의 정보를 보간하는 필드/프레임 변환부, 상기 변환된 결과에 따라 현재 계층의 매크로블록을 인코딩하는 예측 인코딩부를 포함한다.
본 발명의 일 실시예에 따른 디코딩 장치는 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 디코딩하는 장치에 있어서, 현재 계층의 매크로블록 한 쌍이 프레임 타입이며, 하위 계층의 매크로블록 한 쌍이 필드 타입인지 검토하여, 상기 하위 계층의 매크로블록이 필드타입이며, 상기 하위 계층의 매크로블록의 상위 매크로블록과 하위 매크로블록이 서로 다른 매크로블록 모드로 코딩된 경우, 상기 현재 계층의 매크로블록을 예측하기 위하여 상기 상위 필드 또는 하위 필드의 정보를 보간하는 필드/프레임 변환부, 및 상기 변환된 결과에 따라 현재 계층의 매크로블록을 디코딩하는 예측 디코딩부를 포함한다.
본 발명의 다른 실시예에 따른 인코딩 장치는 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 인코딩하는 장치에 있어서, 현재 계층의 매크로블록 한 쌍이 필드 타입이며, 하위 계층의 매크로블록 한 쌍이 프레임 타입인지 검토하며, 상기 현재 계층의 매크로블록이 필드타입이고, 상기 현재 계층의 매크로블록의 상위 매크로블록과 하위 매크로블록이 서로 다른 매크로블록 모드로 코딩된 경우, 상기 하위 계층의 프레임 타입 인터 매크로블록의 서브블록을 참조하도록 계산하는 필드/프레임 변환부, 및 상기 계산 결과를 사용하여 현재 계층의 인터 매크로블록을 인코딩하는 예측 인코딩부를 포함한다.
본 발명의 다른 실시예에 따른 디코딩 장치는 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 디코딩하는 장치에 있어서, 현재 계층의 매크로블록 한 쌍이 필드 타입이며, 하위 계층의 매크로블록 한 쌍이 프레임 타입인지 검토하며, 상기 현재 계층의 매크로블록이 필드타입이고, 상기 현재 계층의 매크로블록의 상위 매크로블록과 하위 매크로블록이 서로 다른 매크로블록 모드로 코딩된 경우, 상기 하위 계층의 프레임 타입 인터 매크로블록의 서브블록을 참조하여 계산하는 필드/프레임 변환부, 및 상기 계산 결과를 사용하여 현재 계층의 인터 매크로블록을 디코딩하는 예측 디코딩부를 포함한다.
본 발명의 또다른 실시예에 따른 인코딩 장치는 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 인코딩하는 장치에 있어서, 현재 계층의 매크로블록 한 쌍이 필드 타입이며, 하위 계층의 매크로블록 한 쌍이 프레임 타입인지 검토하여 상기 현재 계층의 매크로블록이 필드 타입인 경우, 상기 하위 계층의 매크로블록의 인트라 코딩 또는 인터 코딩에 따라 상기 현재 계층의 매크로블록의 참조 인덱스를 2배로 설정하는 필드/프레임 변환부, 및 상기 설정된 참조 인덱스의 값을 사용하여 인코딩하는 예측 인코딩부를 포함한다.
본 발명의 또다른 실시예에 따른 디코딩 장치는 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 디코딩하는 장치에 있어서, 현재 계층의 매크로블록 한 쌍이 필드 타입이며, 하위 계층의 매크로블록 한 쌍이 프레임 타입인지 검토하여 상기 현재 계층의 매크로블록이 필드 타입인 경우, 상기 하위 계층의 매크로블록의 인트라 코딩 또는 인터 코딩에 따라 상기 현재 계층의 매크로블록의 참조 인덱스를 2배로 설정하는 필드/프레임 변환부, 및 상기 설정된 참조 인덱스의 값을 사용하여 디코딩하는 예측 디코딩부를 포함한다.
본 발명의 또다른 실시예에 따른 인코딩 장치는 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 인코딩하는 장치에 있어서, 현재 계층의 매크로블록 한 쌍이 필드 타입이며, 하위 계층의 매크로블록 한 쌍이 프레임 타입인지 검토하여, 상기 현재 계층의 매크로블록이 필드 타입인 경우, 상기 현재 계층의 제 1 필드 블록의 픽셀을 확장하여 상기 제 2 필드의 픽셀 값으로 설정하는 필드/프레임 변환부, 상기 설정한 픽셀값을 참조하여 매크로블록을 인코딩하는 예측 인코딩부를 포함한다.
본 발명의 또다른 실시예에 따른 디코딩 장치는 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 디코딩하는 장치에 있어서, 현재 계층의 매크로블록 한 쌍이 필드 타입이며, 하위 계층의 매크로블록 한 쌍이 프레임 타입인지 검토하여 상기 현재 계층의 매크로블록이 필드 타입인 경우, 상기 현재 계층의 제 1 필드 블록의 픽셀을 확장하여 상기 제 2 필드의 픽셀 값으로 설정하는 필드/프레임 변환부, 및 상기 설정한 픽셀값을 참조하여 매크로블록을 디코딩하는 예측 디코딩부를 포함한다.
기타 실시예들의 구체적인 사항들은 상세한 설명 및 도면들에 포함되어 있다.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구 현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다
이하, 본 발명의 실시예들에 의하여 타입이 일치하지 않는 하위 계층의 정보를 사용하여 인터레이스 비디오 신호를 인코딩/디코딩 하는 방법 및 장치를 설명하기 위한 블록도 또는 처리 흐름도에 대한 도면들을 참고하여 본 발명에 대해 설명하도록 한다. 이 때, 처리 흐름도 도면들의 각 블록과 흐름도 도면들의 조합들은 컴퓨터 프로그램 인스트럭션들에 의해 수행될 수 있음을 이해할 수 있을 것이다. 이들 컴퓨터 프로그램 인스트럭션들은 범용 컴퓨터, 특수용 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서에 탑재될 수 있으므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서를 통해 수행되는 그 인스트럭션들이 흐름도 블록(들)에서 설명된 기능들을 수행하는 수단을 생성하게 된다. 이들 컴퓨터 프로그램 인스트럭션들은 특정 방식으로 기능을 구현하기 위해 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 지향할 수 있는 컴퓨터 이용 가능 또는 컴퓨터 판독 가능 메모리에 저장되는 것도 가능하므로, 그 컴퓨터 이용가능 또는 컴퓨터 판독 가능 메모리에 저장된 인스트럭션들은 흐름도 블록(들)에서 설명된 기능을 수행하는 인스트럭션 수단을 내포하는 제조 품목을 생산하는 것도 가능하다. 컴퓨터 프로그램 인스트럭션들은 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에 탑제되는 것도 가능하므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에서 일련의 동작 단계들이 수행되어 컴퓨터로 실행되는 프로세스를 생성해서 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 수행하는 인스트럭션들은 흐름도 블록(들)에서 설명된 기능들을 실행하기 위한 단계들을 제공하는 것도 가능하다.
또한, 각 블록은 특정된 논리적 기능(들)을 실행하기 위한 하나 이상의 실행 가능한 인스트럭션들을 포함하는 모듈, 세그먼트 또는 코드의 일부를 나타낼 수 있다. 또, 몇 가지 대체 실행예들에서는 블록들에서 언급된 기능들이 순서를 벗어나서 발생하는 것도 가능함을 주목해야 한다. 예컨대, 잇달아 도시되어 있는 두 개의 블록들은 사실 실질적으로 동시에 수행되는 것도 가능하고 또는 그 블록들이 때때로 해당하는 기능에 따라 역순으로 수행되는 것도 가능하다.
H.264와 같은 비디오 코딩에서 인터레이스 방식을 적용할 경우, 프레임 인코딩시 세가지 경우 중에서 하나를 선택할 수 있다. 즉, 두 필드를 결합하여 마치 하나의 프레임인 것으로 코딩하는 방법(프레임 모드), 필드를 결합하지 않고 각각 필드를 코딩하는 방법(필드 코딩), 그리고 두 필드를 결합하여 하나의 프레임으로 압축하되, 코딩시에는 수직으로 인접한 매크로블록의 쌍을 각각의 필드로 나누어 코딩하는 방법이 있다.
만약, 프레임이 일부 움직이는 영역과 일부 움직이지 않는 영역으로 믹스되어 있는 경우, 움직이지 않는 영역은 프레임 모드로 하고, 움직이는 영역은 필드 모드로 코딩하는 것이 효율적이다. 즉, 프레임/필드 인코딩 결정은 프레임 내의 매크로블록의 수직쌍(vertical pair)에 따라 독립적으로 이루어질 수 있다. 이러한 코딩 옵션 을 MBAFF(Macroblock-adaptive frame/field) 코딩이라고 한다. 매크로블록 쌍이 프레임모드로 코딩되기 위해서 각 매크로블록은 프레임 라인(frame line)을 포함해야 한다. 필드 모드로 코딩되기 위해서 상위 매크로블록(top macroblock)은 상위 필드 라인(Top field line)을, 그리고 하위 매크로블록(bottom macroblock)은 하위 필드 라인(Bottom field line)을 포함한다.
다계층 구조에서는 기초계층을 참조하는 경우 기초 계층의 매크로블록과 현재 계층의 매크로블록간의 차이로 인한 여러가지 조합이 발생한다. 표 1은 이러한 조합의 경우를 보여주는 예이다.
표 1에서의 현재 계층의 매크로블록 타입이 프레임이고 기초계층의 매크로블록 타입이 필드이며, 기초계층의 매크로블록의 한 쌍(상위, 하위)이 각각 인트라 코딩/인터 코딩으로 서로 다른 경우에, 인터 계층 예측(inter-layer prediction)을 수행할 수 없다. 현재계층의 상위 라인(top line)은 기초계층의 인트라 코딩된 매크로블록을 통해 산출되어야 하며, 현재계층의 하위 라인(bottom line)은 인터코딩된 매크로블록을 통해 산출되어야 하기 때문이다.
현재 계층 매크로블록 타입 필드 필드 프레임 프레임
기초계층 매크로블록 타입 프레임 프레임 필드 필드
상, 하위 매크로블록의 예측모드 인터 인트라 인트라 인터 인터 인트라 인트라 인터
도 2는 현재 계층 매크로블록(210)이 프레임 타입이며 그 하위 계층인 기초 계층이 필드 타입인 두 경우를 보여준다. 첫번째로 상위 필드는 인트라 코딩된 매크로블록(220), 하위 필드는 인터 코딩된 매크로블록(230)인 제 1의 경우가 존재한다. 두번째로 상위 필드는 인터 코딩된 매크로블록(240), 하위 필드는 인트라 코딩된 매크로블록(250)인 제 2의 경우가 존재한다.
도 2에서 분화된 두 가지 경우, 현재 계층을 예측하기 위해 본 발명의 일 실시예에서는 보간법(Interpolation)을 제안한다. 기초 계층의 상위 매크로블록에 보간 필터(interpolation filter)를 사용하여, 16x16의 상위 매크로블록을 32x16의 인트라 코딩된 매크로블록의 쌍으로 생성한다. 이렇게 보간된 매크로블록의 쌍은 현재 계층의 32x16 매크로블록의 참조가 되며, 현재 계층의 매크로블록은 인트라 BL 방식을 사용할 수 있다.
도 3은 본 발명의 일 실시예에 따른 기초 계층의 매크로블록을 보간한 경우를 보여주는 도면이다. 도 2의 기초 계층의 매크로블록(220, 230)을 보간하는 과정을 보여준다.
기초계층의 상위 필드의 인트라 코딩된 매크로블록(320)을 보간하여 확대한 인트라 코딩된 매크로블록(350)이 생성되며, 기초계층의 하위 필드의 인터 코딩된 매크로블록(330)을 보간하여 확대한 인터코딩된 매크로블록(360)이 생성된다. 보간하는 방법의 예로는 상위 필드의 경우, 매크로블록과 다음 상위 필드의 매크로블록 사이에 존재하는 빈 공간을 보간하는 방법이 될 수 있다.
만약 보간 필터가 기초계층의 인터 코딩된 하위 매크로블록에 셋팅되면, 기초계층의 상위 16x16 필드 매크로블록은 32x16 인터 코딩된 매크로블록의 쌍이 된다. 이 블록은 잔차 예측의 참조 정보로 사용된다. 보간된 기초 계층의 매크로블록이 인터 타입인 경우, 각각의 4x4 서브 블록에 대해 2를 곱하면 기초계층으로부터 모션 벡터를 산출할 수 있다. 매크로블록 파티셔닝은 기초계층으로부터 도출된다.
현재 계층의 프레임 매크로블록은 예측 모드를 선택할 수 있다. 즉, RD 계산을 통해 인터 예측과 방향적 인트라 예측을 수행할 수 있다.
도 2, 3에서는 현재 계층이 프레임 매크로블록이며 기초계층이 필드 매크로블록인 경우 예측을 가능하게 하는 보간 방법을 살펴보았다.
한편, 현재 계층이 필드 매크로블록이며, 기초 계층이 프레임 매크로블록인 경우에 대하여 살펴보고자 한다.
기초 계층의 매크로블록 쌍(pair)이 각각 인터/인트라 프레임 타입의 매크로블록인 경우, 참조 인덱스(reference index)와 모션 벡터의 인터 계층적 예측의 경우를 살펴보고자 한다. 도 4는 본 발명의 일 실시예에 따른 참조 인덱스의 설정을 보여주는 도면이다. 도 4와 같이, 참조 인덱스(reference index)가 설정된다. 기초 계층(420)의 인터 매크로블록(422)와 인트라 매크로블록(424)을 사용하여 현재 계층(410)의 매크로블록 참조 시에, 필드타입 인터 매크로블록(412)는 기초 계층의 프레임 타입 인터 매크로블록(422)의 상측에 존재하는 서브블록을 참조한다. 마찬가지로, 필드타입 인터 매크로블록(414)는 기초 계층의 프레임 타입 인터 매크로블록(422)의 하측에 존재하는 서브블록을 참조한다.
도 5는 본 발명의 다른 실시예에 따른 모션 벡터의 설정을 보여주는 도면이다.
현재 계층의 상위 필드의 인터 매크로블록(512)과 하위 필드의 인터 매크로블록(514)에는 모션을 0으로 설정한다. 4x4의 블록에 대한 모션 벡터를 0으로 설정하는 것은 기초 계층의 프레임타입 인트라 매크로블록(524)의 모션 벡터가 0임을 통해 설정된 것이다.
매크로블록에 대한 인터 계층의 잔차(residual)와 텍스쳐(texture) 예측의 사용에 있어서, 현재 계층의 매크로블록 쌍이 필드 매크로블록 쌍이며, 대응하는 기초계층의 매크로블록 쌍이 프래임 매크로블록이거나 혹은 그 역의 경우에 있어서, 기초계층의 매크로블록 쌍 중에서 하나의 매크로블록이 인트라 예측 모드로 코딩되었고, 다른 하나의 매크로블록이 인터 코딩 모드로 코딩된 경우, base_mode_flage는 0이 되며, intra_base_flag는 싱글 루프 디코딩 모드에서 0이 될 수 있으며 residual_prediction_flag 역시 0이 될 수 있다. 한편, 인터 계층 모션 예측에 있어서, 현재 계층의 매크로블록 쌍이 프레임 매크로블록 쌍이며, 대응하는 기초 계층의 매크로블록이 필드 매크로블록의 쌍이며, 상기 기초 계층의 매크로블록의 쌍을 구성하는 하나의 매크로블록이 인트라 예측 모드로 코딩되어 있으며, 다른 하나의 매크로블록이 인터 예측 모드로 코딩된 경우에, 향상 계층의 매크로블록에 대해 base_mode_flag는 0이 될 수 있다.
도 6은 본 발명의 일 실시예에 따른, 매크로블록 프레임(650)을 통해 상위 필드와 하위 필드를 유추하는 과정을 보여주는 도면이다. 도 6과 도 4, 도 5를 함께 참조할 수 있다. 여러가지 경우에 대한 유추를 살펴보면 다음과 같다.
1) 현재 계층의 매크로블록이 상위 필드(610)이며, 해당하는 매크로블록이 인터 코딩인 경우, 첫번째와 두번째 8x8 매크로블록 파티션에 대한 참조 인덱스는 해당 매크로블록쌍의 상위 매크로블록의 첫번째와 두번째 8x8 매크로블록 파티션에 대한 참조 인덱스를 2배한 것과 같도록 할 수 있으며, 세번째와 네번째 8x8 매크로블록 파티션에 대한 참조 인덱스는 해당 매크로블록쌍의 하위 매크로블록의 첫번째와 두번째 8x8 매크로블록 파티션에 대한 참조 인덱스를 2배한 것과 같도록 할 수 있다.
2) 현재 계층의 매크로블록이 상위 필드(610)이며, 해당하는 매크로블록이 인트라 코딩인 경우, 첫번째와 세번째 8x8 매크로블록 파티션에 대한 참조 인덱스는 해당 매크로블록쌍의 하위 매크로블록의 첫번째 8x8 매크로블록 파티션에 대한 참조 인덱스를 2배한 것과 같도록 할 수 있으며, 두번째와 네번째 8x8 매크로블록 파티션에 대한 참조 인덱스는 해당 매크로블록 쌍의 하위 매크로블록의 두번째 8x8 매크로블록 파티션에 대한 참조 인덱스를 2배한 것과 같도록 할 수 있다.
3) 현재 계층의 매크로블록이 상위 필드(610)이며, 대응하는 기초계층의 하위 매크로블록이 인트라 코딩인 경우, 첫번째와 세번째 8x8 매크로블록 파티션에 대한 참조 인덱스는 해당 매크로블록쌍의 상위 매크로블록의 첫번째 8x8 매크로블록 파티션에 대한 참조 인덱스를 2배한 것과 같도록 할 수 있으며, 두번째와 네번째 8x8 매크로블록 파티션에 대한 참조 인덱스는 해당 매크로블록 쌍의 상위 매크로블록의 두번째 8x8 매크로블록 파티션에 대한 참조 인덱스를 2배한 것과 같도록 할 수 있다.
4) 현재 계층의 매크로블록이 하위 필드(620)이며, 대응하는 기초계층의 상위 매크로블록 쌍이 인트라 코딩인 경우, 첫번째와 세번째 8x8 매크로블록 파티션에 대한 참조 인덱스는 해당 매크로블록쌍의 하위 매크로블록의 세번째 8x8 매크로블록 파티션에 대한 참조 인덱스를 2배한 것과 같도록 할 수 있으며, 두번째와 네번째 8x8 매크로블록 파티션에 대한 참조 인덱스는 해당 매크로블록 쌍의 하위 매크로블록의 네번째 8x8 매크로블록 파티션에 대한 참조 인덱스를 2배한 것과 같도록 할 수 있다.
5) 현재 계층의 매크로블록이 하위 필드(620)이며, 대응하는 기초계층의 상위 매크로블록 쌍이 인트라 코딩인 경우, 첫번째와 세번째 8x8 매크로블록 파티션에 대한 참조 인덱스는 해당 매크로블록쌍의 상위 매크로블록의 세번째 8x8 매크로블록 파티션에 대한 참조 인덱스를 2배한 것과 같도록 할 수 있으며, 두번째와 네번째 8x8 매크로블록 파티션에 대한 참조 인덱스는 해당 매크로블록 쌍의 상위 매크로블록의 네번째 8x8 매크로블록 파티션에 대한 참조 인덱스를 2배한 것과 같도록 할 수 있다.
6) 현재 계층의 매크로블록이 하위 필드(620)이며, 대응하는 기초계층의 상위 매크로블록 쌍이 인터 코딩인 경우, 첫번째와 두번째 8x8 매크로블록 파티션에 대한 참조 인덱스는 해당 매크로블록 쌍의 상위 매크로블록의 세번째와 네번째의 8x8 매크로블록 파티션에 대한 참조 인덱스를 2배한 것과 같도록 할 수 있으며, 세번째와 네번째 8x8 매크로블록 파티션에 대한 참조 인덱스는 해당 매크로블록 쌍의 하위 매크로블록의 세번째와 네번째 8x8 매크로블록 파티션에 대한 참조 인덱스를 2배한 것과 같도록 할 수 있다.
모션 벡터를 산출하기 위해서 다음과 같은 과정이 적용될 수 있다. 만약, 현재 계층의 매크로블록이 필드 매크로블록이며 기초계층 매크로블록이 프레임 매크로블록인 경우, 다음이 적용될 수 있다. 모션 벡터의 산출에 앞서서, 수식에 적용되는 요소들을 살펴보면, LX는 (0, 1) 중 하나의 리스트 인덱스(list index)를 명시하는 것이다. 0내지 3 사이의 x, y는 현재 매크로블록 내의 4x4 블록의 가로, 세로 위치를 의미한다. Curr와 BL은 각각 현재 계층과 대응되는 기초계층의 매크로블록 쌍을 의미한다.
FrameToField(mv)는 다음과 같은 특성을 만족시키는 모션 벡터 mv*를 리턴한다. 수평적 요소가 입력된 모션 벡터와 같은 경우, mv*[0] = mv[0], 수직적 요소가 입력된 모션 벡터를 2로 나눈 값과 같은 경우, mv*[1]=mv[1]/2 이다.
1) 상위 필드 매크로블록의 4x4블록 중 첫번째와 세번째 행의 모션 벡터와 하위 필드 매크로블록의 4x4블록 중 두번째와 네번째 행의 모션 벡터는 다음과 같이 산출된다.
상위 프레임이 인터인 경우:
MV TopField ( LX , x, 0, Curr ) = FrameToField(MV TopFrame ( LX , x, 0, BL )
상위 프레임이 인트라인 경우: MV TopField ( LX , x, 0, Curr ) = 0
하위 프레임이 인터인 경우:
MV TopField ( LX , x, 2, Curr ) = FrameToField(MV BottomFrame ( LX , x, 0, BL )
하위 프레임이 인터인 경우: MV TopField ( LX , x, 2, Curr ) = 0
상위 프레임이 인터인 경우:
MV BottomField ( LX , x, 1, Curr ) = FrameToField(MV TopFrame ( LX , x, 3, BL )
상위 프레임이 인트라인 경우: MV BottomField ( LX , x, 1, Curr ) = 0
하위 프레임이 인터인 경우:
MV BottomField ( LX , x, 3, Curr ) = FrameToField(MV BottomFrame ( LX , x, 3, BL )
하위 프레임이 인터인 경우: MV BottomField ( LX , x, 3, Curr ) = 0
수학식 1 내지 4에서 x는 0, 1, 2, 3의 값을 가질 수 있다.
2) 기초 계층의 상위 매크로블록의 첫번째와 세번째 8x8 매크로블록 파티션의 레퍼런스 픽쳐 인덱스가 동일한 경우, 다음과 같이 적용할 수 있다.
상위 프레임이 인터인 경우:
MV TopField ( LX , x, 1, Curr ) = FrameToField(MV TopFrame ( LX , x, 2, BL )
상위 프레임이 인트라인 경우: MV TopField ( LX , x, 1, Curr ) = 0
상위 프레임이 인터인 경우:
MV BottomField ( LX , x, 0, Curr ) = FrameToField(MV TopFrame ( LX , x, 1, BL )
상위 프레임이 인트라인 경우: MV BottomField ( LX , x, 0, Curr ) = 0
수학식 5 내지 6에서 x는 0과 1의 값을 가질 수 있다. 상기 2)의 경우가 아니면 수학식 7, 8과 같이 적용 가능하다.
상위 프레임이 인터인 경우:
MV TopField ( LX , x, 1, Curr ) = FrameToField(MV TopFrame ( LX , x, 1, BL )
상위 프레임이 인트라인 경우: MV TopField ( LX , x, 1, Curr ) = 0
상위 프레임이 인터인 경우:
MV BottomField ( LX , x, 0, Curr ) = FrameToField(MV TopFrame ( LX , x, 2, BL )
상위 프레임이 인트라인 경우: MV BottomField ( LX , x, 0, Curr ) = 0
수학식 7, 8에서 x는 0과 1의 값을 가질 수 있다.
유사하게, 기초 계층의 상위 매크로블록의 두번째와 네번째 8x8 매크로블록 파티션의 레퍼런스 픽쳐 인덱스가 동일한 경우, 수학식 5, 6에 대해 x=2, 3으로 적용 할 수 있으며, 그 외의 경우 수학식 7, 8에 대해 x=2, 3으로 하여 적용할 수 있다.
3) 한편, 기초 계층의 하위 매크로블록의 첫번째와 세번째 8x8 매크로블록 파티션의 레퍼런스 픽쳐 인덱스가 동일한 경우, 다음과 같이 적용할 수 있다.
하위 프레임이 인터인 경우:
MV TopField ( LX , x, 3, Curr ) = FrameToField(MV BottomFrame ( LX , x, 2, BL )
하위 프레임이 인트라인 경우: MV TopField ( LX , x, 3, Curr ) = 0
하위 프레임이 인터인 경우:
MV BottomField ( LX , x, 2, Curr ) = FrameToField(MV TopFrame ( LX , x, 2, BL )
하위 프레임이 인트라인 경우: MV BottomField ( LX , x, 2, Curr ) = 0
수학식 9, 10에서 x는 0과 1의 값을 가질 수 있다.
그 외의 경우, 수학식 11과 12가 적용될 수 있다.
하위 프레임이 인터인 경우:
MV TopField ( LX , x, 3, Curr ) = FrameToField(MV BottomFrame ( LX , x, 1, BL )
하위 프레임이 인트라인 경우: MV TopField ( LX , x, 3, Curr ) = 0
하위 프레임이 인터인 경우:
MV BottomField ( LX , x, 2, Curr ) = FrameToField(MV TopFrame ( LX , x, 2, BL )
하위 프레임이 인트라인 경우: MV BottomField ( LX , x, 2, Curr ) = 0
수학식 11, 12에서 x는 0과 1의 값을 가질 수 있다.
유사하게, 기초 계층의 상위 매크로블록의 두번째와 네번째 8x8 매크로블록 파티션 의 레퍼런스 픽쳐 인덱스가 동일한 경우, 수학식 9, 10에 대해 x=2, 3으로 적용 할 수 있으며, 그 외의 경우 수학식 11, 12에 대해 x=2, 3으로 하여 적용할 수 있다.
4) 한편, 현 매크로블록이 프레임 매크로블록이며 기초 계층 매크로블록이 필드 매크로블록인 경우, 다음을 적용할 수 있다. 수식에 적용되는 요소들을 살펴보면, LX는 (0, 1) 중 하나의 리스트 인덱스(list index)를 명시하는 것이다. 0내지 3 사이의 x, y는 현재 매크로블록 내의 4x4 블록의 가로, 세로 위치를 의미한다. Curr와 BL은 각각 현재 계층과 대응되는 기초계층의 매크로블록 쌍을 의미한다.
FieldToFrame(mv)는 다음과 같은 특성을 만족시키는 모션 벡터 mv*를 리턴한다. 수평적 요소가 입력된 모션 벡터와 같은 경우, mv*[0] = mv[0], 수직적 요소가 입력된 모션 벡터를 2로 나눈 값과 같은 경우, mv*[1]=mv[1]/2 이다.
다음 수식(수학식 13, 14)에서 y는 0, 1, x는 0, 1, 2, 3 중 하나의 값을 가질 수 있다.
MV TopFrame ( LX , x, y, Curr ) = FieldToFrame(MV TopField ( LX , x, y, BL )
MV BottomFrame ( LX , x, y, Curr ) = FieldToFrame(MV TopField ( LX , x, y+2, BL )
다음 수식(수학식 15, 16)에서 y는 2, 3, x는 0, 1, 2, 3 중 하나의 값을 가질 수 있다.
MV TopFrame ( LX , x, y, Curr ) = FieldToFrame(MV BottomField ( LX , x, y-2, BL )
MV BottomFrame ( LX , x, y, Curr ) = FieldToFrame(MV BottomField ( LX , x, y, BL )
도 7은 본 발명의 일 실시예에 따른 기초 계층의 인트라 매크로블록을 통해 현재 계층의 필드 타입 매크로블록을 예측하는 과정이다. 현재 필드 타입의 매크로블록은 기초계층의 인트라 매크로블록을 통해 예측가능하다. 도 7의 현재 계층의 하위 필드는 기초 계층의 프레임 타입의 인트라 매크로블록을 이용하는 IBL 예측 모드를 사용한다. 이 경우, 현재 계층의 매크로블록의 상위 필드 매크로블록은 적절한 예측자를 가질 수 없으므로, 도 7의 점으로 채워진 영역(730, 740)에 대한 적절한 예측자를 구하기 위해 다음의 여러 가지 방식을 적용할 수 있다.
1) 730, 740 영역을 128로 채울 수 있다.
2) 도 7의 750과 같은 방식으로 영역을 확장하여 하위 필드 블록의 상위 픽셀값으로 730, 740 영역을 채울 수 있다.
3) IBL 모드의 방향적 인트라 모드의 하나를 대치할 수 있다. 방향적 인트라 모드에서 하나의 모드가 사용되는지 검사한 후, IBL 모드로 모드를 변화할 수 있으며, 현재의 16x16 필드 매크로블록은 방향적 인트라 모드를 사용하지만, 기초 계층의 텍스쳐에 대응하는 현재 필드 블록은 방향적 인트라 모드를 가지는 기초 계층의 텍스쳐 정보를 필요로 하며, 기초 계층의 텍스쳐에 대응하지 않는 블록은 기존의 방향을 사용한다.
4) 16x16 매크로블록이 IBL 플래그와 방향적 인트라 정보를 함께 가질 수 있다. 도 7의 730, 740 영역은 기존의 방향적 인트라 모드로 셋팅되며, 이에 상보적인 필드 블록은 도 7의 760과 같이 IBL에 의해 예측될 수 있다.
도 7에서 현재 계층의 상위 필드 매크로블록은 기초계층의 프레임 타입의 인터 매크로블록을 사용하여 잔차 예측을 수행하였다. 현재 계층의 하위 필드 매크로블록은 기초계층에서 잔차를 가질 수 없는데, 이 경우, 대응하는 기초계층의 매크로블록 타입이 인트라인 경우, 0의 값을 할당할 수 있다.
도 8은 본 발명의 일 실시예에 따른 인코딩 과정을 보여주는 도면이다.
현재 계층의 현재 계층의 매크로블록이 프레임 타입이며, 하위 계층의 매크로블록이 필드 타입인지 검토한다(S910). 해당하는 경우, 하위 계층의 매크로블록의 상위 필드와 하위 필드가 서로 다르게 코딩되었는지 검토한다(S920). 서로 다르게 코딩되었다면, 도 2에서 살펴본 바와 같이 상위 필드 또는 하위 필드의 정보를 보간하여 인코딩한다(S925).
상기 하위 계층은 전술한 기초 계층이 될 수 있으며, 다계층의 경우 하위 계층 또는 FGS 계층이 될 수 있다.
S910 단계에서 아닌 것으로 판단된 경우, 현재 계층의 매크로블록이 필드 타입이며 하위 계층의 매크로블록이 프레임 타입인지 검토한다(S930). 검토 결과 해당하면, 현재 계층의 매크로블록의 상위 필드와 하위 필드가 서로 다르게 코딩되었는지 검토한다(S940). 그리고, 하위 계층의 프레임 타입 인터 매크로블록의 서브블록을 참조하여 현재 계층의 인터 매크로블록을 인코딩한다(S955).
상기 과정은 기초계층 또는 하위 계층을 통해 현재 계층을 인코딩 하는 것으로, 상기와 유사한 과정으로 디코딩을 수행할 수 있다. 디코더 측에서 현재 계층을 디코딩하기에 앞서 하위 계층의 데이터를 보간하거나 참조하는 과정을 수행하며 이에 대한 판단은 도 8에 제시된 바와 같다.
도 9는 본 발명의 일 실시예에 따른 인코딩부의 구성을 보여주는 도면이다.
각 구성요소는 소프트웨어(software) 또는, FPGA(field-programmable gate array)나 ASIC(application-specific integrated circuit)과 같은 하드웨어(hardware)를 의미할 수 있다.　그렇지만 상기 구성요소들은 소프트웨어 또는 하드웨어에 한정되는 의미는 아니며, 어드레싱(addressing)할 수 있는 저장 매체에 있도록 구성될 수도 있고 하나 또는 그 이상의 프로세서들을 실행시키도록 구성될 수도 있다.　상기 구성요소들 안에서 제공되는 기능은 더 세분화된 구성요소에 의하여 구현될 수 있으며, 복수의 구성요소들을 합하여 특정한 기능을 수행하는 것으로 구현할 수도 있다.　뿐만 아니라, 상기 구성요소들은 시스템 내의 하나 또는 그 이상의 컴퓨터들을 실행시키도록 구현될 수 있다.
도 9는 본 발명의 일 실시예에 따른 비디오 인코더 중 향상 계층을 인코딩하는 향상 계층 인코딩부(900)의 구성을 보여주는 도면이다. 기초 계층의 인코딩 과정 또는 비디오 신호를 인코딩함에 있어서 양자화 하는 과정 등은 종래의 기술이므로 본 명세서에서 생략하고자 한다. 향상계층 인코딩부(900)는 현재 계층과 같은 의미로, 하위에 기초 계층 또는 FGS 계층과 같은 다른 계층을 참조할 수 있는 계층의 비디오 신호를 인코딩한다.
향상 계층 인코딩부(900)는 필드/프레임 변환부(920), 상위계층 매크로블록 프로세싱부(950)을 통해 상위 계층(현재 계층)의 매크로블록을 인코딩하는 예측 자료를 생성한다. 예측된 결과를 사용하여 예측 인코딩부(960)이 인코딩을 수행한다.
필드/프레임 변환부(920)는 전술한 바와 같이, 현재 계층과 하위 계층(기초 계층)이 어느 하나가 필드 타입이며 다른 한쪽이 프레임 타입인 경우, 현재 계층에서 하위 계층의 데이터를 참조할 수 있도록 하위 계층 매크로블록 프로세싱부(910)의 정보를 사용하여 보간하거나 영역 확대, 또는 2배로 확장시키는 작업을 수행한다.
도 10은 본 발명의 일 실시예에 따른 비디오 디코더 중 향상 계층을 디코딩하는 향상 계층 디코딩부(1000)의 구성을 보여주는 도면이다. 기초 계층의 디코딩 과정 또는 비디오 신호를 디코딩함에 있어서 역양자화 하는 과정 등은 종래의 기술이므로 본 명세서에서 생략하고자 한다.
도 10의 향상 계층 디코딩부(1000)는 도 9의 인코딩부와 유사한 구조를 가지고 있다. 향상계층 비디오 스트림을 디코딩하기 위해서는 참조될 하위 계층의 매크로블록을 복원해야 하므로, 필드/프레임 변환부(1020)는 전술한 과정에 따라, 현재 계층과 하위 계층(기초 계층)이 어느 하나가 필드 타입이며 다른 한쪽이 프레임 타입인 경우, 현재 계층에서 하위 계층의 데이터를 참조할 수 있도록 하위 계층 매크로블록 프로세싱부(1010)의 정보를 사용하여 보간하거나 영역 확대, 또는 2배로 확장시키는 작업을 수행한다.
본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것 을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구의 범위에 의하여 나타내어지며, 특허청구의 범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
본 발명을 구현함으로써 현재 계층과 하위 계층이 필드 또는 프레임으로 타입을 달리 하는 경우에도 하위 계층의 데이터를 참조할 수 있다.
본 발명을 구현함으로써 하위 계층의 데이터를 참조하여 인코딩 효율을 향상시킬 수 있다.

Claims (60)

  1. 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 인코딩하는 방법에 있어서,
    현재 계층의 매크로블록 한 쌍이 프레임 타입이며, 하위 계층의 해당 매크로블록 한 쌍이 필드 타입인지 검토하는 단계; 및
    상기 하위 계층의 매크로블록 한 쌍이 필드타입이며, 상기 하위 계층의 해당 매크로블록 한 쌍의 상위 매크로블록과 하위 매크로블록이 서로 다른 매크로블록 모드로 코딩된 경우, 상기 상위 매크로블록 또는 하위 매크로블록의 정보를 보간하여 상기 현재 계층의 매크로블록을 예측하여 인코딩하는 단계를 포함하는, 인터레이스 비디오 신호를 인코딩하는 방법.
  2. 제 1항에 있어서,
    상기 하위 계층의 상위 매크로블록과 하위 매크로블록은 인터 예측 또는 인트라 예측으로 상기 상위 매크로블록의 예측 모드와 하위 매크로블록의 예측 모드는 서로 다른, 인터레이스 비디오 신호를 인코딩하는 방법.
  3. 제 1항에 있어서,
    상기 인코딩하는 단계는 하위 계층의 인트라 코딩된 매크로블록 또는 인터 코딩된 매크로블록 에서 서로 인접한 픽셀 사이에 존재하는 픽셀의 정보를 보간하여 계산 하는 단계를 더 포함하는, 인터레이스 비디오 신호를 인코딩하는 방법.
  4. 제 1항에 있어서,
    상기 인코딩하는 단계 이전에 보간된 기초 계층의 4x4 서브블록에 대해 2를 곱하여 모션 벡터를 산출하는 단계를 더 포함하는, 인터레이스 비디오 신호를 인코딩하는 방법.
  5. 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 디코딩하는 방법에 있어서,
    현재 계층의 매크로블록 한 쌍이 프레임 타입이며, 하위 계층의 해당 매크로블록 한 쌍이 필드 타입인지 검토하는 단계; 및
    상기 하위 계층의 매크로블록이 필드타입이며, 상기 하위 계층의 해당 매크로블록의 한 쌍의 상위 매크로블록과 하위 하위 매크로블록이 서로 다른 매크로블록 모드로 코딩된 경우, 상기 상위 매크로블록 또는 하위 매크로블록의 정보를 보간하여 상기 현재 계층의 매크로블록을 예측하여 디코딩하는 단계를 포함하는, 인터레이스 비디오 신호를 디코딩하는 방법.
  6. 제 5항에 있어서,
    상기 하위 계층의 상위 매크로블록과 하위 매크로블록은 인터 예측 또는 인트라 예측으로 상기 상위 매크로블록의 예측 모드와 하위 매크로블록의 예측 모드는 서로 다른, 인터레이스 비디오 신호를 디코딩하는 방법.
  7. 제 5항에 있어서,
    상기 디코딩하는 단계는 하위 계층의 인트라 코딩된 매크로블록 또는 인터 코딩된 매크로블록에서 서로 인접한 픽셀 사이에 존재하는 픽셀의 정보를 보간하여 계산하는 단계를 포함하는, 인터레이스 비디오 신호를 디코딩하는 방법.
  8. 제 5항에 있어서,
    상기 디코딩하는 단계 이전에 보간된 기초 계층의 4x4 서브블록에 대해 2를 곱하여 모션 벡터를 산출하는 단계를 더 포함하는, 인터레이스 비디오 신호를 디코딩하는 방법.
  9. 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 인코딩하는 방법에 있어서,
    현재 계층의 매크로블록이 필드 타입이며, 하위 계층의 매크로블록이 프레임 타입인지 검토하는 단계; 및
    상기 현재 계층의 매크로블록이 필드타입인 경우,
    상기 하위 계층의 매크로블록 한 쌍의 상위 매크로블록과 하위 매크로블록이 서로 다른 매크로블록 모드로 코딩된 경우, 상기 하위 계층의 프레임 타입 인터 매크로블록의 서브블록을 참조하여 상기 현재 계층의 인터 매크로블록을 인코딩하는 단계 를 포함하는, 인터레이스 비디오 신호를 인코딩하는 방법.
  10. 제 9항에 있어서,
    상기 하위 계층의 프레임 타입 인터 매크로블록의 서브블록과 상기 현재 계층의 인터 매크로블록은 상측 또는 하측에 동일하게 위치한, 인터레이스 비디오 신호를 인코딩하는 방법.
  11. 제 9항에 있어서,
    상기 현재 계층의 인터 매크로블록의 모션 벡터는 0으로 설정하는, 인터레이스 비디오 신호를 인코딩하는 방법.
  12. 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 디코딩하는 방법에 있어서,
    현재 계층의 매크로블록이 필드 타입이며, 하위 계층의 매크로블록이 프레임 타입인지 검토하는 단계; 및
    상기 현재 계층의 매크로블록이 필드타입인 경우,
    상기 하위 계층의 매크로블록의 상위 매크로블록과 하위 매크로블록이 서로 다른 매크로블록 모드로 코딩된 경우, 상기 하위 계층의 프레임 타입 인터 매크로블록의 서브블록을 참조하여 상기 현재 계층의 인터 매크로블록을 디코딩하는 단계를 포함하는, 인터레이스 비디오 신호를 디코딩하는 방법.
  13. 제 12항에 있어서,
    상기 하위 계층의 프레임 타입 인터 매크로블록의 서브블록과 상기 현재 계층의 인터 매크로블록은 상측 또는 하측에 동일하게 위치한, 인터레이스 비디오 신호를 디코딩하는 방법.
  14. 제 12항에 있어서,
    상기 현재 계층의 인터 매크로블록의 모션 벡터는 0으로 설정하는, 인터레이스 비디오 신호를 디코딩하는 방법.
  15. 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 인코딩하는 방법에 있어서,
    현재 계층의 매크로블록 한 쌍이 필드 타입이며, 하위 계층의 매크로블록 한 쌍이 프레임 타입인지 검토하는 단계; 및
    상기 현재 계층의 매크로블록이 필드 타입인 경우, 상기 하위 계층의 매크로블록의 인트라 코딩 또는 인터 코딩에 따라 상기 현재 계층의 매크로블록의 참조 인덱스를 2배로 설정하는 단계; 및
    상기 설정된 참조 인덱스의 값을 사용하여 인코딩하는 단계를 포함하는, 인터레이스 비디오 신호를 인코딩하는 방법.
  16. 제 15항에 있어서,
    상기 설정하는 단계는
    상기 현재 계층의 매크로블록이 상위 필드인 경우, 상기 상위 매크로블록의 1 또는 2번째 서브블록의 참조인덱스는 상기 하위 계층의 상위 매크로블록 프레임의 1 또는 2번째 서브블록의 참조 인덱스를 2배로 설정하는 단계를 포함하는, 인터레이스 비디오 신호를 인코딩하는 방법.
  17. 제 15항에 있어서,
    상기 설정하는 단계는
    상기 현재 계층의 매크로블록이 상위 필드인 경우, 상기 상위 매크로블록의 3 또는 4번째 서브블록의 참조인덱스는 상기 하위 계층의 하위 매크로블록 프레임의 1 또는 2번째 서브블록의 참조 인덱스를 2배로 설정하는 단계를 포함하는, 인터레이스 비디오 신호를 인코딩하는 방법.
  18. 제 15항에 있어서,
    상기 설정하는 단계는
    상기 현재 계층의 매크로블록이 하위 필드인 경우, 상기 하위 매크로블록의 1 또는 2번째 서브블록의 참조인덱스는 상기 하위 계층의 상위 매크로블록 프레임의 3 또는 4번째 서브블록의 참조 인덱스를 2배로 설정하는 단계를 포함하는, 인터레이스 비디오 신호를 인코딩하는 방법.
  19. 제 15항에 있어서,
    상기 설정하는 단계는
    상기 현재 계층의 매크로블록이 하위 필드인 경우, 상기 하위 매크로블록의 3 또는 4번째 서브블록의 참조인덱스는 상기 하위 계층의 하위 매크로블록 프레임의 3 또는 4번째 서브블록의 참조 인덱스를 2배로 설정하는 단계를 포함하는, 인터레이스 비디오 신호를 인코딩하는 방법.
  20. 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 디코딩하는 방법에 있어서,
    현재 계층의 매크로블록 한 쌍이 필드 타입이며, 하위 계층의 매크로블록 한 쌍이 프레임 타입인지 검토하는 단계; 및
    상기 현재 계층의 매크로블록이 필드 타입인 경우, 상기 하위 계층의 매크로블록의 인트라 코딩 또는 인터 코딩에 따라 상기 현재 계층의 매크로블록의 참조 인덱스를 2배로 설정하는 단계; 및
    상기 설정된 참조 인덱스의 값을 사용하여 디코딩하는 단계를 포함하는, 인터레이스 비디오 신호를 디코딩하는 방법.
  21. 제 20항에 있어서,
    상기 설정하는 단계는
    상기 현재 계층의 매크로블록이 상위 필드인 경우, 상기 상위 매크로블록의 1 또는 2번째 서브블록의 참조인덱스는 상기 하위 계층의 상위 매크로블록 프레임의 1 또는 2번째 서브블록의 참조 인덱스를 2배로 설정하는 단계를 포함하는, 인터레이스 비디오 신호를 디코딩하는 방법.
  22. 제 21항에 있어서,
    상기 설정하는 단계는
    상기 현재 계층의 매크로블록이 상위 필드인 경우, 상기 상위 매크로블록의 3 또는 4번째 서브블록의 참조인덱스는 상기 하위 계층의 하위 매크로블록 프레임의 1 또는 2번째 서브블록의 참조 인덱스를 2배로 설정하는 단계를 포함하는, 인터레이스 비디오 신호를 디코딩하는 방법.
  23. 제 21항에 있어서,
    상기 설정하는 단계는
    상기 현재 계층의 매크로블록이 하위 필드인 경우, 상기 하위 매크로블록의 1 또는 2번째 서브블록의 참조인덱스는 상기 하위 계층의 상위 매크로블록 프레임의 3 또는 4번째 서브블록의 참조 인덱스를 2배로 설정하는 단계를 포함하는, 인터레이스 비디오 신호를 디코딩하는 방법.
  24. 제 21항에 있어서,
    상기 설정하는 단계는
    상기 현재 계층의 매크로블록이 하위 필드인 경우, 상기 하위 매크로블록의 3 또는 4번째 서브블록의 참조인덱스는 상기 하위 계층의 하위 매크로블록 프레임의 3 또는 4번째 서브블록의 참조 인덱스를 2배로 설정하는 단계를 포함하는, 인터레이스 비디오 신호를 디코딩하는 방법.
  25. 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 인코딩하는 방법에 있어서,
    현재 계층의 매크로블록 한 쌍이 필드 타입이며, 하위 계층의 매크로블록 한 쌍이 프레임 타입인지 검토하는 단계; 및
    상기 현재 계층의 매크로블록이 필드 타입인 경우, 상기 현재 계층의 제 1 필드 블록의 픽셀을 확장하여 제 2 필드의 픽셀 값으로 설정하여 인코딩하는 단계를 포함하는, 인터레이스 비디오 신호를 인코딩하는 방법.
  26. 제 25항에 있어서,
    상기 제 1 필드는 상위 필드 또는 하위 필드인, 인터레이스 비디오 신호를 인코딩하는 방법.
  27. 제 25항에 있어서,
    상기 현재 계층의 제 1 필드는 방향적 인트라 모드가 사용된 경우, 인트라 BL(IBL) 모드로 변화하는 단계를 더 포함하는, 인터레이스 비디오 신호를 인코딩하는 방법.
  28. 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 디코딩하는 방법에 있어서,
    현재 계층의 매크로블록 한 쌍이 필드 타입이며, 하위 계층의 매크로블록 한 쌍이 프레임 타입인지 검토하는 단계; 및
    상기 현재 계층의 매크로블록이 필드 타입인 경우, 상기 현재 계층의 제 1 필드 블록의 픽셀을 확장하여 제 2 필드의 픽셀 값으로 설정하여 디코딩하는 단계를 포함하는, 인터레이스 비디오 신호를 디코딩하는 방법.
  29. 제 28항에 있어서,
    상기 제 1 필드는 상위 필드 또는 하위 필드인, 인터레이스 비디오 신호를 디코딩하는 방법.
  30. 제 28항에 있어서,
    상기 현재 계층의 제 1 필드는 방향적 인트라 모드가 사용된 경우, 인트라 BL(IBL) 모드로 변화하는 단계를 더 포함하는, 인터레이스 비디오 신호를 디코딩하는 방법.
  31. 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 인코딩하는 장치에 있어서,
    현재 계층의 매크로블록 한 쌍이 프레임 타입이며, 하위 계층의 매크로블록 한 쌍이 필드 타입인지 검토하여, 상기 하위 계층의 매크로블록이 필드타입이며, 상기 하위 계층의 매크로블록의 상위 매크로블록과 하위 매크로블록이 서로 다른 매크로블록 모드로 코딩된 경우, 상기 현재 계층의 매크로블록을 예측하기 위하여 상기 상위 필드 또는 하위 필드의 정보를 보간하는 필드/프레임 변환부;
    상기 변환된 결과에 따라 현재 계층의 매크로블록을 인코딩하는 예측 인코딩부를 포함하는, 인터레이스 비디오 신호를 인코딩하는 장치.
  32. 제 31항에 있어서,
    상기 하위 계층의 상위 매크로블록과 하위 매크로블록은 인터 예측 또는 인트라 예측으로 상기 상위 매크로블록의 예측 모드와 하위 매크로블록의 예측 모드는 서로 다른, 인터레이스 비디오 신호를 인코딩하는 장치.
  33. 제 31항에 있어서,
    상기 필드/프레임 변환부는 하위 계층의 인트라 코딩된 매크로블록 또는 인터 코딩된 매크로블록에서 서로 인접한 픽셀 사이에 존재하는 픽셀의 정보를 보간하여 계산하는, 인터레이스 비디오 신호를 인코딩하는 장치.
  34. 제 31항에 있어서,
    상기 필드/프레임 변환부는 보간된 기초 계층의 4x4 서브블록에 대해 2를 곱하여 모션 벡터를 산출하는, 인터레이스 비디오 신호를 인코딩하는 장치.
  35. 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 디코딩하는 장치에 있어서,
    현재 계층의 매크로블록 한 쌍이 프레임 타입이며, 하위 계층의 매크로블록 한 쌍이 필드 타입인지 검토하여, 상기 하위 계층의 매크로블록이 필드타입이며, 상기 하위 계층의 매크로블록의 상위 매크로블록과 하위 매크로블록이 서로 다른 매크로블록 모드로 코딩된 경우, 상기 현재 계층의 매크로블록을 예측하기 위하여 상기 상위 필드 또는 하위 필드의 정보를 보간하는 필드/프레임 변환부; 및
    상기 변환된 결과에 따라 현재 계층의 매크로블록을 디코딩하는 예측 디코딩부를 포함하는, 인터레이스 비디오 신호를 디코딩하는 장치.
  36. 제 35항에 있어서,
    상기 하위 계층의 상위 매크로블록과 하위 매크로블록은 인터 예측 또는 인트라 예측으로 상기 상위 매크로블록의 예측 모드와 하위 매크로블록의 예측 모드는 서로 다른, 인터레이스 비디오 신호를 디코딩하는 장치.
  37. 제 35항에 있어서,
    상기 필드/프레임 변환부는 하위 계층의 인트라 코딩된 매크로블록 또는 인터 코딩된 매크로블록에서 서로 인접한 픽셀 사이에 존재하는 픽셀의 정보를 보간하여 계 산하는, 인터레이스 비디오 신호를 디코딩하는 장치.
  38. 제 35항에 있어서,
    상기 필드/프레임 변환부는 보간된 기초 계층의 4x4 서브블록에 대해 2를 곱하여 모션 벡터를 산출하는, 인터레이스 비디오 신호를 디코딩하는 장치.
  39. 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 인코딩하는 장치에 있어서,
    현재 계층의 매크로블록 한 쌍이 필드 타입이며, 하위 계층의 매크로블록 한 쌍이 프레임 타입인지 검토하며, 상기 현재 계층의 매크로블록이 필드타입이고, 상기 현재 계층의 매크로블록의 상위 매크로블록과 하위 매크로블록이 서로 다른 매크로블록 모드로 코딩된 경우, 상기 하위 계층의 프레임 타입 인터 매크로블록의 서브블록을 참조하도록 계산하는 필드/프레임 변환부; 및
    상기 계산 결과를 사용하여 현재 계층의 인터 매크로블록을 인코딩하는 예측 인코딩부를 포함하는, 인터레이스 비디오 신호를 인코딩하는 장치.
  40. 제 39항에 있어서,
    상기 하위 계층의 프레임 타입 인터 매크로블록의 서브블록과 상기 현재 계층의 인터 매크로블록은 상측 또는 하측에 동일하게 위치한, 인터레이스 비디오 신호를 인코딩하는 장치.
  41. 제 39항에 있어서,
    상기 현재 계층의 인터 매크로블록의 모션 벡터는 0으로 설정하는, 인터레이스 비디오 신호를 인코딩하는 장치.
  42. 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 디코딩하는 장치에 있어서,
    현재 계층의 매크로블록 한 쌍이 필드 타입이며, 하위 계층의 매크로블록 한 쌍이 프레임 타입인지 검토하며, 상기 현재 계층의 매크로블록이 필드타입이고, 상기 현재 계층의 매크로블록의 상위 매크로블록과 하위 매크로블록이 서로 다른 매크로블록 모드로 코딩된 경우, 상기 하위 계층의 프레임 타입 인터 매크로블록의 서브블록을 참조하여 계산하는 필드/프레임 변환부; 및
    상기 계산 결과를 사용하여 현재 계층의 인터 매크로블록을 디코딩하는 예측 디코딩부를 포함하는, 인터레이스 비디오 신호를 디코딩하는 장치.
  43. 제 42항에 있어서,
    상기 하위 계층의 프레임 타입 인터 매크로블록의 서브블록과 상기 현재 계층의 인터 매크로블록은 상측 또는 하측에 동일하게 위치한, 인터레이스 비디오 신호를 디코딩하는 장치.
  44. 제 42항에 있어서,
    상기 현재 계층의 인터 매크로블록의 모션 벡터는 0으로 설정하는, 인터레이스 비디오 신호를 디코딩하는 장치.
  45. 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 인코딩하는 장치에 있어서,
    현재 계층의 매크로블록 한 쌍이 필드 타입이며, 하위 계층의 매크로블록 한 쌍이 프레임 타입인지 검토하여 상기 현재 계층의 매크로블록이 필드 타입인 경우, 상기 하위 계층의 매크로블록의 인트라 코딩 또는 인터 코딩에 따라 상기 현재 계층의 매크로블록의 참조 인덱스를 2배로 설정하는 필드/프레임 변환부; 및
    상기 설정된 참조 인덱스의 값을 사용하여 인코딩하는 예측 인코딩부를 포함하는, 인터레이스 비디오 신호를 인코딩하는 장치.
  46. 제 45항에 있어서,
    상기 필드/프레임 변환부는 상기 현재 계층의 매크로블록이 상위 매크로블록인 경우, 상기 상위 매크로블록의 1 또는 2번째 서브블록의 참조인덱스는 상기 하위 계층의 상위 매크로블록 프레임의 1 또는 2번째 서브블록의 참조 인덱스를 2배로 설정하는, 인터레이스 비디오 신호를 인코딩하는 장치.
  47. 제 45항에 있어서,
    상기 필드/프레임 변환부는 상기 현재 계층의 매크로블록이 상위 매크로블록인 경우, 상기 상위 매크로블록의 3 또는 4번째 서브블록의 참조인덱스는 상기 하위 계층의 하위 매크로블록 프레임의 1 또는 2번째 서브블록의 참조 인덱스를 2배로 설정하는, 인터레이스 비디오 신호를 인코딩하는 장치.
  48. 제 45항에 있어서,
    상기 필드/프레임 변환부는
    상기 현재 계층의 매크로블록이 하위 매크로블록인 경우, 상기 하위 매크로블록의 1 또는 2번째 서브블록의 참조인덱스는 상기 하위 계층의 상위 매크로블록 프레임의 3 또는 4번째 서브블록의 참조 인덱스를 2배로 설정하는, 인터레이스 비디오 신호를 인코딩하는 장치.
  49. 제 45항에 있어서,
    상기 필드/프레임 변환부는
    상기 현재 계층의 매크로블록이 하위 매크로블록인 경우, 상기 하위 매크로블록의 3 또는 4번째 서브블록의 참조인덱스는 상기 하위 계층의 하위 매크로블록 프레임의 3 또는 4번째 서브블록의 참조 인덱스를 2배로 설정하는, 인터레이스 비디오 신호를 인코딩하는 장치.
  50. 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 디코딩하 는 장치에 있어서,
    현재 계층의 매크로블록 한 쌍이 필드 타입이며, 하위 계층의 매크로블록 한 쌍이 프레임 타입인지 검토하여 상기 현재 계층의 매크로블록이 필드 타입인 경우, 상기 하위 계층의 매크로블록의 인트라 코딩 또는 인터 코딩에 따라 상기 현재 계층의 매크로블록의 참조 인덱스를 2배로 설정하는 필드/프레임 변환부; 및
    상기 설정된 참조 인덱스의 값을 사용하여 디코딩하는 예측 디코딩부를 포함하는, 인터레이스 비디오 신호를 디코딩하는 장치.
  51. 제 50항에 있어서,
    상기 필드/프레임 변환부는
    상기 현재 계층의 매크로블록이 상위 매크로블록인 경우, 상기 상위 매크로블록의 1 또는 2번째 서브블록의 참조인덱스는 상기 하위 계층의 상위 매크로블록 프레임의 1 또는 2번째 서브블록의 참조 인덱스를 2배로 설정하는, 인터레이스 비디오 신호를 디코딩하는 장치.
  52. 제 51항에 있어서,
    상기 필드/프레임 변환부는
    상기 현재 계층의 매크로블록이 상위 매크로블록인 경우, 상기 상위 매크로블록의 3 또는 4번째 서브블록의 참조인덱스는 상기 하위 계층의 하위 매크로블록 프레임의 1 또는 2번째 서브블록의 참조 인덱스를 2배로 설정하는, 인터레이스 비디오 신 호를 디코딩하는 장치.
  53. 제 51항에 있어서,
    상기 필드/프레임 변환부는
    상기 현재 계층의 매크로블록이 하위 매크로블록인 경우, 상기 하위 매크로블록의 1 또는 2번째 서브블록의 참조인덱스는 상기 하위 계층의 상위 매크로블록 프레임의 3 또는 4번째 서브블록의 참조 인덱스를 2배로 설정하는, 인터레이스 비디오 신호를 디코딩하는 장치.
  54. 제 51항에 있어서,
    상기 필드/프레임 변환부는
    상기 현재 계층의 매크로블록이 하위 매크로블록인 경우, 상기 하위 매크로블록의 3 또는 4번째 서브블록의 참조인덱스는 상기 하위 계층의 하위 매크로블록 프레임의 3 또는 4번째 서브블록의 참조 인덱스를 2배로 설정하는, 인터레이스 비디오 신호를 디코딩하는 장치.
  55. 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 인코딩하는 장치에 있어서,
    현재 계층의 매크로블록 한 쌍이 필드 타입이며, 하위 계층의 매크로블록 한 쌍이 프레임 타입인지 검토하여, 상기 현재 계층의 매크로블록이 필드 타입인 경우, 상기 현재 계층의 제 1 필드 블록의 픽셀을 확장하여 제 2 필드의 픽셀 값으로 설정하는 필드/프레임 변환부;
    상기 설정한 픽셀값을 참조하여 매크로블록을 인코딩하는 예측 인코딩부를 포함하는, 인터레이스 비디오 신호를 인코딩하는 장치.
  56. 제 55항에 있어서,
    상기 제 1 필드는 상위 필드 또는 하위 필드인, 인터레이스 비디오 신호를 인코딩하는 장치.
  57. 제 55항에 있어서,
    상기 현재 계층의 제 1 필드는 방향적 인트라 모드가 사용된 경우, 인트라 BL(IBL) 모드로 변화하는 단계를 더 포함하는, 인터레이스 비디오 신호를 인코딩하는 장치.
  58. 인터레이스 방식으로 코딩된 매크로블록이 포함된 다계층 비디오 신호를 디코딩하는 장치에 있어서,
    현재 계층의 매크로블록 한 쌍이 필드 타입이며, 하위 계층의 매크로블록 한 쌍이 프레임 타입인지 검토하여 상기 현재 계층의 매크로블록이 필드 타입인 경우, 상기 현재 계층의 제 1 필드 블록의 픽셀을 확장하여 제 2 필드의 픽셀 값으로 설정하는 필드/프레임 변환부; 및
    상기 설정한 픽셀값을 참조하여 매크로블록을 디코딩하는 예측 디코딩부를 포함하는, 인터레이스 비디오 신호를 디코딩하는 장치.
  59. 제 58항에 있어서,
    상기 제 1 필드는 상위 필드 또는 하위 필드인, 인터레이스 비디오 신호를 디코딩하는 장치.
  60. 제 58항에 있어서,
    상기 현재 계층의 제 1 필드는 방향적 인트라 모드가 사용된 경우, 인트라 BL(IBL) 모드로 변화하는 단계를 더 포함하는, 인터레이스 비디오 신호를 디코딩하는 장치.
KR1020060053130A 2006-02-22 2006-06-13 타입이 일치하지 않는 하위 계층의 정보를 사용하여인터레이스 비디오 신호를 인코딩/디코딩 하는 방법 및장치 KR100809296B1 (ko)

Priority Applications (6)

Application Number Priority Date Filing Date Title
KR1020060053130A KR100809296B1 (ko) 2006-02-22 2006-06-13 타입이 일치하지 않는 하위 계층의 정보를 사용하여인터레이스 비디오 신호를 인코딩/디코딩 하는 방법 및장치
JP2008556245A JP2009527977A (ja) 2006-02-22 2007-02-21 タイプが一致しない下位階層の情報を使用しインターレースビデオ信号をエンコーディング／デコーディングする方法および装置
PCT/KR2007/000886 WO2007097562A1 (en) 2006-02-22 2007-02-21 Method and apparatus for encoding/decoding interlaced video signal using different types of information of lower layer
CN2007800065184A CN101390402B (zh) 2006-02-22 2007-02-21 使用不同类型的下层信息对交织视频信号进行编码/解码的方法和设备
US11/708,630 US20070274389A1 (en) 2006-02-22 2007-02-21 Method and apparatus for encoding/decoding interlaced video signal using different types of information of lower layer
EP07709035A EP1992170A1 (en) 2006-02-22 2007-02-21 Method and apparatus for encoding/decoding interlaced video signal using different types of information of lower layer

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US77534206P 2006-02-22 2006-02-22
US60/775,342 2006-02-22
US78752006P 2006-03-31 2006-03-31
US78749506P 2006-03-31 2006-03-31
US60/787,495 2006-03-31
US60/787,520 2006-03-31
KR1020060053130A KR100809296B1 (ko) 2006-02-22 2006-06-13 타입이 일치하지 않는 하위 계층의 정보를 사용하여인터레이스 비디오 신호를 인코딩/디코딩 하는 방법 및장치

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020070094890A Division KR101049258B1 (ko) 2006-02-22 2007-09-18 타입이 일치하지 않는 하위 계층의 정보를 사용하여인터레이스 비디오 신호를 인코딩/디코딩 하는 방법 및장치

Publications (2)

Publication Number Publication Date
KR20070085003A KR20070085003A (ko) 2007-08-27
KR100809296B1 true KR100809296B1 (ko) 2008-03-04

Family

ID=38437566

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020060053130A KR100809296B1 (ko) 2006-02-22 2006-06-13 타입이 일치하지 않는 하위 계층의 정보를 사용하여인터레이스 비디오 신호를 인코딩/디코딩 하는 방법 및장치

Country Status (6)

Country Link
US (1) US20070274389A1 (ko)
EP (1) EP1992170A1 (ko)
JP (1) JP2009527977A (ko)
KR (1) KR100809296B1 (ko)
CN (1) CN101390402B (ko)
WO (1) WO2007097562A1 (ko)

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9330060B1 (en) 2003-04-15 2016-05-03 Nvidia Corporation Method and device for encoding and decoding video image data
US8660182B2 (en) 2003-06-09 2014-02-25 Nvidia Corporation MPEG motion estimation based on dual start points
US8731071B1 (en) 2005-12-15 2014-05-20 Nvidia Corporation System for performing finite input response (FIR) filtering in motion estimation
KR100914713B1 (ko) * 2006-01-09 2009-08-31 엘지전자 주식회사 영상 신호의 레이어 간 예측 방법
US8724702B1 (en) 2006-03-29 2014-05-13 Nvidia Corporation Methods and systems for motion estimation used in video coding
US8660380B2 (en) 2006-08-25 2014-02-25 Nvidia Corporation Method and system for performing two-dimensional transform on data value array with reduced power consumption
US8756482B2 (en) 2007-05-25 2014-06-17 Nvidia Corporation Efficient encoding/decoding of a sequence of data frames
US9118927B2 (en) 2007-06-13 2015-08-25 Nvidia Corporation Sub-pixel interpolation and its application in motion compensated encoding of a video signal
US8873625B2 (en) * 2007-07-18 2014-10-28 Nvidia Corporation Enhanced compression in representing non-frame-edge blocks of image frames
US8698838B1 (en) * 2007-09-07 2014-04-15 Zenverge, Inc. Architecture for multiple graphics planes
US8275033B2 (en) * 2008-01-15 2012-09-25 Sony Corporation Picture mode selection for video transcoding
KR100963424B1 (ko) * 2008-07-23 2010-06-15 한국전자통신연구원 스케일러블 영상 복호화기 및 그 제어 방법
US8666181B2 (en) 2008-12-10 2014-03-04 Nvidia Corporation Adaptive multiple engine image motion detection system and method
DE102009039095A1 (de) * 2009-08-27 2011-03-10 Siemens Aktiengesellschaft Verfahren und Vorrichtung zum Erzeugen, Decodieren und Transcodieren eines codierten Videodatenstroms
US9225961B2 (en) 2010-05-13 2015-12-29 Qualcomm Incorporated Frame packing for asymmetric stereo video
US9485546B2 (en) 2010-06-29 2016-11-01 Qualcomm Incorporated Signaling video samples for trick mode video representations
US9185439B2 (en) 2010-07-15 2015-11-10 Qualcomm Incorporated Signaling data for multiplexing video components
US9596447B2 (en) 2010-07-21 2017-03-14 Qualcomm Incorporated Providing frame packing type information for video coding
WO2013115609A1 (ko) * 2012-02-02 2013-08-08 한국전자통신연구원 영상신호의 계층간 예측 방법 및 그 장치
KR20160105203A (ko) * 2015-02-27 2016-09-06 삼성전자주식회사 멀티미디어 코덱, 상기 멀티미디어 코덱을 포함하는 애플리케이션 프로세서, 및 상기 애플리케이션 프로세서의 동작 방법

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004173246A (ja) 2002-11-07 2004-06-17 Victor Co Of Japan Ltd 動画像時間軸階層符号化方法、符号化装置、復号化方法及び復号化装置並びにコンピュータプログラム
KR20040106392A (ko) * 2002-04-26 2004-12-17 소니 가부시끼 가이샤 부호화 장치 및 방법, 복호 장치 및 방법, 기록 매체, 및프로그램
KR20050107488A (ko) * 2003-03-03 2005-11-11 톰슨 라이센싱 에스.에이. 인터레이스된 디지털 비디오 데이터의 스케일러블 인코딩및 디코딩
JP2006060538A (ja) 2004-08-20 2006-03-02 Victor Co Of Japan Ltd 符号化モード選択装置及び符号化モード選択プログラム

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3189258B2 (ja) * 1993-01-11 2001-07-16 ソニー株式会社 画像信号符号化方法および画像信号符号化装置、並びに画像信号復号化方法および画像信号復号化装置
CA2127151A1 (en) * 1993-09-21 1995-03-22 Atul Puri Spatially scalable video encoding and decoding
WO2000059233A1 (en) * 1999-03-26 2000-10-05 Koninklijke Philips Electronics N.V. Video coding method and corresponding video coder
JP2002199399A (ja) * 2000-12-27 2002-07-12 Sony Corp 動きベクトル変換方法及び変換装置
US7447264B2 (en) * 2002-11-07 2008-11-04 Victor Company Of Japan, Ltd. Moving-picture temporal scalable coding method, coding apparatus, decoding method, decoding apparatus, and computer program therefor
WO2004054270A1 (en) * 2002-12-10 2004-06-24 Koninklijke Philips Electronics N.V. A unified metric for digital video processing (umdvp)
KR100693669B1 (ko) * 2003-03-03 2007-03-09 엘지전자 주식회사 피일드 매크로 블록의 레퍼런스 픽쳐 결정 방법
KR100914713B1 (ko) * 2006-01-09 2009-08-31 엘지전자 주식회사 영상 신호의 레이어 간 예측 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040106392A (ko) * 2002-04-26 2004-12-17 소니 가부시끼 가이샤 부호화 장치 및 방법, 복호 장치 및 방법, 기록 매체, 및프로그램
JP2004173246A (ja) 2002-11-07 2004-06-17 Victor Co Of Japan Ltd 動画像時間軸階層符号化方法、符号化装置、復号化方法及び復号化装置並びにコンピュータプログラム
KR20050107488A (ko) * 2003-03-03 2005-11-11 톰슨 라이센싱 에스.에이. 인터레이스된 디지털 비디오 데이터의 스케일러블 인코딩및 디코딩
JP2006060538A (ja) 2004-08-20 2006-03-02 Victor Co Of Japan Ltd 符号化モード選択装置及び符号化モード選択プログラム

Also Published As

Publication number Publication date
WO2007097562A1 (en) 2007-08-30
CN101390402B (zh) 2010-12-08
US20070274389A1 (en) 2007-11-29
CN101390402A (zh) 2009-03-18
EP1992170A1 (en) 2008-11-19
JP2009527977A (ja) 2009-07-30
KR20070085003A (ko) 2007-08-27

Similar Documents

Publication Publication Date Title
KR100809296B1 (ko) 타입이 일치하지 않는 하위 계층의 정보를 사용하여인터레이스 비디오 신호를 인코딩/디코딩 하는 방법 및장치
JP6681758B2 (ja) デジタルビデオコンテンツのマクロブロックレベルにおける適応フレーム／フィールド符号化
US8446956B2 (en) Inter-layer motion prediction method using resampling
JP4821723B2 (ja) 動画像符号化装置及びプログラム
JP5219089B2 (ja) 画像データの生成方法
US20140161190A1 (en) Inter-layer prediction method for video signal
JP3504256B1 (ja) 動画像符号化方法、動画像復号方法、動画像符号化装置、及び動画像復号装置
CN113507603B (zh) 图像信号编码/解码方法及其设备
JP5037517B2 (ja) 動き及びテクスチャデータを予測する方法
JP2007282014A (ja) 画像データの生成方法
RU2384970C1 (ru) Способ межслойного предсказания для видеосигнала
KR101049258B1 (ko) 타입이 일치하지 않는 하위 계층의 정보를 사용하여인터레이스 비디오 신호를 인코딩/디코딩 하는 방법 및장치
JP2011199433A (ja) 画像処理装置および画像処理方法
JP3154454B2 (ja) インタレース画像信号の符号化法
KR102125969B1 (ko) 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
KR101336104B1 (ko) 모션과 텍스처 데이터를 예측하는 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
A107 Divisional application of patent
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20110128

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee