KR101097690B1 - 화상 복호 방법 및 화상 복호 장치 - Google Patents

화상 복호 방법 및 화상 복호 장치 Download PDF

Info

Publication number
KR101097690B1
KR101097690B1 KR1020107022364A KR20107022364A KR101097690B1 KR 101097690 B1 KR101097690 B1 KR 101097690B1 KR 1020107022364 A KR1020107022364 A KR 1020107022364A KR 20107022364 A KR20107022364 A KR 20107022364A KR 101097690 B1 KR101097690 B1 KR 101097690B1
Authority
KR
South Korea
Prior art keywords
base view
nal unit
unit
view
image
Prior art date
Application number
KR1020107022364A
Other languages
English (en)
Other versions
KR20110002843A (ko
Inventor
총 순 림
다카히로 니시
Original Assignee
파나소닉 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 파나소닉 주식회사 filed Critical 파나소닉 주식회사
Publication of KR20110002843A publication Critical patent/KR20110002843A/ko
Application granted granted Critical
Publication of KR101097690B1 publication Critical patent/KR101097690B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/188—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a video data packet, e.g. a network abstraction layer [NAL] unit
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/1887—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a variable length codeword
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

전치 NAL 유닛이 이용되지 않는 경우에도, 다시점 영상을 복호할 수 있는 화상 복호 방법을 제공한다. 화상 복호 방법은, 베이스·뷰의 NAL 유닛을 구문 해석하고(S200), 베이스·뷰의 화상을 복호하고(S202), 논·베이스·뷰의 MVC 확장 파라미터를 구문 해석하고(S204), 베이스·뷰의 전치 NAL 유닛이 존재하는지 여부를 검색하고(S205), 전치 NAL 유닛이 존재하지 않는 경우, 베이스·뷰의 MVC 확장 파라미터를 산출하고(S206), 전치 NAL 유닛이 존재하는 경우, 베이스·뷰의 MVC 확장 파라미터를 구문 해석하고(S207), 논·베이스·뷰의 NAL 유닛을 구문 해석하고(S208), 베이스·뷰의 MVC 확장 파라미터, 및, 논·베이스·뷰의 MVC 확장 파라미터를 이용하여, 논·베이스·뷰의 화상을 복호한다(S210).

Description

화상 복호 방법 및 화상 복호 장치{IMAGE DECODING METHOD AND IMAGE DECODING DEVICE}
본 발명은, 다시점 영상을 복호하는 화상 복호 방법 및 다시점 영상을 복호하는 화상 복호 장치에 관한 것이다.
다시점 영상 부호화(MVC : Multiview Video Coding) 규격은, ISO/IEC 14496－10 Advanced Video Coding(AVC) 규격의 확장 규격으로서 규정된 것이다. MVC 규격에 있어서의 프로파일은, AVC 규격으로 정의된 프로화일의 몇개에 후방 호환성을 가지도록 설계되어 있다. 환언하면, 새로운 MVC 프로파일에 준거한 디코더 또는 플레이어는, AVC 프로파일의 비트 스트림의 몇개를 복호할 수 있다. 반대로, AVC 프로파일(특히 하이·프로파일)의 종래형 디코더는, 새로운 MVC 프로파일에 준거한 비트 스트림 중의 적어도 1개의 뷰를 복호하는 것이다.
다시점 영상 부호화(MVC) 규격에 있어서, 부호화된 베이스·뷰가 AVC 규격으로 정의된 프로파일과 호환성을 가지도록 요구되어 있으므로, AVC 규격의 하이·프로파일에 준거한 종래형 디코더는, MVC 프로파일에 준거한 MVC 비트 스트림 중의 페이스·뷰를 복호 가능하지 않으면 안된다. 부호화된 뷰는, 네트워크 추상 레이어(NAL：Network Abstraction Layer) 유닛에 포함된다. 다른 타입의 NAL 유닛은, NAL 유닛·타입의 값에 따라 구별된다. 논·베이스·뷰는, AVC 규격의 구판에 있어서 예약된 NAL 유닛·타입의 값을 가지는 NAL 유닛에 포함된다. 따라서, 이들의 NAL 유닛은, 종래형의 하이 프로파일·디코더에는 무시되어야 하는 것이다.
또한, MVC 규격에 있어서, 전치 NAL 유닛(Prefix NAL unit)으로 불리는 특별한 NAL 유닛이, 부호화된 베이스·뷰를 포함하는 각 NAL 유닛의 앞에 배치되고, 함께 송신되는 것이 요구되고 있다. 이 전치 NAL 유닛의 NAL 유닛·타입의 값은 14이고, AVC 규격의 구판에 있어서 예약되어 있다. 부호화된 베이스·뷰를 포함하는 각 NAL 유닛의 NAL 유닛·타입의 값은, 5 또는 1이다.
전치 NAL 유닛은, NAL 유닛·헤더의 MVC 확장부에 배치되는 부가 파라미터를 포함한다. 이들 파라미터는, 베이스·뷰와 관련되어, 논·베이스·뷰를 부호화하여 복호하는 처리에 있어서 이용되고 있다. 도 23은, NAL 유닛·헤더의 MVC 확장 구문에 의한 기억 위치에 관한 도면이다. NAL 유닛·헤더의 MVC 확장부에 있어서의 파라미터의 예로서, 비 IDR 플래그(non＿idr＿flag), 우선 ID(priority＿id), 뷰 ID(view＿id), 시간 ID(temporal＿id), 앵커·픽쳐·플래그(anchor＿pic＿flag), 뷰간 예측 플래그(inter＿view＿flag), 예약 1비트(reserved＿one＿bit) 등이 있다. 예약 1비트(reserved＿one＿bit)는, 1개의 값이며, 논·베이스·뷰의 부호화 및 복호 처리에는 이용되지 않는다.
또한, 특허 문헌 1에는, NAL 유닛을 이용하여, 다시점 영상을 부호화하는 기술이 기재되어 있다.
특허문헌 1 : 국제 공개 제 2007/126509호
이상적으로는, 종래형 AVC 디코더는, AVC 규격의 구판에 있어서 예약된 값으로서 정의되어 있는 NAL 유닛·타입의 값을 가지는 NAL 유닛에 대해서는 무시해야 한다. 종래형 AVC 디코더는, 베이스·뷰를 포함하는 NAL 유닛만을 복호하고, 그 베이스·뷰만을 재구축해야 한다.
그러나, 시장에 있어서의 모든 디코더가, 예약된 값을 가지는 N AL 유닛을 무시하는 것은 아니다. 압축된 베이스·뷰와 압축된 논·베이스·뷰는, 상이한 스트림 식별자를 이용하여 구별할 수 있다. 그러나, 압축된 베이스·뷰에 관련되어 전치 NAL 유닛을 포함하는 것이 요구되므로, 시장에 있어서의 디코더 중에는, 전치 NAL 유닛이 원인으로 베이스·뷰를 복호할 수 없는 것도 있다. 이는, 압축된 MVC 스트림이 종래형 AVC 디코더와의 후방 호환성을 가지도록 지원하는데 있어서의 과제가 된다.
또한, 전치 NAL 유닛은, 베이스·뷰의 각 NAL 유닛의 앞에 배치되지 않으면 안된다. 따라서, 단일한 뷰를 대상으로 하는 비트 스트림으로서, 전치 NAL 유닛이 없는 비트 스트림에, 새로운 별도의 뷰를 추가하는 것은, 용이하지 않다. 즉, 종래의 규격에 의거하여 생성된 비트 스트림을 다시점 영상에 대응한 비트 스트림으로 변경하는 것은, 곤란하다. 이 때문에, 종래의 규격에 의거하여 생성된 기존의 비트 스트림을 다시점 영상에 있어서의 1개의 뷰로서 이용하는 것은 곤란했다.
여기서, 본 발명은, 전치 NAL 유닛이 이용되지 않는 경우라도, 다시점 영상을 복호할 수 있는 화상 복호 방법, 및, 다시점 영상을 부호화할 수 있는 화상 부호화 방법을 제공하는 것을 목적으로 한다.
상기 과제를 해결하기 위해, 본 발명에 관한 화상 복호 방법은, 다시점 영상을 복호하는 화상 복호 방법으로서, 베이스·뷰의 뷰·컴포넌트에 포함되는 화상을 포함하는 NAL 유닛을 구문 해석하고, 상기 베이스·뷰의 상기 뷰·컴포넌트에 포함되는 상기 화상을 복호하고, 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 구문 해석하고, 상기 베이스·뷰의 상기 뷰·컴포넌트에 전치 NAL 유닛이 존재하는지 여부를 검색하여, 상기 베이스·뷰의 상기 뷰·컴포넌트에 상기 전치 NAL 유닛이 존재하지 않는 경우, 상기 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 산출하고, 상기 베이스·뷰의 상기 뷰·컴포넌트에 상기 전치 NAL 유닛이 존재하는 경우, 상기 전치 NAL 유닛으로부터, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터를 구문 해석하고, 상기 논·베이스·뷰의 뷰·컴포넌트에 포함되는 화상을 포함하는 NAL 유닛을 구문 해석하고, 산출 또는 구문 해석된 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터, 및, 구문 해석된 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터를 이용하여, 상기 논·베이스·뷰의 상기 뷰·컴포넌트에 포함되는 상기 화상을 복호한다.
이에 따라, 전치 NAL 유닛이 이용되지 않는 경우에도, 다시점 영상이 복호된다.
또한, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터, 및, 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터는, 각각, 비IDR 플래그(non＿idr＿flag), 우선 ID(priority＿id), 뷰 ID(view＿id), 시간 ID(temporal＿id), 앵커·픽쳐·플래그(anchor＿pic＿flag) 및 뷰간 예측 플러그(inter＿view＿flag)를 포함해도 된다.
이에 따라, 다양한 파라미터를 이용하여, 논·베이스·뷰가 복호된다.
또한, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터를 산출할 때에는, 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터로부터, 상기 비IDR 플래그(non＿idr＿flag)의 값을 취득하고, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 비IDR 플래그(non＿idr＿flag)에, 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터로부터 취득된 상기 비IDR 플래그(non＿idr＿flag)의 값을 할당하고, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 우선 ID(priority＿id)에, 미리 정해진 제1의 값을 할당하고, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 뷰 ID(view＿id)에, 미리 정해진 제2의 값을 할당하고, 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터로부터, 상기 시간 ID(temporal＿id)의 값을 취득하고, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 시간 ID(temporal＿id)에, 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터로부터 취득된 상기 시간 ID(temporal＿id)의 값을 할당하고, 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터로부터, 상기 앵커·픽쳐·플래그(anchor＿pic＿flag)의 값을 취득하고, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 앵커·픽쳐·플래그(anchor＿pic＿flag)에, 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터로부터 취득된 상기 앵커·픽쳐·플래그(anchor＿pic＿flag)의 값을 할당하고, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 뷰간 예측 플래그(inter＿view＿flag)에, 미리 정해진 제3의 값을 할당해도 된다.
이에 따라, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라 미터가, 보다 구체적으로 산출된다.
또한, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터를 산출할 때는, 상기 베이스·뷰의 NAL 유닛·헤더로부터, NAL 유닛·타입(nal＿unit＿type)의 값을 취득하고, 상기 NAL 유닛·타입(nal＿unit＿type)의 값이 5인 경우, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 비IDR 플래그(non＿idr＿flag)에, 0을 할당하고, 상기 NAL 유닛·타입(nal＿unit＿type)의 값이 1인 경우, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 비IDR 플래그(non＿idr＿flag)에, 1을 할당하고, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 우선 ID(priority＿id)에, 미리 규정된 제1의 값을 할당하고, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 뷰 ID(view＿id)에, 미리 정해진 제2의 값을 할당하고, 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터로부터, 상기 시간 ID(temporal＿id)의 값을 취득하고, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 시간 ID(temporal＿id)에, 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터로부터 취득된 상기 시간 ID(temporal＿id)의 값을 할당하고, 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터로부터, 상기 앵커·픽쳐·플래그(anchor＿pic＿flag)의 값을 취득하고, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 앵커·픽쳐·플래그(anchor＿pic＿flag)에, 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터로부터 취득된 상기 앵커·픽쳐·플래그(anchor＿pic＿flag)의 값을 할당하고, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 뷰간 예측 플래그(inter＿view＿flag)에, 미리 정해진 제3의 값을 할당해도 된다.
이에 따라, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라 미터가, 보다 구체적으로 산출된다. 또한, 베이스·뷰의 NAL 유닛·헤더를 이용함으로써, 보다 고정밀의 값이 산출된다.
또한, 상기 우선 ID(priority＿id)에 할당되는 상기 미리 정해진 제1의 값은, 0이어도 된다.
이에 따라, 베이스·뷰가, 우선적으로 취급된다.
또한, 상기 뷰 ID(view＿id)에 할당되는 상기 미리 정해진 제2의 값은, 0이어도 된다.
이에 따라, 베이스·뷰의 뷰 ID(view＿id)가, 판별하기 쉬운 고정의 값이 된다.
또한, 상기 뷰간 예측 플래그(inter＿view＿flag)에 할당되는 상기 미리 정해진 제3의 값은, 1이어도 된다.
이에 따라, 베이스·뷰의 복호 화상이, 뷰간 예측에 이용 가능하게 된다.
또한, 본 발명에 관한 화상 부호화 방법은, 다시점 영상을 부호화하는 화상 부호화 방법으로서, 베이스·뷰의 화상을 부호화하고, 전치 NAL 유닛없이, 상기 베이스·뷰의 부호화된 상기 화상을 포함하는 뷰·컴포넌트를 NAL 유닛에 기입하고, 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 특정하고, 상기 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 산출하고, 산출된 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터, 및, 특정된 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터를 이용하여, 상기 논·베이스·뷰의 화상을 부호화하고, 상기 논·베이스·뷰의 부호화된 상기 화상을 포함하는 뷰·컴포넌트를 NAL 유닛에 기입해도 된다.
이에 따라, 전치 NAL 유닛없이, 다시점 영상이 부호화된다.
또한, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터, 및, 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터는, 각각, 비IDR 플래그(non＿idr＿flag), 우선 ID(priority＿id), 뷰 ID(view＿id), 시간 ID(temporal＿id), 앵커·픽쳐·플래그(anchor＿pic＿flag) 및 뷰간 예측 플래그(inter＿view＿flag)를 포함해도 된다.
이에 따라, 다양한 파라미터를 이용하여, 논·베이스·뷰가 부호화된다.
또한, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터를 산출할 때에는, 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터로부터, 상기 비IDR 플래그(non＿idr＿flag)의 값을 취득하고, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 비IDR 플래그(non＿idr＿flag)에, 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터로부터 취득된 상기 비IDR 플래그(non＿idr＿flag)의 값을 할당하고, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 우선 ID(priority＿id)에, 미리 정해진 제1의 값을 할당하고, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 뷰 ID(view＿id)에, 미리 정해진 제2의 값을 할당하고, 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터로부터, 상기 시간 ID(temporal＿id)의 값을 취득하고, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 시간 ID(temporal＿id)에, 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터로부터 취득된 상기 시간 ID(temporal＿id)의 값을 할당하고, 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터로부터, 상기 앵커·픽쳐·플래그(anchor＿pic＿flag)의 값을 취득하고, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 앵커·픽쳐·플래그(anchor＿pic＿flag)에, 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터로부터 취득된 상기 앵커·픽쳐·플래그(anchor＿pic＿flag)의 값을 할당하고, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 뷰간 예측 플래그(inter＿view＿flag)에, 미리 정해진 제3의 값을 할당해도 된다.
이에 따라, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터가, 보다 구체적으로 산출된다.
또한, 본 발명에 관한 화상 부호화 방법은, 다시점 영상을 부호화하는 화상 부호화 방법으로서, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 특정하고, 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 특정하고, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터를 전치 NAL 유닛에 기입할지 여부를 전환하고, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터를 상기 전치 NAL 유닛에 기입하도록 전환된 경우, 특정된 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터를 상기 전치 NAL 유닛에 기입하고, 상기 베이스·뷰의 화상을 부호화하고, 상기 베이스·뷰의 부호화된 상기 화상을 포함하는 뷰·컴포넌트를 NAL 유닛에 기입하고, 특정된 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터, 및, 특정된 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터를 이용하여, 상기 논·베이스·뷰의 화상을 부호화하고, 상기 논·베이스·뷰의 부호화된 상기 화상을 포함하는 뷰·컴포넌트를 NAL 유닛에 기입해도 된다.
이에 따라, 다시점 영상의 부호화 시, 전치 NAL 유닛의 유무가, 전환 가능하게 된다. 또한, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 산출하기 위한 부하가, 경감된다.
또한, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터, 및, 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터는, 각각, 비IDR 플래그(non＿idr＿flag), 우선 ID(priority＿id), 뷰 ID(view＿id), 시간 ID(temporal＿id), 앵커·픽쳐·플래그(anchor＿pic＿flag) 및 뷰간 예측 플래그(inter＿view＿flag)를 포함하고, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터를 특정할 때에는, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 우선 ID(priority＿id)에, 미리 정해진 제1의 값을 할당하고, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 뷰 ID(view＿id)에, 미리 정해진 제2의 값을 할당하고, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 뷰간 예측 플래그(inter＿view＿flag)에, 미리 정해진 제3의 값을 할당해도 된다.
이에 따라, 다양한 파라미터를 이용하여, 논·베이스·뷰가 부호화된다.
또한, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터를 산출할 때에는, 상기 베이스·뷰의 NAL 유닛·헤더로부터, NAL 유닛·타입(nal＿unit＿type)의 값을 취득하고, 상기 NAL 유닛·타입(nal＿unit＿type)의 값이 5인 경우, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 비IDR 플래그(non＿idr＿flag)에, 0을 할당하고, 상기 NAL 유닛·타입(nal＿unit＿type)의 값이 1인 경우, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 비IDR 플래그(non＿idr＿flag)에, 1을 할당하고, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 우선 ID(priority＿id)에, 미리 정해진 제1의 값을 할당하고, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 뷰 ID(view＿id)에, 미리 정해진 제2의 값을 할당하고, 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터로부터, 상기 시간 ID(temporal＿id)의 값을 취득하고, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 시간 ID(temporal＿id)에, 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터로부터 취득된 상기 시간 ID(temporal＿id)의 값을 할당하고, 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터로부터, 상기 앵커·픽쳐·플래그(anchor＿pic＿flag)의 값을 취득하고, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 앵커·픽쳐·플래그(anchor＿pic＿flag)에, 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터로부터 취득된 상기 앵커·픽쳐·플래그(anchor＿pic＿flag)의 값을 할당하고, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터의 상기 뷰간 예측 플래그(inter＿view＿flag)에, 미리 정해진 제3의 값을 할당해도 된다.
이에 따라, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터가, 보다 구체적으로 산출된다. 또한, 베이스·뷰의 NAL 유닛·헤더를 이용함으로써, 보다 고정밀의 값이 산출된다.
또한, 상기 우선 ID(priority＿id)에 할당되는 상기 미리 정해진 제1의 값은, 0이어도 된다.
이에 따라, 베이스·뷰가, 우선적으로 취급된다.
또한, 상기 뷰 ID(view＿id)에 할당되는 상기 미리 정해진 제2의 값은, O이어도 된다.
이에 따라, 베이스·뷰의 뷰 ID(view＿id)가, 판별하기 쉬운 고정의 값이 된다.
또한, 상기 뷰간 예측 플래그(inter－view＿flag)에 할당되는 상기 미리 정해진 제3의 값은, 1이어도 된다.
이에 따라, 베이스·뷰의 복호 화상이, 뷰간 예측에 이용 가능하게 된다.
또한, 본 발명에 관한 화상 복호 장치는, 다시점 영상을 복호하는 화상 복호 장치로서, 베이스·뷰의 뷰·컴포넌트에 포함되는 화상을 포함하는 NAL 유닛을 구문 해석하는 베이스·뷰·NAL 유닛 구문 해석부와, 상기 베이스·뷰의 상기 뷰·컴포넌트에 포함되는 상기 화상을 복호하는 베이스·뷰 복호부와, 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 구문 해석하는 논·베이스·뷰·MVC 확장 파라미터 구문 해석부와, 상기 베이스·뷰의 상기 뷰·컴포넌트에 전치 NAL 유닛이 존재하는지 여부를 검색하는 전치 NAL 유닛 검색부와, 상기 베이스·뷰의 상기 뷰·컴포넌트에 상기 전치 NAL 유닛이 존재하지 않는 경우, 상기 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 산출하는 베이스·뷰·MVC 확장 파라미터 산출부와, 상기 베이스·뷰의 상기 뷰·컴포넌트에 상기 전치 NAL 유닛이 존재하는 경우, 상기 전치 NAL 유닛으로부터, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC확장 파라미터를 구문 해석하는 베이스·뷰·MVC 확장 파라미터 구문 해석부와, 상기 논·베이스·뷰의 뷰·컴포넌트에 포함되는 화상을 포함하는 NAL 유닛을 구문 해석하는 논·베이스·뷰·NAL 유닛 구문 해석부와, 산출 또는 구문 해석된 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터, 및, 구문 해석된 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터를 이용하여, 상기 논·베이스·뷰의 상기 뷰·컴포넌트에 포함되는 상기 화상을 복호하는 논·베이스·뷰 복호부를 구비해도 된다.
이에 따라, 전치 NAL 유닛이 이용되지 않는 경우에도, 다시점 영상이 복호 된다.
또한, 본 발명에 관한 화상 부호화 장치는, 다시점 영상을 부호화하는 화상 부호화 장치로서, 베이스·뷰의 화상을 부호화하는 베이스·뷰 부호화부와, 전치 NAL 유닛없이, 상기 베이스·뷰의 부호화된 상기 화상을 포함하는 뷰·컴포넌트를 NAL 유닛에 기입하는 베이스·뷰 기입부와, 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 특정하는 논·베이스·뷰·MVC 확장 파라미터 특정부와, 상기 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 산출하는 베이스·뷰·MVC 확장 파라미터 산출부와, 산출된 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터, 및, 특정된 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터를 이용하여, 상기 논·베이스·뷰의 화상을 부호화하는 논·베이스·뷰 부호화부와, 상기 논·베이스·뷰의 부호화된 상기 화상을 포함하는 뷰·컴포넌트를 NAL 유닛에 기입하는 논·베이스·뷰 기입부를 구비해도 된다.
이에 따라, 전치 NAL 유닛없이, 다시점 영상이 부호화된다.
또한, 본 발명에 관한 화상 부호화 장치는, 다시점 영상을 부호화하는 화상 부호화 장치로서, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 특정하는 베이스·뷰·MVC 확장 파라미터 특정부와, 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 특정하는 논·베이스·뷰·MVC 확장 파라미터 특정부와, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터를 전치 NAL 유닛에 기입할지 여부를 전환하는 전치 NAL 유닛 기입 전환부와, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터를 상기 전치 NAL 유닛에 기입하도록 전환된 경우, 특정된 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터를 상기 전치 NAL 유닛에 기입하는 상기 전치 NAL 유닛 기입부와, 상기 베이스·뷰의 화상을 부호화하는 베이스·뷰 부호화부와, 상기 베이스·뷰의 부호화된 상기 화상을 포함하는 뷰·컴포넌트를 NAL 유닛에 기입하는 베이스·뷰 기입부와, 특정된 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터, 및, 특정된 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터를 이용하여, 상기 논·베이스·뷰의 화상을 부호화하는 논·베이스·뷰 부호화부와, 상기 논·베이스·뷰의 부호화된 상기 화상을 포함하는 뷰·컴포넌트를 NAL 유닛에 기입하는 논·베이스·뷰 기입부를 구비해도 된다.
이에 따라, 다시점 영상의 부호화 시, 전치 NAL 유닛의 유무가, 전환 가능하게 된다. 또한, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 산출하기 위한 부하가, 경감된다.
본 발명에 의해, 전치 NAL 유닛이 이용되지 않는 경우에도, 다시점 영상이 복호되고, 다시점 영상이 부호화된다.
따라서, 전치 NAL 유닛에 기인하여 베이스·뷰를 복호할 수 없었던 종래형 AVC 디코더라도, 다시점 영상에 포함되는 베이스·뷰의 화상을 복호할 수 있다. 또한, 전치 NAL 유닛을 이용하지 않기 때문에, 단일의 뷰를 부호화함으로써 생성된 스트림에, 별도의 뷰를 추가하는 것도 용이하게 된다. 그리고, 종래형 AVC 인코더에 의해 생성된 기존의 비트 스트림을 다시점 영상의 베이스·뷰로서 이용하는 것도 용이하게 된다.
도 1은 본 발명의 실시의 형태 1에 있어서의 화상 부호화 장치의 구성 요소를 나타내는 구성도이다.
도 2는 본 발명의 실시의 형태 1에 있어서의 부호화 처리를 나타내는 플로우 챠트이다.
도 3은 본 발명의 실시의 형태 1에 있어서의 화상 복호 장치의 구성 요소를 나타내는 구성도이다.
도 4는 본 발명의 실시의 형태 1에 있어서의 복호 처리를 나타내는 플로우챠트이다.
도 5는 본 발명의 실시의 형태 1에 있어서의, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 산출하는 처리를 나타내는 플로우챠트이다.
도 6은 본 발명의 실시의 형태 1에 있어서의 화상 부호화 장치의 예를 나타내는 도면이다.
도 7은 본 발명의 실시의 형태 1에 있어서의 화상 복호 장치의 예를 나타내는 도면이다.
도 8은 본 발명의 실시의 형태 2에 있어서의, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 산출하는 처리를 나타내는 플로우챠트이다.
도 9는 본 발명의 실시의 형태 2에 있어서의 화상 부호화 장치의 예를 나타내는 도면이다.
도 10은 본 발명의 실시의 형태 2에 있어서의 화상 복호 장치의 예를 나타내는 도면이다.
도 11은 본 발명의 실시의 형태 3에 있어서의 화상 부호화 장치의 구성 요소를 나타내는 구성도이다.
도 12는 본 발명의 실시의 형태 3에 있어서의 부호화 처리의 변형예를 나타내는 플로우챠트이다.
도 13은 본 발명의 실시의 형태 3에 있어서의 화상 부호화 장치의 예를 나타내는 도면이다.
도 14는 본 발명의 각 실시의 형태에 있어서의 부호화 스트림의 데이터 구조의 예를 나타내는 도면이다.
도 15는 컨텐츠 전송 서비스를 실현하는 컨텐츠 공급 시스템의 전체 구성의 일예를 나타내는 모식도이다.
도 16은 휴대전화의 외관을 나타내는 도면이다.
도 17은 휴대전화의 구성예를 나타내는 블록도이다.
도 18은 디지털 방송용 시스템의 전체 구성의 일예를 나타내는 모식도이다.
도 19는 텔레비젼의 구성예를 나타내는 블록도이다.
도 20은 광디스크인 기록 미디어에 정보의 읽고쓰기를 행하는 정보 재생 기록부의 구성예를 나타내는 블록도이다.
도 21은 광디스크인 기록 미디어의 구조예를 나타내는 도면이다.
도 22는 각 실시의 형태에 관한 화상 부호화 방법 및 화상 복호 방법을 구현하는 집적 회로의 구성예를 나타내는 블록도이다.
도 23은 NAL 유닛·헤더의 MVC 확장 구문에 의한 기억 위치를 나타내는 도면이다.
압축 MVC 스트림에 있어서 전치 NAL 유닛을 이용하지 않고, 전치 NAL 유닛의 헤더의 MVC 확장부에 포함되는 파라미터를, MVC 디코더에 신호 송신하는 새로운 방법을 소개한다. 본 발명의 새로운 점은, 종래형 AVC 디코더에 의한 복호 처리에 있어서 문제를 일으키게 하는 전치 NAL 유닛을 이용하지 않고, 논·베이스·뷰의 복호에 필요한 부호화 MVC 스트림의 베이스·뷰에 관련된 값을 특정 가능하게 하는 점이다. 본 발명은, 시장에 있어서의 종래형 AVC 디코더가 MVC 스트림의 베이스·뷰를 복호할 수 있도록 하고, 본 발명의 MVC 디코더가 MVC 스트림 중의 모든 부호화 뷰를 복호할 수 있도록 한다.
(실시의 형태 1)
우선, 실시의 형태 1에 대해서 설명한다.
도 1은, 실시의 형태 1에 있어서의 화상 부호화 장치의 구성 요소를 나타내는 구성도이다.
도 1에 나타낸 화상 부호화 장치(150)는, 베이스·뷰 부호화부(100), 베이스·뷰 기입부(102), 논·베이스·뷰·MVC 확장 파라미터 특정부(104), 베이스·뷰·MVC 확장 파라미터 산출부(106), 논·베이스·뷰 부호화부(108) 및 논·베이스·뷰 기입부(110)를 구비한다. 각 처리부는, 다음에 나타나는 각 처리를 실행한다.
도 2는, 본 발명의 실시의 형태 1에 있어서의 부호화 처리를 나타내는 플로우챠트이다.
우선, 베이스·뷰 부호화부(100)는, 베이스·뷰의 화상을 부호화한다(S100). 베이스·뷰의 화상은, 다시점 영상 부호화 규격을 이용하여 부호화된다. 다시점 영상 부호화 규격을 이용하여 부호화되는 베이스·뷰의 화상은, Advanced Video Coding 규격에 의해 복호 가능하다.
다음에, 베이스·뷰 기입부(102)는, 압축된 베이스·뷰· 컴포넌트를 NAL 유닛에 기입한다(S102). 베이스·뷰의 NAL 유닛은, 도 23에 나타나 있는 것과 같은 전치 NAL 유닛을 이용하지 않고 기입된다.
다음에, 논·베이스·뷰·MVC 확장 파라미터 특정부(104)는, 논 ·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 특정한다(S104). 이들 파라미터의 예로는, 비IDR 플래그(non＿idr＿flag), 우선 ID(priority＿id), 뷰 ID(view＿id), 시간 ID(temporal＿id), 앵커·픽쳐·플래그(anchor＿pic＿flag), 뷰간 예측 플래그(inter＿view＿flag) 등이 있다.
다음에, 베이스·뷰·MVC 확장 파라미터 산출부(106)는, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 산출한다(S106). 이들 파라미터의 예로는, 비IDR 플래그(non＿idr＿flag), 우선 ID(priority＿id), 뷰 ID(view＿id), 시간 ID(temporal＿id), 앵커·픽쳐·플래그(anchor＿pic＿flag), 뷰간 예측 플래그(inter＿view＿flag) 등이 있다.
또한, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터는, 전치 NAL 유닛이 이용된다고 가정한 경우에, 전치 NAL 유닛의 NAL 유닛·헤더의 MVC 확장부에 저장되는 파라미터이다.
다음에, 논·베이스·뷰 부호화부(108)는, 베이스·뷰 및 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 이용하여, 논·베이스·뷰의 화상을 부호화한다(S108).
마지막에, 논·베이스·뷰 기입부(110)는, 논·베이스·뷰·컴포넌트를 NAL 유닛에 기입한다(S110).
도 3은, 본 발명의 실시의 형태 1에 있어서의 화상 복호 장치의 구성 요소를 나타내는 구성도이다.
도 3에 나타난 화상 복호 장치(250)는, 베이스·뷰·NAL 유닛 구문 해석부(200), 베이스·뷰 복호부(202), 논·베이스·뷰·MVC 확장 파라미터 구문 해석부(204), 전치 NAL 유닛 검색부(205), 베이스·뷰·MVC 확장 파라미터 산출부(206), 베이스·뷰·MVC 확장 파라미터 구문 해석부(207), 논·베이스·뷰·NAL유닛 구문 해석부(208) 및 논·베이스·뷰 복호부(210)를 구비한다. 각 처리부는, 다음에 나타나는 각 처리를 실행한다.
도 4는, 본 발명의 실시의 형태 1에 있어서의 복호 처리를 나타내는 플로우챠트이다.
우선, 베이스·뷰·NAL 유닛 구문 해석부(200)는, 베이스·뷰·컴포넌트의 NAL 유닛을 구문 해석한다(S200).
다음에, 베이스·뷰 복호부(202)는, 다시점 영상 부호화 규격에 기재된 부호화 처리를 이용하여, 베이스·뷰의 화상을 복호한다(S202).
다음에, 논·베이스·뷰·MVC 확장 파라미터 구문 해석부(204)에 있어서, 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 구문 해석한다(S204). 즉, 논·베이스·뷰·MVC 확장 파라미터 구문 해석부(204)는, 논·베이스·뷰의 NAL 유닛·헤더를 구문 해석함으로써, 논·베이스·뷰의 MVC 확장 파라미터를 취득한다.
이들 파라미터의 예로는, 비IDR 플래그(non＿idr＿flag), 우선 ID(priority＿id), 뷰 ID(view＿id), 시간 ID(temporal＿id), 앵커·픽쳐·플래그(anchor＿pic＿flag), 뷰간 예측 플래그(inter＿view＿flag) 등이 있다.
다음에, 전치 NAL 유닛 검색부(205)는, 베이스·뷰의 전치 NAL 유닛을 검색한다(S205).
여기서, 베이스·뷰의 전치 NAL 유닛이 존재하는 경우(S205에서 Yes), 베이스·뷰·MVC 확장 파라미터 구문 해석부(207)는, 전치 NAL 유닛에 의거하여, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 구문 해석한다(S207). 즉, 베이스·뷰·MVC 확장 파라미터 구문 해석부(207)는, 전치 NAL 유닛의 NAL 유닛·헤더를 구문 해석함으로써, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 취득한다.
한편, 베이스·뷰의 전치 NAL 유닛이 존재하지 않은 경우(S205에서 No), 베이스·뷰·MVC 확장 파라미터 산출부(206)는, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 산출한다(S206).
이들 파라미터의 예로는, 비IDR 플래그(non＿idr＿flag), 우선 ID(priority＿id), 뷰 ID(view＿id), 시간 ID(temporal＿id), 앵커·픽쳐·플래그(anchor＿pic＿flag), 뷰간 플래그(inter＿view＿flag) 등이 있다.
다음에, 논·베이스·뷰·NAL 유닛 구문 해석부(208)는, 논·베이스·뷰·컴포넌트의 NAL 유닛을 구문 해석한다(S208).
마지막으로, 논·베이스·뷰 복호부(210)는, 다시점 영상 부호화 규격으로 지정된 복호 처리에 의거하여, 베이스·뷰 및 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 이용하여, 논·베이스·뷰의 화상을 복호한다(S210).
도 5는, 본 발명의 실시의 형태 1에 있어서의, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 산출하는 처리를 나타내는 플로우챠트이다. 이들 파라미터의 예로는, 비IDR 플래그(non＿idr＿flag), 우선 ID(priority＿id), 뷰 ID(view＿id), 시간 ID(temporal＿id), 앵커·픽쳐·플래그(anchor＿pic＿flag), 뷰간 플래그(inter＿view＿flag) 등이 있다.
이하, 화상 부호화 장치(150)의 베이스·뷰·MVC 확장 파라미터 산출부(106)가 실행하는 처리로서 기재하는데, 화상 복호 장치(250)의 베이스·뷰·MVC 확장 파라미터 산출부(206)도 동일한 처리를 실행한다.
우선, 베이스·뷰·MVC 확장 파라미터 산출부(106)는, 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터로부터, 비IDR 플래그(non＿idr＿flag)의 값을 읽어낸다(S300).
다음에, 베이스·뷰·MVC 확장 파라미터 산출부(106)는, 베이스·뷰의 비IDR 플래그(non＿idr＿flag)에, 논·베이스·뷰의 비IDR 플래그(non＿idr＿flag)의 값을 할당한다(S302).
다음에, 베이스·뷰·MVC 확장 파라미터 산출부(106)는, 베이스·뷰의 우선 플래그(priority＿id)에, 미리 정해진 값을 할당한다(S304). 우선 플래그(priority＿id)의 값으로서 미리 정해진 값은 0이다.
다음에, 베이스·뷰·MVC 확장 파라미터 산출부(106)는, 뷰 ID(view＿id)에도, 미리 정해진 값을 할당한다(S306). 뷰 ID(view＿id)의 값으로서 미리 정해진 값도 0이다.
다음에, 베이스·뷰·MVC 확장 파라미터 산출부(106)는, 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터로부터, 논·베이스·뷰의 시간 ID(temporal＿id)의 값을 취득한다(S308).
다음에, 베이스·뷰·MVC 확장 파라미터 산출부(106)는, 베이스·뷰의 시간 ID(temporal＿id)에, 논·베이스·뷰가 취득된 시간 ID(temporal＿id)의 값을 할당한다(S310).
다음에, 베이스·뷰·MVC 확장 파라미터 산출부(106)는, 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터로부터, 앵커·픽쳐·플래그(anchor＿pic＿flag)의 값을 취득한다(S310).
다음에, 베이스·뷰·MVC 확장 파라미터 산출부(106)는, 베이스·뷰의 앵커·픽쳐·플래그(anchor＿pic＿flag)에, 논·베이스·뷰가 취득된 앵커·픽쳐·플래그(anchor＿pic＿flag)의 값을 할당한다(S314).
마지막으로, 베이스·뷰·MVC 확장 파라미터 산출부(106)는, 베이스·뷰의 뷰간 예측 플래그(inter＿view＿flag)에, 미리 정해진 값을 설정한다(S316). 베이스·뷰의 뷰간 예측 플래그(inter＿view＿flag)로서 미리 정해진 값은 1이다.
도 6은, 본 발명의 실시의 형태 1에 있어서의 화상 부호화 장치의 예를 나타내는 도면이다. 이 장치가 구비하는 것에는, 베이스·뷰 부호화부(500), 베이스·뷰 기입부(502), 베이스·뷰 복호부(504), 베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 산출부(506), 논·베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 특정부(508), 기억부(510), 논·베이스·뷰 부호화부(512), 논·베이스·뷰 기입부(514) 등이 있다.
우선, 베이스·뷰의 화상(DOO1)이, 베이스·뷰 부호화부(500)에 입력되고, 압축 화상(DOO3)이, 베이스·뷰 기입부(502)와 베이스·뷰 복호부(504)의 양쪽에 출력된다. 베이스·뷰 복호부(504)는, 베이스·뷰의 압축 화상(DOO3)을 읽어들이고, 베이스·뷰의 복호 화상(DOO5)을, 기억부(510)에 출력한다.
도 6에 나타내는 바와같이, 논·베이스·뷰의 화상(DO11)은, 논·베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 특정부(508)와 논·베이스·뷰 부호화부(512)의 양쪽에 입력된다. 논·베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 특정부(508)는, 다음에, 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO13)를, 베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 산출부(506)와 논·베이스·뷰 부호화부(512)의 양쪽에 출력한다. 베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 산출부(506)는, 미리 정해진 값(DOO9)과 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO13)를 취득하고, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터에 값을 할당하고, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO17)를, 논·베이스·뷰 부호화부(512)에 출력한다. 논·베이스·뷰 부호화부(512)는, 논·베이스·뷰의 화상(DO11)과, 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO13)와, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO17)와, 베이스·뷰의 복호 화상(DO19)을 취득하고, 논·베이스·뷰의 압축 화상(DO21)을 출력한다.
마지막으로, 베이스·뷰 기입부(502) 및 논·베이스·뷰 기입부(514)는, 각각, 베이스·뷰의 압축 화상(DOO3) 및 논·베이스·뷰의 압축 화상(DO21)을 취득하고, NAL 유닛에 있어서의 압축 화상(DOO7) 및 압축 화상(DO23)으로서 출력한다.
또한, 도 6에 나타난 화상 부호화 장치는, 도 1에 나타난 화상 부호화 장치(150)의 구체적인 예이다. 도 1에 나타난 각 구성 요소가 행하는 처리는, 도 6에 나타난 각 구성 요소에 의해 실행된다.
베이스·뷰 부호화부(100)의 처리는, 베이스·뷰 부호화부(500)에 의해 실행된다. 베이스·뷰 기입부(102)의 처리는, 베이스·뷰 기입부(502)에 의해 실행된다. 논·베이스·뷰·MVC 확장 파라미터 특정부(104)의 처리는, 논·베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 특정부(508)에 의해 실행된다. 베이스·뷰·MVC 확장 파라미터 산출부(106)의 처리는, 베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 산출부(506)에 의해 실행된다. 논·베이스·뷰 부호화부(108)의 처리는, 논·베이스·뷰 부호화부(512)에 의해 실행된다. 논·베이스·뷰 기입부(110)의 처리는, 논·베이스·뷰 기입부(514)에 의해 실행된다.
도 7은, 본 발명의 실시의 형태 1에 있어서의 화상 복호 장치의 예를 나타내는 도면이다. 이 장치가 구비하는 것에는, 스플릿터부(600), 전치 NAL 유닛 검색부(601), 베이스·뷰 복호부(602), 베이스·뷰·전치 NAL 유닛·헤더·MVC 확장 파라미터 구문 해석부(603), 기억부(604)와, 스위치부(605), 논·베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 구문 해석부(608), 베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 산출부(606), 논·베이스·뷰 복호부(610) 등이 있다.
도 7에 나타나는 바와같이, 스플릿터부(600)는, 1개 이상의 뷰의 압축 영상(DO20)을 취득하고, 전치 NAL 유닛 검색부(601)에 대한 베이스·뷰의 압축 화상(DOO3)과, 논·베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 구문 해석부(608)에 대한 논·베이스·뷰의 압축 화상(DO21)으로 분할한다. 베이스·뷰의 압축 화상(DOO3)은, 스플릿터부(600)로부터 베이스·뷰·전치 NAL 유닛·헤더·MVC 확장 파라미터 구문 해석부(603)로도 출력된다. 전치 NAL 유닛 검색부(601)는, 베이스·뷰 내에서 전치 NAL 유닛을 검색하고, 존재하는지 여부를 나타내는 신호(DO16)를 스위치부(605)에 출력한다. 전치 NAL 유닛 검색부(601)는, 또한, 베이스·뷰의 압축 화상(DOO4)을, 베이스·뷰 복호부(602)에 출력한다.
베이스·뷰 복호부(602)는, 베이스·뷰의 압축 화상(DOO4)을 취득하고, 베이스·뷰의 복호 화상(DOO5)을 출력한다. 출력된 베이스·뷰의 복호 화상(DOO5)은, 기억부(604)에 저장된다.
압축 베이스·뷰에 전치 NAL 유닛이 존재하는 경우, 베이스·뷰·전치 NAL 유닛·헤더·MVC 확장 파라미터 구문 해석부(603)는, 베이스·뷰의 압축 화상(DOO3)을 읽어내고, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DOO8)를 출력한다.
논·베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 구문 해석부(608)는, 다음에, 논·베이스·뷰의 압축 화상(DO21)을 취득하고, 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO13)를, 베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 산출부(606)와 논·베이스·뷰 복호부(610)의 양쪽에 출력한다. 논·베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 구문 해석부(608)는, 다음에, 논·베이스·뷰의 압축 화상(DO15)을, 논·베이스·뷰 복호부(610)에 출력한다. 베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 산출부(606)는, 미리 정해진 값(DOO9)과 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO13)를 취득하고, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터에 값을 할당하고, 베이스·뷰의 NAL 유닛 ·헤더·MVC 확장 파라미터(DO14)를, 스위치부(605)에 출력한다.
전치 NAL 유닛 검색부(601)에 의해 송신된 신호(DO16)에 의거하여, 압축 베이스·뷰에 전치 NAL 유닛이 존재하는지 여부에 따라, 존재하지 않는 경우에는, 스위치부(605)는, 산출된 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO14)를, 논·베이스·뷰 복호부(610)에 건넨다. 존재하는 경우에는, 스위치부(605)는, 구문 해석된 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO10)를, 논·베이스·뷰 복호부(610)에 건넨다.
마지막으로, 논·베이스·뷰 복호부(610)는, 베이스·뷰의 복호 화상(DO19)과, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO10)와, 구문 해석된 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO13)와, 논·베이스·뷰의 압축 화상(DO15)을 취득하고, 논·베이스·뷰의 복호 화상(DO25)을 출력한다.
또한, 도 7에 나타난 화상 복호 장치는, 도 3에 나타난 화상 복호 장치(250)의 구체적인 예이다. 도 3에 나타난 각 구성 요소가 행하는 처리는, 도 7에 나타난 각 구성 요소에 의해 실행된다.
베이스·뷰·NAL 유닛 구문 해석부(200) 및 베이스·뷰 복호부(202)의 처리는, 베이스·뷰 복호부(602)에 의해 실행된다. 논·베이스·뷰·MVC 확장 파라미터 구문 해석부(204)의 처리는, 논·베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 구문 해석부(608)에 의해 실행된다. 전치 NAL 유닛 검색부(205)의 처리는, 전치 NAL 유닛 검색부(601)에 의해 실행된다. 베이스·뷰·MVC 확장 파라미터 구문 해석부(207)의 처리는, 베이스·뷰·전치 NAL 유닛·헤더·MVC 확장 파라미터 구문 해석부(603)에 의해 실행된다. 베이스·뷰·MVC 확장 파라미터 산출부(206)의 처리는, 베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 산출부(606)에 의해 실행된다. 논·베이스·뷰·NAL 유닛 구문 해석부(208) 및 논·베이스·뷰 복호부(210)의 처리는, 논·베이스·뷰 복호부(610)에 의해 실행된다.
이상, 실시의 형태 1에 있어서 나타난 화상 부호화 장치(150)는, 전치 NAL 유닛없이, 다시점 영상을 부호화한다. 이에 따라, 부호화된 다시점 영상에 포함되는 전치 NAL 유닛에 기인하여 베이스·뷰를 복호할 수 없었던 종래형 AVC 디코더여도, 베이스·뷰를 복호할 수 있다. 또한, 실시의 형태 1에 있어서 나타난 화상 복호 장치(250)는, 부호화된 다시점 영상에 전치 NAL 유닛이 있는지 여부에 상관없이, 부호화된 다시점 영상에 포함되는 모든 뷰를 복호할 수 있다.
또한, 전치 NAL 유닛을 생략할 수 있으므로, 부호화 효율이 향상된다.
또한, 화상 복호 장치(250)는, 전치 NAL 유닛이 있는지 여부에 따라, 베이스·뷰의 MVC 확장 파라미터를 구문 해석하거나, 베이스·뷰의 MVC 확장 파라미터를 산출하고 있다. 그러나, 화상 복호 장치(250)는, 전치 NAL 유닛이 있는지 여부에 상관없이, 논·베이스·뷰의 MVC 확장 파라미터로부터, 베이스·뷰의 MVC 확장 파라미터를 산출함으로써, 논·베이스·뷰의 화상을 복호해도 된다.
이 경우, 전치 NAL 유닛 검색부(205), 베이스·뷰·MVC 확장 파라미터 구문 해석부(207) 및 이들에 의해 실행되는 처리가 불필요해진다. 화상 복호 장치(250)는, 이러한 구성 요소를 구비하지 않고, 또한, 부호화된 다시점 영상에 전치 NAL 유닛이 없는 경우에도, 부호화된 다시점 영상을 복호할 수 있다.
또한, 도 2, 도 4 및 도 5에 나타난 처리의 흐름은, 처리의 흐름의 일예로서, 화상 부호화 장치(150) 및 화상 복호 장치(250)에 의해 실행되는 처리의 흐름은, 각 도면에 나타난 처리의 흐름에 한정되지 않는다. 예를 들면, 화상 부호화 장치(150) 및 화상 복호 장치(250)는, 각 도면에 나타난 처리의 순서와 다른 순서로 각 도면에 나타난 처리를 실행해도 되고, 각 도면에 나타난 처리를 병행하여 실행해도 된다.
또한, 우선 ID(priority＿id), 뷰 ID(view＿id) 및 뷰간 예측 플래그(view＿inter＿flag)에 할당되는 미리 정해진 값은, 실시의 형태 1에 나타난 값과 다른 값이어도 된다.
또한, 논·베이스·뷰는, 복수개 있어도 된다.
(실시의 형태 2)
다음에, 실시의 형태 2에 대해서 설명한다.
실시의 형태 2에 있어서의 화상 부호화 장치(150)는, 도 1에 나타난 실시의 형태 1에 있어서의 화상 부호화 장치(150)와 동일한 구성 요소를 구비한다. 그리고, 실시의 형태 2에 있어서의 화상 부호화 장치(150)는, 도 2에 나타난 실시의 형태 1에 있어서의 부호화 처리와 동일한 부호화 처리를 실행한다. 또한, 실시의 형태 2에 있어서의 화상 복호 장치(250)는, 도 3에 나타난 실시의 형태 1에 있어서의 화상 복호 장치(250)와 동일한 구성 요소를 구비한다. 그리고, 실시의 형태 2에 있어서의 화상 복호 장치(250)는, 도 4에 나타난 실시의 형태 1에 있어서의 복호 처리와 동일한 복호 처리를 실행한다.
실시의 형태 2에서는, 실시의 형태 1과 비교하여, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 산출하는 처리가 변경되어 있다.
도 8은, 본 발명의 실시의 형태 2에 있어서의, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 산출하는 처리를 나타내는 플로우챠트이다. 이들 파라미터의 예로는, 비IDR 플래그(non＿idr＿flag), 우선 ID(priority＿id), 뷰 ID(view＿id), 시간 ID(temporal＿id), 앵커·픽쳐·플래그(anchor＿pic＿flag), 뷰간 예측 플래그(inter＿view＿flag) 등이 있다.
이하, 화상 부호화 장치(150)의 베이스·뷰·MVC 확장 파라미터 산출부(106)가 실행하는 처리로서 기재하는데, 화상 복호 장치(25)의 베이스·뷰·MVC 확장 파라미터 산출부(206)도 동일한 처리를 실행한다.
우선, 베이스·뷰·MVC 확장 파라미터 산출부(106)는, 베이스· 뷰의 NAL 유닛·헤더로부터, NAL 유닛·타입(nal＿unit＿type)의 값을 읽어낸다(S400).
다음에, 베이스·뷰·MVC 확장 파라미터 산출부(106)는, NAL 유닛·타입(nal＿unit＿type)의 값이 5일 때는, 비IDR 플래그(non＿idr＿flag)에 0을 할당한다(S402).
또한, 베이스·뷰·MVC 확장 파라미터 산출부(106)는, NAL 유닛·타입(nal＿unit＿type)의 값이 0일 때는, 비IDR 플래그(non＿idr＿flag)에 1을 할당한다(S404).
다음에, 베이스·뷰·MVC 확장 파라미터 산출부(106)는, 베이스·뷰의 우선 ID(priority＿id)에, 미리 정해진 값을 할당한다(S406). 우선 ID(priority＿id)의 값으로서 미리 정해진 값은 0이다.
다음에, 베이스·뷰·MVC 확장 파라미터 산출부(106)는, 뷰 ID(view＿id)에도, 미리 정해진 값을 할당한다(S408). 뷰 ID(view＿id)의 값으로서 미리 정해진 값도 0이다.
다음에, 베이스·뷰·MVC 확장 파라미터 산출부(106)는, 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터로부터, 논·베이스·뷰의 시간 ID(temporal＿id)의 값을 취득한다(S410).
다음에, 베이스·뷰·MVC 확장 파라미터 산출부(106)는, 베이스·뷰의 시간 ID(temporal＿id)에, 논·베이스·뷰가 취득된 시간 ID(temporal＿id)의 값을 할당한다(S412).
다음에, 베이스·뷰·MVC 확장 파라미터 산출부(106)는, 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터로부터, 앵커·픽쳐·플래그(anchor＿pic＿flag)의 값을 취득한다(S414).
다음에, 베이스·뷰·MVC 확장 파라미터 산출부(106)는, 베이스·뷰의 앵커·픽쳐·플래그(anchor＿pic＿flag)에, 논·베이스·뷰가 취득된 앵커·픽쳐·플래그(anchor＿pic＿flag)의 값을 할당한다(S416).
마지막으로, 베이스·뷰·MVC 확장 파라미터 산출부(106)는, 베이스·뷰의 뷰간 예측 플래그(inter＿view＿flag)에, 미리 정해진 값을 설정한다(S418). 베이스·뷰의 뷰간 예측 플래그(inter＿view＿flag)로서 미리 정해진 값은 1이다.
도 9는, 본 발명의 실시의 형태 2에 있어서의 화상 부호화 장치의 예를 나타내는 도면이다. 이 장치가 구비하는 것에는, 베이스·뷰 부호화부(700), 베이스·뷰 기입부(702), 베이스·뷰 복호부(704), 베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 산출부(706), 논·베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 특정부(708), 기억부(710), 논·베이스·뷰 부호화부(712), 논·베이스·뷰 기입부(714) 등이 있다.
우선, 베이스·뷰의 화상(DOO1)이, 베이스·뷰 부호화부(700)에 입력되고, 베이스·뷰의 압축 화상(DOO3)이, 베이스·뷰 기입부(702) 및 베이스·뷰 복호부(704)의 양쪽에 출력된다. 베이스·뷰 복호부(704)는, 베이스·뷰의 압축 화상(DOO3)을 읽어들이고, 베이스·뷰의 복호 화상(DOO5)을, 기억부(710)에 출력한다. 베이스·뷰 기입부(702)는, 베이스·뷰의 압축 화상(DOO3)을 취득하고, NAL 유닛에 있어서의 베이스·뷰의 압축 화상(DOO7)을 출력하고, 베이스·뷰·NAL 유닛의 NAL 유닛·타입(nal＿unit＿type)의 값(DO18)을, 베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 산출부(706)에 출력한다.
도 9에 나타내는 바와같이, 논·베이스·뷰의 화상(DO11)은, 논·베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 특정부(708)와 논·베이스·뷰 부호화부(712)의 양쪽에 입력된다. 논·베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 특정부(708)는, 다음에, 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO13)를, 베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 산출부(706)와 논·베이스·뷰 부호화부(712)의 양쪽에 출력한다. 베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 산출부(706)는, 미리 정해진 값(DOO9)과 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO13)와, 베이스·뷰·NAL 유닛의 NAL 유닛·타입(nal＿unit＿type)의 값(DO18)을 취득하고, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터에 값을 할당하고, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO17)를, 논·베이스·뷰 부호화부(712)에 출력한다. 논·베이스·뷰 부호화부(712)는, 논·베이스·뷰의 화상(DO11)과, 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO13)와, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO17)와, 베이스·뷰의 복호 화상(DO19)을 취득하고, 논·베이스·뷰의 압축 화상(DO21)을 출력한다.
마지막으로, 논·베이스·뷰 기입부(714)는, 논·베이스·뷰의 압축 화상(DO21)을 취득하고, NAL 유닛에 있어서의 논·베이스·뷰의 압축 화상(DO23)을 출력한다.
또한, 도 9에 나타난 화상 부호화 장치는, 도 1에 나타난 화상 부호화 장치(150)의 구체적인 예이다. 도 1에 나타난 각 구성 요소가 행하는 처리는, 도 9에 나타난 각 구성 요소에 의해 실행된다.
베이스·뷰 부호화부(100)의 처리는, 베이스·뷰 부호화부(700)에 의해 실행된다. 베이스·뷰 기입부(102)의 처리는, 베이스·뷰 기입부(702)에 의해 실행된다. 논·베이스·뷰·MVC 확장 파라미터 특정부(104)의 처리는, 논·베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 특정부(708)에 의해 실행된다. 베이스·뷰·MVC 확장 파라미터 산출부(106)의 처리는, 베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 산출부(706)에 의해 실행된다. 논·베이스·뷰 부호화부(108)의 처리는, 논·베이스·뷰 부호화부(712)에 의해 실행된다. 논·베이스·뷰 기입부(110)의 처리는, 논·베이스·뷰 기입부(714)에 의해 실행된다.
도 10은, 본 발명의 실시의 형태 2에 있어서의 화상 복호 장치의 예를 나타내는 도면이다. 이 장치가 구비하는 것에는, 스플릿터부(800), 베이스·뷰·NAL 유닛·헤더·파라미터 구문 해석부(802), 전치 NAL 유닛 검색부(803), 베이스·뷰 복호부(804), 베이스·뷰·전치 NAL 유닛·헤더·MVC 확장 파라미터 구문 해석부(805), 기억부(806), 스위치부(807), 베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 산출부(808), 논·베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 구문 해석부(810), 논·베이스·뷰 복호부(812) 등이 있다.
도 10에 나타내는 바와같이, 스플릿터부(800)는, 1개 이상의 뷰의 압축 영상(DO20)을 취득하고, 베이스·뷰·NAL 유닛·헤더·파라미터 구문 해석부(802)에 대한 베이스·뷰의 압축 화상(DOO3)과, 논·베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 구문 해석부(810)에 대한 논·베이스·뷰의 압축 화상(DO21)으로 분할한다.
베이스·뷰·NAL 유닛·헤더·파라미터 구문 해석부(802)는, 베이스·뷰의 압축 화상(DOO3)을 취득하고, 베이스·뷰·NAL 유닛의 NAL 유닛·타입(nal＿unit＿type)의 값(D018)을, 베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 산출부(808)에 출력한다. 베이스·뷰·NAL 유닛·헤더·파라미터 구문 해석부(802)는, 베이스·뷰의 압축 화상(DOO4)을, 전치 NAL 유닛 검색부(803)에 출력한다. 전치 NAL 유닛 검색부(803)는, 베이스·뷰 내에서 전치 NAL 유닛을 검색하고, 존재하는지 여부를 나타내는 신호(DO16)를 스위치부(807)에 출력한다. 전치 NAL 유닛 검색부(803)는, 또한, 베이스·뷰의 압축 화상(DOO6)을, 베이스·뷰 복호부(804)에 출력한다.
베이스·뷰 복호부(804)는, 베이스·뷰의 압축 화상(DOO6)을 취득하고, 베이스·뷰의 복호 화상(DOO5)을 출력한다. 출력된 베이스·뷰의 복호 화상(DOO5)은, 기억부(806)에 저장된다. 압축 베이스·뷰에 전치 NAL 유닛이 존재하는 경우, 베이스·뷰·전치 NAL 유닛·헤더·MVC 확장 파라미터 구문 해석부(805)는, 베이스·뷰의 압축 화상(DOO3)을 읽어내고, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DOO8)를 출력한다.
논. ·베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 구문 해석부(810)는, 논·베이스·뷰의 압축 화상(DO21)을 취득하고, 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(D013)를, 베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 산출부(808)와 논·베이스·뷰 복호부(812)의 양쪽에 출력한다. 논·베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 구문 해석부(810)는, 다음에, 논·베이스·뷰의 압축 화상(DO15)을, 논·베이스·뷰 복호부(812)에 출력한다. 베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 산출부(808)는, 미리 정해진 값(DO09)과, 베이스·뷰·NAL 유닛의 NAL 유닛·타입(nal＿unit＿type)의 값(DO18)과, 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO13)를 취득하고, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터에 값을 할당하고, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO14)를, 스위치부(807)에 출력한다.
전치 NAL 유닛 검색부(803)에 의해 송신된 신호(DO16)에 의거하여, 압축 베이스·뷰에 전치 NAL 유닛이 존재하는지 여부에 따라, 존재하지 않는 경우에는, 스위치부(807)는, 산출된 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO14)를, 논·베이스·뷰 복호부(812)에 건넨다. 존재하는 경우에는, 스위치부(807)는, 구문 해석된 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DOO8)를, 논·베이스·뷰 복호부(812)에 건넨다.
마지막으로, 논·베이스·뷰 복호부(812)는, 베이스·뷰의 복호 화상(DO19)과, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO10)와, 구문 해석된 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO13)와, 논·베이스·뷰의 압축 화상(DO15)을 취득하고, 논·베이스·뷰의 복호 화상(DO25)을 출력한다.
또한, 도 10에 나타난 화상 복호 장치는, 도 3에 나타난 화상 복호 장치(250)의 구체적인 예이다. 도 3에 나타난 각 구성 요소가 행하는 처리는, 도 10에 나타난 각 구성 요소에 의해 실행된다.
베이스·뷰·NAL 유닛 구문 해석부(200) 및 베이스·뷰 복호부(202)의 처리는, 베이스·뷰 복호부(804)에 의해 실행된다. 논·베이스·뷰·MVC 확장 파라미터 구문 해석부(204)의 처리는, 논·베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 구문 해석부(810)에 의해 실행된다. 전치 NAL 유닛 검색부(205)의 처리는, 전치 NAL 유닛 검색부(803)에 의해 실행된다. 베이스·뷰·MVC 확장 파라미터 구문 해석부(207)의 처리는, 베이스·뷰·전치 NAL 유닛·헤더·MVC 확장 파라미터 구문 해석부(805)에 의해 실행된다. 베이스·뷰·MVC 확장 파라미터 산출부(206)의 처리는, 베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 산출부(808)에 의해 실행된다. 논·베이스·뷰·NAL 유닛 구문 해석부(208) 및 논·베이스·뷰 복호부(210)의 처리는, 논·베이스·뷰 복호부(812)에 의해 실행된다.
이상, 실시의 형태 2의 화상 부호화 장치(150)는, 실시의 형태 1과 마찬가지로, 전치 NAL 유닛없이, 다시점 영상을 부호화한다. 또한, 실시의 형태 2의 화상 복호 장치(250)는, 실시의 형태 1과 마찬가지로, 부호화된 다시점 영상에 전치 NAL 유닛이 있는지 여부에 상관없이, 부호화된 다시점 영상을 복호할 수 있다. 또한, 실시의 형태 2에 있어서의 화상 부호화 장치(150) 및 화상 복호 장치(250)는, 베이스·뷰의 MVC 확장 파라미터를 산출할 때, 베이스·뷰의 NAL 유닛·타입을 이용함으로써, 보다 정밀도 높은 MVC 확장 파라미터를 산출할 수 있다.
또한, 실시의 형태 1과 마찬가지로, 도 8에 나타난 처리의 흐름은, 처리의 흐름의 일예로서, 화상 부호화 장치(150) 및 화상 복호 장치(250)에 의해 실행되는 처리의 흐름은, 도 8에 나타난 처리의 흐름에 한정되지 않는다. 예를 들면, 화상 부호화 장치(150) 및 화상 복호 장치(250)는, 도 8에 나타난 처리의 순서와 다른 순서로 도 8에 나타난 처리를 실행해도 되고, 도 8에 나타난 처리를 병행하여 실행해도 된다.
또한, 우선 ID(priority＿id), 뷰 ID(view＿id) 및 뷰간 예측 플래그(view＿inter＿flag)에 할당되는 미리 정해진 값은, 실시의 형태 2에 나타난 값과 다른 값이어도 된다.
또한, 실시의 형태 1과 마찬가지로, 논·베이스·뷰는, 복수개 있어도 된다.
(실시의 형태 3)
다음에, 실시의 형태 3에 대해서 설명한다.
도 11은, 본 발명의 실시의 형태 3에 있어서의 화상 부호화 장치의 구성 요소를 나타내는 구성도이다.
도 11에 나타난 화상 부호화 장치(950)는, 베이스·뷰·MVC 확장 파라미터 특정부(900), 논·베이스·뷰·MVC 확장 파라미터 특정부(902), 전치 NAL 유닛 기입 전환부(904), 전치 NAL 유닛 기입부(906), 베이스·뷰 부호화부(908), 베이스·뷰 기입부(910), 논·베이스·뷰 부호화부(912) 및 논·베이스·뷰 기입부(914)를 구비한다. 각 처리부는, 다음에 나타나는 각 처리를 실행한다.
도 12는, 본 발명의 실시의 형태 3에 있어서의 부호화 처리를 나타내는 플로우챠트이다.
우선, 베이스·뷰·MVC 확장 파라미터 특정부(900)는, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 특정한다(S900). 이들 파라미터의 예로는, 비IDR 플래그(non＿idr＿flag), 우선 ID(priority＿id), 뷰 ID(view＿id), 시간 ID(temporal＿id), 앵커·픽쳐·플래그(anchor＿pic＿flag), 뷰간 예측 플래그(inter＿view＿flag) 등이 있다.
다음에, 논·베이스·뷰·MVC 확장 파라미터 특정부(902)는, 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 특정한다(S902). 이들 파라미터의 예로는, 비IDR 플래그(non＿idr＿flag), 우선 ID(priority＿id), 뷰 ID(view＿id), 시간 ID(temporal＿id), 앵커·픽쳐·플래그(anchor＿pic＿flag), 뷰간 예측 플래그(inter＿view＿flag) 등이 있다.
다음에, 전치 NAL 유닛 기입 전환부(904)는, 전치 NAL 유닛에 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 기입할지 여부를 전환한다(S904). 예를 들면, 전치 NAL 유닛 기입 전환부(904)는, 미리 설정된 정보에 의거하여, 전치 NAL 유닛에 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 기입할지 여부를 전환한다.
여기서, 전치 NAL 유닛 기입 전환부(904)가, 전치 NAL 유닛 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 기입하도록 전환한 경우(S904에서 Yes), 전치 NAL 유닛 기입부(906)는, 전치 NAL 유닛에 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 기입한다(S906).
한편, 전치 NAL 유닛 기입 전환부(904)가, 전치 NAL 유닛에 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 기입하지 않도록 전환한 경우(S904에서 No), 전치 NAL 유닛 기입부(906)는, 전치 NAL 유닛에 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 기입하지 않는다. 즉, 전치 NAL 유닛은, 생성되지 않는다.
다음에, 베이스·뷰 부호화부(908)는, 베이스·뷰의 화상을 부호화한다(S908). 베이스·뷰의 화상은, 다시점 영상 부호화 규격을 이용하여 부호화된다. 다시점 영상 부호화 규격을 이용하여 부호화되는 베이스·뷰의 화상은, Advanced Video Coding 규격에 의해 복호 가능하다.
다음에, 베이스·뷰 기입부(910)는, 부호화된 베이스·뷰·컴포넌트를 NAL 유닛에 기입한다(S910).
다음에, 논·베이스·뷰 부호화부(912)는, 베이스·뷰 및 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 이용하여, 논·베이스·뷰의 화상을 부호화한다(S912).
마지막으로, 논·베이스·뷰 기입부(914)는, 논·베이스·뷰·컴포넌트를 NAL 유닛에 기입한다(S914).
도 13은, 본 발명의 실시의 형태 3에 있어서의 화상 부호화 장치의 예를 나타내는 도면이다. 이 장치가 구비하는 것에는, 베이스·뷰 부호화부(500), 베이스·뷰 기입부(502), 베이스·뷰 복호부(504), 베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 특정부(1015), 논·베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 특정부(508), 기억부(510), 논·베이스·뷰 부호화부(512), 논·베이스·뷰 기입부(514), 스위치부(1016) 및 전치 NAL 유닛 기입부(1017) 등이 있다.
도 6에 나타난 예와 비교하여, 베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 산출부(506) 대신에, 베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 특정부(1015)가 추가되어 있다. 또한, 스위치부(1016) 및 전치 NAL 유닛 기입부(1017)가 추가되어 있다.
베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 특정부(1015)는, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO17)에 값을 설정하고, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO17)를, 논·베이스·뷰 부호화부(512)에 출력한다.
논·베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 특정부(508)는, 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO13)에 값을 설정하고, 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO13)를, 논·베이스·뷰 부호화부(512)에 출력한다.
베이스·뷰의 화상(DOO1)은, 베이스·뷰 부호화부(500)에 입력되고, 베이스·뷰의 압축 화상(DOO3)이, 베이스·뷰 기입부(502)와 베이스·뷰 복호부(504)의 양쪽에 출력된다. 베이스·뷰 복호부(504)는, 베이스·뷰의 압축 화상(DOO3)을 읽어들이고, 베이스·뷰의 복호 화상(DOO5)을, 기억부(510)에 출력한다.
논·베이스·뷰의 화상(DO11)은, 논·베이스·뷰 부호화부(512)에 입력된다. 논·베이스·뷰 부호화부(512)는, 논·베이스·뷰의 화상(DO11)과, 논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO13)와, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO17)와, 베이스·뷰의 복호 화상 D019를 취득하고, 논·베이스·뷰의 압축 화상(DO21)을 출력한다.
마지막으로, 베이스·뷰 기입부(502) 및 논·베이스·뷰 기입부(514)는, 각각, 베이스·뷰의 압축 화상(DOO3) 및 논·베이스·뷰의 압축 화상(DO21)을 취득하고, NAL 유닛에 있어서의 베이스·뷰의 압축 화상(DOO7) 및 논·베이스·뷰의 압축 화상(DO23)을 출력한다.
이에 따라, 전치 NAL 유닛이 포함되지 않는, 1개 이상의 뷰의 압축 영상의 스트림이 생성된다.
또한, 전치 NAL 유닛이 포함되도록 설정이 전환된 경우, 스위치부(1016)는, 베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 특정부(1015)로부터, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터(DO17)를, 전치 NAL 유닛 기입부(1017)에 출력한다. 전치 NAL 유닛 기입부(1017)는, 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 전치 NAL 유닛에 기입하고, 전치 NAL 유닛(DO22)을 출력한다.
이에 따라, 전치 NAL 유닛이 포함되는, 1개 이상의 뷰의 압축 영상의 스트림이 생성된다.
또한, 도 13에 나타난 화상 부호화 장치는, 도 11에 나타난 화상 부호화 장치(950)의 구체적인 예이다. 도 11에 나타난 각 구성 요소가 행하는 처리는, 도 13에 나타난 각 구성 요소에 의해 실행된다.
예를 들면, 베이스·뷰·MVC 확장 파라미터 특정부(900)의 처리는, 베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 특정부(1015)에 의해 실행된다. 논·베이스·뷰·MVC 확장 파라미터 특정부(902)의 처리는, 논·베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 특정부(508)에 의해 실행된다. 전치 NAL 유닛 기입 전환부(904)의 처리는, 스위치부(1016)에 의해 실행된다. 전치 NAL 유닛 기입부(906)의 처리는, 전치 NAL 유닛 기입부(1017)에 의해 실행된다. 베이스·뷰 부호화부(908)의 처리는, 베이스·뷰 부호화부(500)에 의해 실행된다. 베이스·뷰 기입부(910)의 처리는, 베이스·뷰 기입부(502)에 의해 실행된다. 논·베이스·뷰 부호화부(912)의 처리는, 논·베이스·뷰 부호화부(512)에 의해 실행된다. 논·베이스·뷰 기입부(110)의 처리는, 논·베이스·뷰 기입부(514)에 의해 실행된다.
이상, 실시의 형태 3의 화상 부호화 장치(950)는, 다시점 영상을 부호화할 때, 전치 NAL 유닛의 유무를 전환할 수 있다. 또한, 실시의 형태 3에 있어서의 화상 부호화 장치(950)는, 베이스·뷰 및 논·베이스·뷰의 MVC 확장 파라미터를, 각각 특정한다. 즉, 화상 부호화 장치(950)는, 베이스·뷰의 MVC 확장 파라미터를 산출하지 않아도 된다.
또한, 화상 부호화 장치(950)는, 논·베이스·뷰의 MVC 확장 파라미터로부터 베이스·뷰의 MVC 확장 파라미터를 특정하지 않아도 된다. 화상 부호화 장치(950)는, 독립하여 특정된 베이스·뷰의 MVC 확장 파라미터를, 논·베이스·뷰의 부호화에 이용할 수 있다.
그리고, 실시의 형태 1 및 실시의 형태 2와 마찬가지로, 종래형 AVC 디코더라도, 부호화된 다시점 영상에 포함되는 베이스·뷰를 복호할 수 있다. 또한, 실시의 형태 1 및 실시의 형태 2에 있어서의 화상 복호 장치(250)는, 화상 부호화 장치(950)에 의해 부호화된 다시점 영상에 포함되는 모든 뷰를 복호할 수 있다.
또한, 화상 부호화 장치(950)는, 전치 NAL 유닛을 기입할지 여부를 전환하고 있다. 그러나, 화상 부호화 장치(950)는, 전치 NAL 유닛을 기입하지 않는 것을 전제로 해도 된다. 이 경우, 전치 NAL 유닛 기입 전환부(904), 전치 NAL 유닛 기입부(906) 및 이들에 의해 실행되는 처리가 불필요하게 된다.
또한, 실시의 형태 1 및 실시의 형태 2와 마찬가지로, 도 12에 나타난 처리의 흐름은, 처리의 흐름의 일예로서, 화상 부호화 장치(950)에 의해 실행되는 처리의 흐름은, 도 12에 나타난 처리의 흐름에 한정되지 않는다. 예를 들면, 화상 부호화 장치(950)는, 도 12에 나타난 처리의 순서와 다른 순서로 도 12에 나타난 처리를 실행해도 되고, 도 12에 나타난 처리를 병행하여 실행해도 된다.
특히, 베이스·뷰의 MVC 확장 파라미터를 특정하는 처리(S900)와 논·베이스·뷰의 MVC 확장 파라미터를 특정하는 처리(S902)는, 순서가 반대여도 된다. 그리고, 이들 MVC 확장 파라미터를 특정하는 처리(S900, S902)는, 논·베이스·뷰의 화상을 부호화하는 처리(S912), 및, 각각 MVC 확장 파라미터가 기입되는 처리(S906, S914)까지 실행되면 된다.
또한, 실시의 형태 1 및 실시의 형태 2와 마찬가지로, 베이스·뷰의 MVC 확장 파라미터를 특정할 때(S900), 우선 ID(priority＿id), 뷰 ID(view＿id), 뷰간 예측 플래그(inter＿view＿flag)에는, 각각, 미리 정해진 값이 할당되어도 된다. 예를 들면, 우선 ID(priority＿id)에는, 0이 할당되고, 뷰간 예측 플래그(inter＿view＿flag)에는, 0이 할당되고, 뷰간 예측 플래그(inter＿view＿flag)에는, 1이 할당된다.
그리고, 베이스·뷰 및 논·베이스·뷰의 MVC 확장 파라미터를 특정할 때(S900, S902), 비IDR 플래그(non＿idr＿flag), 시간 ID(temporal＿id), 앵커·픽쳐·플래그(anchor＿pic＿flag)는, 각각, 베이스·뷰측과 논·베이스·뷰측에서 동일한 값이 되도록, 할당되어도 된다. 이 중, 베이스·뷰의 비IDR 플래그(non＿idr＿flag)는, 실시의 형태 2와 마찬가지로, NAL 유닛·타입에 의거하여, 특정되어도 된다.
또한, 실시의 형태 1 및 실시의 형태 2와 마찬가지로, 논·베이스·뷰는, 복수개 있어도 된다.
이상과 같이, 실시의 형태 1, 실시의 형태 2 및 실시의 형태 3에 있어서 나타난 화상 부호화 장치 및 화상 복호 장치는, 전치 NAL 유닛을 이용하지 않는 경우에도, 다시점 영상을 부호화하고, 다시점 영상을 복호할 수 있다. 이에 따라, 전치 NAL 유닛에 기인하여 베이스·뷰를 복호할 수 없었던 종래형 AVC 디코더라도, 베이스·뷰를 복호할 수 있다. 또한, 종래형 AVC 인코더에 의해 생성된 기존의 비트 스트림을 다시점 영상의 베이스·뷰로서 이용하는 것도 가능하다.
예를 들면, 종래형 AVC 인코더에 의해 이미 부호화된 2D의 애니메이션 영상이 BD(Blu－ray Disc)에 기입되어 있는 경우가 있다. 그리고, BD에 기입되어 있는 2D의 애니메이션 영상에 시차를 부가한 영상이, 부호화되어, 인터넷을 통하여 전달되어도 된다. 이 경우, BD에 기입되어 있는 2D의 애니메이션 영상이 베이스·뷰로서, 2D의 애니메이션 영상에 시차를 부가한 영상이 논·베이스·뷰로서, 다시점 영상이 형성된다.
각 실시의 형태에 있어서의 화상 복호 장치는, 이와 같이 형성된 다시점 영상을 복호할 수 있다. 그리고, 복호된 다시점 영상은, 3D의 애니메이션 영상으로서 재생된다. 이와 같이, 베이스·뷰의 스트림에 전치 NAL 유닛을 추가할 필요가 없기 때문에, 기존의 자산의 재이용이 용이하다. 그리고, 단일의 뷰를 전제로 하여 생성된 스트림에, 별도의 뷰를 추가하는 것도 용이하다. 이 때문에, 예를 들면, 부호화된 별도의 뷰가, 별도의 기록 매체로 제공되어도 된다.
도 14는, 각 실시의 형태에 있어서의 부호화 스트림의 데이터 구조의 예를 나타내는 도면이다. 각 실시의 형태에 있어서의 화상 부호화 장치는, 다시점 영상을 부호화함으로써, 도 14에 나타나는 것과 같은, 전치 NAL 유닛이 없는 스트림을 생성할 수 있다. 그리고, 각 실시의 형태에 있어서의 화상 복호 장치는, 도 14에 나타나는 것과 같은, 전치 NAL 유닛이 없는 스트림으로부터, 논·베이스·뷰에 포함되는 MVC 확장 파라미터 등을 이용하여, 다시점 영상을 복호할 수 있다.
또한, 전치 NAL 유닛없이 베이스·뷰가 이미 부호화되어 있는 경우, 각 실시의 형태에 있어서의 화상 부호화 장치는, 논·베이스·뷰만을 부호화해도 된다. 각 실시의 형태에 있어서의 화상 복호 장치는, 논·베이스·뷰의 MVC 확장 파라미터로부터 베이스·뷰의 MVC 확장 파라미터를 산출함으로써, 전치 NAL 유닛없이 부호화된 베이스·뷰 및 새롭게 부호화된 논·베이스·뷰를 다시점 영상으로서 복호할 수 있다.
(실시의 형태 4)
상기 각 실시의 형태에서 나타낸 화상 부호화 방법 또는 화상 복호 방법의 구성을 실현하기 위한 프로그램을 기억 미디어에 기록함으로써, 상기 각 실시의 형태에서 나타낸 처리를 독립된 컴퓨터 시스템에 있어서 간단하게 실시하는 것이 가능해진다. 기억 미디어는, 자기 디스크, 광디스크, 광자기 디스크, IC 카드, 반도체 메모리 등, 프로그램을 기록할 수 있는 것이면 된다.
또한, 여기서, 상기 각 실시의 형태에 나타낸 화상 부호화 방법 및 화상 복호 방법의 응용예와 이를 이용한 시스템을 설명한다.
도 15는, 컨텐츠 전송 서비스를 실현하는 컨텐츠 공급 시스템(ex100)의 전체 구성을 나타내는 도면이다. 통신 서비스의 제공 에어리어를 원하는 크기로 분할하고, 각 셀 내에 각각 고정 무선국인 기지국(ex106∼ex110)이 설치되어 있다.
이 컨텐츠 공급 시스템(ex100)은, 인터넷(ex101)에 인터넷 서비스 프로바이더(ex102) 및 전화망(ex104), 및 기지국(ex106∼ex110)을 통하여, 컴퓨터(ex111), PDA(Personal Digital Assistant)(ex112), 카메라(ex113), 휴대전화(ex114), 게임기(ex115) 등의 각 기기가 접속된다.
그러나, 컨텐츠 공급 시스템(ex100)은 도 15와 같은 구성에 한정되지 않고, 몇개의 요소를 조합하여 접속하도록 해도 된다. 또한, 고정 무선국인 기지국(ex106∼ex110)을 통하지 않고, 각 기기가 전화망(ex104)에 직접 접속되어도 된다. 또한, 각 기기가 근거리 무선 등을 통하여 직접 상호 접속되어 있어도 된다.
카메라(ex113)는 디지털 비디오 카메라 등의 동화상 촬영이 가능한 기기이고, 카메라(ex116)는 디지털 카메라 등의 정지 화상 촬영, 동화상 촬영이 가능한 기기이다. 또한, 휴대전화(ex114)는, GSM(Global System for Mobile Communications) 방식, CDMA(Code Division Multiple Access) 방식, W－CDMA(Wideband－Code Division, Multiple Access) 방식, 혹은 LTE(Long Term Evolution) 방식, HSPA(High Speed Packet Access)의 휴대 전화기, 또는, PHS(Personal Handyphone System) 등이며, 어떠한 것이어도 상관없다.
컨텐츠 공급 시스템(ex100)에서는, 카메라(ex113) 등이 기지국(ex109), 전화망(ex104)을 통하여 스트리밍 서버(ex103)에 접속됨으로써, 라이브 전송 등이 가능해진다. 라이브 전송에서는, 사용자가 카메라(ex113)를 이용하여 촬영하는 컨텐츠(예를 들면, 음악 라이브 영상 등)에 대해서 상기 각 실시의 형태에서 설명한 것처럼 부호화 처리를 행하여, 스트리밍 서버(ex103)에 송신한다. 한편, 스트리밍 서버(ex103)는 요구가 있는 클라이언트에 대해서 송신된 컨텐츠 데이터를 스트림 전송한다. 클라이언트로서는, 상기 부호화 처리된 데이터를 복호하는 것이 가능한, 컴퓨터(ex111), PDA(ex112), 카메라(ex113), 휴대전화(ex114), 게임기(ex115) 등이 있다. 전송된 데이터를 수신한 각 기기에서는, 수신한 데이터를 복호 처리하여 재생한다.
또한, 촬영한 데이터의 부호화 처리는 카메라(ex113)로 행하거나, 데이터의 송신 처리를 하는 스트리밍 서버(ex103)로 행해도 되고, 서로 분담하여 행해도 된다. 마찬가지로 전송된 데이터의 복호 처리는 클라이언트에서 행하거나, 스트리밍 서버(ex103)에서 행해도 되고, 서로 분담하여 행해도 된다. 또한, 카메라(ex113)에 한정되지 않고, 카메라(ex116)에서 촬영한 정지 화상 및/또는 동화상 데이터를, 컴퓨터(ex111)를 통하여 스트리밍 서버(ex103)에 송신해도 된다. 이 경우의 부호화 처리는 카메라(ex116), 컴퓨터(ex111), 스트리밍 서버(ex103)의 어디에서 행해도 되고, 서로 분담하여 행해도 된다.
또한, 이들 부호화 처리 및 복호 처리는, 일반적으로 컴퓨터(ex111) 및 각 기기가 가지는 LSI(Large Scale Integration)(ex500)에 있어서 처리한다. LSI(ex500)는, 원 칩이거나 복수 칩으로 이루어지는 구성이어도 된다. 또한, 화상 부호화용 및 화상 복호용의 소프트웨어를 컴퓨터(ex111) 등으로 읽기 가능한 어떠한 기록 미디어(CD－ROM, 플렉서블 디스크, 하드 디스크 등)에 내장하고, 그 소프트 웨어를 이용하여 부호화 처리 및 복호 처리를 행해도 된다. 또한, 휴대전화(ex114)가 카메라 부착인 경우에는, 그 카메라로 취득한 동화상 데이터를 송신해도 된다. 이 때의 동화상 데이터는 휴대전화(ex114)가 가지는 LSI(ex500)로 부호화 처리된 데이터이다.
또한, 스트리밍 서버(ex103)는 복수의 서버 또는 복수의 컴퓨터로서, 데이터를 분산하여 처리하거나 기록하거나 전송하는 것이어도 된다.
이상과 같이 하여, 컨텐츠 공급 시스템(ex100)에서는, 부호화된 데이터를 클라이언트가 수신하여 재생할 수 있다. 이와 같이 컨텐츠 공급 시스템(ex100)에서는, 사용자가 송신한 정보를 실시간으로 클라이언트가 수신하여 복호하고, 재생할 수 있고, 특별한 권리 또는 설비를 갖지 않는 사용자라도 개인 방송을 실현할 수 있다.
이 컨텐츠 공급 시스템을 구성하는 각 기기의 부호화, 복호에는 상기 각 실시의 형태에서 나타낸 화상 부호화 방법 혹은 화상 복호 방법을 이용하도록 하면 된다.
그 일예로서 휴대전화(ex114)에 대해서 설명한다.
도 16은, 상기 실시의 형태에서 설명한 화상 부호화 방법과 화상 복호 방법을 이용한 휴대전화(ex114)를 나타내는 도면이다. 휴대전화(ex114)는, 기지국(ex110)과의 사이에서 전파를 송수신하기 위한 안테나(ex601), CCD 카메라 등의 영상, 정지화상을 찍는 것이 가능한 카메라부(ex603), 카메라부(ex603)에서 촬영한 영상, 안테나(ex601)로 수신한 영상 등이 복호된 데이터를 표시하는 액정 디스플레이 등의 표시부(ex602), 조작 키(ex604)군으로 구성되는 본체부, 음성 출력을 하기 위한 스피커 등의 음성 출력부(ex608), 음성 입력을 하기 위한 마이크 등의 음성 입력부(ex605), 촬영한 동화상 혹은 정지 화상의 데이터, 수신한 메일의 데이터, 동화상의 데이터 혹은 정지 화상의 데이터 등, 부호화된 데이터 또는 복호된 데이터를 보존하기 위한 기록 미디어(ex607), 휴대전화(ex114)에 기록 미디어(ex607)를 장착 가능하게 하기 위한 슬롯부(ex606)를 가지고 있다. 기록 미디어(ex607)는 SD카드 등의 플라스틱 케이스 내에 전기적으로 재기록 및 소거가 가능한 불휘발성 메모리인 EEPROM의 일종인 플래쉬 메모리 소자를 저장한 것이다.
또한, 휴대전화(ex114)에 대해서 도 17을 이용하여 설명한다. 휴대전화(ex114)는 표시부(ex602) 및 조작 키(ex604)를 구비한 본체부의 각 부를 통괄적으로 제어하도록 이루어진 주제어부(ex711)에 대해서, 전원 회로부(ex710), 조작 입력 제어부(ex704), 화상 부호화부(ex712), 카메라 인터페이스부(ex703), LCD(Liquid Crystal Display) 제어부(ex702), 화상 복호부(ex709), 다중 분리부(ex708), 기록 재생부(ex707), 변복조 회로부(ex706) 및 음성 처리부(ex705)가 동기 버스(ex713)를 통하여 서로 접속되어 있다.
전원 회로부(ex710)는, 사용자의 조작에 의해 통화 종료 및 전원 키가 온 상태로 되면, 배터리 팩으로부터 각 부에 대해서 전력을 공급함으로써 카메라 부착 디지털 휴대전화(ex114)를 동작 가능한 상태로 기동한다.
휴대전화(ex114)는, CPU, ROM 및 RAM 등으로 이루어지는 주제어부(ex711)의 제어에 의거하여, 음성 통화 모드 시에 음성 입력부(ex605)에서 집음한 음성 신호를 음성 처리부(ex705)에 의해 디지털 음성 데이터로 변환하고, 이를 변복조 회로부(ex706)에서 스펙트럼 확산 처리하고, 송수신 회로부(ex701)에서 디지털 아날로그 변환 처리 및 주파수 변환 처리를 실시한 후에 안테나(ex601)를 통하여 송신한다. 또한 휴대전화(ex114)는, 음성 통화 모드 시에 안테나(ex601)로 수신한 수신 데이터를 증폭시켜 주파수 변환 처리 및 아날로그 디지털 변환 처리를 실시하고, 변복조 회로부(ex706)에서 스펙트럼 역확산 처리하며, 음성 처리부(ex705)에 의해 아날로그 음성 데이터로 변환한 후, 음성 출력부(ex608)를 통하여 이를 출력한다.
또한, 데이터 통신 모드 시에 전자 메일을 송신하는 경우, 본체부의 조작 키(ex604)의 조작에 의해 입력된 전자 메일의 텍스트 데이터는 조작 입력 제어부(ex704)를 통하여 주제어부(ex711)로 송출된다. 주제어부(ex711)는, 텍스트 데이터를 변복조 회로부(ex706)에서 스펙트럼 확산 처리하고, 송수신 회로부(ex701)에서 디지털 아날로그 변환 처리 및 주파수 변환 처리를 실시한 후에 안테나(ex601)를 통하여 기지국(ex110)에 송신한다.
데이터 통신 모드 시에 화상 데이터를 송신하는 경우, 카메라부(ex603)에서 촬상된 화상 데이터를, 카메라 인터페이스부(ex703)를 통하여 화상 부호화부(ex712)에 공급한다. 또한, 화상 데이터를 송신하지 않는 경우에는, 카메라부(ex603)에서 촬상한 화상 데이터를 카메라 인터페이스부(ex703) 및 LCD 제어부(ex702)를 통하여 표시부(ex602)에 직접 표시하는 것도 가능하다.
화상 부호화부(ex712)는, 본원 발명에서 설명한 화상 부호화 장치를 구비한 구성이며, 카메라부(ex603)로부터 공급된 화상 데이터를 상기 실시의 형태에서 나타낸 화상 부호화 장치에 이용한 화상 부호화 방법에 의해 압축 부호화함으로써 부호화 화상 데이터로 변환하고, 이를 다중 분리부(ex708)에 송출한다. 또한, 이 때 동시에 휴대전화(ex114)는, 카메라부(ex603)에서 촬상 중에 음성 입력부(ex605)에서 집음(集音)한 음성을, 음성 처리부(ex705)를 통하여 디지털의 음성 데이터로서 다중 분리부(ex708)에 송출한다.
다중 분리부(ex708)는, 화상 부호화부(ex712)로부터 공급된 부호화 화상 데이터와 음성 처리부(ex705)로부터 공급된 음성 데이터를 소정의 방식으로 다중화하고, 그 결과 얻어지는 다중화 데이터를 변복조 회로부(ex706)에서 스펙트럼 확산 처리하고, 송수신 회로부(ex701)에서 디지털 아날로그 변환 처리 및 주파수 변환 처리를 실시한 후에 안테나(ex601)를 통하여 송신한다.
데이터 통신 모드 시에 홈 페이지 등에 링크된 동화상 파일의 데이터를 수신하는 경우, 안테나(ex601)를 통하여 기지국(ex110)으로부터 수신한 수신 데이터를 변복조 회로부(ex706)에서 스펙트럼 역확산 처리하고, 그 결과 얻어지는 다중화 데이터를 다중 분리부(ex708)에 송출한다.
또한, 안테나(ex601)를 통하여 수신된 다중화 데이터를 복호하기 위해서는, 다중 분리부(ex708)는, 다중화 데이터를 분리함으로써 화상 데이터의 비트 스트림과 음성 데이터의 비트 스트림으로 나누고, 동기 버스(ex713)를 통하여 당해 부호화 화상 데이터를 화상 복호부(ex709)에 공급함과 더불어 당해 음성 데이터를 음성 처리부(ex705)에 공급한다.
다음에, 화상 복호부(ex709)는, 본원에서 설명한 화상 복호 장치를 구비한 구성이고, 화상 데이터의 비트 스트림을 상기 실시의 형태에서 나타낸 화상 부호화 방법에 대응한 화상 복호 방법으로 복호함으로써 재생 동화상 데이터를 생성하고, 이를, LCD 제어부(ex702)를 통하여 표시부(ex602)에 공급하고, 이에 따라, 예를 들면 홈 페이지에 링크된 동화상 파일에 포함되는 동화상 데이터가 표시된다. 이 때 동시에 음성 처리부(ex705)는, 음성 데이터를 아날로그 음성 데이터로 변환한 후, 이를 음성 출력부(ex608)에 공급하고, 이에 따라, 예를 들면 홈 페이지에 링크된 동화상 파일에 포함되는 음성 데이터가 재생된다.
또한, 상기 시스템의 예에 한정되지 않고, 최근에는 위성, 지상파에 의한 디지털 방송이 화제가 되고 있고, 도 18에 나타내는 바와같이 디지털 방송용 시스템에도 상기 실시 형태의 적어도 화상 부호화 장치 또는 화상 복호 장치를 집어넣을 수 있다. 구체적으로는, 방송국(ex201)에서는 음성 데이터, 영상 데이터 또는 이들 데이터가 다중화된 비트 스트림이 전파를 통하여 통신 또는 방송위성(ex202)에 전송된다. 이를 받은 방송위성(ex202)은, 방송용 전파를 발신하고, 위성방송 수신 설비를 가지는 가정의 안테나(ex204)는 이 전파를 수신하여, 텔레비젼(수신기)(ex300) 또는 셋탑 박스(STB)(ex217) 등의 장치는 비트 스트림을 복호하여 이를 재생한다. 또한, 기록 매체인 CD 및 DVD 등의 기록 미디어(ex215, ex216)에 기록한 화상 데이터와, 음성 데이터가 다중화된 비트 스트림을 읽어들이고, 복호하는 리더/레코더(ex218)에도 상기 실시의 형태에서 나타낸 화상 복호 장치를 실장하는 것이 가능하다. 이 경우, 재생된 영상 신호는 모니터(ex219)에 표시된다. 또한, 케이블 텔레비젼용의 케이블(ex203) 또는 위성/지상파 방송의 안테나(ex204)에 접속된 셋탑 박스(ex217) 내에 화상 복호 장치를 실장하고, 이를 텔레비젼의 모니터(ex219)로 재생하는 구성도 생각할 수 있다. 이 때 셋탑 박스가 아니라, 텔레비젼 내에 화상 복호 장치를 내장해도 된다. 또한, 안테나(ex205)를 가지는 차(ex210)에서, 위성(ex202) 또는 기지국 등으로부터 신호를 수신하고, 차(ex210)가 가지는 카 내비게이션(ex211) 등의 표시장치에 동화상을 재생하는 것도 가능하다.
또한, DVD, BD 등의 기록 미디어(ex215)에 기록한 음성 데이터, 영상 데이터 또는 이들 데이터가 다중화된 부호화 비트 스트림을 읽어들여 복호하거나, 또는, 기록 미디어(ex215)에, 음성 데이터, 영상 데이터 또는 이들 데이터를 부호화하고, 다중화 데이터로서 기록하는 리더/레코더(ex218)에도 상기 각 실시의 형태에서 나타낸 화상 복호 장치 또는 화상 부호화 장치를 실장하는 것이 가능하다. 이 경우, 재생된 영상 신호는 모니터(ex219)에 표시된다. 또한, 부호화 비트 스트림이 기록된 기록 미디어(ex215)에 의해, 다른 장치 및 시스템 등은, 영상 신호를 재생할 수 있다. 예를 들면, 다른 재생장치(ex212)는, 부호화 비트 스트림이 카피된 기록 미디어(ex214)를 이용하여, 모니터(ex213)에 영상 신호를 재생할 수 있다.
또한, 케이블 텔레비젼용의 케이블(ex203) 또는 위성/지상파 방송의 안테나(ex204)에 접속된 셋탑 박스(ex217) 내에 화상 복호 장치를 실장하고, 이를 텔레비젼의 모니터(ex219)로 표시해도 된다. 이 때 셋탑 박스가 아니라, TV 내에 화상 복호 장치를 내장해도 된다.
도 19는, 상기 각 실시의 형태에서 설명한 화상 복호 방법 및 화상 부호화 방법을 이용한 텔레비젼(수신기)(ex300)을 나타내는 도면이다. 텔레비젼(ex300)은, 상기 방송을 수신하는 안테나(ex204) 또는 케이블(ex203) 등을 통하여 영상 정보의 비트 스트림을 취득, 또는, 출력하는 튜너(ex301)와, 수신한 부호화 데이터를 복조하거나, 또는, 생성된 부호화 데이터를 외부로 송신하기 위해서 변조하는 변조/복조부(ex302)와, 복조한 영상 데이터와 음성 데이터를 분리하거나, 또는, 부호화 된 영상 데이터와 음성 데이터를 다중화하는 다중/분리부(ex303)를 구비한다. 또한, 텔레비젼(ex300)은, 음성 데이터, 영상 데이터 각각을 복호하거나, 또는, 각각의 정보를 부호화하는 음성 신호 처리부(ex304), 영상 신호 처리부(ex305)를 가지는 신호 처리부(ex306)와, 복호된 음성 신호를 출력하는 스피커(ex307), 복호된 영상 신호를 표시하는 디스플레이 등의 표시부(ex308)를 가지는 출력부(ex309)를 가진다. 또한, 텔레비젼(ex300)은, 사용자 조작의 입력을 받아들이는 조작 입력부(ex312) 등을 가지는 인터페이스부(ex317)를 가진다. 또한, 텔레비젼(ex300)은, 각 부를 통괄적으로 제어하는 제어부(ex310), 각 부에 전력을 공급하는 전원 회로부(ex311)를 가진다. 인터페이스부(ex317)는, 조작 입력부(ex312) 이외에, 리더/레코더(ex218) 등의 외부 기기와 접속되는 브릿지(ex313), SD 카드 등의 기록 미디어(ex216)를 장착 가능하게 하기 위한 슬롯부(ex314), 하드 디스크 등의 외부 기록 미디어와 접속하기 위한 드라이버(ex315), 전화망과 접속하는 모뎀(ex316) 등을 가지고 있어도 된다. 또한 기록 미디어(ex216)는, 저장하는 불휘발성/휘발성의 반도체 메모리 소자에 의해 전기적으로 정보의 기록을 가능하게 한 것이다. 텔레비젼(ex300)의 각 부는 동기 버스를 통하여 서로 접속되어 있다.
우선, 텔레비젼(ex300)이 안테나(ex204) 등에 의해 외부로부터 취득한 데이터를 복호하여, 재생하는 구성에 대해서 설명한다. 텔레비젼(ex300)은, 리모트 컨트롤러(ex220) 등으로부터 사용자 조작을 받아, CPU 등을 가지는 제어부(ex310)의 제어에 의거하여, 변조/복조부(ex302)에서 복조한 영상 데이터, 음성 데이터를 다중/분리부(ex303)로 분리한다. 또한 텔레비젼(ex300)은, 분리한 음성 데이터를 음성 신호 처리부(ex304)에서 복호하고, 분리한 영상 데이터를 영상 신호 처리부(ex305)에서 상기 각 실시의 형태에서 설명한 화상 복호 방법을 이용하여 복호한다. 복호한 음성 신호, 영상 신호는, 각각 출력부(ex309)로부터 외부를 향해 출력된다. 출력할 때는, 음성 신호와 영상 신호가 동기하여 재생하도록, 버퍼(ex318, ex319) 등에 일단 이들 신호를 축적하면 된다. 또한, 텔레비젼(ex300)은, 방송 등으로부터가 아니라, 자기/광디스크, SD 카드 등의 기록 미디어(ex215, ex216)로부터 부호화된 부호화 비트 스트림을 읽어내도 된다. 다음에, 텔레비젼(ex300)이 음성 신호 및 영상 신호를 부호화하고, 외부에 송신 또는 기록 미디어 등에 기입하는 구성에 대해서 설명한다. 텔레비젼(ex300)은, 리모트 콘트롤러(ex220) 등으로부터의 사용자 조작을 받아, 제어부(ex310)의 제어에 의거하여, 음성 신호 처리부(ex304)에서 음성 신호를 부호화하고, 영상 신호 처리부(ex305)에서 영상 신호를 상기 각 실시의 형태에서 설명한 화상 부호화 방법을 이용하여 부호화한다. 부호화한 음성 신호, 영상 신호는 다중/분리부(ex303)에서 다중화되어 외부로 출력된다. 다중화할 때에는, 음성 신호와 영상 신호가 동기하도록, 버퍼(ex320, ex321) 등에 일단 이들 신호를 축적하면 된다. 또한, 버퍼(ex318∼ex321)는 도시하고 있는 바와같이 복수개 구비하고 있어도 되고, 1개 이상의 버퍼를 공유하는 구성이어도 된다. 또한, 도시하고 있는 이외에, 예를 들면 변조/복조부(ex302)와 다중/분리부(ex303)의 사이 등에서도 시스템의 오버플로우 및 언더플로우를 피하는 완충재로서 버퍼에 데이터를 축적하는 것으로 해도 된다.
또한, 텔레비젼(ex300)은, 방송 및 기록 미디어 등으로부터 음성 데이터 및 영상 데이터를 취득하는 이외에, 마이크 및 카메라의 AV 입력을 받아들이는 구성을 구비하고, 이로부터 취득한 데이터에 대해서 부호화 처리를 행해도 된다. 또한, 여기서는 텔레비젼(ex300)은, 상기의 부호화 처리, 다중화, 및 외부 출력이 가능한 구성으로서 설명했는데, 이들 모든 처리를 행하는 것은 불가능하고, 상기 수신, 복호 처리, 및, 외부 출력 중 어느 하나만이 가능한 구성이어도 된다.
또한, 리더/레코더(ex218)로 기록 미디어로부터 부호화 비트 스트림을 읽어내거나, 또는, 기입하는 경우에는, 상기 복호 처리 또는 부호화 처리는 텔레비젼(ex300) 및 리더/레코더(ex218) 중 어느 하나로 행해도 되고, 텔레비젼(ex300)과 리더/레코더(ex218)가 서로 분담하여 행해도 된다.
일예로서, 광디스크로부터 데이터의 읽어들임 또는 기입을 하는 경우의 정보 재생/기록부(ex400)의 구성을 도 20에 도시한다. 정보 재생/기록부(ex400)는, 이하에 설명하는 요소(ex401∼ex407)를 구비한다. 광헤드(ex401)는, 광디스크인 기록 미디어(ex215)의 기록면에 레이저 스폿을 조사하여 정보를 기입하고, 기록 미디어(ex215)의 기록면으로부터의 반사광을 검출하여 정보를 읽어들인다. 변조 기록부(ex402)는, 광헤드(ex401)에 내장된 반도체 레이저를 전기적으로 구동하여 기록 데이터에 따라 레이저광의 변조를 행한다. 재생 복조부(ex403)는, 광헤드(ex401)에 내장된 포토디텍터에 의해 기록면으로부터의 반사광을 전기적으로 검출한 재생 신호를 증폭시키고, 기록 미디어(ex215)에 기록된 신호 성분을 분리하여 복조하여, 필요한 정보를 재생한다. 버퍼(ex404)는, 기록 미디어(ex215)에 기록하기 위한 정보 및 기록 미디어(ex215)로부터 재생한 정보를 일시적으로 유지한다. 디스크 모터(ex405)는 기록 미디어(ex215)를 회전시킨다. 서보 제어부(ex406)는, 디스크 모터(ex405)의 회전 구동을 제어하면서 광헤드(ex401)를 소정의 정보 트랙에 이동시키고, 레이저 스폿의 추종 처리를 행한다. 시스템 제어부(ex407)는, 정보 재생/기록부(ex400) 전체의 제어를 행한다. 상기의 판독 및 기입의 처리는, 시스템 제어부(ex407)가, 버퍼(ex404)에 유지된 각종 정보를 이용하거나, 또는 필요에 따라서 새로운 정보의 생성 및 추가를 행함과 더불어, 변조 기록부(ex402), 재생 복조부(ex403) 및 서보 제어부(ex406)를 협조 동작시키면서, 광헤드(ex401)를 통하여, 정보의 기록 재생을 행함으로써 실현된다. 시스템 제어부(ex407)는, 예를 들면 마이크로 프로세서로 구성되고, 판독 기입의 프로그램을 실행함으로써 이들 처리를 실행한다.
이상에서는, 광헤드(ex401)는 레이저 스폿을 조사하는 것으로서 설명했는데, 근접장 광을 이용하여 보다 고밀도의 기록을 행하는 구성이어도 된다.
도 21에 광디스크인 기록 미디어(ex215)의 모식도를 나타낸다. 기록 미디어(ex215)의 기록면에는 안내 홈(그루브)이 나선형상으로 형성되고, 정보 트랙(ex230)에는, 미리 그루브의 형상의 변화에 따라 디스크 상의 절대 위치를 나타내는 번지 정보가 기록되어 있다. 이 번지 정보는 데이터를 기록하는 단위인 기록 블록(ex231)의 위치를 특정하기 위한 정보를 포함하고, 기록 및 재생을 행하는 장치는, 정보 트랙(ex230)을 재생하여 번지 정보를 읽어들임으로써 기록 블록을 특정할 수 있다. 또한, 기록 미디어(ex215)는, 데이터 기록 영역(ex233), 내주 영역(ex232), 외주 영역(ex234)을 포함하고 있다. 사용자 데이터를 기록하기 위해서 이용하는 영역이 데이터 기록 영역(ex233)이며, 데이터 기록 영역(ex233)의 내주 또는 외주에 배치되어 있는 내주 영역(ex232)과 외주 영역(ex234)은, 사용자 데이터의 기록 이외의 특정 용도에 이용된다. 정보 재생/기록부(ex400)는, 이러한 기록 미디어(ex215)의 데이터 기록 영역(ex233)에 대해서, 부호화된 음성 데이터, 영상 데이터 또는 이들 데이터를 다중화한 부호화 데이터의 읽고 쓰기를 행한다.
이상에서는, 1층의 DVD, BD 등의 광디스크를 예로 들어 설명했는데, 이들에 한정된 것은 아니고, 다층 구조로서 표면 이외에도 기록 가능한 광 디스크여도 된다. 또한, 디스크의 동일한 장소에 다양한 상이한 파장의 색의 광을 이용하여 정보를 기록하거나, 다양한 각도로부터 다른 정보의 층을 기록하는 등, 다차원적 기록/재생을 행하는 구조의 광 디스크여도 된다.
또한, 디지털 방송용 시스템(ex200)에 있어서, 안테나(ex205)를 가지는 차(ex210)로 위성(ex202) 등으로부터 데이터를 수신하고, 차(ex210)가 가지는 카 내비게이션(ex211) 등의 표시장치에 동화상을 재생하는 것도 가능하다. 또한, 카 내비게이션(ex211)의 구성은 예를 들면 도 19에 나타내는 구성 중, GPS 수신부를 추가한 구성을 생각할 수 있고, 마찬가지로 컴퓨터(ex111) 및 휴대전화(ex114) 등에서도 생각할 수 있다. 또한, 상기 휴대전화(ex114) 등의 단말은, 텔레비젼(ex300)과 마찬가지로, 부호화기 및 복호기를 양쪽 모두 가지는 송수신형 단말 외에, 부호화기만의 송신 단말, 복호기만의 수신 단말이라고 하는 3가지 실장 형식을 생각할 수 있다.
이와 같이, 상기 각 실시의 형태에서 나타낸 화상 부호화 방법 혹은 화상 복호 방법을 상술한 어떠한 기기 및 시스템에 이용하는 것이 가능하고, 그렇게 함으로써, 상기 각 실시의 형태에서 설명한 효과를 얻을 수 있다.
또한, 본 발명은, 상기 실시의 형태에 한정되는 것은 아니고, 본 발명의 범위를 일탈하지 않고 다양한 변형 또는 수정이 가능하다.
(실시의 형태 5)
상기 각 실시의 형태에서 나타낸 화상 부호화 방법 및 장치, 화상 복호 방법 및 장치는, 전형적으로는 집적회로인 LSI로 실현된다. 일예로서, 도 22에 1칩화된 LSI(ex500)의 구성을 나타낸다. LSI(ex500)는, 이하에 설명하는 요소(ex501∼ex509)를 구비하고, 각 요소는 버스(ex510)를 통하여 접속하고 있다. 전원 회로부(ex505)는 전원이 온 상태인 경우에 각 부에 대해서 전력을 공급함으로써 동작 가능한 상태로 기동한다.
예를 들면 부호화 처리를 행하는 경우에는, LSI(ex500)는, CPU(ex502), 메모리 컨트롤러(ex503) 및 스트림 컨트롤러(ex504) 등을 가지는 제어부(ex501)의 제어에 의거하여, AV I/O(ex509)에 의해 마이크(ex117) 및 카메라(ex113) 등으로부터 AV 신호의 입력을 받아들인다. 입력된 AV 신호는, 일단 SDRAM 등의 외부 메모리(ex511)에 축적된다. 제어부(ex501)의 제어에 의거하여, 축적한 데이터는, 처리량 및 처리 속도에 따라 적절히 복수회로 나누는 등으로 하여, 신호 처리부(ex507)에 보내진다. 신호 처리부(ex507)는, 음성 신호의 부호화 및/또는 영상 신호의 부호화를 행한다. 여기서 영상 신호의 부호화 처리는, 상기 각 실시의 형태에서 설명한 부호화 처리이다. 신호 처리부(ex507)에서는 또한, 경우에 따라 부호화된 음성 데이터와 부호화된 영상 데이터를 다중화하는 등의 처리를 행하고, 스트림 I/O(ex506)으로부터 외부로 출력한다. 이 출력된 비트 스트림은, 기지국(ex107)을 향해 송신되거나, 또는, 기록 미디어(ex215)에 기입되기도 한다. 또한, 다중화할 때는 동기하도록, 일단 버퍼(ex508)에 데이터를 축적하면 된다.
또한, 예를 들면 복호 처리를 행하는 경우에는, LSI(ex500)는, 제어부(ex501)의 제어에 의거하여, 스트림 I/O(ex506)에 의해 기지국(ex107)을 통하여 얻은 부호화 데이터, 또는, 기록 미디어(ex215)로부터 판독하여 얻은 부호화 데이터를 일단 메모리(ex511) 등에 축적한다. 제어부(ex501)의 제어에 의거하여, 축적한 데이터는, 처리량 및 처리 속도에 따라 적절히 복수회로 나누는 등으로 하여 신호 처리부(ex507)로 보내진다. 신호 처리부(ex507)는, 음성 데이터의 복호 및/또는 영상 데이터의 복호를 행한다. 여기서 영상 신호의 복호 처리는, 상기 각 실시의 형태에서 설명한 복호 처리이다. 또한, 경우에 따라 복호된 음성 신호와 복호 된 영상 신호를 동기하여 재생할 수 있도록 각각의 신호를 일단 버퍼(ex508) 등에 축적하면 된다. 복호된 출력 신호는, 메모리(ex511) 등을 적절히 통하면서, 휴대전화(ex114), 게임기(ex115) 및 텔레비젼(ex300) 등의 각 출력부로부터 출력된다.
또한, 상기에서는, 메모리(ex511)가 LSI(ex500)의 외부의 구성으로서 설명했는데, LSIex(500)의 내부에 포함되는 구성이어도 된다. 버퍼(ex508)도 1개에 한정된 것이 아니라, 복수의 버퍼를 구비하고 있어도 된다. 또한, LSI(ex500)는 1칩화되어도 되고, 복수 칩화되어도 된다.
또한, 여기에서는, LSI로 했지만, 집적도의 차이에 따라, IC, 시스템 LSI, 슈퍼 LSI, 울트라 LSI로 호칭되는 경우도 있다.
또한, 집적 회로화의 수법은 LSI에 한정되는 것이 아니라, 전용 회로 또는 범용 프로세서로 실현되어도 된다. LSI 제조 후에, 프로그램하는 것이 가능한 FPGA, 또는, LSI 내부의 회로 셀의 접속 및 설정을 재구성 가능한 리컨피규러블·프로세서를 이용해도 된다.
또한, 반도체 기술의 진보 또는 파생하는 별도 기술에 의해 LSI로 치환하는 집적 회로화의 기술이 등장하면, 당연히, 그 기술을 이용하여 기능 블록의 집적화를 행해도 된다. 바이오 기술의 적응 등이 가능성으로서 있을 수 있다.
이상, 본 발명에 관한 화상 부호화 방법, 화상 부호화 장치, 화상 복호 방법 및 화상 복호 장치에 대해서, 실시의 형태에 의거하여 설명했는데, 본 발명은, 이들 실시의 형태에 한정되는 것은 아니다. 본 발명의 취지를 일탈하지 않는 한, 당업자가 생각하는 각종 변형을 해당 실시의 형태에 실시한 형태, 및, 다른 실시의 형태에 있어서의 구성 요소 및 스텝 등을 조합하여 구축되는 별도의 형태도, 본 발명의 범위 내에 포함된다.
<산업상의 이용 가능성>
본 발명은, 화상 부호화 방법, 화상 복호 방법, 화상 부호화 장치 및 화상 복호 장치로서, 예를 들면, 화상의 기록 장치 및 재생 장치 등에 이용할 수 있다.
100, 500, 700, 908 : 베이스·뷰 부호화부
102, 502, 702, 910 : 베이스·뷰 기입부
104, 902 : 논·베이스·뷰·MVC 확장 파라미터 특정부
106, 206 : 베이스·뷰·MVC 확장 파라미터 산출부
108, 512, 712, 912 : 논·베이스·뷰 부호화부
110, 514, 714, 914 : 논·베이스·뷰 기입부
150, 950 : 화상 부호화 장치
200 :베이스·뷰·NAL 유닛 구문 해석부
202, 504, 602, 704, 804 : 베이스·뷰 복호부
204 : 논·베이스·뷰·MVC 확장 파라미터 구문 해석부
205, 601, 803 : 전치 NAL 유닛 검색부
207 :베이스·뷰·MVC 확장 파라미터 구문 해석부
208 :논·베이스·뷰·NAL 유닛 구문 해석부
210, 610, 812 : 논·베이스·뷰 복호부
250 : 화상 복호 장치
506, 606, 706, 808 : 베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 산출부
508, 708 : 논·베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 특정부
510, 604, 710, 806 : 기억부
600, 800 : 스플릿터부
603, 805 : 베이스·뷰·전치 NAL 유닛·헤더·MVC 확장 파라미터 구문 해석부
605, 807, 1016 : 스위치부
608, 810 : 논·베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 구문 해석부
802 : 베이스·뷰·NAL 유닛·헤더·파라미터 구문 해석부
900 : 베이스·뷰·MVC 확장 파라미터 특정부
904 : 전치 NAL 유닛 기입 전환부
906, 1017 : 전치 NAL 유닛 기입부
1015 : 베이스·뷰·NAL 유닛·헤더·MVC 확장 파라미터 특정부
DOO1, DO11 : 화상
DOO3, DOO4, DOO6, DOO7, DO15, DO21, DO23 : 압축 화상
DOO5, DO19, DO25 : 복호 화상
DOO8, DO10, DO13, DO14,. DO17 : NAL 유닛·헤더·MVC 확장 파라미터
DOO9, DO18 : 값
DO16 : 신호 DO20 : 압축 영상
DO22 : 전치 NAL 유닛 ex100 : 컨텐츠 공급 시스템
ex101 : 인터넷 ex102 : 인터넷 서비스 프로바이더
ex103 : 스트리밍 서버 ex104 : 전화망
ex106, ex107, ex108, ex109, ex110 : 기지국
ex111 : 컴퓨터 ex112 : PDA
ex113, ex116 : 카메라
ex114 : 카메라 부착 디지털 휴대전화(휴대전화)
ex115 : 게임기 ex117 :마이크
ex200 : 디지털 방송용 시스템
ex201 : 방송국 ex202 : 방송위성(위성)
ex203 : 케이블
ex204, ex205, ex601 : 안테나 ex210 :차
ex211 : 카 내비게이션 ex212 : 재생장치
ex213, ex219 : 모니터
ex214, ex215, ex216, ex607 : 기록 미디어
ex217 :셋탑 박스(STB) ex218 :리더/레코더
ex220 :리모트 컨트롤러 ex230 :정보 트랙
ex231 :기록 블록 ex232 :내주 영역
ex233 :데이터 기록 영역 ex234 :외주 영역
ex300 : 텔레비젼 ex301 :튜너
ex302 :변조/복조부 ex303 :다중/분리부
ex304 :음성 신호 처리부 ex305 :영상 신호 처리부
ex306, ex507 :신호 처리부 ex307 :스피커
ex308, ex602 :표시부 ex309 :출력부
ex310, ex501 :제어부 ex311,ex505,ex710 :전원 회로부
ex312 :조작 입력부 ex313 :브릿지
ex314,ex606 :슬롯부 ex315 :드라이버
ex316 :모뎀 ex317 :인터페이스부
ex318,ex319, ex320,ex321, ex404, ex508 :버퍼
ex400 :정보 재생/기록부 ex401 :광헤드
ex402 :변조 기록부 ex403 :재생 복조부
ex405 :디스크 모터 ex406 :서보 제어부
ex407 :시스템 제어부 ex500 :LSI
ex502 :CPU ex503 :메모리 컨트롤러
ex504 :스트림 컨트롤러 ex506 :스트림 I/O
ex509 :AV I/0 ex510 :버스
ex511 :메모리 ex603 :카메라부
ex604 :조작 키 ex605 :음성 입력부
ex608 :음성 출력부 ex701 :송수신 회로부
ex702 :LCD 제어부
ex703 :카메라 인터페이스부(카메라 I/F부)
ex704 :조작 입력 제어부 ex705 :음성 처리부
ex706 :변복조 회로부 ex707 :기록 재생부
ex708 :다중 분리부 ex709 :화상 복호부
ex711 :주제어부 ex712 :화상 부호화부
ex713 :동기 버스

Claims (19)

  1. 다시점 영상을 복호하는 화상 복호 방법으로서,
    베이스·뷰의 베이스·뷰·컴포넌트에 포함되는 화상을 포함하는 NAL 유닛을 구문 해석하고,
    상기 베이스·뷰의 상기 베이스·뷰·컴포넌트에 포함되는 상기 화상을 복호하고,
    논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 구문 해석하고,
    상기 베이스·뷰의 상기 베이스·뷰·컴포넌트에 전치 NAL 유닛이 존재하는지 여부를 검색하고,
    상기 베이스·뷰의 상기 베이스·뷰·컴포넌트에 상기 전치 NAL 유닛이 존재하지 않는 경우, 상기 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 산출하고,
    상기 베이스·뷰의 상기 베이스·뷰·컴포넌트에 상기 전치 NAL 유닛이 존재하고 있는 경우, 상기 전치 NAL 유닛으로부터, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터를 구문 해석하고,
    상기 논·베이스·뷰의 논·베이스·뷰·컴포넌트에 포함되는 화상을 포함하는 NAL 유닛을 구문 해석하고,
    산출 또는 구문 해석된 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터, 및, 구문 해석된 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터를 이용하여, 상기 논·베이스·뷰의 상기 논·베이스·뷰·컴포넌트에 포함되는 상기 화상을 복호하는 화상 복호 방법.
  2. 삭제
  3. 삭제
  4. 삭제
  5. 삭제
  6. 삭제
  7. 삭제
  8. 삭제
  9. 삭제
  10. 삭제
  11. 삭제
  12. 삭제
  13. 삭제
  14. 삭제
  15. 삭제
  16. 삭제
  17. 다시점 영상을 복호하는 화상 복호 장치로서,
    베이스·뷰의 베이스·뷰·컴포넌트에 포함되는 화상을 포함하는 NAL 유닛을 구문 해석하는 베이스·뷰·NAL 유닛 구문 해석부와,
    상기 베이스·뷰의 상기 베이스·뷰·컴포넌트에 포함되는 상기 화상을 복호하는 베이스·뷰 복호부와,
    논·베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 구문 해석하는 논·베이스·뷰·MVC 확장 파라미터 구문 해석부와,
    상기 베이스·뷰의 상기 베이스·뷰·컴포넌트에 전치 NAL 유닛이 존재하는지 여부를 검색하는 전치 NAL 유닛 검색부와,
    상기 베이스·뷰의 상기 베이스·뷰·컴포넌트에 상기 전치 NAL 유닛이 존재하지 않는 경우, 상기 베이스·뷰의 NAL 유닛·헤더·MVC 확장 파라미터를 산출하는 베이스·뷰·MVC 확장 파라미터 산출부와,
    상기 베이스·뷰의 상기 베이스·뷰·컴포넌트에 상기 전치 NAL 유닛이 존재하는 경우, 상기 전치 NAL 유닛으로부터, 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터를 구문 해석하는 베이스·뷰·MVC 확장 파라미터 구문 해석부와,
    상기 논·베이스·뷰의 논·베이스·뷰·컴포넌트에 포함되는 화상을 포함하는 NAL 유닛을 구문 해석하는 논·베이스·뷰·NAL 유닛 구문 해석부와,
    산출 또는 구문 해석된 상기 베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터, 및, 구문 해석된 상기 논·베이스·뷰의 상기 NAL 유닛·헤더·MVC 확장 파라미터를 이용하여, 상기 논·베이스·뷰의 상기 논·베이스·뷰·컴포넌트에 포함되는 상기 화상을 복호하는 논·베이스·뷰 복호부를 구비하는 화상 복호 장치.
  18. 삭제
  19. 삭제
KR1020107022364A 2009-04-28 2010-04-28 화상 복호 방법 및 화상 복호 장치 KR101097690B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US17338009P 2009-04-28 2009-04-28
US61/173,380 2009-04-28

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020117021723A Division KR20110132380A (ko) 2009-04-28 2010-04-28 화상 복호 방법 및 화상 복호 장치

Publications (2)

Publication Number Publication Date
KR20110002843A KR20110002843A (ko) 2011-01-10
KR101097690B1 true KR101097690B1 (ko) 2011-12-22

Family

ID=43031969

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020107022364A KR101097690B1 (ko) 2009-04-28 2010-04-28 화상 복호 방법 및 화상 복호 장치
KR1020117021723A KR20110132380A (ko) 2009-04-28 2010-04-28 화상 복호 방법 및 화상 복호 장치

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020117021723A KR20110132380A (ko) 2009-04-28 2010-04-28 화상 복호 방법 및 화상 복호 장치

Country Status (13)

Country Link
US (3) US8149923B2 (ko)
EP (1) EP2426924A1 (ko)
JP (3) JP4633866B2 (ko)
KR (2) KR101097690B1 (ko)
CN (3) CN101981936B (ko)
AU (1) AU2010227032B2 (ko)
BR (1) BRPI1001258A2 (ko)
CA (1) CA2718447C (ko)
MX (1) MX2010011009A (ko)
MY (1) MY154325A (ko)
RU (2) RU2477009C2 (ko)
TW (3) TW201336313A (ko)
WO (1) WO2010125812A1 (ko)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4962525B2 (ja) * 2009-04-08 2012-06-27 ソニー株式会社 再生装置、再生方法、およびプログラム
US10237565B2 (en) 2011-08-01 2019-03-19 Qualcomm Incorporated Coding parameter sets for various dimensions in video coding
KR102057194B1 (ko) 2012-01-19 2019-12-19 삼성전자주식회사 시점 변환을 위한 다시점 비디오 예측 방법 및 그 장치, 시점 변환을 위한 다시점 비디오 예측 복원 방법 및 그 장치
US10447990B2 (en) 2012-02-28 2019-10-15 Qualcomm Incorporated Network abstraction layer (NAL) unit header design for three-dimensional video coding
US20130272371A1 (en) * 2012-04-16 2013-10-17 Sony Corporation Extension of hevc nal unit syntax structure
WO2013162259A1 (ko) 2012-04-23 2013-10-31 삼성전자 주식회사 다시점 비디오 부호화 방법 및 장치, 다시점 비디오 복호화 방법 및 장치
CN107566838B (zh) 2012-06-25 2020-03-31 华为技术有限公司 用于发信号通知渐进式时间层访问图片的方法
JP5885604B2 (ja) * 2012-07-06 2016-03-15 株式会社Ｎｔｔドコモ 動画像予測符号化装置、動画像予測符号化方法、動画像予測符号化プログラム、動画像予測復号装置、動画像予測復号方法及び動画像予測復号プログラム
US9686542B2 (en) * 2012-09-05 2017-06-20 Qualcomm Incorporated Network abstraction layer header design
KR102238567B1 (ko) * 2012-09-19 2021-04-08 퀄컴 인코포레이티드 디스패리티 벡터 유도를 위한 화상들의 선택
US9781416B2 (en) * 2013-02-26 2017-10-03 Qualcomm Incorporated Neighboring block disparity vector derivation in 3D video coding
US9596448B2 (en) 2013-03-18 2017-03-14 Qualcomm Incorporated Simplifications on disparity vector derivation and motion vector prediction in 3D video coding
CN105230017B (zh) * 2013-03-21 2019-08-06 索尼公司 图像编码装置和方法以及图像解码装置和方法
US9602822B2 (en) * 2013-04-17 2017-03-21 Qualcomm Incorporated Indication of cross-layer picture type alignment in multi-layer video coding
AU2014288482A1 (en) * 2013-07-12 2015-02-26 Sony Corporation Image coding device and method
BR122021025024A2 (pt) * 2019-05-20 2022-03-15 Panasonic Intellectual Property Corporation Of America Método de codificação, método de decodificação e mídia legível por computador não transitória

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008085909A2 (en) 2007-01-04 2008-07-17 Thomson Licensing Methods and apparatus for video error correction in multi-view coded video

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030123738A1 (en) * 2001-11-30 2003-07-03 Per Frojdh Global motion compensation for video pictures
CN100568964C (zh) * 2003-02-18 2009-12-09 诺基亚有限公司 图像解码方法
WO2004075555A1 (en) 2003-02-18 2004-09-02 Nokia Corporation Picture coding method
US7489342B2 (en) * 2004-12-17 2009-02-10 Mitsubishi Electric Research Laboratories, Inc. Method and system for managing reference pictures in multiview videos
US7415069B2 (en) * 2003-12-09 2008-08-19 Lsi Corporation Method for activation and deactivation of infrequently changing sequence and picture parameter sets
EP2348720B1 (en) * 2004-07-01 2015-04-01 Mitsubishi Electric Corporation Randomly accessible visual information recording medium and recording method, and reproducing device and reproducing method
JP4442420B2 (ja) * 2004-12-28 2010-03-31 ソニー株式会社 画像再生装置および方法、並びにプログラム
JP2006294152A (ja) * 2005-04-12 2006-10-26 Toshiba Corp 情報記憶媒体、情報記録装置、および情報再生装置
EP1982517A4 (en) * 2006-01-12 2010-06-16 Lg Electronics Inc MULTIVATE VIDEO PROCESSING
EP1999968A2 (en) 2006-03-29 2008-12-10 Thomson Licensing Multi-view video coding method and device
TWI375469B (en) * 2006-08-25 2012-10-21 Lg Electronics Inc A method and apparatus for decoding/encoding a video signal
KR101385808B1 (ko) 2006-10-16 2014-04-17 톰슨 라이센싱 비디오 동작 동안 ｎａｌ 유닛을 이용하여 동시 디코딩 리프레시를 시그널링하는 방법
CN101401430B (zh) * 2006-11-17 2012-02-29 Lg电子株式会社 用于解码/编码视频信号的方法及装置
KR101349836B1 (ko) * 2006-11-17 2014-01-10 엘지전자 주식회사 비디오 신호의 디코딩/인코딩 방법 및 장치
MX2009009489A (es) * 2007-03-13 2009-11-05 Nokia Corp Sistema y método para codificación y decodificación de video.
BRPI0809585A2 (pt) * 2007-04-17 2014-09-23 Thomson Licensing Decodificador de referência hipotética para codificação de vídeo multivisualização
PL2528341T3 (pl) 2007-04-18 2017-10-31 Dolby Int Ab System kodowania, stosujący uzupełniający zestaw parametrów sekwencyjnych do skalowalnego kodowania wideo lub kodowania wielowidokowego
US8488677B2 (en) * 2007-04-25 2013-07-16 Lg Electronics Inc. Method and an apparatus for decoding/encoding a video signal
US20080317124A1 (en) * 2007-06-25 2008-12-25 Sukhee Cho Multi-view video coding system, decoding system, bitstream extraction system for decoding base view and supporting view random access
WO2009130561A1 (en) * 2008-04-21 2009-10-29 Nokia Corporation Method and device for video coding and decoding
KR101260613B1 (ko) * 2008-12-26 2013-05-03 닛뽕빅터 가부시키가이샤 화상 부호화 장치, 화상 부호화 방법 및 그 프로그램 및 화상 복호화 장치, 화상 복호화 방법 및 그 프로그램
WO2010079921A2 (ko) 2009-01-12 2010-07-15 엘지 전자 주식회사 뎁스 정보를 이용한 비디오 신호 처리 방법 및 장치
US8982183B2 (en) * 2009-04-17 2015-03-17 Lg Electronics Inc. Method and apparatus for processing a multiview video signal

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008085909A2 (en) 2007-01-04 2008-07-17 Thomson Licensing Methods and apparatus for video error correction in multi-view coded video

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Anthony Vetro et al., "Joint Draft 1.0 on Multiview Video Coding",JVT of ISO/IEC MPEG & ITU-T VCEG 21st Meeting [JVT-U209],Hangzhou,China,Oct.2006,p.1-20

Also Published As

Publication number Publication date
CN101981936A (zh) 2011-02-23
US8369414B2 (en) 2013-02-05
CN101981936B (zh) 2013-03-06
KR20110002843A (ko) 2011-01-10
RU2550552C2 (ru) 2015-05-10
JPWO2010125812A1 (ja) 2012-10-25
RU2010141215A (ru) 2012-04-20
TW201206198A (en) 2012-02-01
JP5470482B2 (ja) 2014-04-16
MX2010011009A (es) 2011-02-22
WO2010125812A1 (ja) 2010-11-04
KR20110132380A (ko) 2011-12-07
TW201336313A (zh) 2013-09-01
US20110019746A1 (en) 2011-01-27
CN103124352A (zh) 2013-05-29
AU2010227032B2 (en) 2012-09-06
AU2010227032A1 (en) 2010-11-11
RU2477009C2 (ru) 2013-02-27
CN103124351A (zh) 2013-05-29
EP2426924A1 (en) 2012-03-07
JP2013158023A (ja) 2013-08-15
US8908771B2 (en) 2014-12-09
RU2011121698A (ru) 2012-12-10
JP2011010362A (ja) 2011-01-13
US20110293020A1 (en) 2011-12-01
US20110286512A1 (en) 2011-11-24
CA2718447A1 (en) 2010-10-28
TW201101843A (en) 2011-01-01
TWI489834B (zh) 2015-06-21
US8149923B2 (en) 2012-04-03
JP5470206B2 (ja) 2014-04-16
BRPI1001258A2 (pt) 2017-01-10
CA2718447C (en) 2014-10-21
MY154325A (en) 2015-05-29
TWI350698B (ko) 2011-10-11
JP4633866B2 (ja) 2011-02-16

Similar Documents

Publication Publication Date Title
KR101097690B1 (ko) 화상 복호 방법 및 화상 복호 장치
JP5574345B2 (ja) 符号化方法、エラー検出方法、復号方法、符号化装置、エラー検出装置及び復号装置
EA021750B1 (ru) Способ декодирования, декодирующее устройство, способ кодирования и кодирующее устройство
KR101440184B1 (ko) 부호화 방법, 복호 방법, 부호화 장치, 복호 장치, 프로그램, 및 집적 회로
AU2012227355B8 (en) Image decoding method, and image decoding apparatus

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
A107 Divisional application of patent
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20141117

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20151118

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20161123

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20171114

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20181121

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20191119

Year of fee payment: 9