WO2013077493A1 - 컬러 영상과 깊이 영상에 관한 부가정보를 부호화/복호화 하는 장치 및 방법 - Google Patents

컬러 영상과 깊이 영상에 관한 부가정보를 부호화/복호화 하는 장치 및 방법 Download PDF

Info

Publication number
WO2013077493A1
WO2013077493A1 PCT/KR2011/010199 KR2011010199W WO2013077493A1 WO 2013077493 A1 WO2013077493 A1 WO 2013077493A1 KR 2011010199 W KR2011010199 W KR 2011010199W WO 2013077493 A1 WO2013077493 A1 WO 2013077493A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
image
depth
viewpoint
encoding
Prior art date
Application number
PCT/KR2011/010199
Other languages
English (en)
French (fr)
Inventor
오관정
백아론
이진영
박두식
이재준
Original Assignee
삼성전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자 주식회사 filed Critical 삼성전자 주식회사
Publication of WO2013077493A1 publication Critical patent/WO2013077493A1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H04N19/463—Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding

Definitions

  • the technical field relates to encoding and decoding of three-dimensional images.
  • the present invention relates to an apparatus and method for efficiently encoding and decoding side information of a 3D image.
  • 3DVC 3D video coding
  • a reference image checking unit for identifying a virtual reference color image and a virtual reference depth image to encode an image, the number of the virtual reference color image, the list of the virtual reference color image, the number of the virtual reference depth image And a reference information generator for generating reference information including a list of the virtually referenced depth images, and an encoder for encoding additional information including the reference information.
  • the apparatus further includes a viewpoint checking unit for confirming the viewpoint of the image, an image type determination unit for confirming whether the image is a color image or a depth image, and a viewpoint information generation unit for generating viewpoint information including the image type.
  • the encoder may encode additional information including the viewpoint information and the reference information.
  • the view point information generating unit generates the view point information by multiplying the view point of the checked image when the image is a color image by 2, and multiplies the view point of the checked image when the image is a depth image, and then adds 1 to the view point.
  • View information may be generated.
  • the view point information generation unit generates the view point information by multiplying the view point of the checked image when the image is a depth image, and multiplies the view point of the checked image when the image is a color image, and then adds 1 to the view point.
  • View information may be generated.
  • the viewpoint information generation unit may generate the viewpoint information including a viewpoint parameter indicating a viewpoint of the image, and flag information for distinguishing a color image and a depth image.
  • the apparatus further includes a focus depth receiver configured to receive focus depth information and an encoding determiner configured to determine that encoding is necessary when the focus depth information is updated, and the encoder includes additional information including the reference information and the updated focus depth information. Can be encoded.
  • the encoding determiner determines that the focal depth information is required to be encoded, and when the first frame is transmitted, the encoder determines additional information including the reference information and the focal depth information. Can be encoded.
  • the encoding determination unit transmits a frame having a predetermined interval to provide a random access service, it is determined that encoding of the depth of focus information is necessary, and when the encoding unit transmits the first frame, Additional information including the reference information and the depth of focus information may be encoded.
  • the decoding unit for decoding the encoded side information and the number of color images that are virtually referenced by analyzing the reference information included in the additional information, the list of the color reference color image, the number of the virtual reference depth image and the virtual reference depth.
  • an additional information decoding apparatus including a reference information analyzer which checks a list of images.
  • the apparatus may further include a type checking unit.
  • the viewpoint checking unit checks a value obtained by dividing the viewpoint information by two as the viewpoint of the image, and when the viewpoint information is odd, subtracts 1 from the viewpoint information by 2 and then divides the value by 2. It can be confirmed from the viewpoint of the image.
  • the image type checking unit may check the image type as a color image when the viewpoint information is even, and check the image type as a depth image when the viewpoint information is odd.
  • the image type checking unit may check the image type as the depth image when the viewpoint information is even, and check the image type as the color image when the viewpoint information is odd.
  • the viewpoint check unit checks the viewpoint parameters included in the viewpoint information and confirms the viewpoint of the image
  • the image type confirmation unit checks the flag information for distinguishing the color image and the depth image included in the viewpoint information and the image. You can check the type.
  • the storage unit storing the recent focus depth and the additional depth information includes the focus depth information
  • the focus depth of the display screen is checked using the focus depth information, and stored as the recent focus depth in the storage unit, If the depth information is not included in the additional information, the storage unit may further include a focus depth check unit that checks the recent depth of focus as the depth of focus of the image.
  • the method may further include: verifying a virtually referenced color image and a virtually referenced depth image for encoding an image, the number of the virtually referenced color images, the list of the virtually referenced color images, the number of the virtually referenced depth images, and the virtual Generating reference information including a list of referenced depth images, identifying a viewpoint of the image, identifying a type of image whether the image is a color image or a depth image, and a viewpoint including the image type
  • an additional information encoding method comprising generating information and encoding additional information including the viewpoint information and the reference information.
  • the method may further include receiving updated focus depth information, and encoding the additional information may encode additional information including the viewpoint information, the reference information, and the updated focus depth information.
  • the method may further include decoding a coded additional information, analyzing the reference information included in the additional information, the number of virtually referenced color images, the list of virtually referenced color images, the number of virtually referenced depth images, and the virtually referenced depth. Checking a list of images, if the additional information includes viewpoint information, and checking the viewpoint of the image and if the additional information includes the viewpoint information, whether the image is a color image or a depth image.
  • a method of decoding additional information comprising the step of identifying the type.
  • the method may further include checking the latest stored depth of focus as the depth of focus of the image.
  • the present invention provides an apparatus and method for encoding / decoding additional information about a color image and a depth image.
  • the proposed encoding / decoding method of the additional information may provide necessary information for encoding and decoding the color image and the depth image by providing the viewpoint, the image type, the information of the reference image, and the depth of focus.
  • FIG. 1 is a diagram illustrating a configuration of an encoding apparatus that encodes additional information about a color image and a depth image.
  • FIG. 2 is a diagram illustrating a configuration of a decoding apparatus for decoding additional information about a color image and a depth image.
  • FIG. 3 is a flowchart illustrating a process of encoding additional information about a color image and a depth image in an encoding apparatus.
  • FIG. 4 is a flowchart illustrating a process of decoding additional information about a color image and a depth image in a decoding apparatus.
  • FIG. 1 is a diagram illustrating a configuration of an encoding apparatus that encodes additional information about a color image and a depth image.
  • the encoding apparatus 100 may include a viewpoint identification unit 110, a warrant type determination unit 120, a viewpoint information generation unit 130, a reference image identification unit 140, a reference information generation unit 150,
  • the apparatus may include a focus depth receiver 160, an encoding determiner 170, and an encoder 180.
  • the viewpoint checking unit 110 checks the viewpoint of the image.
  • the warrant type determiner 120 checks the image type whether the image is a color image or a depth image.
  • the viewpoint information generator 130 generates viewpoint information including an image type.
  • viewpoint information generation unit 130 There are several methods for generating viewpoint information in the viewpoint information generation unit 130. First, let's take a look at how to express both viewpoint and image type using one parameter.
  • the viewpoint information generation unit 130 If the image is a color image, the viewpoint information generation unit 130 generates viewpoint information by multiplying the viewpoint of the checked image by 2, and if the image is a depth image, multiplies the viewpoint of the identified image by 2 and adds 1 to generate viewpoint information. have.
  • the viewpoint information may be set as shown in Table 1 below.
  • the viewpoint information generation unit 130 generates viewpoint information by multiplying the viewpoint of the checked image by two, and if the image is a color image, multiplies the viewpoint of the identified image by two, and then adds one to generate viewpoint information. can do.
  • the viewpoint information generator 130 may generate viewpoint information including a viewpoint parameter indicating a viewpoint of an image, and flag information as shown in Table 2 below to distinguish a color image and a depth image.
  • the reference image checking unit 140 confirms the virtual image of the color image and the virtual image of the depth reference to encode the image.
  • the virtual reference picture is referred to as a virtual reference picture when the picture is used as ancillary data of a specific method when the picture is encoded or decoded through a specific method rather than an image directly referenced when encoding or decoding.
  • a virtual composite image based encoding technique may be used as a specific technique.
  • the virtual synthesis image-based encoding technique is a technique of generating a reference image referred to when encoding through virtual synthesis. At this time, the image used for the virtual synthesis is the virtual reference image.
  • the reference information generator 150 generates reference information including the number of the virtually referenced color images, the list of the virtually referenced color images, the number of the virtually referenced depth images, and the list of the virtually referenced depth images.
  • Reference information may be set in the format shown in Table 3 below.
  • the focus depth receiver 160 receives focus depth information.
  • the focus depth information indicates a depth value of the screen when the 3D image frame is displayed. For example, when the depth range of a 3D image is expressed as a value of 1 to 10, if the depth of focus of the screen is 1, a three-dimensional effect is formed from the rear of the screen. Will be formed.
  • the depth of focus information may be set in the format of ⁇ Table 4> below.
  • the encoding determination unit 170 checks whether the focus depth information is updated and determines that encoding is necessary if the focus depth information is updated.
  • the encoding determiner 170 may determine that encoding of the depth depth information is necessary when transmitting the first frame or when transmitting a frame having a predetermined interval to provide a random access service.
  • the encoder 180 encodes additional information including view information, reference information, and updated focus depth information when encoding of the focus depth information is necessary as a result of the determination by the encoding determiner 250.
  • FIG. 2 is a diagram illustrating a configuration of a decoding apparatus for decoding additional information about a color image and a depth image.
  • the decoding apparatus 200 includes a decoder 210, a view point determiner 220, an image type checker 230, a reference information checker 240, a depth of focus checker 250, and storage. It may include a portion 260.
  • the decoder 210 decodes the encoded side information received from the encoding apparatus 100.
  • the viewpoint checking unit 220 checks the viewpoint of the image.
  • the viewpoint checking unit 220 checks the value obtained by dividing the viewpoint information by two as the viewpoint of the image, and when the viewpoint information is odd, subtracts 1 from the viewpoint information by 2 and identifies the value divided by 2 as the viewpoint of the image. Can be.
  • the viewpoint checking unit 220 may confirm the viewpoint of the image by checking the viewpoint parameter included in the viewpoint information.
  • the image type checking unit 230 checks whether the image is a color image or a depth image.
  • the image type checking unit 230 may check whether the view information is even or odd to check the preset image type according to the even and the odd number.
  • the image type checking unit 230 may check the image type by checking flag information for distinguishing the color image and the depth image included in the viewpoint information.
  • the reference information checker 240 analyzes the reference information included in the additional information and checks the number of the virtually referenced color images, the list of the virtually referenced color images, the number of the virtually referenced depth images, and the list of the virtually referenced depth images.
  • the depth checking unit 250 checks the focus depth of the display screen using the focus depth information, stores the focus depth in the storage unit 260 as the latest focus depth, and focuses on the additional information. If the depth information is not included, the storage unit 260 checks the latest focal depth as the focal depth of the image.
  • the storage unit 260 stores the latest focal depth.
  • FIG. 3 is a flowchart illustrating a process of encoding additional information about a color image and a depth image in an encoding apparatus.
  • the encoding apparatus 100 checks the viewpoint of an image.
  • the encoding apparatus 100 checks an image type whether the image is a color image or a depth image.
  • the encoding apparatus 100 generates view information including an image type.
  • the view information when the image is a color image, the view information may be generated by multiplying the viewpoint of the checked image by 2, and when the image is the depth image, the view information may be generated by multiplying the viewpoint of the checked image by 2 and then adding 1.
  • the view information generation may generate view information by multiplying the viewpoint of the checked image by multiplying 2 when the image is a depth image, and generating the view information by multiplying 2 and then adding 1 to the view of the checked image when the image is a color image.
  • the viewpoint information generation may generate viewpoint information including a viewpoint parameter indicating a viewpoint of an image and flag information for distinguishing a color image and a depth image.
  • the encoding apparatus 100 generates reference information including the number of the virtually referenced color images, the list of the virtually referenced color images, the number of the virtually referenced depth images, and the list of the virtually referenced depth images.
  • the encoding apparatus 100 determines whether the updated depth depth information is received.
  • the encoding apparatus 100 encodes additional information including view information, reference image information, and focus depth information in operation 320.
  • the encoding apparatus 100 encodes additional information including view information and reference information in operation 324.
  • FIG. 4 is a flowchart illustrating a process of decoding additional information about a color image and a depth image in a decoding apparatus.
  • the decoding apparatus 200 receives encoded additional information from an encoding apparatus.
  • the decoding apparatus 200 decodes the encoded side information.
  • the decoding apparatus 200 checks the viewpoint of the image when the viewpoint information is included in the additional information. If the viewpoint information is even, the view point of the image may be determined by dividing the view point information by two as the view point of the image. . Alternatively, the viewpoint of the image may be confirmed by checking the viewpoint parameter included in the viewpoint information of the image.
  • the decoding apparatus 200 checks an image type whether the image is a color image or a depth image.
  • the image type check may determine whether the view information is even or odd to check the preset image type according to the even and the odd number.
  • the image type check may be performed by checking flag information for distinguishing the color image and the depth image included in the viewpoint information, and confirming the image type.
  • the decoding apparatus 200 analyzes the reference information included in the additional information and checks the number of the virtually referenced color images, the list of the virtually referenced color images, the number of the virtually referenced depth images, and the list of the virtually referenced depth images. Shall.
  • the decoding apparatus 200 checks whether the depth information includes the focal depth information.
  • the decoding apparatus 200 checks the focus depth of the display screen using the focus depth information in step 422 and stores it as the latest focus depth.
  • the decoding apparatus 200 checks the latest focal depth stored in operation 424 as the focal depth of the image.

Abstract

컬러 영상과 깊이 영상에 관한 부가정보를 부호화/복호화 하는 장치 및 방법이 제공된다. 일 측면에 따른 부가정보 부호화 장치는 영상을 부호화하는데 가상 참조한 칼라영상과 가상 참조한 깊이영상을 확인하고, 가상 참조한 칼라영상의 수, 가상 참조한 칼라영상의 리스트, 가상 참조한 깊이영상의 수 및 가상 참조한 깊이영상의 리스트를 포함하는 참조정보를 생성하고, 영상의 시점을 확인하고, 영상이 칼라영상인지 깊이영상 인지 영상종류를 확인하고, 영상종류를 포함하는 시점정보를 생성하고, 시점정보와 참조정보를 포함하는 부가정보를 부호화한다.

Description

컬러 영상과 깊이 영상에 관한 부가정보를 부호화/복호화 하는 장치 및 방법
기술분야는 3차원 영상의 부호화 및 복호화에 관한 것이다. 특히, 3차원 영상의 부가정보를 효과적으로 부호화하고 복호화 하는 장치 및 방법에 관한 것이다.
최근 MPEG에서 준비중인 3차원 비디오 영상에 관한 국제 표준인 3DVC(3D video coding)은 다시점의 컬러 영상과 다시점의 깊이 영상을 이용한 3차원 영상 서비스를 목표로 다시점의 컬러 영상과 다시점의 깊이 영상에 대한 압축뿐만 아니라 이를 이용한 랜더링(rendering) 기술에 관해 연구하고 있다.
이러한 다시점의 컬러 영상과 다시점의 깊이 영상을 이용해서 3차원 영상을 제공하기 위해서는 다시점의 컬러 영상과 다시점의 깊이 영상 간의 관계 및 입체 영상을 생성하기 위한 정보들인 부가정보의 정의가 요구된다. 또한, 부가정보를 전송하기 위한 효율적인 부호화 복호화 장치 및 방법이 요구된다.
일 측면에 있어서, 영상을 부호화하는데 가상 참조한 칼라영상과 가상 참조한 깊이영상을 확인하는 참조영상 확인부와, 상기 가상 참조한 칼라영상의 수, 상기 가상 참조한 칼라영상의 리스트, 상기 가상 참조한 깊이영상의 수 및 상기 가상 참조한 깊이영상의 리스트를 포함하는 참조정보를 생성하는 참조정보 생성부 및 상기 참조정보를 포함하는 부가정보를 부호화하는 부호화부를 포함하는 부가정보 부호화 장치가 제공된다.
이때, 상기 영상의 시점을 확인하는 시점 확인부와, 상기 영상이 칼라영상인지 깊이영상 인지 영상종류를 확인하는 영상종류 판단부 및 상기 영상종류를 포함하는 시점정보를 생성하는 시점정보 생성부를 더 포함하고, 상기 부호화부는 상기 시점정보와 상기 참조정보를 포함하는 부가정보를 부호화할 수 있다.
이때, 상기 시점 정보 생성부는, 상기 영상이 칼라영상이면 확인한 상기 영상의 시점에 2를 곱해서 상기 시점 정보를 생성하고, 상기 영상이 깊이영상이면 확인한 상기 영상의 시점에 2를 곱한 후에 1을 더해서 상기 시점 정보를 생성할 수 있다.
이때, 상기 시점 정보 생성부는, 상기 영상이 깊이영상이면 확인한 상기 영상의 시점에 2를 곱해서 상기 시점 정보를 생성하고, 상기 영상이 칼라영상이면 확인한 상기 영상의 시점에 2를 곱한 후에 1을 더해서 상기 시점 정보를 생성할 수 있다.
이때, 상기 시점 정보 생성부는, 상기 영상의 시점을 나타내는 시점 파라메터와 칼라영상과 깊이영상을 구분하는 플래그 정보를 포함하는 상기 시점 정보를 생성할 수 있다.
이때, 초점 깊이 정보를 수신하는 초점 깊이 수신부 및 상기 초점 깊이 정보의 업데이트 되었으면 부호화가 필요하다고 판단하는 부호화 판단부를 더 포함하고, 상기 부호화부는 상기 참조정보와 상기 업데이트된 초점 깊이 정보를 포함하는 부가정보를 부호화할 수 있다.
이때, 상기 부호화 판단부는 첫번째 프레임을 전송하는 경우, 상기 초점 깊이 정보의 부호화가 필요하다고 판단하고, 상기 부호화부는 상기 첫번째 프레임을 전송하는 경우, 상기 참조정보와 상기 초점 깊이 정보를 포함하는 부가정보를 부호화할 수 있다.
이때, 상기 부호화 판단부는 랜덤액세스(random access) 서비스를 제공하기 위해 기설정된 간격의 프레임을 전송하는 경우, 상기 초점 깊이 정보의 부호화가 필요하다고 판단하고, 상기 부호화부는 상기 첫번째 프레임을 전송하는 경우, 상기 참조정보와 상기 초점 깊이 정보를 포함하는 부가정보를 부호화할 수 있다.
일 측면에 있어서, 부호화된 부가정보를 복호화하는 복호화부 및 상기 부가정보에 포함된 참조정보를 분석해서 가상 참조한 칼라영상의 수, 가상 참조한 칼라영상의 리스트, 가상 참조한 깊이영상의 수 및 가상 참조한 깊이영상의 리스트를 확인하는 참조정보 분석부를 포함하는 부가정보 복호화 장치가 제공된다.
이때, 상기 부가정보에 시점정보가 포함되어 있으면, 영상이 시점을 확인하는 시점 확인부 및 상기 부가정보에 상기 시점정보가 포함되어 있으면, 상기 영상이 칼라영상인지 깊이영상인지 영상종류를 확인하는 영상종류 확인부를 더 포함할 수 있다.
이때, 상기 시점 확인부는, 상기 시점 정보가 짝수이면 상기 시점 정보를 2로 나눈 값을 상기 영상의 시점으로 확인하고, 상기 시점 정보가 홀수이면 2로 상기 시점 정보에서 1을 뺀후 2로 나눈 값을 상기 영상의 시점으로 확인할 수 있다.
이때, 상기 영상종류 확인부는, 상기 시점 정보가 짝수이면 영상종류를 칼라영상으로 확인하고, 상기 시점 정보가 홀수이면 영상종류를 깊이영상으로 확인할 수 있다.
이때, 상기 영상종류 확인부는, 상기 시점 정보가 짝수이면 영상종류를 깊이영상으로 확인하고, 상기 시점 정보가 홀수이면 영상종류를 칼라영상으로 확인할 수 있다.
이때, 상기 시점 확인부는 상기 시점 정보에 포함된 시점 파라메터를 확인해서 상기 영상의 시점을 확인하고, 상기 영상종류 확인부는 상기 시점 정보에 포함된 칼라영상과 깊이영상을 구분하는 플래그 정보를 확인해서 영상종류를 확인할 수 있다.
이때, 최근 초점 깊이를 저장하는 저장부 및 상기 부가정보에 초점 깊이 정보가 포함되어 있으면, 상기 초점 깊이 정보를 이용해서 디스플레이 화면의 초점 깊이를 확인하고 상기 저장부에 상기 최근 초점 깊이로 저장하고, 상기 부가정보에 초점 깊이 정보가 포함되어 있지 않으면, 상기 저장부에서 상기 최근 초점 깊이를 상기 영상의 초점 깊이로 확인하는 초점 깊이 확인부를 더 포함할 수 있다.
일 측면에 있어서, 영상을 부호화하는데 가상 참조한 칼라영상과 가상 참조한 깊이영상을 확인하는 단계와, 상기 가상 참조한 칼라영상의 수, 상기 가상 참조한 칼라영상의 리스트, 상기 가상 참조한 깊이영상의 수 및 상기 가상 참조한 깊이영상의 리스트를 포함하는 참조정보를 생성하는 단계와, 상기 영상의 시점을 확인하는 단계와, 상기 영상이 칼라영상인지 깊이영상 인지 영상종류를 확인하는 단계와, 상기 영상종류를 포함하는 시점정보를 생성하는 단계 및 상기 시점정보와 상기 참조정보를 포함하는 부가정보를 부호화하는 단계를 포함하는 부가정보 부호화 방법이 제공된다.
이때, 업데이트된 초점 깊이 정보를 수신하는 단계를 더 포함하고, 상기 부가정보를 부호화하는 단계는, 상기 시점정보, 상기 참조정보 및 상기 업데이트된 초점 깊이 정보를 포함하는 부가정보를 부호화할 수 있다.
일 측면에 있어서, 부호화된 부가정보를 복호화하는 단계와, 상기 부가정보에 포함된 참조정보를 분석해서 가상 참조한 칼라영상의 수, 가상 참조한 칼라영상의 리스트, 가상 참조한 깊이영상의 수 및 가상 참조한 깊이영상의 리스트를 확인하는 단계와, 상기 부가정보에 시점정보가 포함되어 있으면, 영상이 시점을 확인하는 단계 및 상기 부가정보에 상기 시점정보가 포함되어 있으면, 상기 영상이 칼라영상인지 깊이영상인지 영상종류를 확인하는 단계를 포함하는 부가정보 복호화 방법이 제공된다.
이때, 상기 부가정보에 초점 깊이 정보가 포함되어 있으면, 상기 초점 깊이 정보를 이용해서 디스플레이 화면의 초점 깊이를 확인해서 최근 초점 깊이로 저장하는 단계 및 상기 부가정보에 초점 깊이 정보가 포함되어 있지 않으면, 저장된 상기 최근 초점 깊이를 상기 영상의 초점 깊이로 확인하는 단계를 더 포함할 수 있다.
본 발명은 컬러 영상과 깊이 영상에 관한 부가정보를 부호화/복호화 하는 장치 및 방법이 제공된다. 제안하는 부가정보의 부호화/복호화 방법은 시점, 영상종류, 참조영상의 정보 및 초점 깊이를 제공함으로써 컬러 영상과 깊이 영상을 부호화 복호화하는 필요한 정보를 제공할 수 있다.
도 1은 컬러 영상과 깊이 영상에 관한 부가정보를 부호화하는 부호화 장치의 구성을 도시한 도면이다.
도 2는 컬러 영상과 깊이 영상에 관한 부가정보를 복호화하는 복호화 장치의 구성을 도시한 도면이다.
도 3은 부호화 장치에서 컬러 영상과 깊이 영상에 관한 부가정보를 부호화하는 과정을 도시한 흐름도이다.
도 4는 복호화 장치에서 컬러 영상과 깊이 영상에 관한 부가정보를 복호화하는 과정을 도시한 흐름도이다.
이하, 본 발명의 실시 예를 첨부된 도면을 참조하여 상세하게 설명한다.
도 1은 컬러 영상과 깊이 영상에 관한 부가정보를 부호화하는 부호화 장치의 구성을 도시한 도면이다.
도 1을 참조하면, 부호화 장치(100)는 시점 확인부(110), 영장종류 판단부(120), 시점정보 생성부(130), 참조영상 확인부(140) 참조정보 생성부(150), 초점 깊이 수신부(160), 부호화 판단부(170) 및 부호화부(180)를 포함할 수 있다.
시점 확인부(110)는 영상의 시점을 확인한다.
영장종류 판단부(120)는 영상이 칼라영상인지 깊이영상 인지 영상종류를 확인한다.
시점정보 생성부(130)는 영상종류를 포함하는 시점정보를 생성한다.
시점정보 생성부(130)에서 시점정보를 생성하는 방법에는 여러 방법이 가능하다. 먼저 하나의 파라메터를 이용해서 시점과 영상종류를 모두 표현하는 방법을 살펴본다.
시점정보 생성부(130)는 영상이 칼라영상이면 확인한 영상의 시점에 2를 곱해서 시점 정보를 생성하고, 영상이 깊이영상이면 확인한 영상의 시점에 2를 곱한 후에 1을 더해서 시점 정보를 생성할 수 있다.
즉, 시점 정보를 아래 <표 1>과 같이 설정할 수 있다.
[규칙 제26조에 의한 보정 12.04.2013]　
Figure WO-DOC-TABLE-1
그 외에도 시점정보 생성부(130)는 영상이 깊이영상이면 확인한 영상의 시점에 2를 곱해서 시점 정보를 생성하고, 영상이 칼라영상이면 확인한 영상의 시점에 2를 곱한 후에 1을 더해서 시점 정보를 생성할 수 있다.
또한, 시점정보 생성부(130)는 영상의 시점을 나타내는 시점 파라메터와 칼라영상과 깊이영상을 구분하는 아래 <표 2>와 같은 플래그 정보를 포함하는 시점 정보를 생성할 수도 있다.
[규칙 제26조에 의한 보정 12.04.2013]　
Figure WO-DOC-TABLE-2
참조영상 확인부(140)는 영상을 부호화하는데 가상 참조한 칼라영상과 가상 참조한 깊이영상을 확인한다.
이때, 가상 참조 영상란 부호화 또는 복호화 할 때 직접적으로 참조되는 영상이 아닌 특정 기법을 통해 부호화 또는 복호화 될 때 특정 기법의 보조 데이터로서 사용되는 영상을 가상 참조 영상이라 한다. 이때, 특정 기법으로는 가상 합성 영상 기반 부호화 기법이 가능하다. 가상 합성 영상 기반 부호화 기법이란 부호화 할 때 참조하는 참조영상을 가상합성을 통해 생성하는 기법으로 이때 가상 합성에 사용되는 영상이 가상 참조 영상이다.
참조정보 생성부(150)는 가상 참조한 칼라영상의 수, 가상 참조한 칼라영상의 리스트, 가상 참조한 깊이영상의 수 및 가상 참조한 깊이영상의 리스트를 포함하는 참조정보를 생성한다.
참조정보는 아래 <표 3>의 형식으로 설정될 수 있다.
[규칙 제26조에 의한 보정 12.04.2013]　
Figure WO-DOC-TABLE-3
초점 깊이 수신부(160)는 초점 깊이 정보를 수신한다. 이때, 초점 깊이 정보란 3차원 영상 프레임이 디스플레이 될 때 화면의 깊이값을 나타낸다. 예를 들어 3차원 영상의 깊이 범위가 1에서 10의 값으로 표현될 때 화면의 초점 깊이가 1이면 화면을 기준으로 뒤쪽으로 입체감이 형성되고, 초점깊이가 10인경우 화면을 기준으로 앞쪽으로 입체감이 형성되게 된다.
초점 깊이 정보는 아래 <표 4>의 형식으로 설정될 수 있다.
[규칙 제26조에 의한 보정 12.04.2013]　
Figure WO-DOC-TABLE-4
부호화 판단부(170)는 초점 깊이 정보의 업데이트 유무를 확인해서 초점 깊이 정보가 업데이트 되었으면 부호화가 필요하다고 판단한다.
부호화 판단부(170)는 첫번째 프레임을 전송하는 경우 또는 랜덤액세스(random access) 서비스를 제공하기 위해 기설정된 간격의 프레임을 전송하는 경우, 초점 깊이 정보의 부호화가 필요하다고 판단할 수 있다.
부호화부(180)는 부호화 판단부(250)의 판단결과 초점 깊이 정보의 부호화가 필요하면, 시점정보, 참조정보 및 업데이트된 초점 깊이 정보를 포함하는 부가정보를 부호화한다.
도 2는 컬러 영상과 깊이 영상에 관한 부가정보를 복호화하는 복호화 장치의 구성을 도시한 도면이다.
도 2를 참조하면, 복호화 장치(200)는 복호화부(210), 시점 확인부(220), 영상종류 확인부(230), 참조정보 확인부(240), 초점깊이 확인부(250) 및 저장부(260)를 포함할 수 있다.
복호화부(210)는 부호화 장치(100)로부터 수신하는 부호화된 부가정보를 복호화한다.
시점 확인부(220)는 부가정보에 시점정보가 포함되어 있으면, 영상의 시점을 확인한다.
시점 확인부(220)는 시점 정보가 짝수이면 시점 정보를 2로 나눈 값을 영상의 시점으로 확인하고, 시점 정보가 홀수이면 2로 시점 정보에서 1을 뺀후 2로 나눈 값을 영상의 시점으로 확인할 수 있다.
또는, 시점 확인부(220)는 시점 정보에 포함된 시점 파라메터를 확인해서 영상의 시점을 확인할 수 있다.
영상종류 확인부(230)는 부가정보에 시점정보가 포함되어 있으면, 영상이 칼라영상인지 깊이영상인지 영상종류를 확인한다.
영상종류 확인부(230)는 시점 정보가 짝수인지 홀수인지 확인해서 짝수와 홀수에 따라 기설정된 영상종류를 확인할 수 있다.
또는, 영상종류 확인부(230)는 시점 정보에 포함된 칼라영상과 깊이영상을 구분하는 플래그 정보를 확인해서 영상종류를 확인할 수 있다.
참조정보 확인부(240)는 부가정보에 포함된 참조정보를 분석해서 가상 참조한 칼라영상의 수, 가상 참조한 칼라영상의 리스트, 가상 참조한 깊이영상의 수 및 가상 참조한 깊이영상의 리스트를 확인한다.
초점깊이 확인부(250)는 부가정보에 초점 깊이 정보가 포함되어 있으면, 초점 깊이 정보를 이용해서 디스플레이 화면의 초점 깊이를 확인하고 저장부(260)에 최근 초점 깊이로 저장하고, 부가정보에 초점 깊이 정보가 포함되어 있지 않으면, 저장부(260)에서 최근 초점 깊이를 영상의 초점 깊이로 확인한다.
저장부(260)는 최근 초점 깊이를 저장한다.
이하, 상기와 같이 구성된 본 발명에 따른 부호화/복호화 장치에서 컬러 영상과 깊이 영상에 관한 부가정보를 부호화하고 복호화 하는 방법을 아래에서 도면을 참조하여 설명한다.
도 3은 부호화 장치에서 컬러 영상과 깊이 영상에 관한 부가정보를 부호화하는 과정을 도시한 흐름도이다.
도 3을 참조하면, 부호화 장치(100)는 310단계에서 영상의 시점을 확인한다.
그리고, 부호화 장치(100)는 312단계에서 영상이 칼라영상인지 깊이영상 인지 영상종류를 확인하는 한다.
그리고, 부호화 장치(100)는 314단계에서 영상종류를 포함하는 시점정보를 생성한다. 이때, 시점정보 생성은 영상이 칼라영상이면 확인한 영상의 시점에 2를 곱해서 시점 정보를 생성하고, 영상이 깊이영상이면 확인한 영상의 시점에 2를 곱한 후에 1을 더해서 시점 정보를 생성할 수 있다. 그 외에도 시점정보 생성은 영상이 깊이영상이면 확인한 영상의 시점에 2를 곱해서 시점 정보를 생성하고, 영상이 칼라영상이면 확인한 영상의 시점에 2를 곱한 후에 1을 더해서 시점 정보를 생성할 수 있다. 또한, 시점정보 생성은 영상의 시점을 나타내는 시점 파라메터와 칼라영상과 깊이영상을 구분하는 플래그 정보를 포함하는 시점 정보를 생성할 수도 있다.
그리고, 부호화 장치(100)는 316단계에서 가상 참조한 칼라영상의 수, 가상 참조한 칼라영상의 리스트, 가상 참조한 깊이영상의 수 및 가상 참조한 깊이영상의 리스트를 포함하는 참조정보를 생성한다.
그리고, 부호화 장치(100)는 318단계에서 업데이트된 초점 깊이 정보를 수신하는지 확인한다.
318단계의 확인결과 업데이트된 초점 깊이 정보를 수신하면, 부호화 장치(100)는 320단계에서 시점 정보, 참조영상 정보 및 초점 깊이 정보를 포함하는 부가정보를 부호화한다.
318단계의 확인결과 업데이트된 초점 깊이 정보를 수신하지 않으면, 부호화 장치(100)는 324단계에서 시점정보와 참조정보를 포함하는 부가정보를 부호화한다.
도 4는 복호화 장치에서 컬러 영상과 깊이 영상에 관한 부가정보를 복호화하는 과정을 도시한 흐름도이다.
도 4를 참조하면, 복호화 장치(200)는 410단계에서 부호화 장치로부터 부호화된 부가정보를 수신한다.
그리고, 복호화 장치(200)는 412단계에서 부호화된 부가정보를 복호화하는 한다.
그리고, 복호화 장치(200)는 414단계에서 부가정보에 시점정보가 포함되어 있으면, 영상의 시점을 확인한다. 영상의 시점 확인은 시점 정보가 짝수이면 시점 정보를 2로 나눈 값을 영상의 시점으로 확인하고, 시점 정보가 홀수이면 2로 시점 정보에서 1을 뺀후 2로 나눈 값을 영상의 시점으로 확인할 수 있다. 또는, 영상의 시점 정보에 포함된 시점 파라메터를 확인해서 영상의 시점을 확인할 수 있다.
그리고, 복호화 장치(200)는 416단계에서 부가정보에 시점정보가 포함되어 있으면, 영상이 칼라영상인지 깊이영상인지 영상종류를 확인한다. 이때, 영상종류 확인은 시점 정보가 짝수인지 홀수인지 확인해서 짝수와 홀수에 따라 기설정된 영상종류를 확인할 수 있다. 또는, 영상종류 확인은 시점 정보에 포함된 칼라영상과 깊이영상을 구분하는 플래그 정보를 확인해서 영상종류를 확인할 수 있다.
그리고, 복호화 장치(200)는 418단계에서 부가정보에 포함된 참조정보를 분석해서 가상 참조한 칼라영상의 수, 가상 참조한 칼라영상의 리스트, 가상 참조한 깊이영상의 수 및 가상 참조한 깊이영상의 리스트를 확인하는 한다.
그리고, 복호화 장치(200)는 420단계에서 부가정보에 초점 깊이 정보가 포함되어 있는지 확인한다.
420단계의 확인결과 부가정보에 초점 깊이 정보가 포함되어 있으면, 복호화 장치(200)는 422단계에서 초점 깊이 정보를 이용해서 디스플레이 화면의 초점 깊이를 확인해서 최근 초점 깊이로 저장한다.
420단계의 확인결과 부가정보에 초점 깊이 정보가 포함되어 있지 않으면, 복호화 장치(200)는 424단계에서 저장된 최근 초점 깊이를 영상의 초점 깊이로 확인한다.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.
그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.

Claims (19)

  1. 영상을 부호화하는데 가상 참조한 칼라영상과 가상 참조한 깊이영상을 확인하는 참조영상 확인부;
    상기 가상 참조한 칼라영상의 수, 상기 가상 참조한 칼라영상의 리스트, 상기 가상 참조한 깊이영상의 수 및 상기 가상 참조한 깊이영상의 리스트를 포함하는 참조정보를 생성하는 참조정보 생성부; 및
    상기 참조정보를 포함하는 부가정보를 부호화하는 부호화부를 포함하는
    부가정보 부호화 장치.
  2. 제1항에 있어서,
    상기 영상의 시점을 확인하는 시점 확인부;
    상기 영상이 칼라영상인지 깊이영상 인지 영상종류를 확인하는 영상종류 판단부; 및
    상기 영상종류를 포함하는 시점정보를 생성하는 시점정보 생성부를 더 포함하고,
    상기 부호화부는,
    상기 시점정보와 상기 참조정보를 포함하는 부가정보를 부호화하는
    부가정보 부호화 장치.
  3. 제1항에 있어서,
    상기 시점 정보 생성부는,
    상기 영상이 칼라영상이면 확인한 상기 영상의 시점에 2를 곱해서 상기 시점 정보를 생성하고,
    상기 영상이 깊이영상이면 확인한 상기 영상의 시점에 2를 곱한 후에 1을 더해서 상기 시점 정보를 생성하는
    부가정보 부호화 장치.
  4. 제1항에 있어서,
    상기 시점 정보 생성부는,
    상기 영상이 깊이영상이면 확인한 상기 영상의 시점에 2를 곱해서 상기 시점 정보를 생성하고,
    상기 영상이 칼라영상이면 확인한 상기 영상의 시점에 2를 곱한 후에 1을 더해서 상기 시점 정보를 생성하는
    부가정보 부호화 장치.
  5. 제1항에 있어서,
    상기 시점 정보 생성부는,
    상기 영상의 시점을 나타내는 시점 파라메터와 칼라영상과 깊이영상을 구분하는 플래그 정보를 포함하는 상기 시점 정보를 생성하는
    부가정보 부호화 장치.
  6. 제1항에 있어서,
    초점 깊이 정보를 수신하는 초점 깊이 수신부; 및
    상기 초점 깊이 정보의 업데이트 되었으면 부호화가 필요하다고 판단하는 부호화 판단부를 더 포함하고,
    상기 부호화부는,
    상기 참조정보와 상기 업데이트된 초점 깊이 정보를 포함하는 부가정보를 부호화하는
    부가정보 부호화 장치.
  7. 제8항에 있어서,
    상기 부호화 판단부는,
    첫번째 프레임을 전송하는 경우, 상기 초점 깊이 정보의 부호화가 필요하다고 판단하고,
    상기 부호화부는,
    상기 첫번째 프레임을 전송하는 경우, 상기 참조정보와 상기 초점 깊이 정보를 포함하는 부가정보를 부호화하는
    부가정보 부호화 장치.
  8. 제6항에 있어서,
    상기 부호화 판단부는,
    랜덤액세스(random access) 서비스를 제공하기 위해 기설정된 간격의 프레임을 전송하는 경우, 상기 초점 깊이 정보의 부호화가 필요하다고 판단하고,
    상기 부호화부는,
    상기 첫번째 프레임을 전송하는 경우, 상기 참조정보와 상기 초점 깊이 정보를 포함하는 부가정보를 부호화하는
    부가정보 부호화 장치.
  9. 부호화된 부가정보를 복호화하는 복호화부; 및
    상기 부가정보에 포함된 참조정보를 분석해서 가상 참조한 칼라영상의 수, 가상 참조한 칼라영상의 리스트, 가상 참조한 깊이영상의 수 및 가상 참조한 깊이영상의 리스트를 확인하는 참조정보 분석부를 포함하는
    부가정보 복호화 장치.
  10. 제9항에 있어서,
    상기 부가정보에 시점정보가 포함되어 있으면, 영상이 시점을 확인하는 시점 확인부; 및
    상기 부가정보에 상기 시점정보가 포함되어 있으면, 상기 영상이 칼라영상인지 깊이영상인지 영상종류를 확인하는 영상종류 확인부를 더 포함하는
    부가정보 복호화 장치.
  11. 제10항에 있어서,
    상기 시점 확인부는,
    상기 시점 정보가 짝수이면 상기 시점 정보를 2로 나눈 값을 상기 영상의 시점으로 확인하고,
    상기 시점 정보가 홀수이면 2로 상기 시점 정보에서 1을 뺀후 2로 나눈 값을 상기 영상의 시점으로 확인하고,
    부가정보 복호화 장치.
  12. 제11항에 있어서,
    상기 영상종류 확인부는,
    상기 시점 정보가 짝수이면 영상종류를 칼라영상으로 확인하고,
    상기 시점 정보가 홀수이면 영상종류를 깊이영상으로 확인하는
    부가정보 복호화 장치.
  13. 제11항에 있어서,
    상기 영상종류 확인부는,
    상기 시점 정보가 짝수이면 영상종류를 깊이영상으로 확인하고,
    상기 시점 정보가 홀수이면 영상종류를 칼라영상으로 확인하는
    부가정보 복호화 장치.
  14. 제10항에 있어서,
    상기 시점 확인부는,
    상기 시점 정보에 포함된 시점 파라메터를 확인해서 상기 영상의 시점을 확인하고,
    상기 영상종류 확인부는,
    상기 시점 정보에 포함된 칼라영상과 깊이영상을 구분하는 플래그 정보를 확인해서 영상종류를 확인하는
    부가정보 복호화 장치.
  15. 제9항에 있어서,
    최근 초점 깊이를 저장하는 저장부; 및
    상기 부가정보에 초점 깊이 정보가 포함되어 있으면, 상기 초점 깊이 정보를 이용해서 디스플레이 화면의 초점 깊이를 확인하고 상기 저장부에 상기 최근 초점 깊이로 저장하고, 상기 부가정보에 초점 깊이 정보가 포함되어 있지 않으면, 상기 저장부에서 상기 최근 초점 깊이를 상기 영상의 초점 깊이로 확인하는 초점 깊이 확인부를 더 포함하는
    부가정보 복호화 장치.
  16. 영상을 부호화하는데 가상 참조한 칼라영상과 가상 참조한 깊이영상을 확인하는 단계;
    상기 가상 참조한 칼라영상의 수, 상기 가상 참조한 칼라영상의 리스트, 상기 가상 참조한 깊이영상의 수 및 상기 가상 참조한 깊이영상의 리스트를 포함하는 참조정보를 생성하는 단계;
    상기 영상의 시점을 확인하는 단계;
    상기 영상이 칼라영상인지 깊이영상 인지 영상종류를 확인하는 단계;
    상기 영상종류를 포함하는 시점정보를 생성하는 단계; 및
    상기 시점정보와 상기 참조정보를 포함하는 부가정보를 부호화하는 단계를 포함하는
    부가정보 부호화 방법.
  17. 제16항에 있어서,
    업데이트된 초점 깊이 정보를 수신하는 단계를 더 포함하고,
    상기 부가정보를 부호화하는 단계는,
    상기 시점정보, 상기 참조정보 및 상기 업데이트된 초점 깊이 정보를 포함하는 부가정보를 부호화하는
    부가정보 부호화 방법.
  18. 부호화된 부가정보를 복호화하는 단계;
    상기 부가정보에 포함된 참조정보를 분석해서 가상 참조한 칼라영상의 수, 가상 참조한 칼라영상의 리스트, 가상 참조한 깊이영상의 수 및 가상 참조한 깊이영상의 리스트를 확인하는 단계;
    상기 부가정보에 시점정보가 포함되어 있으면, 영상이 시점을 확인하는 단계; 및
    상기 부가정보에 상기 시점정보가 포함되어 있으면, 상기 영상이 칼라영상인지 깊이영상인지 영상종류를 확인하는 단계를 포함하는
    부가정보 복호화 방법.
  19. 제18항에 있어서,
    상기 부가정보에 초점 깊이 정보가 포함되어 있으면, 상기 초점 깊이 정보를 이용해서 디스플레이 화면의 초점 깊이를 확인해서 최근 초점 깊이로 저장하는 단계; 및
    상기 부가정보에 초점 깊이 정보가 포함되어 있지 않으면, 저장된 상기 최근 초점 깊이를 상기 영상의 초점 깊이로 확인하는 단계를 더 포함하는
    부가정보 복호화 방법.
PCT/KR2011/010199 2011-11-22 2011-12-28 컬러 영상과 깊이 영상에 관한 부가정보를 부호화/복호화 하는 장치 및 방법 WO2013077493A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020110122409A KR20130056684A (ko) 2011-11-22 2011-11-22 컬러 영상과 깊이 영상에 관한 부가정보를 부호화/복호화 하는 장치 및 방법
KR10-2011-0122409 2011-11-22

Publications (1)

Publication Number Publication Date
WO2013077493A1 true WO2013077493A1 (ko) 2013-05-30

Family

ID=48469911

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2011/010199 WO2013077493A1 (ko) 2011-11-22 2011-12-28 컬러 영상과 깊이 영상에 관한 부가정보를 부호화/복호화 하는 장치 및 방법

Country Status (2)

Country Link
KR (1) KR20130056684A (ko)
WO (1) WO2013077493A1 (ko)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100780840B1 (ko) * 2006-06-14 2007-11-29 광주과학기술원 다시점 동영상의 계층적 깊이 영상 부호화를 위한 시간적예측 장치 및 방법
KR20100066304A (ko) * 2008-12-08 2010-06-17 한국전자통신연구원 다시점 영상 부호화, 복호화 방법 및 그 장치.
KR20110106708A (ko) * 2010-03-23 2011-09-29 한국전자통신연구원 영상 시스템에서 영상 디스플레이 장치 및 방법

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100780840B1 (ko) * 2006-06-14 2007-11-29 광주과학기술원 다시점 동영상의 계층적 깊이 영상 부호화를 위한 시간적예측 장치 및 방법
KR20100066304A (ko) * 2008-12-08 2010-06-17 한국전자통신연구원 다시점 영상 부호화, 복호화 방법 및 그 장치.
KR20110106708A (ko) * 2010-03-23 2011-09-29 한국전자통신연구원 영상 시스템에서 영상 디스플레이 장치 및 방법

Also Published As

Publication number Publication date
KR20130056684A (ko) 2013-05-30

Similar Documents

Publication Publication Date Title
WO2010074437A2 (en) Image processing method and apparatus therefor
WO2010101362A2 (en) Metadata generating method and apparatus and image processing method and apparatus using metadata
WO2011105812A2 (ko) 휴대용 단말기에서 입체 영상 데이터를 생성하기 위한 장치 및 방법
WO2014010935A1 (ko) 비디오 신호 처리 방법 및 장치
WO2011155698A2 (ko) 입체 영상 오류 개선 방법 및 장치
CA2745392C (en) Method for 3d image signal processing and image display for implementing the same
WO2011155697A2 (ko) 깊이 맵 정보를 이용한 입체 영상 변환 방법 및 장치
WO2010068020A9 (ko) 다시점 영상 부호화, 복호화 방법 및 그 장치
WO2009157707A2 (en) Image processing method and apparatus
WO2010087589A2 (ko) 경계 인트라 코딩을 이용한 비디오 신호 처리 방법 및 장치
WO2009157701A2 (en) Image generating method and apparatus and image processing method and apparatus
WO2012064010A4 (en) Image conversion apparatus and display apparatus and methods using the same
WO2011002141A1 (en) Method of processing data for 3d images and audio/video system
WO2009157710A2 (en) Image processing method and apparatus
WO2012157886A2 (en) Apparatus and method for converting 2d content into 3d content, and computer-readable storage medium thereof
WO2010076988A2 (en) Image data obtaining method and apparatus therefor
WO2010090462A2 (en) Apparatus and method for encoding and decoding multi-view image
WO2012115435A2 (en) Method and apparatus for encoding and decoding multi view video
WO2013176485A1 (ko) 비디오 신호 처리 방법 및 장치
WO2014010918A1 (ko) 비디오 신호 처리 방법 및 장치
WO2013191436A1 (ko) 비디오 신호 처리 방법 및 장치
WO2012124994A2 (en) Method and apparatus for constructing and playing sensory effect media integration data files
WO2014058207A1 (ko) 다시점 비디오 신호의 인코딩 방법, 디코딩 방법 및 이에 대한 장치
WO2012057373A1 (ko) 입체방송을 위한 계층적 방송 시스템 및 방법
WO2013077493A1 (ko) 컬러 영상과 깊이 영상에 관한 부가정보를 부호화/복호화 하는 장치 및 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11876387

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 11876387

Country of ref document: EP

Kind code of ref document: A1