TW201225636A - Image data transmission device, image data transmission method, image data reception device, and image data reception method - Google Patents

Image data transmission device, image data transmission method, image data reception device, and image data reception method Download PDF

Info

Publication number
TW201225636A
TW201225636A TW100141446A TW100141446A TW201225636A TW 201225636 A TW201225636 A TW 201225636A TW 100141446 A TW100141446 A TW 100141446A TW 100141446 A TW100141446 A TW 100141446A TW 201225636 A TW201225636 A TW 201225636A
Authority
TW
Taiwan
Prior art keywords
image data
information
display
data
stream
Prior art date
Application number
TW100141446A
Other languages
English (en)
Inventor
Ikuo Tsukagoshi
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of TW201225636A publication Critical patent/TW201225636A/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/161Encoding, multiplexing or demultiplexing different image signal components
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/30Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/50Supports for surgical instruments, e.g. articulated arms
    • A61B90/53Supports for surgical instruments, e.g. articulated arms connected to the surgeon's body, e.g. by a belt
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F21LIGHTING
    • F21LLIGHTING DEVICES OR SYSTEMS THEREOF, BEING PORTABLE OR SPECIALLY ADAPTED FOR TRANSPORTATION
    • F21L4/00Electric lighting devices with self-contained electric batteries or cells
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B25/00Eyepieces; Magnifying glasses
    • G02B25/002Magnifying glasses
    • G02B25/004Magnifying glasses having binocular arrangement
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B25/00Eyepieces; Magnifying glasses
    • G02B25/02Eyepieces; Magnifying glasses with means for illuminating object viewed
    • GPHYSICS
    • G02OPTICS
    • G02CSPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
    • G02C11/00Non-optical adjuncts; Attachment thereof
    • G02C11/04Illuminating means
    • GPHYSICS
    • G02OPTICS
    • G02CSPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
    • G02C7/00Optical parts
    • G02C7/02Lenses; Lens systems ; Methods of designing lenses
    • G02C7/08Auxiliary lenses; Arrangements for varying focal length
    • G02C7/088Lens systems mounted to spectacles
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/139Format conversion, e.g. of frame-rate or size
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178Metadata, e.g. disparity information
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00681Aspects not otherwise provided for
    • A61B2017/00734Aspects not otherwise provided for battery operated
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/30Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure
    • A61B2090/309Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure using white LEDs
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/50Supports for surgical instruments, e.g. articulated arms
    • A61B2090/502Headgear, e.g. helmet, spectacles
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F21LIGHTING
    • F21SNON-PORTABLE LIGHTING DEVICES; SYSTEMS THEREOF; VEHICLE LIGHTING DEVICES SPECIALLY ADAPTED FOR VEHICLE EXTERIORS
    • F21S9/00Lighting devices with a built-in power supply; Systems employing lighting devices with a built-in power supply
    • F21S9/02Lighting devices with a built-in power supply; Systems employing lighting devices with a built-in power supply the power supply being a battery or accumulator
    • F21S9/022Emergency lighting devices
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F21LIGHTING
    • F21WINDEXING SCHEME ASSOCIATED WITH SUBCLASSES F21K, F21L, F21S and F21V, RELATING TO USES OR APPLICATIONS OF LIGHTING DEVICES OR SYSTEMS
    • F21W2131/00Use or application of lighting devices or systems not provided for in codes F21W2102/00-F21W2121/00
    • F21W2131/20Lighting for medical use

Landscapes

  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Surgery (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Health & Medical Sciences (AREA)
  • Ophthalmology & Optometry (AREA)
  • Pathology (AREA)
  • Molecular Biology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Veterinary Medicine (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Library & Information Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Systems (AREA)

Description

201225636 六、發明說明: 【發明所屬之技術領域】 本發明係有關於影像資料送訊裝置、影像 法、影像資料收訊裝置及影像資料收訊方法, 於,從送訊側連同立體影像資料一倂發送出剪 收訊側係使用該剪裁資訊來進行影像資料的切 像收送訊系統中的影像資料送訊裝置等。 【先前技術】 例如,在專利文獻1中係提出了立體影像 電視播送電波之傳輸方式。該情況下,含有左 料及右眼用影像資料的立體影像資料係被發送 訊機中,會進行利用兩眼視差的立體影像顯示 圖3 8係圖示了,在利用兩眼視差之立體 ,於螢幕上的物件(物體)的左右像之顯示位置 影像(3D影像)之再生位置的關係。例如,在螢 示,關於左像La往右側偏移而右像Ra往左側 的物件A,由於左右視線是在螢幕面前就交叉 體影像的再生位置是在螢幕面的前方。DPa係 件A的水平方向之視差向量。 又,例如,在螢幕上如圖所示,關於左像 Rb是在同一位置而顯示的物件B,由於左右視 面上交叉,因此該立體影像的再生位置是在螢 後,例如,在螢幕上如圖所示,關於左像Lc 資料送訊方 尤其是有關 裁資訊,在 出處理的影 資料的使用 眼用影像資 ,於電視收 〇 影像顯示時 、與該立體 幕上如圖所 偏移而顯示 ,因此該立 表示關於物 Lb及右像 線是在螢幕 幕面上。然 往左側偏移 201225636 而右像Rc往右側偏移而顯示的物件c,由於左右視線是 在螢幕面之後才交叉,因此該立體影像的再生位置是在螢 幕面的後方。DPc係表示關於物件c的水平方向之視差向 量。 先前’作爲立體影像資料的傳輸格式,係有並肩式 (Side By Side)方式、上下倂排(Top & Bottoin)方式等,爲 人所知。例如’圖39(a)係圖示了並肩式方式,圖39(b)係 圖示了上下倂排方式。此處係圖示了 1920x1080之像素格 式的情形。 並肩式方式,係如圖39(a)所示,是在水平方向的前 半是傳輸左眼影像資料的像素資料,在水平方向的後半是 傳輸右眼影像資料的像素資料的方式。此方式的情況下, 左眼影像資料及右眼影像資料係分別爲,水平方向的像素 資料被抽掉1 /2,相對於原訊號而言,水平解析度係減半 〇 上下倂排方式,係如圖39(b)所示,是在垂直方向的 前半是傳輸左眼影像資料的各掃描線之資料,在垂直方向 的後半是傳輸左眼影像資料的各掃描線之資料的方式。該 方式的情況下,由於左眼影像資料及右眼影像資料的掃描 線被抽掉了 1 /2,對於原訊號而言垂直解析度係減半。 此處,簡單說明收訊側的顯示影像資料生成處理。圖 40(a)係槪略性圖示了,有關於1 920x 1 080之像素格式的2 維影像資料之處理。此時,在送訊側係每1 6 X 1 6區塊地進 行編碼,因此附加上由空白資料所成之8掃描線,變成 -6- 201225636 1 92 0像素xl 0 8 8掃描線的影像資料,然後進行編碼。 因此,在收訊側,係在解碼後,獲得1 9 2 0像素X 1 0 8 8 掃描線的影像資料。可是,由於其中8掃描線係爲空白資 料,因此基於視訊資料串流中所含之剪裁(cropping)資訊 ,進行含有實質影像資料的1 920像素χι〇 8〇掃描線的影像 資料之切出,生成2維電視收訊機(以下簡稱爲「2DTV」) 用的顯示用影像資料。 圖40(b)係槪略性圖示了,有關於1 920x1 080之像素 格式的並肩式方式的立體影像資料(3維影像資料)之處理 。此時也是’在送訊側係每16x16區塊地進行編碼,因此 附加上由空白資料所成之8掃描線,變成1 920像素Xl 〇8 8 掃描線的影像資料,然後進行編碼。 因此’在收訊側,係在解碼後,獲得1 9 2 0像素X 1 0 8 8 掃描線的影像資料。可是’由於其中8掃描線係爲空白資 料,因此基於視訊資料串流中所含之剪裁資訊,進行含有 實質影像資料的1 920像素X 1 080掃描線的影像資料之切出 。然後’該影像資料係被左右二分,分別實施尺度轉換處 理’生成立體電視收訊機(以下簡稱爲「3DTV」)用的左眼 及右眼之顯示用影像資料。 圖40(c)係槪略性圖示了,有關於1920χ1080之像素 格式的上下倂排方式的立體影像資料(3維影像資料)之處 理。此時也是’在送訊側係每1 6 X 1 6區塊地進行編碼,因 此附加上由空白資料所成之8掃描線,變成1 920像素χ 1 08 8掃描線的影像資料,然後進行編碼。 201225636 因此’在收訊側,係在解碼後,獲得1 920像素χ1〇88 掃描線的影像資料。可是,由於其中8掃描線係爲空白資 料’因此基於視訊資料串流中所含之剪裁資訊,進行含有 實質影像資料的1920像素X1080掃描線的影像資料之切出 。然後’該影像資料係被上下二分,分別實施尺度轉換處 理,生成3DTV用的左眼及右眼之顯示用影像資料。 [先前技術文獻] [專利文獻] [專利文獻1]日本特開2005-6 1 1 4號公報 【發明內容】_ [發明所欲解決之課題] 於2 DTV中,上述的並肩式方式、或上下倂排方式的 立體影像資料的情況下,將1 920像素xl 080掃描線的影像 資料予以切出而生成2DTV用的顯示用影像資料時,會變 成在左右或上下排列有相同影像的不自然之影像顯示。 於是,在2DTV中,爲了能夠避免該不自然的影像顯 示,而考慮將視訊資料串流中所含之剪裁資訊,變成用來 僅將左眼或右眼之一方,例如僅將左眼的影像資料予以切 出所需的資訊。此時’ 2DTV、3DTV的處理’係變成如下 〇 圖41(a)係槪略性圖示了 ’ 2DTV中的1920x1080之像 素格式的並肩式方式的立體影像資料(3維影像資料)時的 處理。在2DTV中,係在解碼後,獲得1920像素X1088掃 201225636 描線的影像資料’但其中8掃描線係爲空白資料。此時, 基於剪裁(cropping)資訊’含有實質影像資料的ι92〇像素 X 1 080掃描線的影像資料當中,進行96〇像素χ1〇8〇掃描 線的左眼影像資料之切出。然後,對該左眼影像資料實施 尺度轉換處理’生成2DTV用的顯示用影像資料。此時就 變成自然的影像顯示。 相對於此’圖41(b)係槪略性圖示了,3DTV中的 1920x1080之像素格式的並肩式方式的立體影像資料(3維 影像資料)時的處理。在3DTV中也是,係在解碼後,獲得 1 920像素X 1 088掃描線的影像資料,但其中8掃描線係爲 空白資料。此時’基於剪裁(cropping)資訊,含有實質影 像資料的1 920像素X1 〇80掃描線的影像資料當中,進行 960像素X 1 080掃描線的左眼影像資料之切出。 然後,對該左眼影像資料實施尺度轉換處理,生成 1 920像素X 1 08 8掃描線的影像資料。該影像資料,係和上 述的2D TV顯示用影像資料相同。在3DTV中,由於是並 肩式方式’因此該影像資料還會被左右二分,分別實施尺 度轉換處理,生成3DTV用的左眼及右眼之顯示用影像資 料。此時,左眼影像及右眼影像係爲,將1個影像做了左 右二分後的一方及另一方,因此無法進行正確的立體顯示 (3D顯示)。 圖42(a)係槪略性圖示了,2DTV中的1 920x1 080之像 素格式的上下倂排方式的立體影像資料(3維影像資料)時 的處理。在2DTV中,係在解碼後,獲得1 920像素X1088 201225636 掃描線的影像資料,但其中8掃描線係爲空白資料。此時 ’基於剪裁(cropping)資訊,含有實質影像資料的ι92〇像 素X 1 080掃描線的影像資料當中,進行1 920像素Μ”掃 描線的左眼影像資料之切出。然後,對該左眼影像資料實 施尺度轉換處理’生成2DTV用的顯示用影像資料。此時 ’會進行正確的二維影像(2D顯示)。 相對於此’圖42(b)係槪略性圖示了,3DTV中的 1920x1080之像素格式的上下併排方式的立體影像資料(3 維影像資料)的處理。在3DTV中也是,係在解碼後,獲得 1 920像素X 1 08 8掃描線的影像資料,但其中8掃描線係爲 空白資料。此時,基於剪裁(cropping)資訊,含有實質影 像資料的1920像素xl 0 8 0掃描線的影像資料當中,進行 1920像素χ540掃描線的左眼影像資料之切出。 然後,對該左眼影像資料實施尺度轉換處理,生成 1 92 0像素X 1 0 8 8掃描線的影像資料。該影像資料,係和上 述的2D TV顯示用影像資料相同。在3DTV中,由於是上 下倂排方式,因此該影像資料還會被上下二分,分別實施 尺度轉換處理,生成3 DTV用的左眼及右眼之顯示用影像 資料。此時,左眼影像及右眼影像係爲,將1個影像做了 上下二分後的一方及另一方,因此無法進行正確的立體顯 示(3 D顯示)。 本發明的目的在於,可在收訊側上使用剪裁資訊適切 地進行切出處理,而可正確地生成顯示用影像資料。 -10- 201225636 [用以解決課題之手段] 本發明的槪念係在於, 一種影像資料送訊裝置,其特徵爲,具備: 影像資料輸出部,係將具有左眼影像資料及右眼影像 資料的立體影像資料,予以輸出;和 送訊部,係發送多工化資料串流,其中所具有之資料 串流係爲,含有從上記影像資料輸出部所輸出的立體影像 資料,並在標頭部被插入有2維顯示用的第1剪裁資訊、 還有立體顯示用的第2剪裁資訊。 於本發明中,藉由影像資料輸出部而會輸出具有左眼 影像資料及右眼影像資料,且爲例如並肩式方式、或上下 倂排方式等的立體影像資料。然後,藉由送訊部而會發送 出多工化資料串流,其中所具有的資料串流(視訊元素串 流)係含有該立體影像資料。此時,在資料串流的標頭部 中,係被插入有2維顯示用的第1剪裁資訊、還有立體顯 示用的第2剪裁資訊。 如此,於本發明中,係在資料串流的標頭部中,插入 有2維顯示用的第1剪裁資訊、還有立體顯示用的第2剪 裁資訊,收訊側的3 DTV就可基於該剪裁資訊來進行影像 資料的切出處理。因此,收訊側的3DTV係可正確地生成 左眼及右眼的顯示用影像資料,可進行正確的立體顯示。 此外,於本發明中,例如,在第2剪裁資訊中係被附 加有,表示該第2剪裁資訊所致之剪裁狀態要持續到何時 爲止的資訊。此時,收訊側的3 DTV,係基於該資訊,就 201225636 可容易掌握第2剪裁資訊所致之剪裁狀態是持續到何時爲 止。例如’該資訊係表示,保持現狀直到下個第2剪裁資 訊出現爲止’或是,限定在目前的圖像中而定義等。 又’於本發明中,例如,送訊部係可在資料串流的上 位層中插入旗標資訊,其係用來表示,在該資料串流的標 頭部中是否有第2剪裁資訊存在。此時,例如,旗標資訊 係被插入在節目對映表的旗下。例如,旗標資訊係被當成 節目對映表的節目描述元而被插入。又,例如,旗標資訊 係被插入在節目對映表的視訊元素迴圈的旗下。此時,收 訊側的3 DTV係不必解析資料串流的標頭部,就能掌握第 2剪裁資訊是否存在。 又,本發明的另一槪念係在於, 一種影像資料收訊裝置,其係, 具備: 收訊部,係接收多工化資料串流,其中所具有之資料 串流係爲,含有具有左眼影像資料及右眼影像資料的立體 影像資料,且在標頭部中被插入有2維顯示用的第1剪裁 資訊、還有立體顯示用的第2剪裁資訊;和 影像資料處理部,係基於從已被上記收訊部所接收到 的多工化資料串流中所取得到的上記立體影像資料,來生 成左眼及右眼的顯示用影像資料; 上記影像資料處理部,係 基於上記資料串流的標頭部中所含之上記第2剪裁資 訊’來進行影像資料切出處理。 -12- 201225636 於本發明中,藉由收訊部,將具有資料串流的多工化 資料串流予以接收。該資料串流中係含有’具有左眼影像 資料及右眼影像資料,例如爲並肩式方式或上下倂排方式 等的立體影像資料。又,該資料串流中係被插入有,2維 顯示用的第1剪裁資訊,還有立體(3維)顯示用的第2剪 裁資訊。 藉由影像資料處理部,基於從已被收訊部所接收到的 多工化資料串流中所取得到的立體影像資料,而生成左眼 及右眼的顯示用影像資料。此時,在影像資料處理部中, 會基於資料串流中所含有的立體(3維)顯示用的第2剪裁 資訊,來進行影像資料的切出。 如此,於本發明中,係基於資料串流的標頭部中所被 插入的立體顯示用的第2剪裁資訊,來進行影像資料的切 出處理。因此,左眼及右眼的顯示用影像資料會被正確地 生成,可進行正確的立體顯示。 又’本發明的另一槪念係在於, 一種影像資料收訊裝置,其係, 具備: 收訊部’係接收多工化資料串流,其中所具有之資料 串流係爲’含有具有左眼影像資料及右眼影像資料的立體 影像資料’且在標頭部中被插入有2維顯示用之剪裁資訊 :和 影像資料處理部’係基於從已被上記收訊部所接收到 的多工化資料串流中所取得到的上記立體影像資料,來生 -13- 201225636 成左眼及右眼的顯示用影像資料; 上記影像資料處理部,係 將上記資料串流的標頭部中所含之上記2維 剪裁資訊,轉換成立體顯示用的剪裁資訊,基於 示用的剪裁資訊,來進行影像資料切出處理。 於本發明中,藉由收訊部,將具有資料串流 資料串流予以接收。該資料串流中係含有,具有 資料及右眼影像資料,例如爲並肩式方式或上下 等的立體影像資料。又,在該資料串流的標頭部 插入有2維顯示用的剪裁資訊。然後,藉由影像 部,基於從已被收訊部所接收到的多工化資料串 得到的立體影像資料,而生成左眼及右眼的顯示 料。 此時,在影像資料處理部中,資料串流中所 維顯示用的剪裁資訊會被轉換成立體顯示用的剪 基於該立體顯示用的剪裁資訊,來進行影像資料 藉此’左眼及右眼的顯示用影像資料會被正確地 進行正確的立體顯示》 又’本發明的另一槪念係在於, 一種影像資料收訊裝置,其係, 具備: 收訊部’係接收多工化資料串流,其中所具 串流係爲,含有具有左眼影像資料及右眼影像資 影像資料’且在標頭部中被插入有2維顯示用之 顯示用的 該立體顯 的多工化 左眼影像 倂排方式 中,係被 資料處理 流中所取 用影像資 含有的2 裁資訊, 的切出。 生成,可 有之資料 料的立體 剪裁資訊 -14- 201225636 :和 影像資料處理部,係基於從已被上記收訊部所接收到 的多工化資料串流中所取得到的上記立體影像資料,來生 成左眼及右眼的顯示用影像資料; 上記影像資料處理部,係 基於上記2維顯示用的剪裁資訊來進行影像資料切出 處理,以生成左眼或右眼之一方的顯示用影像資料; 基於根據上記2維顯示用的剪裁資訊而進行影像切出 處理後剩下的影像資料,來生成左眼或右眼之另一方的顯 示用影像資料。 於本發明中,藉由收訊部,將具有資料串流的多工化 資料串流予以接收。該資料串流中係含有,具有左眼影像 資料及右眼影像資料,例如爲並肩式方式或上下倂排方式 等的立體影像資料。又,在該資料串流的標頭部中,係被 插入有2維顯示用的剪裁資訊。然後,藉由影像資料處理 部,基於從已被收訊部所接收到的多工化資料串流中所取 得到的立體影像資料,而生成左眼及右眼的顯示用影像資 料。 此時,在影像資料處理部中,會基於資料串流中所含 有的2維顯示用的剪裁資訊,來進行影像資料的切出,生 成左眼或右眼之一方的顯示用影像資料。又,在該影像資 料處理部中,係基於根據上記2維顯示用的剪裁資訊而進 行影像切出處理後剩下的影像資料,來生成左眼或右眼之 另一方的顯示用影像資料。藉此,左眼及右眼的顯示用影 -15- 201225636 像資料會被正確地生成,可進行正確的立體顯示。 又,本發明的再另一槪念係在於, 一種影像資料送訊裝置,其係 具備: 影像資料輸出部,係將具有左眼影像資料及右眼影像 資料的立體影像資料,予以輸出;和 送訊部,係發送多工化資料串流,其中所具有之資料 串流係爲,含有從上記影像資料輸出部所輸出的立體影像 資料,並在標頭部中被插入有剪裁資訊; 上記送訊部,係 在上記資料串流的標頭部或上記資料串流的上位層中 ,插入用來識別上記剪裁資訊是2維影像用還是立體影像 用的識別資訊。 於本發明中,藉由影像資料輸出部而會輸出具有左眼 影像資料及右眼影像資料,且爲例如並肩式方式、或上下 倂排方式等的立體影像資料。然後,藉由送訊部而會發送 出多工化資料串流,其中所具有的資料串流(視訊元素串 流)係含有該立體影像資料。此時,在資料串流的標頭部 中係被插入有剪裁資訊。該剪裁資訊係爲2維影像用或立 體影像用的剪裁資訊。 藉由送訊部,在資料串流的標頭部或資料串流的上位 層中,會被插入用來識別剪裁資訊是2維影像用還是立體 影像用的識別資訊。此時,例如,在識別爲立體影像用的 識別資訊中亦可被附加有,一資訊用來表示剪裁資訊是左 -16- 201225636 眼影像資料的剪裁資訊還是右眼影像資料的剪裁資訊。例 如,識別資訊係被插入在節目對映表的旗下。例如,識別 資訊係被當成節目對映表的節目描述元而被插入。又,例 如,識別資訊係被插入在節目對映表的視訊元素迴圈的旗 下。 如此,於本發明中,係在資料串流的標頭部或資料串 流的上位層中,被插入有用來識別剪裁資訊是2維影像用 還是立體影像用的識別資訊,收訊側的3 D TV係可容易掌 握資料串流的標頭部中所含之剪裁資訊是2維影像用還是 立體影像用,可使用該剪裁資訊進行適切處理。 然後,在收訊側的3DTV中,若剪裁資訊是2維影像 用時,則基於該剪裁資訊來進行影像資料的切出處理,生 成左眼及右眼的顯示用影像資料。另一方面,在收訊側的 3DTV中,若剪裁資訊是立體影像用時,則例如,該剪裁 資訊會被轉換成2維影像用的剪裁資訊。然後,基於該立 體顯示用的剪裁資訊來進行影像資料的切出處理,生成左 眼及右眼的顯示用影像資料。藉此,左眼及右眼的顯示用 影像資料會被正確地生成,可進行正確的立體顯示。 此外,於本發明中,亦可例如,識別資訊係被插入在 資料串流的標頭部中,對識別資訊附加有,表示剪裁資訊 所致之剪裁狀態要持續到何時爲止的資訊。此時,收訊側 的3DTV,係基於該資訊,就可容易掌握剪裁資訊所致之 剪裁狀態是持續到何時爲止。例如,該資訊係表示,保持 現狀直到下個剪裁資訊出現爲止,或是,限定在目前的圖 -17- 201225636 像(picture)中等。 又,本發明的另一槪念係在於, 一種影像資料收訊裝置,其係, 具備: 收訊部,係接收多工化資料串流,其中所具有之資料 串流係爲,含有具有左眼影像資料及右眼影像資料的立體 影像資料,且在標頭部中被插入有立體顯示用的剪裁資訊 及上記立體影像資料的傳輸格式資訊;和 影像資料處理部,係基於從已被上記收訊部所接收到 的多工化資料串流中所取得到的上記立體影像資料,來生 成2維顯示用影像資料; 上記影像資料處理部,係 基於上記資料串流的標頭部中所含之上記立體顯示用 的剪裁資訊及上記立體影像資料的傳輸格式資訊,來進行 影像資料切出處理及尺度轉換處理。 於本發明中,藉由收訊部,將具有資料串流的多工化 資料串流予以接收。該資料串流中係含有,具有左眼影像 資料及右眼影像資料,例如爲並肩式方式或上下倂排方式 等的立體影像資料。又,在該資料串流的標頭部中係被插 入有’立體顯示用的剪裁資訊及立體影像資料的傳輸格式 資訊。然後,藉由影像資料處理部,基於從已被收訊部所 接收到的多工化資料串流中所取得到的立體影像資料,而 生成2維顯不用影像資料。 此情況下,在影像資料處理部上,基於資料串流的標 -18- 201225636 頭部中所含有之立體顯示用的剪裁資訊及立體影像資料的 傳輸格式資訊,而進行影像資料切出處理及尺度轉換處理 。亦即’基於該剪裁資訊及傳輸格式資訊,將立體影像資 料之一部分、例如左眼影像資料予以切出,對該切出的影 像資料實施符合傳輸格式之方向的尺度轉換處理。例如, 若爲並肩式方式則朝水平方向進行比例縮放,若爲上下倂 排方式則朝垂直方向進行比例縮放。藉此,就可正確地生 成2維顯示用影像資料,可進行正確的2維顯示。 [發明效果] 若依據本發明,則在收訊側中,可適切地進行影像資 料的切出處理,正確地生成左眼及右眼的顯示用影像資料 、或2維顯示影像資料,可進行正確的立體顯示。 【實施方式】 以下,說明用以實施發明的形態(以下稱作「實施形 態」)。此外,說明是按照以下順序進行。 1. 第1實施形態 2. 第2實施形態 3 ·第3實施形態 4·第4實施形態 5-第5實施形態 < 1 ·第1實施形態> -19- 201225636 [影像收送訊系統] 圖1係圖示,作爲第1實施形態的影像收送訊系統1 〇 的構成例。該影像收送訊系統10係由播送台100及收訊 機200所構成。播送台100,係將具有左眼影像資料及右 眼影像資料的立體(3維=3 D)影像資料加以含有的視訊資 料串流加以具有的傳輸串流(多工資料串流資料)TS,載於 播送波中而發送。該立體影像資料的傳輸格式,係有並肩 式(Side By Side)方式(參照圖39(a))、上下倂排(Top & Bottom)方式(參照圖39(b))等。 於此實施形態中,假設立體影像資料的像素格式係爲 1 920x 1 080。播送台100係對該立體影像資料,每16x16 區塊地進行編碼。因此,播送台100係會附加上由空白資 料所成之8掃描線,變成1 92 0像素X 1 0 8 8掃描線的影像資 料而進行編碼。 在視訊資料串流的標頭部中係被插入有2維(2D)顯示 用的剪裁(cropping)資訊,還有立體(3D)顯示用的剪裁資 訊。此處,2D顯示用的剪裁資訊係構成了第1剪裁資訊 ’ 3D顯示用的剪裁資訊係構成了第2剪裁資訊。此外, 於本實施形態中,視訊資料串流係爲例如 Η.264/A VC (Advanced Video Coding)串流。 在傳輸串流TS中,係在視訊資料串流的上位層裡被 插入有旗標資訊,用來表示3D顯示用的剪裁資訊是否有 被插入在視訊資料串流之標頭部。該旗標資訊係被插入在 ’例如,作爲節目特定資訊的節目對映表之旗下。具體而 -20- 201225636 言,例如’是在節目對映表的視訊元素迴圈之旗下、或是 作爲節目對映表的節目描述元,而被插入。 收訊機200’係將播送台1〇〇被裝載於播送波而被發 送過來的傳輸串流TS,加以接收。收訊機200係從所接 收到的傳輸串流TS中,取得並肩式方式(參照圖39(a))、 上下倂排方式(參照圖39(b))等的含有左眼影像資料及右 眼影像資料之立體影像資料》 如上述’在播送台100中由於是每16x16區塊地進行 編碼,因此會附加上由空白資料所成之8掃描線,變成 1 920像素X 1 0 8 8掃描線的影像資料,然後進行編碼。因此 ,作爲解碼後的立體影像資料,收訊機200係會取得有被 附加由空白資料所成之8掃描線而成的1 920像素xl 0 88掃 描線的影像資料。 若收訊機200不支援3D顯示、亦即是只能夠進行2D 顯示的電視收訊機(2DTV)時,則會使用視訊資料串流的標 頭部中所被插入的2D顯示用的剪裁資訊。亦即,收訊機 200係基於該2D顯示用的剪裁資訊,而從收訊立體影像 資料中’進行例如左眼影像資料的切出,生成2DTV用的 顯示用影像資料。 例如’並肩式方式的情況下,收訊機200係在含有實 質影像資料的192〇像素χΐ〇8〇掃描線的影像資料當中,切 出960像素X1 080掃描線的例如左眼影像資料。其後,收 訊機200係對該左眼影像資料實施尺度轉換處理,生成 2DTV用的1 920像素χ1 〇8〇掃描線的顯示用影像資料。 201225636 又’例如’上下倂排方式的情況下,收訊機2 〇 〇係在 含有實質影像資料的1920像素χΐ〇80掃描線的影像資料當 中’切出192〇像素χ540掃描線的例如左眼影像資料。其 後’收訊機200係對該左眼影像資料實施尺度轉換處理, 生成2DTV用的1920像素χΐ〇80掃描線的顯示用影像資料 〇 又’若收訊機200係爲可進行3D顯示的收訊機 (3 DTV)時,則根據傳輸串流TS的視訊資料串流的上位層 中所被插入的旗標資訊,掌握到3D顯示用的剪裁資訊有 被插入之事實。然後’收訊機2 00係會使用視訊資料串流 的標頭部中所被插入的3D顯示用的剪裁資訊。亦即,收 訊機200係基於該3D顯示用的剪裁資訊,而從收訊立體 影像資料中,進行含有實質影像資料的1 920像素xl 0 8 0掃 描線的影像資料之切出,生成3DTV用的左眼及右眼的顯 示用影像資料。 例如,並肩式方式的情況下,收訊機200係進行含有 實質影像資料的1 920像素xl 080掃描線的影像資料之切出 。其後,收訊機200係將該影像資料進行左右二分,分別 實施尺度轉換處理,生成3DTV用的1 920像素X1080掃描 線的左眼及右眼的顯示用影像資料。
又,例如,上下倂排方式的情況下,收訊機200係進 行含有實質影像資料的1 920像素X1 080掃描線的影像資料 之切出。其後,收訊機200係將該影像資料進行上下二分 ,分別實施尺度轉換處理,生成3DTV用的1 920像素X -22- 201225636 1 0 8 0掃描線的左眼及右眼的顯示用影像資料。 「送訊資料生成部之構成例」 圖2係圖示’於播送台100中’生成上述的傳輸串流 TS的送訊資料生成部11〇之構成例。該送訊資料生成部 1 1 0係具有:資料取出部(檔案庫部)丨i丨、視訊編碼器u 2 、音訊編碼器113、多工器114。 對資料取出部1 1 1,係有資料記錄媒體1 1 i a例如可自 由裝卸地被著裝。資料記錄媒體111a,係爲碟片狀記錄媒 體、半導體記憶體等。在該資料記錄媒體Ilia中,係除 了記錄有以傳輸串流TS所發送之所定節目的立體(3D)影 像資料’並且還記錄有對應於該立體影像資料的聲音資料 。立體影像資料’係具有左眼影像資料及右眼影像資料。 立體影像資料的傳輸格式,係例如有並肩式方式、上下倂 排方式等(參照圖39(a)、(b))。資料取出部1 1 1,係從資料 記錄媒體1 1 1 a中’取出立體影像資料及聲音資料而加以 輸出。 視訊編碼器112,係對於從資料取出部111所輸出的 立體影像資料,施以 H.264/AVC(Advanced Video Coding) 的編碼處理而獲得編碼視訊資料。又,該視訊編碼器1 1 2 係藉由後段具備的串流格式化器(未圖示),而生成含有該 編碼視訊資料的視訊元素串流(視訊資料串流)。 此時’視訊編碼器1 1 2係在該視訊資料串流的標頭部 中’插入2D顯示用的剪裁資訊(第1剪裁資訊),並且還 -23- 201225636 插入3D顯示用的剪裁資訊(第2剪裁資訊)。 圖3(a)、(b)係圖示了,視訊資料串流中的存取單元的 資料結構例。在H. 264中’是以所謂存取單元的單位,來 定義圖像。圖3(a)係表示GOP(Gr〇Up Of Pictures)的開頭 之存取單元的結構,圖3(b)係表示GOP的開頭以外之存 取單元的結構。 2D顯示用的剪裁資訊,係被插入至存取單元的 SPS(Sequence Parameter Set)的部分。圖 4 係圖示了,SPS 之中所被定義的剪裁資訊之結構(Syntax)。在該SPS之中 ,是以「frame_cropping_flag」的旗標資訊,來表示剪裁 資訊之有無存在。然後,剪裁資訊係爲指定,作爲影像資 料之切出領域的長方形領域用的資訊。 「frame_crop_left_offset」係表示水平方向的開始位 置、亦即左端位置。「frame_crop_right_offset」係表示水 平方向的結束位置、亦即右端位置。「frame_crop_top_offset 」係表示垂直方向的開始位置、亦即上端位置。「 frame_crop_bottom_offset」係表示垂直方向的結束位置、 亦即下端位置。這些均用從左上位置起算之偏置値來表示 〇 當影像資料是立體影像資料時,則在存取單元的SEIs 之部分中,會被插入「Frame Packing Arrangement SEI message」。該SEI中係含有,表示影像資料係爲哪種傳 輸格式之立體影像資料用的類型資訊。 又,於此實施形態中,在存取單元的SEIs之部分, -24- 201225636 新定義有「Stereo_Video_Cropping SEI」。然後,在該 SEI中係被插入有,3D顯示用的剪裁資訊。圖5係圖示了 ’ 「Stereo_Video_Cropping SEI」的結構例(Syntax)及其 主要資料規定內容(semantics)。 「stereo_video_cropping_id」之欄位,係爲用來識別「 Stereo_Video_Cropping SEI」的識別元。「temporal_r e p e t i t i ο η 」之1位元欄位,係爲表示該SEI中所含之3D顯示用的 剪裁資訊所致之剪裁狀態要持續到何時爲止的資訊。“1 ”係表示維持現狀直到下個「Stereo_Video_Cropping SEI j出現爲止。“ 0”係表示限定在目前的圖像(存取單元)裡 ,將狀態加以定義。 藉由該「temporal_repetition」之資訊,在收訊側中 就可容易掌握,該SEI中所含之3D顯示用的剪裁資訊所 致之剪裁狀態要持續到何時爲止。 該「Stereo_Video_Cropping SEI」中所含之 3D 顯示 用的剪裁資訊,係和上述的SPS中所含之2D顯示用的剪 裁資訊同樣地,係爲指定要作爲影像資料之切出領域的長 方形領域用的資訊。因此,3D顯示用的剪裁資訊的構成 ,係和2D顯示用的剪裁資訊的構成相同。 「frame_3D_left_offset」係表示水平方向的開始位置 、亦即左端位置。「frame_3D_right_offSet」係表示水平 方向的結束位置、亦即右端位置。「frame_3D_top_offset 」係表示垂直方向的開始位置、亦即上端位置。「 frame_3D_bottom_offset」係表示垂直方向的結束位置、 -25- 201225636 亦即下^丨立置。這些均用從左上位置起算之偏置値來表示 0 回到圖2 ’音訊編碼器丨1 3係對從資料取出部η丨所 輸出之聲音資料,實施MPEG-2 Audio AAC等之編碼,生 成音訊的元素串流(音訊資料串流)。多工器114係將視訊 編碼器112及音訊編碼器113所生成之個元素串流予以封 包化而進行多工,生成傳輸串流(多工化資料串流)T S。 此處’多工器1 1 4係在視訊資料串流的上位層裡,插 入旗標資訊’用來表示3D顯示用的剪裁資訊是否有被插 入在視訊資料串流之標頭部。於本實施形態中,該旗標資 訊係被插入在,例如,作爲節目特定資訊的節目對映表之 旗下。 圖6係圖示了,在節目對映表的視訊元素迴圏之旗下 被插入有旗標資訊時的傳輸串流TS之構成例。在該構成 例中’係含有視訊元素串流的PES封包「VideoPES」。 又,在傳輸串流TS中,作爲PSI(Program Specific Information),還含有 PMT(Program Map Table)。該 PSI 係用來表示,傳輸串流中所含之各元素串流是屬於哪個節 目的資訊。又,在傳輸串流中,作爲進行事件單位管理的 SI(Seiviced Information) ’ 含有 EIT(Event Information Table)。 PMT中係存在有’描述著關連於節目全體之資訊的節 目描述元(Program Descriptor)。又,在該PMT中係存在 有’具有各元素串流所關連之資訊的元素迴圈。在此構成 -26- 201225636 例中係存在有,視訊元素迴圈(Video ES loop)。 在該元素迴圈中,除了對每一串流配置了封包識別元 (PID)、串流類型(Stream_Type)等之資訊外,還配置有未 圖示的描述有該元素串流所關連之資訊的描述元。此外, 在此構成例中,爲了簡化圖面,關於音訊係省略其圖示。 在該構成例中,在視訊資料串流的標頭部裡新定義有 「Stereo_Video_Cropping SEI」,在該 SEI 中係如上述, 被插入有3D顯示用的剪裁資訊。然後,在此構成例中, 表示該SEI之存在、亦即3D顯示用的剪裁資訊之存在的 旗標資訊’係被插入在視訊元素迴圈(Video ES loop)中所 含之「AVC_video_descriptor」內。 圖7係圖示了,「AVC_video_descriptor」的結構例( Syntax)及其主要資料規定內容(semantics)。該描述元本身, 係已經被納入H.264/AVC的規格中。此處,係在該描述元裡 ’新疋義有「stereo_video_cropping一SEI_Not_present_flag 」的1位元之旗標資訊。 該旗標資訊係表示在視訊資料串流的標頭部中是否含 有「Stere〇_Video_Cropping SEI」,因而表示是否有被插 入3D顯示用的剪裁資訊。“ 〇”係表示含有該SEI,“ i ”係表示不含該SEI。 圖8係圖示了,作爲節目對映表的節目描述元而插入 旗標資訊時的傳輸串流TS之構成例。於此圖8中,關於 和圖6對應的部分.,係省略其說明。 在該構成例中,在視訊資料串流的標頭部裡新定義有 -27- 201225636 「Stereo — Video — Cropping SEI」,在該 SEI 中係如上述, 被插入有3D顯示用的剪裁資訊。然後,在此構成例中, 具有表示該SEI之存在、亦即3D顯示用的剪裁資訊之存 在的旗標資訊的、「Stereo_Video_cropping_descriptor」 的節目描述元,係被新增定義。 圖 9 係圖不 了, 「Stereo_Video_cropping_descriptor 」的結構例(Syntax)及其主要資料規定內容(semantics)。 「descriptor_tag」之8位元欄位,係表示此描述元係爲「 Stereo_Video_cropping_descriptor」° 「de scriptor」ength 」之8位元欄位,係表示之後的資料位元組數。 「stereo_video_cropping_SEI_Not_present_flag j , 係爲和上述的「AVC_video_descriptor」內所被新定義之 「stereo_video一cropping_SEI_Not_present_flag」相同的 1 位元之旗標資訊。該旗標資訊係表示在視訊資料串流的標 頭部中是否含有「Stereo_Video_Cropping SEI」,因而表 示是否有被插入3D顯示用的剪裁資訊。“0”係表示含有 該SEI, “ 1”係表示不含該SEI。 簡單說明圖2所示的送訊資料生成部1 1 0之動作。從 資料取出部111所輸出之立體(3D)影像資料,係被供給至 視訊編碼器1 1 2。在此視訊編碼器1 1 2中,係對該影像資 料,實施 H.264/AVC(Advanced Video Coding)的編碼,獲 得編碼視訊資料。又,在該視訊編碼器1 1 2中係藉由後段 具備的串流格式化器(未圖示),而生成含有該編碼視訊資 料的視訊元素串流(視訊資料串流)。 -28- 201225636 此時’在視訊編碼器1 1 2上,係在該視訊資料串流的 標頭部中’插入2D顯示用的剪裁資訊(第1剪裁資訊), 並且還插入3D顯示用的剪裁資訊(第2剪裁資訊)。2D顯 示用的剪裁資訊,係被插入至存取單元的SPS的部分。又 ’在存取單元的 SEIs 的部分,被新定義有 「 Stereo_Video_Cr〇pping SEI」,在該 SEI 中係被插入有 3D 顯示用的剪裁資訊。 又’當從資料取出部111如上述般地輸出立體影像資 料時’從該資料取出部111.也會輸出該影像資料所對應的 聲音資料。該聲音資料係被供給至音訊編碼器1丨3。在此 音訊編碼器113中,係對聲音資料,施以MPEG-2 Audio AAC等之編碼’生成含有編碼音訊資料的音訊元素串流( 音訊資料串流 視訊編碼器1 1 2所生成的視訊元素串流,係被供給至 多工器114。又,音訊編碼器113所生成的音訊元素串流 ’係被供給至多工器114。在多工器114中,從各編碼器 所供給之兀素串流係被封包化而被多工,生成傳輸串流( 多工化資料串流)TS。 此時,在多工器114上’係在視訊資料串流的上位層 裡插入旗標資訊,用來表示3D顯示用的剪裁資訊是否有 被插入在視訊資料串流之標頭部。該旗標資訊係被插入在 ,例如’作爲節目特定資訊的節目對映表之旗下。
如上述’在圖2所示的送訊資料生成部11〇中,係在 視訊編碼器1 1 2上,對視訊資料串流的標頭部,插入2D 5 -29- 201225636 顯示用的剪裁資訊、還有3D顯示用的剪裁資訊。因 收訊側的3DTV就可基於3D顯示用的剪裁資訊,來 影像資料的切出處理。因此,收訊側的3 D TV係可正 生成左眼及右眼的顯示用影像資料,可進行正確的立 示。 又’於圖2所示的送訊資料生成部110中,在多 114上,對資料串流的上位層插入了旗標資訊,用來 在該視訊資料串流的標頭部中是否有3D顯示用的剪 訊存在。因此,收訊側的3 D TV係不必解析視訊資料 的標頭部’就能掌握3D顯示用的剪裁資訊之有無存宅 「收訊機的構成例」 圖10係圖示了收訊機200的構成例。該收訊機 係爲可進行3D顯示的收訊機(3 DTV)。該收訊機200 有:CPU201、快閃ROM202 ' DRAM203 >內部匯流排 、遙控收訊部205、遙控送訊機206。 又,該收訊機200係具有:天線端子2 1 0、數位 器211、傳輸串流緩衝器(TS緩衝器)212、解多工器2 又,該收訊機200係具有:視訊解碼器214、顯示輸 衝器(BO緩衝器)215、3D訊號處理部216、檢視緩 217L,217R、音訊解碼器218、聲道處理部219。 CPU201,係控制收訊機 200各部的動作。 ROM202,係進行控制軟體之儲存及資料之保 DRAM 2 03,係構成CPU20 1之工作區域。CPU201, 此, 進行 確地 體顯 Hit 7K5X 工器 表示 裁資 串流 200 係具 204 選台 :13 ° 出緩 衝器 快閃 管。 係將 -30- 201225636 從快閃ROM202讀出之軟體或資料,展開於DRAM203上 而啓動軟體,控制收訊機20 0的各部。遙控器收訊部20 5 ,係將從遙控器送訊機206所發送來之遙控訊號(遙控碼) ,供給至CPU201。CPU201,係基於該遙控碼而控制著收 訊機200的各部。CPU201、快閃ROM202及DRAM203係 被連接至內部匯流排204。 天線端子210,係用來將收訊天線(未圖示)所接收到 的電視播送訊號加以輸入的端子。數位選台器211,係將 被天線端子210所輸入之電視播送訊號予以處理,將使用 者所選擇頻道所對應之所定的傳輸串流(位元串流資料)TS 予以輸出。傳輸串流緩衝器(TS緩衝器)2 12,係將從數位 選台器211所輸出的傳輸串流TS,予以暫時積存。 該傳輸串流TS係爲具有並肩式方式、上下併排方式 等之左眼影像資料及右眼影像資料的視訊資料串流。在該 視訊資料串流的標頭部中係被插入有2D顯示用的剪裁資 訊,並且還被插入有3D顯示用的剪裁資訊。此處,2D顯 示用的剪裁資訊,係被插入在存取單元的SPS的部分。又 ,在存取單元的SEIs的部分,在被新定義的r Stereo_Vide〇_Cr〇pping SEI」中’被插入有3D顯示用的 剪裁資訊。 又,在傳輸串流TS中,係在視訊資料串流的上位層裡,被插 入有旗標資訊(Stereo_video_cropping_SEI_Not_present_flg) 。該旗標資訊係表示’ 3D顯示用的剪裁資訊是否有被包 含在視訊資料串流的標頭部中。該旗標資訊係被插入在, -31 - 201225636 例如’作爲節目特定資訊的節目對映表之旗下。具體而言 ’例如,是被插入在節目對映表的視訊元素迴圏之旗下、 或是作爲節目對映表的節目描述元而被插入。 解多工器213,係從被暫時積存在TS緩衝器212中 的傳輸串流TS中,抽出視訊及音訊的各元素串流。又, 解多工器213係從傳輸串流TS中抽出節目對映表(PMT), 將該表格資訊供給至CPU201。 如上述,在該表格中係被插入有,用來表示3D顯示 用的剪裁資訊是否有被包含在視訊資料串流的標頭部中的 旗標資訊(Stereo_video_cropping —SEI_Not_present_flg)。 CPU201,係基於該旗標資訊,來掌握3D顯示用的剪裁資 訊是否有被包含在視訊資料串流的標頭部中。 視訊解碼器214係進行與上述送訊資料生成部110之 視訊編碼器1 1 2相反的處理。亦即,該視訊解碼器2丨4係 對已被解多工器2 1 3所抽出的視訊元素串流(視訊資料串 流)中所含之編碼影像資料,進行解碼處理,獲得已被解 碼之立體影像資料。 如上述’在播送台100的送訊資料生成部110中由於 是每16x16區塊地進彳了編碼,因此會附加上由空白資料所 成之8掃描線,變成1920像素χι〇88掃描線的影像資料, 然後進行編碼。因此’作爲解碼後的立體影像資料,視訊 解碼器214係會取得有被附加由空白資料所成之8掃描線 而成的192〇像素xl088掃描線的影像資料。 又’視訊解碼益2 1 4係將視訊資料串流的標頭資訊予 -32- 201225636 以抽出’將該標頭資訊供給至CPU201。此時,在存取單 元的SPS之部分,係含有2D顯示用的剪裁資訊。又,在 存取單元的SEIs的部分,在被新定義的「Stereo_Video_Cropping SEI」中’係含有3D顯示用的剪裁資訊。 D〇緩衝器215,係將已被視訊解碼器214所取得的 立體影像資料予以暫時積存。3D訊號處理部216,係從 DO緩衝器215中所積存的收訊立體影像資料,在CPU201 之控制下’基於3D顯示用的剪裁資訊,而進行含有實質 影像資料的1920像素χ1〇80掃描線的影像資料之切出。然 後’生成3DTV用的左眼顯示影像資料SL及右眼顯示影 像資料SR。 例如,3D訊號處理部216,係當並肩式方式的情況下 ’則如圖1 1所示,從1 92 0像素X 1 〇 8 0掃描線的影像資料 ’進行含有實質影像資料的1920像素X1080掃描線的影像 資料之切出。其後,3D訊號處理部216係將該影像資料 進行左右二分,分別實施水平方向的尺度轉換處理,生成 3DTV用的1 920像素xi〇8〇掃描線的左眼顯示影像資料SL 及右眼顯示影像資料SR。 又,3 D訊號處理部2 1 6,係當上下倂排方式的情況下 ,則如圖12所示,從1 920像素χ 1 080掃描線的影像資料 ’進行含有實質影像資料的1920像素Xl〇80掃描線的影像 資料之切出。其後’ 3D訊號處理部216係將該影像資料 進行上下二分’分別實施垂直方向的尺度轉換處理,生成 3D TV用的1920像素χι080掃描線的左眼顯示影像資料sl -33- 201225636 及右眼顯示影像資料SR。 回到圖1 0 ’檢視緩衝器2 1 7 L,係將3 D訊號處理部 216所生成的3DTV用的1 920像素xi 〇80掃描線的左眼顯 示影像資料SL予以暫時積存,並輸出至顯示器等之影像 輸出部。又,檢視緩衝器217R,係將3D訊號處理部216 所生成的3D TV用的1920像素X1080掃描線的右眼顯示影 像資料SR予以暫時積存,並輸出至顯示器等之影像輸出 部。 音訊解碼器218係進行與上述送訊資料生成部110之 音訊編碼器113相反的處理。亦即,該音訊解碼器218係 對已被解多工器213所抽出的音訊元素串流中所含之編碼 聲音資料’進行解碼處理,獲得已被解碼之聲音資料。聲 道處理部219’係對音訊解碼器218所獲得的聲音資料, 生成例如用來實現5 .1 ch環繞等所需的各聲道之聲音資料 SA’並輸出至揚聲器等之聲音輸出部。 簡單說明收訊機200之動作。已被輸入至天線端子 2 1 0的電視播送訊號係被供給至數位選台器2丨丨。在該數 位選台器211中,電視播送訊號會被處理,對應於使用者 選擇頻道的所定之傳輸串流TS會被輸出。該傳輸串流TS 係被暫時積存在TS緩衝器212中。 在解多工器213上,係從被暫時積存在TS緩衝器 212中的傳輸串流TS中,抽出視訊及音訊的各元素串流 。又’在解多工器213上,係從傳輸串流TS中抽出節目 對映表(PMT)。該表格資訊係被供給至CPU201。 -34- 201225636 在該表格中係含有,用來表示3D顯示用的剪裁資訊 是否有被包含在視訊資料串流的標頭部中的旗標資訊 (Stereo_video_cropping_SEI_Not_present_flg)。在 CPU201 上 ’係基於該旗標資訊,就可掌握3D顯示用的剪裁資訊是 否有被包含在視訊資料串流的標頭部中。 被解多工器213所抽出的視訊元素串流(視訊資料串 流)’係被供給至視訊解碼器2 1 4。在該視訊解碼器2 1 4上 ,係對已被解多工器213所抽出的視訊元素串流中所含之 編碼影像資料,進行解碼處理,獲得已被解碼之立體影像 資料。該立體影像資料係爲有被附加由空白資料所成之8 掃描線而成的1 920像素xl〇88掃描線的影像資料。該立體 影像資料係被暫時積存在DO緩衝器215中。 又,在視訊解碼器2 1 4上,視訊資料串流的標頭資訊 會被抽出,該標頭資訊係被供給至CPU201。此時,在 SPS的部分中係含有2D顯示用的剪裁資訊,又,在「 Stereo_Video_Cropping SEI」中係含有3D顯示用的剪裁 資訊。 在3D訊號處理部216上,係從DO緩衝器215中所 積存的收訊立體影像資料,在CPU201之控制下,基於3D 顯示用的剪裁資訊’而進行含有實質影像資料的1920像 素X 1 0 8 0掃描線的影像資料之切出。然後,在3 d訊號處 理部216中,係會生成3DTV用的1 920像素xl〇88掃描線 的左眼顯示影像資料SL及右眼顯示影像資料SR。3D訊 號處理部216所生成的3D TV用的顯示影像資料SL,SR, -35- 201225636 係分別透過檢視緩衝器217L, 217R而被輸出至顯示器等 之影像輸出部。 又,已被解多工器213所抽出的音訊元素串流,係被 供給至音訊解碼器218。在該音訊解碼器218上,對音訊 元素串流中所含之編碼聲音資料進行解碼處理,獲得已被 解碼之聲音資料。該聲音資料,係被供給至聲道處理部 219。在聲道處理部219上,係對該聲音資料,生成例如 用來實現5.1 ch環繞等所需的各聲道之聲音資料SA。該聲 音資料SA係被輸出至揚聲器等之聲音輸出部。 如上述,在圖10所示的收訊機200中,係在3D訊號 處理部216,基於視訊資料串流的標頭部中所被插入的3D 顯示用的剪裁資訊,來進行切出處理》亦即,在3D訊號 處理部216上,係從收訊立體影像資料中,進行含有實質 影像資料的1920像素X1080掃描線的影像資料之切出。因 此,左眼及右眼的顯示用影像資料會被正確地生成,可進 行正確的3 D顯示· 此外,圖13係圖示了,僅能2D顯示的電視收訊機 (2DTV)時的收訊機2 00的構成例。此處,爲了簡便,令其 爲收訊機200a。於圖13中,和圖10對應的部分係標示同 一符號,並適宜省略其詳細說明。 在此收訊機200 a中,在解多工器213上,係從被暫 時積存在TS緩衝器212中的傳輸串流TS中,抽出視訊及 音訊的各元素串流。又,在解多工器213上,係從傳輸串 流TS中抽出節目對映表(PMT)。該表格資訊係被供給至 -36- 201225636 CPU201 。 在該表格中係如上述,含有用來表示3D顯示用的剪 裁資訊是否有被包含在視訊資料串流的標頭部中的旗標資 訊(Stereo_video_cropping_SEI_Not_present_flg)。可是’ 在該收訊機200a中的CPU201上,該旗標資訊會被忽視。 在視訊解碼器214上,係對已被解多工器213所抽出 的視訊元素串流中所含之編碼影像資料,進行解碼處理, 獲得已被解碼之立體影像資料。該立體影像資料係爲有被 附加由空白資料所成之8掃描線而成的1 920像素xl 088掃 描線的影像資料。該立體影像資料係被暫時積存在DO緩 衝器215中。 又,在視訊解碼器2 1 4上,視訊資料串流的標頭資訊 會被抽出,該標頭資訊係被供給至CPU201。此時,在存 取單元的SPS的部分中係含有2D顯示用的剪裁資訊,又 ,在存取單元的 SEIs的部分裡被新定義之「 Stereo_Video_Cropping SEI」中係含有3D顯示用的剪裁 資訊。可是,在該收訊機200a中的CPU201上,3D顯示 用的剪裁資訊係被忽視。 於此收訊機20 0a中,上述的收訊機200的3D訊號處 理部216、檢視緩衝器217L,217R的部分,是由2D訊號 處理部221、檢視緩衝器222所構成。在2D訊號處理部 221上,係從DO緩衝器215中所積存的收訊立體影像資 料’在CPU201之控制下,基於2D顯示用的剪裁資訊, 而進行例如左眼影像資料之切出,生成2DTV用的顯示用 -37- 201225636 影像資料SV。 例如’並肩式方式的情況下,在2D訊號處理部22 1
中’係如圖1 1所示,在含有實質影像資料的1 920像素X 1080掃描線的影像資料當中,進行960像素X1080掃描線 的例如左眼影像資料之切出。然後,在2D訊號處理部 221上,係對該左眼影像資料實施尺度轉換處理,生成 2DTV用的1 920像素xl 080掃描線的顯示用影像資料SV 〇 又’例如’上下倂排方式的情況下,在2D訊號處理 部221中’係如圖12所示,在含有實質影像資料的1920 像素X1080掃描線的影像資料當中,進行1920像素x540 掃描線的例如左眼影像資料之切出。然後,在2D訊號處 理部221上’係對該左眼影像資料實施尺度轉換處理,生 成2DTV用的1 920像素χΐ 080掃描線的顯示用影像資料 SV。2D訊號處理部221所生成的2DTV用的顯示影像資 料SV ’係透過檢視緩衝器222而被輸出至顯示器等之影 像輸出部。 該收訊機200a的其他部分,係和圖10所示的收訊機 2 00同樣地構成’進行同樣的動作。在只能2D顯示的電 視收訊機(2DTV)的收訊機2〇〇a中,在2D訊號處理部221 上,基於視訊資料串流的標頭部中所被插入的2D顯示用 的剪裁資訊而進行切出處理,因此會正確地生成顯示用 影像資料,進行正確的2D顯示。 -38- 201225636 < 2.第2實施形態> [影像收送訊系統] 圖14係圖示,作爲第2實施形態的影像收送訊系統 10A的構成例。該影像收送訊系統i〇A係由播送台100A 及收訊機200A所構成。播送台100A,係將具有左眼影像 資料及右眼影像資料的立體(3維=3D)影像資料加以含有 的視訊資料串流加以具有的傳輸串流(多工資料串流資料 )TS,載於播送波中而發送。該立體影像資料的傳輸格式 ,係有並肩式(Side By Side)方式(參照圖39(a))、上下倂 排(Top & Bottom)方式(參照圖39(b))等。 於此第2實施形態中,假設立體影像資料的像素格式 係爲1 920x 1 080。播送台100A係對該立體影像資料,每 16x16區塊地進行編碼。因此,播送台100A係會附加上 由空白資料所成之8掃描線,變成1 920像素X1088掃描線 的影像資料而進行編碼。 視訊資料串流的標頭部中,係被插入有2維(2D)顯示 用的剪裁資訊。此時,與上述的第1實施形態不同,在視 訊資料串流的標頭部中,未被插入立體(3D)顯示用的剪裁 資訊。因此,在此第2實施形態中,係與上述的第1實施 形態不同,在視訊資料串流的上位層裡也並沒有插入旗標 資訊’用來表示3D顯示用的剪裁資訊是否有被插入在視 訊資料串流之標頭部。 收訊機200A,係將播送台100A被裝載於播送波而被 發送過來的傳輸串流TS,加以接收。收訊機200A係從所 -39- 201225636 接收到的傳輸串流TS中’取得並肩式方式(參照圖39(a)) 、上下倂排方式(參照圖39(b))等的含有左眼影像資料及 右眼影像資料之立體影像資料。 如上述,在播送台100A中由於是每16x16區塊地進 行編碼,因此會附加上由空白資料所成之8掃描線,變成 1 920像素xl 088掃描線的影像資料,然後進行編碼。因此 ,作爲解碼後的立體影像資料,收訊機2 0 0 A係會取得有 被附加由空白資料所成之8掃描線而成的1 920像素x1088 掃描線的影像資料。 若收訊機200A不支援3D顯示、亦即是只能夠進行 2D顯示的電視收訊機(2DTV)時,則會使用視訊資料串流 的標頭部中所被插入的2D顯示用的剪裁資訊。亦即,收; 訊機200A係基於該2D顯示用的剪裁資訊,而從收訊立 體影像資料中,進行例如左眼影像資料的切出,生成 2DTV用的顯示用影像資料。 例如,並肩式方式的情況下,收訊機200A係在含有 實質影像資料的1920像素X1080掃描線的影像資料當中, 切出960像素xl〇80掃描線的例如左眼影像資料。其後, 收訊機200A係對該左眼影像資料實施尺度轉換處理,生 成2DTV用的1 920像素xl 080掃描線的顯示用影像資料。 又’例如,上下倂排方式的情況下,收訊機200A係 在含有實質影像資料的1920像素X1080掃描線的影像資料 當中’切出1 9 2 0像素X 5 4 0掃描線的例如左眼影像資料。 其後’收訊機200A係對該左眼影像資料實施尺度轉換處 -40- 201225636 理’生成2DTV用的1920像素χΐ〇8〇掃描線的顯示用影像 資料。 又,若收訊機200A係爲可進行3D顯示的收訊機 (3DTV)時’則將視訊資料串流的標頭部中所被插Λ的2D 顯示用的剪裁資訊’轉換成3D顯示用的剪裁資訊。然後 ,該收訊機200 Α係基於該3D顯示用的剪裁資訊,而從 收訊立體影像資料中,進行含有實質影像資料的1920像 素xl080掃描線的影像資料之切出,生成3DTV用的左眼 及右眼的顯示用影像資料。 例如,並肩式方式的情況下,2D顯示用的剪裁資訊 係爲,在1 920像素xl 0 80掃描線的影像資料當中,用來指 定切出960像素X1 080掃描線的例如左眼影像資料所需的 長方形領域的資訊。收訊機200A,係將該2D顯示用的剪 裁資訊,轉換成用來指定將1 920像素χΙΟ 80掃描線的影像 資料之全體予以切出所需的長方形領域的資訊。 然後,收訊機200Α係基於轉換後的3D顯示用的剪 裁資訊,來進行1 920像素Χ 1 080掃描線的影像資料之切出 。其後,收訊機200Α係將該影像資料進行左右二分,分 別實施尺度轉換處理,生成3DTV用的1920像素xl〇8〇掃 描線的左眼及右眼的顯示用影像資料。 又,例如,並肩式方式的情況下,2D顯示用的剪裁 資訊係爲,在1 920像素xl 080掃描線的影像資料當中,用 來指定切出1 920像素χ54〇掃描線的例如左眼影像資料所 需的長方形領域的資訊。收訊機200Α,係將該2D顯示用 -41 - 201225636 的剪裁資訊,轉換成用來指定將1 920像素χ 1080掃描線的 影像資料之全體予以切出所需的長方形領域的資訊。 然後,收訊機200A係基於轉換後的3D顯示用的剪 裁資訊,來進行1 920像素X 1 080掃描線·的影像資料之切出 。其後,收訊機200A係將該影像資料進行上下二分,分 別實施尺度轉換處理,生成3DTV用的1920像素Xl〇80掃 描線的左眼及右眼的顯示用影像資料。 「送訊資料生成部之構成例」 圖15係圖示,於播送台100A中,生成上述的傳輸串 流TS的送訊資料生成部1 1 0A之構成例。該送訊資料生成 部110A係具有:資料取出部(檔案庫部)111、視訊編碼器 1 12A、音訊編碼器1 13、多工器1 14A。於此圖15中,和 圖2對應的部分係標示同一符號,並適宜省略其詳細說明 9 在視訊編碼器112A中,係對於從資料取出部ill所 輸出的立體影像資料,施以H.264/AVC(Ad vanced Video Coding)的編碼處理而獲得編碼視訊資料。又,在該視訊 編碼器112A中係藉由後段具備的串流格式化器(未圖示) ’而生成含有該編碼視訊資料的視訊元素串流(視訊資料 串流)。 此時’在視訊編碼器1 1 2 A中,在該視訊資料串流的 標頭部係被插入有2D顯示用的剪裁資訊(參照圖4)。只不 過’與圖2所示的送訊資料生成部11〇的視訊編碼器112 -42- 201225636 不同,不會進行3D顯示用的剪裁資訊的插入。圖16(a)、 (b)係圖示了該情況下’視訊資料串流中的存取單元的資料 結構。在H.264中,是以所謂存取單元的單位’來定義圖 像。圖16(a)係表示GOP(Group of Pictures)的開頭之存取 單元的資料結構,圖16(b)係表示GOP的開頭以外之存取 單元的結構。 2D顯示用的剪裁資訊’係與上述的圖3(a)、(b)所示 的存取單元的資料結構同樣地,被插入在存取單元的 SPS(Sequence Parameter Set)之部分。又,與上述圖 3(a) 、(b)所示的存取單元的資料結構不同,在存取單元的 SEIs 之部分中並未定義「Stereo_Video_CroppingSEI」。 在多工器11 4A中,視訊編碼器11 2A及音訊編碼器 113所生成之個元素串流係被封包化而進行多工,生成傳 輸串流(多工化資料串流)TS。此外,在該多工器1 14A中 ,係與圖2所示的送訊資料生成部110的多工器114不同 ’不會在視訊資料串流的上位層裡插入旗標資訊用來表示 3D顯示用的剪裁資訊是否有被插入在視訊資料串流之標 頭部。 圖1 5所示的送訊資料生成部1 1 〇 a的其他部分,係和 圖2所示的送訊資料生成部110同樣構成,進行同樣動作 。於該圖15所示的送訊資料生成部110A中,在多工器 114A上’係生成如以下的傳輸串流(多工化資料串流)TS 。亦即’會生成傳輸串流TS,其中所具有之視訊資料串 流係爲’含有具有左眼影像資料及右眼影像資料的立體影 -43- 201225636 像資料,且在標頭部中被插入有2維顯示用之剪裁資訊。 「收訊機的構成例」 圖17係圖示了收訊機200A的構成例。該收訊機 2〇〇 A係爲可進行3D顯示的收訊機(3 DTV)。於此圖1 7中 ’和圖1〇對應的部分係標示同一符號,並適宜省略其詳 細說明。 在視訊解碼器214上,係對已被解多工器213所抽出 的視訊元素串流(視訊資料串流)中所含之編碼影像資料, 進行解碼處理,獲得已被解碼之立體影像資料。該立體影 像資料係爲有被附加由空白資料所成之8掃描線而成的 1 920像素X 1 0 8 8掃描線的影像資料。該立體影像資料係被 暫時積存在DO緩衝器215中。 又’在視訊解碼器214上,視訊資料串流的標頭資訊 會被抽出,該標頭資訊係被供給至CPU201。此時,在存 取單元的SPS之部分,係含有2D顯示用的剪裁資訊。基 於該2D顯示用的剪裁資訊,來控制後述的3D訊號處理 部21 6A中的影像資料切出處理。 在CPU201中,2D顯示用的剪裁資訊係被轉換成3D 顯示用的剪裁資訊。例如,立體影像資料的傳輸格式是並肩 式方式時,係爲表示水平方向的結束位置、亦即右端位置的 「frame_crop_right_offset」之値的2倍。又,例如,立體 影像資料的傳輸格式是上下倂排方式時,係爲表示垂直方向 的結束位置、亦即下端位置的「frame_crop_bottom_offset -44- 201225636 」之値的2倍。 在3D訊號處理部216A上,係從DO緩衝器215中所 積存的收訊立體影像資料,基於轉換後的3D顯示用的剪 裁資訊’而進行含有實質影像資料的192〇像素χι〇80掃描 線的影像資料之切出。然後,生成3 DTV用的左眼顯示影 像資料SL及右眼顯示影像資料SR。 亦即’在3D訊號處理部21 6A上,係當並肩式方式 的情況下’則如圖18所示,從192〇像素χ1〇8〇掃描線的 影像資料’進行含有實質影像資料的192〇像素χ1〇8〇掃描 線的影像資料之切出。然後,在3D訊號處理部21 6Α上 ’該影像資料係被左右二分,分別實施水平方向的尺度轉 換處理,生成3D TV用的1920像素χΐ〇80掃描線的左眼顯 示影像資料SL及右眼顯示影像資料SR。 又’在3D訊號處理部21 6A上,係當上下倂排方式 的情況下’則如圖19所示,從1 920像素χΙΟ80掃描線的 影像資料’進行含有實質影像資料的1 920像素χ1080掃描 線的影像資料之切出。其後,在3D訊號處理部216Α上 ’該影像資料係被上下二分,分別實施垂直方向的尺度轉 換處理’生成3DTV用的1920像素xl〇80掃描線的左眼顯 示影像資料SL及右眼顯示影像資料SRo 圖17所示的收訊機2 00A的其他部分,係和圖10所 示的收訊機200同樣構成,進行同樣動作。該圖17所示 的收訊機200A中,被插入在視訊資料串流的標頭部中的 2D顯示用的剪裁資訊,係被轉換成3D顯示用的剪裁資訊 -45- 201225636 。然後,在3D訊號處理部216A上,基於該3D顯示 剪裁資訊,來進行切出處理。亦即,在3D訊號處 2 16A上,係從收訊立體影像資料中,進行含有實質 資料的1920像素xl 080掃描線的影像資料之切出。因 左眼及右眼的顯示用影像資料會被正確地生成,可進 確的3 D顯示。 此外,上述的圖13所示的收訊機200a中的2D 處理部221之處理,係和第1實施形態相同。亦即 2D訊號處理部221上,係從DO緩衝器215中所積存 訊立體影像資料,基於2D顯示用的剪裁資訊,而進 如左眼影像資料之切出,生成2DTV用的顯示用影像 SV。 例如,並肩式方式的情況下,在2 D訊號處理部 中,係如圖1 8所示,在1 9 2 0像素X 1 〇 8 0掃描線的影 料當中,進行960像素xl 080掃描線的例如左眼影像 之切出。然後,在2D訊號處理部221上,係對該左 像資料實施尺度轉換處理,生成2DTV用的1 920 f| 1080掃描線的顯示用影像資料SV。 又,例如,上下倂排方式的情況下,在2 D訊號 部221中,係如圖19所不’在1920像素χΐ〇8〇掃描 影像資料當中,進行1 9 2 0像素X 5 4 0掃描線的例如左 像資料之切出。然後,在2D訊號處理部22丨上,係 左眼影像資料實施尺度轉換處理,生成2DTV用的 像素X1080掃描線的顯示用影像資料SV。 用的 理部 影像 此, 行正 訊號 ,在 的收 行例 資料 22 1 像資 資料 眼影 艮素X 處理 線的 眼影 對該 1920 -46- 201225636 < 3.第3實施形態> [影像收送訊系統] 圖2 0係圖示,作爲第3實施形態的影.像收送訊系統 10B的構成例。該影像收送訊系統10B係由播送台100B 及收訊機200B所構成。播送台100B,係將具有左眼影像 資料及右眼影像資料的立體(3維=3D)影像資料加以含有 的視訊資料串流加以具有的傳輸串流(多工資料串流資料 )TS,載於播送波中而發送。該立體影像資料的傳輸格式 ,係有並肩式(Side By Side)方式(參照圖39(a))、上下倂 排(Top & Bottom)方式(參照圖39(b))等。 於此第3實施形態中,假設立體影像資料的像素格式 係爲1 920x1080。播送台100B係對該立體影像資料,每 16x16區塊地進行編碼。因此,播送台100B係會附加上 由空白資料所成之8掃描線,變成1 920像素χΐ〇88掃描線 的影像資料而進行編碼。 視訊資料串流的標頭部中,係被插入有2維(2D)顯示 用的剪裁資訊。此時,與上述的第2實施形態同樣地,在 視訊資料串流的標頭部中,未被插入立體(3D)顯示用的剪 裁資訊。因此,在此第3實施形態中,係與上述的第2實 施形態同樣地,在視訊資料串流的上位層裡也並沒有插入 旗標資訊用來表示3D顯示用的剪裁資訊是否有被插入在 視訊資料串流之標頭部。 收訊機20 0B,係將播送台100B被裝載於播送波而被 -47- 201225636 發送過來的傳輸串流TS ’加以接收。收訊機200B係從所 接收到的傳輸串流TS中’取得並肩式方式(參照圖39(a)) 、上下倂排方式(參照圖39(b))等的含有左眼影像資料及 右眼影像資料之立體影像資料。 如上述,在播送台100B中由於是每16x16區塊地進 行編碼,因此會附加上由空白資料所成之8掃描線,變成 1 920像素X 1 088掃描線的影像資料’然後進行編碼。因此 ,作爲解碼後的立體影像資料,收訊機200B係會取得有 被附加由空白資料所成之8掃描線而成的1920像素xl〇88 掃描線的影像資料。 右收訊機200B不支援3D顯示、亦即是只能夠進行 2D顯示的電視收訊機(2DTV)時,則會使用視訊資料串流 的標頭部中所被插入的2D顯示用的剪裁資訊。亦即,收 訊機200B係基於該2D顯示用的剪裁資訊,而從收訊立體 影像資料中’進行例如左眼影像資料的切出,生成2DTV 用的顯示用影像資料。 例如,並肩式方式的情況下,收訊機2 0 0 B係在含有 實質影像資料的192〇像素χ1〇80掃描線的影像資料當中, 切出960像素xl 0 80掃描線的例如左眼影像資料。其後, 收訊機200B係對該左眼影像資料實施尺度轉換處理,生 成2DTV用的1 920像素xi 〇80掃描線的顯示用影像資料。 又’例如’上下倂排方式的情況下,收訊機2〇〇B係 在含有實質影像資料的1 920像素xl〇80掃描線的影像資料 當中’切出1 920.像素x54〇掃描線的例如左眼影像資料。 -48- 201225636 其後,收訊機200B係對該左眼影像資料實施尺度轉換處 理,生成2DTV用的1 920像素Xl〇80掃描線的顯示用影像 資料。 又,若收訊機200B係爲可進行3D顯示的收訊機 (3DTV)時,則基於2D顯示用的剪裁資訊來進行影像資料 切出處理,生成左眼或右眼之一方、例如左眼的顯示用影 像資料。然後’收訊機200B係基於根據2D顯示用的剪裁 資訊而進行影像切出處理後剩下的影像資料,來生成左眼 或右眼之另一方的例如右眼的顯示用影像資料。 例如,並肩式方式的情況下,2D顯示用的剪裁資訊 係爲,在1920像素xl 080掃描線的影像資料當中,用來指 定切出960像素X1080掃描線的例如左眼影像資料所需的 長方形領域的資訊。收訊機200B係基於該2D顯示用的剪 裁資訊,在含有實質影像資料的1920像素X1080掃描線的 影像資料當中’切出960像素xl 080掃描線的例如左眼影 像資料。其後’收訊機200B係對該左眼影像資料實施水 平方向的尺度轉換處理,生成3DTV用的1920像素xl〇80 掃描線的左眼顯示用影像資料。 然後’收訊機200B係在1 920像素xl〇80掃描線的影 像資料當中’進行剩下的96 0像素X1 〇80掃描線的例如右 眼影像資料之切出。其後’對該右眼影像資料實施水平方 向的尺度轉換處理,生成3D TV用的1920像素X1080掃描 線的右眼顯示用影像資料。 又,例如,上下倂排方式的情況下,2 D顯示用的剪 -49- 201225636 裁資訊係爲,在1920像素χ1〇80掃描線的影像資料當中, 用來指定切出1 920像素X540掃描線的例如左眼影像資料 所需的長方形領域的資訊。收訊機200Β係基於該資訊, 在1920像素χ1080掃描線的影像資料當中,進行1920像 素Χ540掃描線的例如左眼影像資料之切出。其後,收訊機 200B係對該左眼影像資料實施垂直方向的尺度轉換處理 ,生成3DTV用的1 920像素X 1 080掃描線的左眼顯示用影 像資料。 然後,收訊機200B係在1920像素X1080掃描線的影 像資料當中,進行剩下的1 920像素χ540掃描線的例如右 眼影像資料之切出。其後,對該右眼影像資料實施垂直方 向的尺度轉換處理,生成3D TV用的1920像素X1080掃描 線的右眼顯示用影像資料。 「送訊資料生成部之構成例」 關於播送台100B中的生成上述的傳輸串流TS的送訊 資料生成部,係省越詳細說明,但是和上述第2實施形態 中的送訊資料生成部1 1 0A同樣地構成。 「收訊機的構成例」 圖21係圖示了收訊機200B的構成例。該收訊機 2〇〇B係爲可進行3D顯示的收訊機(3DTV)。於此圖21中 ’和圖1〇對應的部分係標示同一符號,並適宜省略其詳 細說明。 -50- 201225636 在視訊解碼器214上,係對已被解多工器213所抽出 的視訊元素串流(視訊資料串流)中所含之編碼影像資料, 進行解碼處理,獲得已被解碼之立體影像資料。該立體影 像資料係爲有被附加由空白資料所成之8掃描線而成的 1 920像素xl 〇88掃描線的影像資料。該立體影像資料係被 暫時積存在DO緩衝器215中。 又,在視訊解碼器214上,視訊資料串流的標頭資訊 會被抽出,該標頭資訊係被供給至CPU201。此時,在存 取單元的SPS之部分,係含有2D顯示用的剪裁資訊。基 於該2D顯示用的剪裁資訊,來控制後述的3D訊號處理 部216B中的影像資料切出處理。 在CPU201上,係基於2D顯示用的剪裁資訊,生成指定用 來切出剩餘影像資料所需之長方形領域的殘餘領域剪裁資訊。 例如,立體影像資料的傳輸格式是並肩式方式時,係爲表示水 平方向的結束位置、亦即右端位置的「frame_crop_right_offset 」之値的2倍.,成爲「alternative, _view_horizontal_edge」° 藉此,就會生成殘餘領域剪裁資訊。 該殘餘領域剪裁資訊,.係由「frame_crop_top_offset 」、「frame_crop_bottom_offset」、「frame_crop_right_offset + 1」、「alternative_view一horizontal — edge」戶斤構成 ° 「 frame_crop_right_〇ffset + 1」係表示水平方向的開始位置 、亦即左端位置。「alte.rnative_view_horizontal_edge」 係表示水平方向的結束位置,亦即右端位置。「 frame_crop_top_〇ffset」係表示垂直方向的開始位置、亦 -51 - 201225636 即上端位置。「frame_crop_bottom_offset」係表示垂直方 向的結束位置、亦即下端位置。這些均用從左上位置起算 之偏置値來表示。 又,例如,立體影像資料的傳輸格式是上下倂排方式 時,係爲表示垂直方向的結束位置、亦即下端位置的「 frame_crop_bottom_offset」之値的 2 倍,成爲「 alternative_view_vertical_edge」。藉此,就會生成殘餘 領域剪裁資訊。 該殘餘領域剪裁資訊,係由「frame_crop_bottom_offset + 1」、「alternative—vieW-VerticaLedge」、「frame_crop_left_offset 」' 「frame_crop_right_offset」所構成》「frame_crop_left_offset 」係表示水平方向的開始位置、亦即左端位置。「 frame^ropjightjffsetj係表示水平方向的結束位置,亦即 右端位置。「frame_crop_bottom_offset +1」係表示垂直方向 的開始位置、亦即上端位置。「alternative_view_vertical_edge 」係表示垂直方向的結束位置、亦即下端位置。這些均用 從左上位置起算之偏置値來表示。 在3D訊號處理部216B上,係基於2D顯示用的剪裁 資訊來進行影像資料的切出處理,生成左眼或右眼之一方 、例如左眼的顯示用影像資料。然後,在3 D訊號處理部 2 1 6B上,係基於殘餘領域剪裁資訊來進行影像資料的切 出處理,生成左眼或右眼之另一方、例如右眼的顯示用影 像資料。 例如,並肩式方式.的情況下,2D顯示用的剪裁資訊 -52- 201225636 係爲’在1 920像素Xl〇80掃描線的影像資料當中,用來指 定切出960像素XI 080掃描線的例如左眼影像資料所需的 長方形領域的資訊。在3D訊號處理部216B上,係如圖 22所示’基於該2D顯示用的剪裁資訊,而在1920像素X 1 080掃描線的影像資料當中,進行960像素χι 〇80掃描線 的例如左眼影像資料之切出。其後,在3 D訊號處理部 216B上,對該左眼影像資料實施水平方向的尺度轉換處 理,生成3DTV用的1920像素X1080掃描線的左眼顯示用 影像資料。 又’在3D訊號處理部21 6B上,係如圖22所示,基 於殘餘領域剪裁資訊,而在1 920像素X 1 0 80掃描線的影像 資料當中,進行剩餘的960像素X 1 08 0掃描線的例如右眼 影像資料之切出。其後,在3D訊號處理部216B上,對該 右眼影像資料實施水平方向的尺度轉換處理,生成3DTV 用的1 920像素χ1〇80掃描線的右眼顯示用影像資料。 又’例如,上下倂排方式的情況下,2D顯示用的剪 裁資訊係爲,在1 920像素xl〇80掃描線的影像資料當中, 用來指定切出1 920像素χ5 40掃描線的例如左眼影像資料 所需的長方形領域的資訊。在3D訊號處理部216B上,係 如圖23所示’基於2D顯示用的剪裁資訊,而在1920像 素X 1 080掃描線的影像資料當中,進行ι92〇像素χ540掃 描線的例如左眼影像資料之切出。其後,在3 D訊號處理 部2 1 6Β上’對該左眼影像資料實施垂直方向的尺度轉換 處理’生成3DTV用的1920像素xl〇80掃描線的左眼顯示 -53- 201225636 用影像資料。 然後,在3D訊號處理部216B上,係如圖23所示, 基於殘餘領域剪裁資訊’而在1920像素χι〇8〇掃描線的影 像資料當中’進行剩餘的1 920像素X5 40掃描線的例如右 眼影像資料之切出。其後,對該右眼影像資料實施垂直方 向的尺度轉換處理,生成3D TV用的1920像素χ1080掃描 線的右眼顯示用影像資料。 圖2 1所示的收訊機2 0 0 B的其他部分,係和圖1 〇所 示的收訊機200同樣構成,進行同樣動作。此時,在圖21 所示的收訊機200B中,係基於視訊資料串流中所含之2D 顯示用的剪裁資訊來進行影像資料的切出,生成左眼或右 眼之一方的顯示用影像資料。又,在該影像資料處理部中 ,係基於根據上記2維顯示用的剪裁資訊而進行影像切出 處理後剩下的影像資料,來生成左眼或右眼之另一方的顯 示用影像資料。因此,左眼及右眼的顯示用影像資料會被 正確地生成,可進行正確的立體顯示。 此外,上述的圖13所示的收訊機200a中的2D訊號 處理部221之處理,係和第2實施形態相同。亦即,在 2D訊號處理部221上,係從DO緩衝器215中所積存的收 訊立體影像資料,基於2D顯示用的剪裁資訊,而進行例 如左眼影像資料之切出,生成2DTV用的顯示用影像資料 SV。 例如’並肩式方式的情況下,在2D訊號處理部221 中’係如圖22所示,在1 920像素xl 0 80掃描線的影像資 -54- .201225636 料當中,進行9 6 0像素x 1 0 8 0掃描線的例如左眼影像資料 之切出。然後,在2D訊號處理部22 1上,係對該左眼影 像資料實施尺度轉換處理,生成2DTV用的1 920像素X 1 080掃描線的顯示用影像資料SV。 又,例如,上下倂排方式的情況下,在2 D訊號處理 部221中,係如圖23所示,在1 920像素xl 080掃描線的 影像資料當中,進行1 920像素χ5 40掃描線的例如左眼影 像資料之切出。然後,在2D訊號處理部221上,係對該 左眼影像資料實施尺度轉換處理,生成2DTV用的1920 像素xl 080掃描線的顯示用影像資料SV。 < 4.第4實施形態> [影像收送訊系統] 圖24係圖示,作爲第4實施形態的影像收送訊系統 10C的構成例。該影像收送訊系統10C係由播送台100C 及收訊機20 0C所構成。播送台10 0C,係將具有左眼影像 資料及右眼影像資料的立體(3維=3D)影像資料加以含有 的視訊資料串流加以具有的傳輸串流(多工資料串流資料 )TS,載於播送波中而發送。該立體影像資料的傳輸格式 ,係有並肩式方式(參照圖3 9 (a))、上下倂排方式(參照圖 39(b))等。 於此實施形態中’假設立體影像資料的像素格式係爲 1 920x1 080。播送台l〇〇C係對該立體影像資料,每16xl6 區塊地進行編碼。因此,播送台100C係會附加上由空白 -55- 201225636 資料所成之8掃描線’變成1 9 2 0像素x 1 〇 8 8掃描線的影像 資料而進行編碼。 在該視訊資料串流的標頭部中係被插入有2D影像用 的剪裁資訊、或是3D影像用的剪裁資訊。此處,2D影像 用的剪裁資訊,係爲指定用來切出含有實質影像資料的 1 920像素xl 0 8 0掃描線的影像資料所需之長方形領域的剪 裁資訊。又,3D影像用的剪裁資訊,係爲指定用來在 1 920像素xl 0 8 0掃描線的影像資料當中切出左眼影像資料 領域或右眼影像資料領域所需之長方形領域的剪裁資訊。 又,在該視訊資料串流的標頭部中係被插入有,用來識別 剪裁資訊是2D影像用還是3D影像用的識別資訊。此外 ,於本實施形態中,視訊資料串流係爲例如H.264/AVC( Advanced Video Coding)串流。 收訊機200C ’係將播送台l〇〇C被裝載於播送波而被 發送過來的傳輸串流TS,加以接收。收訊機200C係從所 接收到的傳輸串流TS中,取得並肩式方式(參照圖39(a)) 、上下倂排方式(參照圖39(b))等的含有左眼影像資料及 右眼影像資料之立體影像資料。 如上述,在播送台100C中由於是每16x16區塊地進 行編碼,因此會附加上由空白資料所成之8掃描線,變成 1 920像素xl 08 8掃描線的影像資料,然後進行編碼。因此 ’作爲解碼後的立體影像資料,收訊機200C係會取得有 被附加由空白資料所成之8掃描線而成的192〇像素χ1〇88 掃描線的影像資料。 -56- 201225636 若收訊機200C係爲可進行3D顯示的收訊機(3DTV) 時,則藉由隨著視訊資料串流的標頭部中所被插入的剪裁 資訊而被插入在該標頭部中的識別資訊,來掌握2D顯示 用還是3D顯示用。收訊機200C係基於該剪裁資訊,來從 收訊立體影像資料進行資料切出處理,生成3DTV用的左 眼及右眼的顯示用影像資料。 例如,剪裁資訊爲2D影像用 '且爲並肩式方式的情 況下,收訊機200C係基於該2D影像用的剪裁資訊,來進 行含有實質影像資料的1 920像素X 1 080掃描線的影像資料 之切出。其後,收訊機200C係將該影像資料進行左右二 分,分別實施水平方向的尺度轉換處理,生成3 DTV用的 1 920像素xl 0 8 0掃描線的左眼及右眼的顯示用影像資料。 又,例如,剪裁資訊爲2D影像用、且爲上下併排方 式的情況下,收訊機200C係基於該2D影像用的剪裁資訊 ’來進行含有實質影像資料的1920像素X 1 080掃描線的影 像資料之切出。其後,收訊機200C係將該影像資料進行 上下二分,分別實施垂直方向的尺度轉換處理,生成 3DTV用的1 920像素X1080掃描線的左眼及右眼的顯示用 影像資料。 又,例如,若剪裁資訊是3 D影像用時,則進行和上 述第2實施形態相同的處理(1 ),或是和上述第3實施形態 相同的處理(2),以生成3DTV用的1 920像素xl〇8〇掃描 線之左眼及右眼的顯示用影像資料。 -57- 201225636 「處理(1)」 例如,若收訊機200C係爲可進行3D顯示的收訊機 (3DTV)時,則將視訊資料串流的標頭部中所被插入的3D 影像用的剪裁資訊,轉換成2D影像用的剪裁資訊。然後 ,該收訊機200C係基於該2D影像用的剪裁資訊,而從收 訊立體影像資料中,進行1 920像素X 1 0 80掃描線的影像資 料之切出,生成3DTV用的左眼及右眼的顯示用影像資料 〇 例如,並肩式方式的情況下,3D影像用的剪裁資訊 係爲,在1 920像素xl 080掃描線的影像資料當中,用來指 定切出960像素X 1 080掃描線的例如左眼影像資料所需的 長方形領域的資訊。收訊機200C,係將該3D影像用的剪 裁資訊,轉換成用來指定將1 920像素χΙΟ 80掃描線的影像 資料之全體予以切出所需的長方形領域的2D影像用剪裁 資訊。 然後,收訊機200C係基於轉換後的2D影像用的剪裁 資訊,來進行含有實質影像資料之1 920像素xl 080掃描線 的影像資料之切出。其後,收訊機2 00C係將該影像資料 進行左右二分,分別實施尺度轉換處理,生成3DTV用的 1 920像素xl 080掃描線的左眼及右眼的顯示用影像資料。 又,例如,上下倂排方式的情況下,3 D影像用的剪 裁資訊係爲,在1 920像素X 1 080掃描線的影像資料當中, 用來指定切出1 920像素X540掃描線的例如左眼影像資料 所需的長方形領域的資訊。收訊機200C,係將該3D影像 -58- .201225636 用的剪裁資訊,轉換成用來指定將1 920像素xl 080掃描線 的影像資料之全體予以切出所需的長方形領域的2D影像 用剪裁資訊。 然後,收訊機20 0C係基於轉換後的2D影像用的剪裁 資訊,來進行含有實質影像資料之1 920像素xl〇80掃描線 的影像資料之切出。其後,收訊機200C係將該影像資料 進行上下二分,分別實施尺度轉換處理,生成3 DTV用的 1 920像素xl 0 80掃描線的左眼及右眼的顯示用影像資料。 「處理(2)」 若收訊機20 0C係爲可進行3D顯示的收訊機(3DTV) 時,則基於3 D影像用的剪裁資訊來進行影像資料切出處 理,生成左眼或右眼之一方、例如左眼的顯示用影像資料 。然後,收訊機200C係基於根據3D影像用的剪裁資訊而 進行影像切出處理後剩下的影像資料,來生成左眼或右眼 之另一方的例如右眼的顯示用影像資料。 例如,並肩式方式的情況下,3 D影像用的剪裁資訊 係爲,在1 920像素xl 0 8 0掃描線的影像資料當中,用來指 定切出960像素X 1 080掃描線的例如左眼影像資料所需的 長方形領域的資訊。收訊機200C係基於該資訊,在1920 像素X 1 080掃描線的影像資料當中,進行960像素χΐ〇80 掃描線的例如左眼影像資料之切出。其後,收訊機200C 係對該左眼影像資料實施水平方向的尺度轉換處理,生成 3DTV用的192〇像素X 1 0 80掃描線的左眼顯示用影像資料 -59- 201225636 然後,收訊機200C係在含有實質影像資料之1 92 0像 素xl 080掃描線的影像資料當中,進行剩下的96 0像素X 1 080掃描線的例如右眼影像資料之切出。其後,對該右眼 影像資料實施水平方向的尺度轉換處理,生成3 DTV用的 1 92 0像素X1080掃描線的右眼顯示用影像資料。 又,例如,上下併排方式的情況下,3 D影像用的剪 裁資訊係爲,在1 920像素xl 080掃描線的影像資料當中, 用來指定切出1 920像素χ5 40掃描線的例如左眼影像資料 所需的長方形領域的資訊。收訊機200C係基於該資訊, 在含有實質影像資料之1 920像素Χ 1 080掃描線的影像資料 當中,進行1 920像素Χ540掃描線的例如左眼影像資料之 切出。其後,收訊機200C係對該左眼影像資料實施垂直 方向的尺度轉換處理,生成3DTV用的1920像素xl〇80掃 描線的左眼顯示用影像資料。 然後,收訊機200C係在含有實質影像資料之1 92 0像 素xl〇80掃描線的影像資料當中,進行剩下的1 92 0像素X 5 40掃描線的例如右眼影像資料之切出。其後,對該右眼 影像資料實施垂直方向的尺度轉換處理,生成3 DTV用的 1 920像素xl 080掃描線的右眼顯示用影像資料。 「送訊資料生成部之構成例」 圖25係圖示,於播送台100C中,生成上述的傳輸串 流TS的送訊資料生成部1 1 0C之構成例。該送訊資料生成 -60- 201225636 部110C係具有:資料取出部(檔案庫部)111、視訊編碼器 112C、音訊編碼器113、多工器114C。於此圖25中,和 圖2對應的部分係標示同一符號,並適宜省略其詳細說明 〇 在視訊編碼器112C中,係對於從資料取出部111所 輸出的立體影像資料,施以H.264/AVC(Advanced Video Coding)的編碼處理而獲得編碼視訊資料。又,在該視訊 編碼器1 1 2C中係藉由後段具備的串流格式化器(未圖示) ,而生成含有該編碼視訊資料的視訊元素串流(視訊資料 串流)。 此時,在視訊編碼器1 1 2C中,在該視訊資料串流的 標頭部係被插入有,上述的2D影像用或3D影像用的剪 裁資訊(參照圖4)。又,在視訊編碼器1 12C上,係在該視 訊資料串流的標頭部中,插入用來識別剪裁資訊是2D影 像用還是3D影像用的識別資訊。 圖2 6(a)、(b)係圖示了,視訊資料串流中的存取單元 的資料結構。在H. 264中,是以所謂存取單元的單位,來 定義圖像。圖26(a)係表示GOP(Group Of Pictures)的開頭 之存取單元的結構’圖26(b)係表示GOP的開頭以外之存 取單元的結構。剪裁資訊,係被插入至存取單元的 SPS(Sequence Parameter .Set)的部分。
當影像資料是立體影像資料時,則在存取單元的SEIs 之部分中’會被插入「Frame Packing Arrangement SEI message」。該SEI中係含有,表示影像資料係爲哪種傳 -61 - 201225636 輸格式之立體影像資料用的類型資訊。 又,於此實施形態中,在存取單元的SEIs之部分,新 定義有「Cropping_Rectangle_Target SEI」。然後’在該 SEI中,插入用來識別剪裁資訊是2D影像用還是3D影像用 的識別資訊。圖 27 係圖示了「Cropping_Rectangle_Target SEI」的結構例(Syntax),圖28係圖示了其主要資料規定 內容(semantics)。 「Cropping_Rectangle_Target_id」之欄位,係爲用來 識別「Cropping_Rectangle_Target SEI」的識別元。「 temporal_repetition」之1位元欄位,係爲表示剪裁資訊 所致之剪裁狀態要持續到何時爲止的資訊。“ 1 ”係表示 維持現狀直到下個「Cr〇PPing_Rectangle_Target SEI」出 現爲止。“ 〇 ”係表示限定在目前的圖像(存取單元)裡,將 狀態加以定義。 「cropping_rectangle_target」之 2 位元欄位,係爲用 來識別剪裁資訊是2D影像用還是3 D影像用的識別資訊 。“ 00”係表示剪裁資訊是2D影像用。“ 01”係表示剪 裁資訊是3D影像用,而且其所指定的長方形領域是對應 於左眼資料領域。“ 1 〇”係表示剪裁資訊是3D影像用, 而且其所指定的長方形領域是對應於右眼資料領域。 在多工器114C中,視訊編碼器112C及音訊編碼器 1 1 3所生成之個元素串流係被封包化而進行多工,生成傳 輸串流(多工化資料串流)TS。此外,在該多工器114C中 ,係與圖2所示的送訊資料生成部110的多工器114不同 -62- .201225636 ’不會在視訊資料串流的上位層裡插入旗標資訊用來表示 3D顯示用的剪裁資訊是否有被插入在視訊資料串流之標 頭部。 圖25所示的送訊資料生成部n 〇c的其他部分,係和 圖2所示的送訊資料生成部丨丨〇同樣構成,進行同樣動作 。於該圖25所示的送訊資料生成部n 0C中,在多工器 1 14C上’係生成如以下的傳輸串流(多工化資料串流)TS。 亦即,會生成傳輸串流TS,其中所具有之視訊資料串流 係爲,含有具有左眼影像資料及右眼影像資料的立體影像 資料,且在標頭部中被插入有2D影像用或3D影像用的 剪裁資訊、和其識別資訊維顯示用之剪裁資訊。 如上述,於圖25所示的送訊資料生成部11 〇C中,在 視訊編碼器112C上,對視訊資料串流的標頭部插入用來. 識別剪裁資訊是2D影像用還是3D影像用的識別資訊, 收訊側的3 DTV係可容易掌握資料串流的標頭部中所含之 剪裁資訊是2D影像用還是3D影像用,可使用該剪裁資 訊進行適切處理。 「收訊機的構成例」 圖29係圖示了收訊機200C的構成例。該收訊機 200C係爲可進行3D顯示的收訊機(3D TV)。於此圖29中 ,和圖1 0對應的部分係標示同一符號’並適宜省略其詳 細說明。 在視訊解碼器214上’係對已被解多工器213所抽出 -63- 201225636 的視訊元素串流(視訊資料串流)中所含之編碼影像資料, 進行解碼處理,獲得已被解碼之立體影像資料》該立體影 像資料係爲有被附加由空白資料所成之8掃描線而成的 1 920像素Xl 〇88掃描線的影像資料。該立體影像資料係被 暫時積存在DO緩衝器215中。 又,在視訊解碼器2 1 4上,視訊資料串流的標頭資訊 會被抽出,該標頭資訊係被供給至CPU201。此時,在存 取單元的SPS之部分,係含有2D影像用或3D影像用的 剪裁資訊。又,存取單元的S Els之部分中所被新定義的 「Cropping_Rectangle_Target SEI」中,係被插入有用來 識別剪裁資訊是2D影像用還是3D影像用的識別資訊。 基於該剪裁資訊及識別資訊,來控制後述的3 D訊號 處理部216C中的影像資料切出處理。 當剪裁資訊是2D影像用時,在3D訊號處理部216C 上,係從DO緩衝器215中所積存的收訊立體影像資料, 基於2D影像用的剪裁資訊,而進行1920像素X1080掃描 線的影像資料之切出。然後,生成3 DTV用的左眼顯示影 像資料SL及右眼顯示影像資料SR。 亦即,在3D訊號處理部216C上,係當並肩式方式的 情況下,則如圖1 1所示’從1 920像素X 1 080掃描線的影 像資料,進行含有實質影像資料的1 920像素X 1 080掃描線 的影像資料之切出。其後’在3D訊號處理部21 6C上,該 影像資料係被左右二分’分別實施水平方向的尺度轉換處 理,生成3DTV用的1 920像素Xl 〇80掃描線的左眼顯示影 -64 - 201225636 像資料SL及右眼顯示影像資料SR。 又,在3D訊號處理部216C上,係當上下倂排方式的 情況下’則如圖1 2所示,從1 9 2 0像素X 1 〇 8 0掃描線的影 像資料’進行含有實質影像資料的1920像素χΐ〇80掃描線 的影像資料之切出。其後,在3D訊號處理部216上,該 影像資料係被上下二分’分別實施垂直方向的尺度轉換處 理’生成3DTV用的1 920像素X1080掃描線的左眼顯示影 像資料SL及右眼顯示影像資料SR。 又’當剪裁資訊是3D影像用時,在3D訊號處理部 2 16C上’係進行例如以下的處理(1)、或處理(2)。 「處理(1)」 在CPU201中,3D影像用的剪裁資訊係被轉換成2D影 像用的剪裁資訊。例如,立體影像資料的傳輸格式是並肩式 方式時’係爲表示水平方向的結束位置、亦即右端位置的「 frame_crop_right_offSet」之値的2倍。又,例如,立體影 像資料的傳輸格式是上下倂排方式時,係爲表示垂直方向的 結束位置、亦即下端位置的「frarne_crop_bottom_offset」 之値的2倍。 在3D訊號處理部216C上,係從DO緩衝器215中所 積存的收訊立體影像資料,基於轉換後的2D影像用的剪 裁資訊’而進行含有實質影像資料的1920像素xl〇80掃描 線的影像資料之切出。然後,生成3 DTV用的左眼顯示影 像資料SL及右眼顯示影像資料SR。 -65- 201225636 亦即,在3D訊號處理部216C上,係當並肩式方式的 情況下’則如圖1 8所示’從1 9 2 0像素X 1 〇 8 0掃描線的影 像資料,進行含有實質影像資料的1920像素xl〇80掃描線 的影像資料之切出。然後,在3D訊號處理部21 6C上,該 影像資料係被左右二分,分別實施水平方向的尺度轉換處 理’生成3DTV用的1 920像素χι 080掃描線的左眼顯示影 像資料SL及右眼顯示影像資料SR。 又,在3D訊號處理部216C上,係當上下倂排方式的 情況下’則如圖1 9所示’從1 92 0像素X 1 0 8 0掃描線的影 像資料,進行含有實質影像資料的1920像素χ1080掃描線 的影像資料之切出。其後,在3D訊號處理部216C上,該 影像資料係被上下二分,分別實施垂直方向的尺度轉換處 理’生成3D TV用的1920像素xi〇80掃描線的左眼顯示影 像資料S L及右眼顯示影像資料SR。 「處理(2)」 在CPU201上’係基於3D影像用的剪裁資訊,生成 指定用來切出剩餘影像資料所需之長方形領域的殘餘領域 剪裁資訊。在3D訊號處理部216C上,係基於3D影像用 的剪裁資訊來進行影像資料的切出處理,生成左眼或右眼 之一方、例如左眼的顯示用影像資料。然後,在3 D訊號 處理部2 1 6C上,係基於殘餘領域剪裁資訊來進行影像資 料的切出處理,生成左眼或右眼之另一方、例如右眼的顯 示用影像資料。 -66 - 201225636 例如,並肩式方式的情況下,3D影像用的剪裁資訊 係爲’在含有實質影像資料之1 920像素χ 1 080掃描線的影 像資料當中,用來指定切出960像素Xl〇80掃描線的例如 左眼影像資料所需的長方形領域的資訊。 在3D訊號處理部216C上,係如圖22所示,基於該 3D影像用的剪裁資訊,而在1 920像素X 1 080掃描線的影 像資料當中,進行960像素xl、080掃描線的例如左眼影像 資料之切出。其後,在3D訊號處理部216C上,對該左眼 影像資料實施水平方向的尺度轉換處理,生成3D TV用的 1 920像素xl 0 80掃描線的左眼顯示用影像資料。 又,在3D訊號處理部216C上,係如圖22所示,基 於殘餘領域剪裁資訊,而在1 920像素xl 080掃描線的影像 資料當中’進行剩餘的9 60像素χ 1 080掃描線的例如右眼 影像資料之切出。其後,在3D訊號處理部216C上,對該 右眼影像資料實施水平方向的尺度轉換處理,生成3DTV 用的1 920像素X1 〇80掃描線的右眼顯示用影像資料。 又’例如,,上下倂排方式的情況下,3 D影像用的剪 裁資訊係爲’在含有實質影像資料之1 920像素χ1080掃描 線的影像資料當中,用來指定切出1 920像素x540掃描線 的例如左眼影像資料所需的長方形領域的資訊。 在3D訊號處理部216C上,係如圖23所示,基於3D 影像用的剪裁資訊’而在1 920像素xl 080掃描線的影像資 料當中’進行1920像素X540掃描線的例如左眼影像資料 之切出。其後’在3D訊號處理部216C上,對該左眼影像 -67- 201225636 資料實施垂直方向的尺度轉換處理’生成3DTV用的1920 像素X1080掃描線的左眼顯示用影像資料。 然後,在3D訊號處理部216C上,係如圖23所示, 基於殘餘領域剪裁資訊’而在1 920像素〇8〇掃描線的影 像資料當中,進行剩餘的1 920像素X540掃描線的例如右 眼影像資料之切出。其後’對該右眼影像資料實施垂直方 向的尺度轉換處理,生成3DTV用的1 920像素X1080掃描 線的右眼顯示用影像資料。 圖29所示的收訊機200C的其他部分,係和圖10所 示的收訊機200同樣構成,進行同樣動作。在該圖29所 示的收訊機200C中,係基於視訊資料串流中所含之剪裁 資訊、和表示其爲2D影像用或3D影像用的識別資訊, 而適切定進行影像資料之切出。因此,左眼及右眼的顯示 用影像資料會被正確地生成,可進行正確的立體顯示。 此外,在上述第4實施形態中係例示了,將表示視訊 資料串流的標頭部中所被插入之剪裁資訊是2D影像用還 是3 D影像用的識別資訊,同樣地插入在視訊資料串流的 標頭部的例子。亦即,在此第4實施形態中,係新定義了 「Cropping_Rectangle_Target SEI」,並在其中含有識別 資訊。 可是,亦可考慮將該表示剪裁資訊是2D影像用還是 3 D影像用的識別資訊,插入在視訊資料串流的上位層裡 。例如,可考慮插入在節目對映表的旗下。 例如’表示剪裁資訊是2D影像用還是3D影像用的 •68- 201225636 識別資訊,係被插入在視訊元素迴圏(Video ES loop)中所 含之「AVC_video_descriptor」內。圖30係圖示了此情況 下的「AVC_vide〇-descriptor」的結構例(Syntax),圖 31 係圖不了其主要資料規定內容(semantics)。該描述元本身 ,係已經被納入Η. 2 6 4 / A V C的規格中。 此處,係在該描述元裡 ,「 cropping_rectangle_target」 之2位元欄位係被新增定義。此外,圖30所示的結構例,係 爲在上述的第1實施形態中的「AVC_video_descriptor」的結 構例(參照圖7)中,再追加該.2位元欄位的例子。只要是此第 4 實施形態,則不需要「stereo_video—cropping_SEI_Not_present_flag 」的1位元之旗標資訊。可是,例如,在第4實施形態中 ’也想定了與第1實施形態同樣地,還新定義了 「 Stereo_Video_Cropping SEI」的 SEI。此時,該 1 位元之 旗標資訊係爲有效。 「cropping_rectangle_target」之 2 位元欄位,係爲用 來識別剪裁資訊是2D影像用還是3D影像用的識別資訊 係表示剪裁資訊是2D影像用。“01”係表示剪 裁資訊是3D影像用,而且其所指定的長方形領域是對應 於左眼資料領域。“ 1 0”係表示剪裁資訊是3D影像用, 而且其所指定的長方形領域是對應於右眼資料領域。 又’例如,表示剪裁資訊是2D影像用還是3D影像 用的識別資訊,是被當成節目對映表的節目描述元而被插 入。此時,例如,新定義了持有該識別資訊的「 Stereo_Video_cropping_descriptor」。然後,在該描述元 -69- 201225636 裡,定義了「cropping_rectangle_target」之 2 位元欄位。 圖 32 係圖示了「Stereo_Video_cropping_descriptor」 的結構例(871^3乂)》「(16501^1〇1"_13£」之8位元欄位,係 表示此描述元係爲「Stereo_Video_cropping_descriptor」 。「descriptor_length」之8位元欄位,係表示之後的資 料位元組數。 此外,圖3 2所示的結構例,係爲在上述的第1實施形 態中的「Stereo_Video_cropping_descriptor」的結構例(參照 圖9)中’再追加「cropping_rectangle_target」之2位元欄 位的例子。只要是此第 4實施形態,則不需要r stereo_video_cropping_SEI_Not_present_flag」的 1 位元之 旗標資訊。可是’例如,在第4實施形態中,也想定了與第 1實施形態同樣地,還新定義了「Stereo_Video_Cropping SEI」的SEI。此時’該1位元之旗標資訊係爲有效。 「cropping_rectangle_target」之 2 位元欄位,係爲用 來識別剪裁資訊是2D影像用還是3D影像用的識別資訊 » “ 係表示剪裁資訊是2D影像用。“ 〇 1 ”係表示剪 裁資訊是3D影像用’而且其所指定的長方形領域是對應 於左眼資料領域。“ 10”係表示剪裁資訊是3D影像用, 而且其所指定的長方形領域是對應於右眼資料領域。 < 5 .第5實施形態> [影像收送訊系統] 圖3 3係圖示’作爲第5實施形態的影像收送訊系統 -70- 201225636 10D的構成例。該影.像收送訊系統1〇D係由播送台100D 及收訊機200D所構成。播送台iood,係將具有左眼影像 資料及右眼影像資料的立體(3維=3D)影像資料加以含有 的視訊資料串流加以具有的傳輸串流(多工資料串流資料 )TS ’載於播送波中而發送。該立體影像資料的傳輸格式 ’係有並肩式(Side By Side)方式(參照圖39(a))、上下倂 排(Top & Bottom)方式(參照圖39(b))等。 於此第5實施形態中,假設立體影像資料的像素格式 係爲1 920x 1 080。播送台1〇〇D係對該立體影像資料,每 16x16區塊地進行編碼。因此,播送台係會附加上 由空白資料所成之8掃描線,變成! 920像素χι〇88掃描線 的影像資料而進行編碼。視訊資料串流的標頭部中,係被 插入有立體(3D)顯示用的剪裁資訊。又,在該視訊資料串 流的標頭部中係被插入有’立體影像資料的傳輸格式資訊 收訊機200D,係將播送台100D被裝載於播送波而被 發送過來的傳輸串流TS,加以接收。收訊機200D係從所 接收到的傳輸串流TS中’取得並肩式方式(參照圖39(a)) 、上下倂排方式(參照圖39(b))等的含有左眼影像資料及 右眼影像資料之立體影像資料。 如上述,在播送台100D中由於是每16x16區塊地進 行編碼’因此會附加上由空白資料所成之8掃描線,變成 1 920像素χΐ 0 8 8掃描線的影像資料,然後進行編碼。因此 ’作爲解碼後的立體影像資料,收訊機200D係會取得有 -71 - 201225636 被附加由空白資料所成之8掃描線而成的1 920像素xl 088 掃描線的影像資料。 若收訊機200D不支援3D顯示、亦即是只能夠進行 2D顯示的電視收訊機(2DTV)時,則會基於視訊資料串流 的標頭部中所被插入的3 D顯示用的剪裁資訊及立體影像 資料的傳輸格式資訊,來進行影像資料切出處理及尺度轉 換處理。亦即’收訊機200D係基於該剪裁資訊及傳輸格 式資訊,而將立體影像資料之一部分、例如左眼影像資料 予以切出’對該切出的影像資料實施符合傳輸格式之方向 的尺度轉換處理’生成2DTV用的顯示用影像資料。 例如’並肩式方式的情況下,收訊機200D係在含有 實質影像資料的1 920像素xl 0 80掃描線的影像資料當中, 切出960像素xi 〇8〇掃描線的例如左眼影像資料。其後, 收訊機200D係對該左眼影像資料實施水平方向的尺度轉 換處理’生成2DTV用的1 920像素XI 〇80掃描線的顯示用 影像資料。 又’例如’上下倂排方式的情況下,收訊機2〇〇D係 在含有實質影像資料的1 920像素xl〇8〇掃描線的影像資料 當中,切出1 92 0像素x54〇掃描線的例如左眼影像資料。 其後,收訊機200D係對該左眼影像資料實施垂直方向的 尺度轉換處理,生成2DTV用的192〇像素χ1〇8〇掃描線的 顯示用影像資料。 又’若收訊機200D係爲可進行3D顯示的收訊機 (3 DTV)時,則基於視訊資料串流的標頭部中所被插入的 -72- 201225636 3D顯示用的剪裁資訊,而從收訊立體影像資料中,進行 含有實質影像資料的1 920像素xl 080掃描線的影像資料之 切出,生成3DTV用的左眼及右眼的顯示用影像資料。 例如’並肩式方式的情況下,收訊機200D係進行含 有實質影像資料的192〇像素xl 080掃描線的影像資料之切 出。其後’收訊機200係將該影像資料進行左右二分,分 別實施尺度轉換處理,生成3DTV用的1920像素><1()8〇掃 描線的左眼及右眼的顯示用影像資料。 又’例如,上下倂排方式的情況下,收訊機2〇〇d係 進丫了含有貫質影像資料的1920像素xl〇80掃描線的影像資 料之切出。其後’收訊機2 0 0係將該影像資料進行上下二 分,分別實施尺度轉換處理,生成3 DTV用的1 920像素X 1 0 8 0掃描線的左眼及右眼的顯示用影像資料。 「送訊資料生成部之構成例」 圖34係圖示’於播送台100D中,生成上述的傳輸串 流TS的送訊資料生成部1 1 0D之構成例。該送訊資料生成 部110D係具有:資料取出部(檔案庫部)111、視訊編碼器 112D、音訊編碼器113、多工器114D。於此圖34中,和 圖2對應的部分係標不同一符號,並適宜省略其詳細說明 〇 在視訊編碼器112D中’係對於從資料取出部111所 輸出的立體影像資料’施以H.264/AVC(Advanced Video Coding)的編碼處理而獲得編碼視訊資料。又,在該視訊 -73- 201225636 編碼器1 1 2D中係藉由後段具備的串流格式化器(未圖示) ,而生成含有該編碼視訊資料的視訊元素串流(視訊資料 串流)。 此時,在視訊編碼器1 1 2D中,在該視訊資料串流的 標頭部係被插入有3D顯示用的剪裁資訊(參照圖4)。3D 顯示用的剪裁資訊,係被插入至存取單元的SPS(SequenCe Parameter Set)的部分(參照圖16)。此外,在存取單元的 SEIs 之部分中,插入「Frame Packing Arrangement SEI message」(參照圖16)。該SEI中係含有,表示立體影像 資料係爲哪種傳輸格式之立體影像資料用的類型資訊(傳 輸格式資訊)。 在多工器114D中,視訊編碼器112D及音訊編碼器 113所生成之個元素串流係被封包化而進行多工,生成傳 輸串流(多工化資料串流)TS。 圖34所示的送訊資料生成部1 10D的其他部分,係和 圖2所示的送訊資料生成部1 1 0同樣構成,進行同樣動作 。於該圖34所示的送訊資料生成部11 0D中,在多工器 1 14A上,係生成如以下的傳輸串流(多工化資料串流)TS 。亦即,會生成傳輸串流TS,其中所具有之視訊資料串 流係爲,含有具有左眼影像資料及右眼影像資料的立體影 像資料,且在標頭部中被插入有3D顯示用的剪裁資訊。 「收訊機的構成例」 可3D顯示的收訊機(3DTV)的收訊機200D,此處雖然 •74- .201225636 未圖示’但係和圖10所示的收訊機2〇〇同樣地構成,同 樣地動作。但是,在3D訊號處理部216上,是基於存取 單兀的SPS(Sequence Parameter Set)之部分中所被插入的 3D顯示用的剪裁資訊’而進行含有實質影像資料的192〇 像素X 1 08 0掃描線的影像資料之切出。然後,生成3dtV 用的左眼顯示影像資料SL及右眼顯示影像資料SR。 亦即’在3D訊號處理部21 6D上,係當並肩式方式 的情況下,則如圖35所示,從1920像素xl〇80掃描線的 影像資料’進行含有實質影像資料的1920像素χ1080掃描 線的影像資料之切出。然後,在3D訊號處理部21 6D上 ’該影像資料係被左右二分,分別實施水平方向的尺度轉 換處理’生成3DTV用的1920像素xl〇80掃描線的左眼顯 示影像資料S L及右眼顯示影像資料SR。 又’在3D訊號處理部2 1 6D上,係當上下倂排方式 的情況下,則如圖36所示,從1 920像素χ 1 08 0掃描線的 影像資料,進行含有實質影像資料的1920像素xl080掃描 線的影像資料之切出。其後,在3D訊號處理部21 6D上 ,該影像資料係被上下二分,分別實施垂直方向的尺度轉 換處理’生成3D TV用的1920像素X1080掃描線的左眼顯 示影像資料SL及右眼顯示影像資料SR。 圖37係圖示了,可3D顯示之收訊機(3DTV)的收訊 機2 00D的構成例。於此圖37中,和圖13對應的部分係 標示同一符號,並適宜省略其詳細說明。 在視訊解碼器214上,係對已被解多工器213所抽出 -75- 201225636 的視訊兀素串流(視訊資料串流)中所含之編碼影像資料, 進行解碼處理’獲得已被解碼之立體影像資料。該立體影 像資料係爲有被附加由空白資料所成之8掃描線而成的 1 92 0像素X 1 〇 8 8掃描線的影像資料。該立體影像資料係被 暫時積存在DO緩衝器215中。 又’在視訊解碼器2 1 4上,視訊資料串流的標頭資訊 會被抽出,該標頭資訊係被供給至CPU201。此時,在存 取單元的SPS之部分’係含有3D顯示用的剪裁資訊及立 體影像資料的傳輸格式資訊。基於該剪裁資訊及傳輸格式 資訊,來控制後述的2D訊號處理部216D中的影像資料 切出處理。 在CPU201中,3D顯示用的剪裁資訊係被轉換成2D顯 示用的剪裁資訊。例如,立體影像資料的傳輸格式是並肩式 方式時,係爲表示水平方向的結束位置、亦即右端位置的「 frame_crop_right_offset」之値的1/2倍。又,例如,立體影 像資料的傳輸格式是上下併排方式時,係爲表示垂直方向的 結束位置、亦即下端位置的「frame_crop — bottom_offset」 之値的1/2倍。 在2D訊號處理部216D上,係從DO緩衝器215中所 積存的收訊立體影像資料,基於轉換後的2D顯示用的剪 裁資訊,而從DO緩衝器215中所積存的收訊立體影像資 料,進行例如左眼影像資料之切出’生成2DTV用的顯示 用影像資料SV。
例如,並肩式方式的情況下’在2D訊號處理部22 1 D •76- 201225636 中’係如圖35所示’在含有實質影像資料的1920像素χ 1 08 0掃描線的影像資料當中,進行96〇像素χ108〇掃描線 的例如左眼影像資料之切出。然後,在2 D訊號處理部 221D上’係對該左眼影像資料實施尺度轉換處理,生成 2DTV用的1 920像素χι〇80掃描線的顯示用影像資料SV 〇 又’例如’上下倂排方式的情況下,在2 D訊號處理 部221中,係如圖36所示,在含有實質影像資料的1920 像素Χ1080掃描線的影像資料當中,進行1920像素χ54〇 掃描線的例如左眼影像資料之切出。然後,在2D訊號處 理部221D上’係對該左眼影像資料實施尺度轉換處理, 生成2DTV用的1 920像素Xl 080掃描線的顯示用影像資料 SV。 圖37所示的收訊機20〇d的其他部分,係和圖13所 示的收訊機200同樣構成,進行同樣動作。於該圖37所 .示的收訊機200D中,係基於視訊資料串流的標頭部中所 含有之3D顯示用的剪裁資訊及立體影像資料的傳輸格式 資訊’而進行影像資料切出處理及尺度轉換處理。因此, 可正確地生成2維顯示用影像資料,可進行正確的2維顯 示。 [產業上利用之可能性] 本發明係可適用於,例如將並肩式方式、上下倂排方 式等之立體影像資料裝載於播送波而進行送訊的影像收送 -77- 201225636 訊系統。 【圖式簡單說明】 [圖1 ]本發明之第1實施形態的影像收送訊系統之構 成例的區塊圖。 [圖2]構成影像收送訊系統的播送台之送訊資料生成 部之構成例的區塊圖。 [圖3]視訊資料串流中的存取單元的資料結構例的圖 示。 [圖 4]存取單元的 SPS(Sequence Parameter Set)之中所 被定義的剪裁資訊之結構的圖示。 [圖 5 ]「Frame Packing Arrangement SEI」的結構例及 主要資料規定內容的圖示。 [圖6]在節目對映表的視訊元素迴圈之旗下插入旗標 資訊時的傳輸串流TS之構成例的圖示。 [圖 7]「AVC_video_desucriptor」的結構例及主要資 料規定內容的圖示。 [圖8]作爲節目對映表的節目描述元而插入旗標資訊 時的傳輸串流TS之構成例的圖示。 [圖 9]「Stereo_Video — cropping_descriptor」的結構例 及主要資料規定內容的圖示。 [圖10]構成影像收送訊系統的收訊機(3DTV)之構成例 的區塊圖。 [圖Π]第1實施形態中的收訊機之3D訊號處理部等 -78- 201225636 的處理(並肩式方式)的說明用圖。 [圖12]第1實施形態中的收訊機之3D訊號處理部等 的處理(上下倂排方式)的說明用圖。 [圖13]構成影像收送訊系統的收訊機(2DTV)之構成例 的區塊圖》 [圖14]本發明之第2實施形態的影像收送訊系統之構 成例的區塊圖。 [圖15]構成影像收送訊系統的播送台之送訊資料生成 部之構成例的區塊圖。 [圖1 6]視訊資料串流中的存取單元的資料結構例的圖 示。 [圖17]構成影像收送訊系統的收訊機(3DTV)之構成例 的區塊圖。 [圖18]第2實施形態中的收訊機之3D訊號處理部等 的處理(並肩式方式)的說明用圖。 [圖19]第2實施形態中的收訊機之3D訊號處理部等 的處理(上下倂排方式)的說明用圖。 [圖20]本發明之第3實施形態的影像收送訊系統之構 成例的區塊圖。 [圖21]構成影像收送訊系統的收訊機(3DTV)之構成例 的區塊圖。 [圖22]第3實施形態中的收訊機之3D訊號處理部等 的處理(並肩式方式)的說明用圖。 [圖23]第3實施形態中的收訊機之3D訊號處理部等 -79- 201225636 的處理(上下倂排方式)的說明用圖。 [圖24]本發明之第4實施形態的影像收送訊系統之構 成例的區塊圖。 [圖25]構成影像收送訊系統的播送台之送訊資料生成 部之構成例的區塊圖。 [圖26]視訊資料串流中的存取單元的資料結構例的圖 示。 [圖 27]「Cropping_Rectangle_Target SEI」之結構例 的圖示》 [圖 28]「Cropping_Rectangle_Target SEI」的主要資 料規定內容的圖示。 [圖29]構成影像收送訊系統的收訊機(3 DTV)之構成例 的區塊圖。 [圖30]表示剪裁資訊是2D影像用還是3D影像用的 識別資訊所插入的「AVC_video_desucriptor」之結構例的 圖示。 [圖 31]「AVC_video_desucriptor」的主要資料規定內 容的圖示。 [圖32]表示剪裁資訊是2D影像用還是3D影像用的 識別資訊所插入的「Stereo_Video_cropping_descriptor」 之結構例的圖示。 [圖33]本發明之第5實施形態的影像收送訊系統之構 成例的區塊圖》 [圖34]構成影像收送訊系統的播送台之送訊資料生成 -80- 201225636 部之構成例的區塊圖。 [圖35]第5實施形態中的收訊機之2D訊號處理部等 的處理(並肩式方式)的說明用圖° [圖36]第5實施形態中的收訊機之2D訊號處理部等 的處理(上下倂排方式)的說明用圖。 [圖37]構成影像收送訊系統的收訊機(2DTV)之構成例 的區塊圖。 [圖38]利用兩眼視差之立體影像顯示時,於螢幕上的 物件的左右像之顯示位置、與該立體像之再生位置的關係 的說明圖。 [圖39]立體影像資料的傳輸格式之一例(並肩式方式 、上下倂排方式等)的說明用圖。 [圖40]收訊側的顯示影像資料生成處理的說明用圖。 [圖41]使用先前之剪裁資訊的並肩式方式時的影像處 理的說明用圖。 [圖42]使用先前之剪裁資訊的上下併排方式時的影像 處理的說明用圖。 【主要元件符號說明】 10,10A〜10D :影像收送訊系統 1〇〇,100A 〜100D:播送台 11〇, 110A,ll〇c,ii〇D:送訊資料生成部 1 1 1 :資料取出部 1 1 1 a :資料記錄媒體 -81 - 201225636 112,112A, 112C,112D:視訊編碼器 1 13 :音訊編碼器
114,1 14A, 1 14C, 1 1 4D :多工器 200, 200A 〜200C:收訊機 201 : CPU
2 0 2 :快閃 R Ο Μ 2 03 : DRAM 2 0 4 :內部匯流排 2 05 :遙控收訊機 206 :遙控送訊機 2 1 0 :天線端子 2 1 1 :數位選台器 2 1 2 :傳輸串流緩衝器(TS緩衝器) 2 1 3 :解多工器 2 1 4 :視訊解碼器 215:顯示輸出緩衝器(DO緩衝器) 2 16, 2 1 6A~ 2 1 6C : 3D 訊號處理部 2 17L,2 17R :檢視緩衝器 2 1 8 :音訊解碼器 2 1 9 :聲道處理部 221,221D : 2D訊號處理部 222 :檢視緩衝器 -82-

Claims (1)

  1. 201225636 七、申請專利範園: 1. —種影像資料送訊裝置,其特徵爲,具備: 影像資料輸出部,係將具有左眼影像資料及右眼影像 資料的立體影像資料,予以輸出;和 送訊部,係發送多工化資料串流,其中所具有之資料 串流係爲,含有從上記影像資料輸出部所輸出的立體影像 資料’並在標頭部被插入有2維顯示用的第1剪裁資訊、 還有立體顯示用的第2剪裁資訊。 2. 如請求項1所記載之影像資料送訊裝置,其中, 上記送訊部,係 在上記資料串流的上位層中插入旗標資訊,其係用來 表不’上記第2剪裁資訊是否存在於上記資料串流的標頭 部中。 3 ·如請求項2所記載之影像資料送訊裝置,其中, 在上記多工化資料串流中係含有,用來表示該多工化 資料串流中所含之各元素串流是屬於哪個節目的、作爲節 目特定資訊的節目對映表; 上記送訊部,係將上記旗標資訊,插入至上記節目對 映表的旗下。 4 ·如請求項3所記載之影像資料送訊裝置,其中, 上記送訊部’係將上記旗標資訊,當作上記節目對映 表的節目描述元而予以插入。 5 .如請求項3所記載之影像資料送訊裝置,其中, 上記送訊部,係將上記旗標資訊,插入至上記節目對 -83- 201225636 映表的視訊元素迴圈的旗下。 6. 如請求項1所記載之影像資料送訊裝置’其中’ 上記第2剪裁資訊中係被附加有’表示該第2剪裁資 訊所致之剪裁狀態要持續到何時爲止的資訊。 7. —種影像資料送訊方法’其特徵爲’具備: 影像資料輸出步驟,係將具有左眼影像資料及右眼影 像資料的立體影像資料,予以輸出;和 送訊步驟,係發送多工化資料串流,其中所具有之資 料串流係爲,含有上記影像資料輸出步驟所輸出的立體影 像資料,並在標頭部被插入有2維顯示用的第1剪裁資訊 、還有立體顯示用的第2剪裁資訊》 8. —種影像資料收訊裝置,其特徵爲, 具備: 收訊部,係接收多工化資料串流,其中所具有之資料 串流係爲,含有具有左眼影像資料及右眼影像資料的立體 影像資料,且在標頭部中被插入有2維顯示用的第1剪裁 資訊、還有立體顯示用的第2剪裁資訊;和 影像資料處理部,係基於從已被上記收訊部所接收到 的多工化資料串流中所取得到的上記立體影像資料,來生 成左眼及右眼的顯示用影像資料:. 上記影像資料處理部,係 基於上記資料串流的標頭部中所含之上記第2剪裁資 訊,來進行影像資料切出處理。 9. 一種影像資料收訊方法,其特徵爲, -84- 201225636 具備: 收訊步驟,係接收多工化資料串流,其中所具有之資 料串流係爲,含有具有左眼影像資料及右眼影像資料的立 體影像資料,且在標頭部中被插入有2維顯示用的第1剪 裁資訊、還有立體顯示用的第2剪裁資訊;和 影像資料處理步驟,係基於從上記收訊步驟中所接收 到的多.工化資料串流中所取得到的上記立體影像資料,來 生成左眼及右眼的顯示用影像資料: 在上記影像資料處理步驟中,係 基於上記資料串流的標頭部中所含之上記第2剪裁資 訊,來進行影像資料切出處理。 10. —種影像資料收訊裝置,其特徵爲, 收訊部,係接收多工化資料串流,其中所具有之資料 串流係爲’含有具有左眼影像資料及右眼影像資料的立體 影像資料’且在標頭部中被插入有2維顯示用之剪裁資訊 :和 影像資料處理部,係基於從已被上記收訊部所接收到 的多工化資料串流中所取得到的上記立體影像資料,來生 成左眼及右眼的顯不用影像資料; 上記影像資料處理部,係 將上記資料串流的標頭部中所含之上記2維顯示用的 剪裁資訊’轉換成1L體顯Τρ:用的剪裁資訊’基於該立體顯 示用的剪裁資訊’來進行影像資料切出處理。 1 1 · 一種影像資料收訊方法,其特徵爲, -85- 201225636 具備·· 收訊步驟’係接收多工化資料串流,其中所具有之資 料串流係爲’含有具有左眼影像資料及右眼影像資料的立 體影像資料’且在標頭部中被插入有2維顯示用之剪裁資 訊;和 影像資料處理步驟,係基於從上記收訊步驟中所接收 到的多工化資料串流中所取得到的上記立體影像資料,來 生成左眼及右眼的顯示用影像資料; 在上記影像資料處理步驟中,係 將上記資料串流的標頭部中所含之上記2維顯示用的 剪裁資訊,轉換成立體顯示用的剪裁資訊,基於該立體顯 示用的剪裁資訊,從已被上記收訊部所接收到的上記多工 化資料串流所取得之上記立體影像資料中,進行影像資料 切出處理。 12. —種影像資料收訊裝置,其特徵爲, 具備: 收訊部’係接收多工化資料串流,其中所具有之資料 串流係爲’含有具有左眼影像資料及右眼影像資料的立體 影像資料,且在標頭部中被插入有2維顯示用之剪裁資訊 :和 影像資料處理部,係基於從已被上記收訊部所接收到 的多工化資料串流中所取得到的上記立體影像資料,來生 成左眼及右眼的顯示用影像資料; 上記影像資料處理部,係 -86- 201225636 基於上記2維顯示用的剪裁資訊來進行影像資料切出 處理’以生成左眼或右眼之一方的顯示用影像資料; 基於根據上記2維顯示用的剪裁資訊而進行影像切出 處理後剩下的影像資料,來生成左眼或右眼之另—方的顯 不用影像資料。 13· —種影像資料收訊方法,其特徵爲, 具備: 收訊步驟’係接收多工化資料串流,其中所具有之資 料串流係爲’含有具有左眼影像資料及右眼影像資料的立 體影像資料’且在標頭部中被插入有2維顯示用之剪裁資 訊;和 影像資料處理步驟,係基於從上記收訊步驟中所接收 到的多工化資料串流中所取得到的上記立體影像資料,來 生成左眼及右眼的顯示用影像資料; 在上記影像資料處理步驟中,係 基於上記2維顯示用的剪裁資訊來進行影像資料切出 處理,以生成左眼或右眼之一方的顯示用影像資料; 基於根據上記2維顯示用的剪裁資訊而進行影像切出 處理後剩下的影像資料,來生成左眼或右眼之另一方的顯 示用影像資料。 14.一種影像資料送訊裝置,其特徵爲, 具備: 影像資料輸出部,係將具有左眼影像資料及右眼影像 資料的立體影像資料’予以輸出;和 -87- 201225636 送訊部,係發送多工化資料串流,其中所具有之資料 串流係爲,含有從上記影像資料輸出部所輸出的立體影像 資料,並在標頭部中被插入有剪裁資訊; 上記送訊部,係 在上記資料串流的標頭部或上記資料串流的上位層中 ,插入用來識別上記剪裁資訊是2維影像用還是立體影像 用的識別資訊。 15.如請求項14所記載之影像資料送訊裝置,其中, 上記識別爲立體影像用的識別資訊,係含有一資訊用 來表示上記剪裁資訊是左眼影像資料的剪裁資訊還是右眼 影像資料的剪裁資訊。 1 6 .如請求項1 4所記載之影像資料送訊裝置,其中, 上記識別資訊,係被插入至上記資料串流的標頭部; 上記識別資訊中係被附加有,表示上記剪裁資訊所致 之剪裁狀態要持續到何時爲止的資訊。 1 7 .如請求項1 4所記載之影像資料送訊裝置,其中, 在上記多工化資料串流中係含有,用來表示該多工化 資料串流中所含之各元素串流是屬於哪個節目的、作爲節 目特定資訊的節目對映表; 上記送訊部’係將上記識別資訊,插入至上記節目對 映表的旗下。 1 8 ·—種影像資料送訊方法,其特徵爲, 影像資料輸出步驟,係將具有左眼影像資料及右眼影 像資料的立體影像資料,予以輸出;和 -88- 201225636 送訊步驟,係發送資料串流,其係含有上記影像資料 輸出步驟所輸出的立體影像資料,且在標頭部中被插入有 剪裁資訊; 在上記設定步驟中,係 在上記資料串流的標頭部或上記資料串流的上位層中 ,插入用來識別上記剪裁資訊是2維影像用還是立體影像 用的識別資訊。 19· —種影像資料收訊裝置,其特徵爲, 具備: 收訊部’係接收多工化資料串流,其中所具有之資料 串流係爲’含有具有左眼影像資料及右眼影像資料的立體 影像資料’且在標頭部中被插入有立體顯示用的剪裁資訊 及上記立體影像資料的傳輸格式資訊;和 影像資料處理部’係基於從已被上記收訊部所接收到 的多工化資料串流中所取得到的上記立體影像資料,來生 成2維顯示用影像資料; 上記影像資料處理部,係 基於上記資料串流的標頭部中所含之上記立體顯示用 的剪裁資訊及上記立體影像資料的傳輸格式資訊,來進行 影像資料切出處理及尺度轉換處理。 20.—種影像資料收訊方法,其特徵爲, 具備: 收訊步驟,係接收多工化資料串流,其中所具有之資 料串流係爲,含有具有左眼影像資料及右眼影像資料的立 -89- 201225636 體影像資料,且在標頭部中被插入有立體顯示用的剪裁資 訊及上記立體影像資料的傳輸格式資訊;和 影像資料處理步驟,係基於從上記收訊步驟所接收到 的多工化資料串流中所取得到的上記立體影像資料,來生 成2維顯示用影像資料; 在上記影像資料處理步驟中,係 基於上記資料串流的標頭部中所含之上記立體顯示用 的剪裁資訊及上記立體影像資料的傳輸格式資訊,來進行 影像資料切出處理及尺度轉換處理。 -90-
TW100141446A 2010-11-22 2011-11-14 Image data transmission device, image data transmission method, image data reception device, and image data reception method TW201225636A (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010260193A JP2012114575A (ja) 2010-11-22 2010-11-22 画像データ送信装置、画像データ送信方法、画像データ受信装置および画像データ受信方法

Publications (1)

Publication Number Publication Date
TW201225636A true TW201225636A (en) 2012-06-16

Family

ID=46145715

Family Applications (1)

Application Number Title Priority Date Filing Date
TW100141446A TW201225636A (en) 2010-11-22 2011-11-14 Image data transmission device, image data transmission method, image data reception device, and image data reception method

Country Status (12)

Country Link
US (1) US20130250054A1 (zh)
EP (1) EP2512143A1 (zh)
JP (1) JP2012114575A (zh)
KR (1) KR20140000128A (zh)
CN (1) CN102812713A (zh)
AR (1) AR083869A1 (zh)
AU (1) AU2011333090A1 (zh)
BR (1) BR112012017475A2 (zh)
MX (1) MX2012008296A (zh)
RU (1) RU2012130003A (zh)
TW (1) TW201225636A (zh)
WO (1) WO2012070364A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI513281B (zh) * 2012-07-10 2015-12-11 Qualcomm Inc 寫碼用於視訊寫碼之計時資訊

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013005410A (ja) * 2011-06-21 2013-01-07 Sony Corp 画像フォーマット判別装置、画像フォーマット判別方法、画像再生装置および電子機器
JP6048495B2 (ja) * 2012-04-06 2016-12-21 ソニー株式会社 復号装置、復号方法、プログラム、および記録媒体
US20140009464A1 (en) * 2012-07-05 2014-01-09 Kabushiki Kaisha Toshiba Electronic apparatus and desktop image display method
MX354309B (es) * 2014-02-21 2018-02-22 Lg Electronics Inc Metodo y aparato para procesar señal de transmision 3-dimensional.
US9838697B2 (en) * 2014-06-25 2017-12-05 Qualcomm Incorporated Multi-layer video coding
CN106254751A (zh) * 2015-09-08 2016-12-21 深圳市易知见科技有限公司 一种音视频处理装置及音视频处理方法

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1682539A (zh) * 2002-07-16 2005-10-12 韩国电子通信研究院 用于适配2d和3d立体视频信号的装置和方法
JP4190357B2 (ja) 2003-06-12 2008-12-03 シャープ株式会社 放送データ送信装置、放送データ送信方法および放送データ受信装置
JP4393151B2 (ja) * 2003-10-01 2010-01-06 シャープ株式会社 画像データ表示装置
JP4483261B2 (ja) * 2003-10-24 2010-06-16 ソニー株式会社 立体視画像処理装置
MX2007002101A (es) * 2004-08-21 2007-08-14 Co Exprise Inc Metodos, sistemas, y aparatos para comercio extendido de empresas.
KR100813961B1 (ko) * 2005-06-14 2008-03-14 삼성전자주식회사 영상 수신장치
AU2008239653C1 (en) * 2007-04-12 2015-05-07 Dolby International Ab Tiling in video encoding and decoding
US8274551B2 (en) * 2007-06-11 2012-09-25 Samsung Electronics Co., Ltd. Method and apparatus for generating header information of stereoscopic image data
KR101506217B1 (ko) * 2008-01-31 2015-03-26 삼성전자주식회사 스테레오스코픽 영상의 부분 데이터 구간 재생을 위한스테레오스코픽 영상 데이터스트림 생성 방법과 장치, 및스테레오스코픽 영상의 부분 데이터 구간 재생 방법과 장치
RU2011103188A (ru) * 2008-12-26 2013-02-10 Панасоник Корпорэйшн Носитель записи, устройство воспроизведения и интегральная схема
WO2012017643A1 (ja) * 2010-08-06 2012-02-09 パナソニック株式会社 符号化方法、表示装置、及び復号方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI513281B (zh) * 2012-07-10 2015-12-11 Qualcomm Inc 寫碼用於視訊寫碼之計時資訊

Also Published As

Publication number Publication date
JP2012114575A (ja) 2012-06-14
AU2011333090A1 (en) 2012-07-26
BR112012017475A2 (pt) 2019-09-24
AR083869A1 (es) 2013-03-27
KR20140000128A (ko) 2014-01-02
RU2012130003A (ru) 2014-01-20
CN102812713A (zh) 2012-12-05
EP2512143A1 (en) 2012-10-17
MX2012008296A (es) 2012-08-03
US20130250054A1 (en) 2013-09-26
WO2012070364A1 (ja) 2012-05-31

Similar Documents

Publication Publication Date Title
JP5577823B2 (ja) 送信装置、送信方法、受信装置および受信方法
US9756311B2 (en) Broadcast transmitter, broadcast receiver and 3D video data processing method thereof
TW201225636A (en) Image data transmission device, image data transmission method, image data reception device, and image data reception method
US20140071232A1 (en) Image data transmission device, image data transmission method, and image data reception device
WO2013105401A1 (ja) 送信装置、送信方法、受信装置および受信方法
US8953019B2 (en) Method and apparatus for generating stream and method and apparatus for processing stream
WO2013161442A1 (ja) 画像データ送信装置、画像データ送信方法、画像データ受信装置および画像データ受信方法
WO2013073455A1 (ja) 画像データ送信装置、画像データ送信方法、画像データ受信装置および画像データ受信方法
US9693033B2 (en) Transmitting apparatus, transmitting method, receiving apparatus and receiving method for transmission and reception of image data for stereoscopic display using multiview configuration and container with predetermined format
KR20140000136A (ko) 화상 데이터 송신 장치, 화상 데이터 송신 방법, 화상 데이터 수신 장치 및 화상 데이터 수신 방법
WO2013054775A1 (ja) 送信装置、送信方法、受信装置および受信方法
US20130038683A1 (en) Image data transmission apparatus, image data transmission method, image data receiving apparatus and image data receiving method
JP5928118B2 (ja) 送信装置、送信方法、受信装置および受信方法
JP2012235308A (ja) 画像データ送信装置、画像データ送信方法、画像データ受信装置および画像データ受信方法
KR20140053938A (ko) 신호 송신 방법