TW201116041A - Three-dimensional image data transmission device, three-dimensional image data transmission method, three-dimensional image data reception device, three-dimensional image data reception method, image data transmission device, and image data reception - Google Patents

Description

201116041 六、發明說明： 【發明所屬之技術領域】 本發明是有關立體圖像資料發送裝置、立體圖像資料 發送方法、立體圖像資料接收裝置、立體圖像資料接收方 法、圖像資料發送裝置及圖像資料接收裝置，特別是有關 可良好地進行圖形資訊、本文資訊等的重疊資訊的顯示之 立體圖像資料發送方法等。 【先前技術】 例如’在專利文獻1中，提案有關使用立體圖像資料 的電視廣播電波之傳送方式。此情況，包含左眼用圖像資 料及右眼用圖像資料的立體.圖像資料會被發送，在電視接 收機中，進行利用兩眼視差的立體圖像顯示。 圖4 2是表示在利用兩眼視差的立體圖像顯示中，營幕 上的目標（Object)(物體）的左右像的顯示位置與其立 體像的再生位置的關係。例如有關在螢幕上像圖示那樣左 像La偏移至右側，右像Ra偏移至左側來顯示的目標A,因 爲左右的視線會比螢幕面還眼前交叉，所以該立體像的再 生位置是形成比螢幕面還眼前。 又，例如有關在螢幕上像圖示那樣左像Lb及右像Rb 顯示於同一位置的目標B，因爲左右的視線會在螢幕面交 叉，所以其立體像的再生位置是在螢幕面上。又，例如有 關在螢幕上像圖示那樣左像Lc偏移至左側，右像Rc偏移至 右側來顯示的目標C，因爲左右的視線會在比螢幕面還深 -5- 201116041 處交叉，所以其立體像的再生位置是比螢幕面還深處。 [先行技術文獻] [專利文獻] [專利文獻1]特開2005-6 1 14號公報 【發明內容】 像上述那樣在立體圖像顯示中，普通視聽者是利用兩 眼視差來認得立體圖像的遠近感。有關重疊於圖像的重疊 資訊，例如圖形資訊、本文資訊等，不僅2次元空間，即 使作爲3次元的深度感也期待與立體圖像顯示連動再現。 例如，在圖像重疊顯示（overlay顯示）圖形資訊的 字幕時，若未被顯示於比所謂遠近感之處的最近的圖像內 的物體（目標）更眼前，則視聽者有時會感到遠近感的矛 盾。並且’在將其他的圖形資訊或本文資訊m疊顯示於圖 像時’期待按照圖像內的各物體的遠近感來施以視差調整 ’維持遠近感的整合性。 本發明的目的是在圖形資訊、本文資訊等的重疊資訊 的顯示中’謀求與圖像內的各物體之間的遠近感的整合性 的維持。 (用以解決課題的手段） 本發明的槪念，係一種立體圖像資料發送裝置，其特 徵係具備： -6- 201116041 立體圖像資料輸出部，其係輸出包含左眼圖像資料及 右眼圖像資料的立體圖像資料； 視差資訊輸出部，其係使重疊於上述左眼圖像資料及 上述右眼圖像資料的圖像之重疊資訊位移，而輸出用以賦 予視差的視差資訊；及 資料發送部，其係與從上述立體圖像資料輸出部輸出 的立體圖像資料一起發送從上述視差資訊輸出部輸出的視 差資訊。 又，本發明的其他槪念，係一種立體圖像資料發送方 法，其特徵爲： 取得用以使重疊於左眼圖像資料及右眼圖像資料的圖 像之重疊資訊位移而賦予視差的視差資訊， 與包含上述左眼圖像資料及上述右眼圖像資料的立體 圖像資料一起發送上述所被取得的視差資訊。 又，本發明的其他槪念’係一種立體圖像資料發送方 法，其特徵爲： 根據用以顯示立體圖像的左眼圖像資料及右眼圖像資 料’在圖像內的預定位置，取得對左眼圖像及右眼圖像的 一方之另一方的視差資訊， 與包含上述左眼圖像資料及上述右眼圖像資料的立體 圖像資料一起發送上述所被取得的視差資訊。 在本發明中’藉由立體圖像資料輸出部來輸出包含左 眼圖像資料及右眼圖像資料的立體圖像資料。並且，藉由 視差資訊輸出部來輸出用以使重疊於左眼圖像資料及上右 201116041 眼圖像資料的圖像之重疊資訊位移而賦予視差的視差資訊 。例如，視差資訊是對左眼圖像及右眼圖像的一方之另~ 方的視羞資訊，根據用以顯示立體圖像的左眼圖像資料及 右眼圖像資料來求取。此情況，在圖像內的預定位置，例 如藉由區塊匹配法來求取作爲視差資訊的視差向量。然後 ，藉由資料發送部來與包含左眼圖像資料及右眼圖像資料

I 的立體圖像資料一起發送視差資訊。 例如，視差資訊是作爲數値資訊來發送。此情況，在 接收側，根據此數値資訊來對重疊於左眼圖像及右眼圖像 的同一重疊資訊賦予視差。在此，重疊資訊畏意味顯示字 幕的圖形資訊、電子節目表（EPG: Electronic Program Guide)、顯示文字播放內容的本文資訊等，被重疊顯示 於圖像,的資訊。又，視差資訊是含在用以重鹽於左眼圖像 資料及右眼圖像資料的圖像之重疊資訊的資料中發送。此 情況，在接收側，此重疊資訊會被原封不動使用。 藉由如此與包含左眼圖像資料及右眼圖像資料的立體 圖像資，料一起發送在圖像內的預定位置所被取得的視差資 訊，在接收側，可使用按照圖像內的各物體的遠近感來施 以視差調整者，作爲被重疊於左眼圖像及右眼圖像的同一 重疊資訊，在重疊資訊的顯示中，可維持與圖像內的各物 體之間的遠近感的整合性。 又，本發明的槪念，係一種立體圖像資料接收裝置， 其特徵係具備： 圖像資料接收部，其係接收包含左眼圖像資料及右眼 -8 - 201116041 圖像資料的立體圖像資料；及 圖像資料處理部，其係根據在上述圖像資料接收部所 接收的立體圖像資料中含的上述左眼圖像資料及上述右眼 圖像資料被處理而取得之對左眼圖像及右眼圖像的一方之 另一方的視差資訊，來對重疊於上述左眼圖像及上述右眼 圖像的同一重疊資訊賦予視差，而取得被重疊有上述重疊 資訊的左眼圖像的資料及被重疊有上述重疊資訊的右眼圖 像的資料。 在本發明中，藉由圖像資料接收部來接收包含左眼圖 像資料及右眼圖像資料的立體圖像資料。並且，藉由圖像 資料處理部，根據對左眼圖像及右眼圖像的一方之另一方 的視差資訊來對重疊於左眼圖像及右眼圖像的同一重疊資 訊賦予視差。此視差資訊是在圖像資料接收部所接收的立 體圖像資料中含的左眼圖像資料及右眼圖像資料所被處理 而取得者。 例如’視差資訊是藉由視差資訊接收部來與在圖像資 料接收部所接收的立體圖像資料同步接收。此情況，不必 根據在圖像資料接收部所接收的立體圖像資料中含的左眼 圖像資料及右眼圖像資料來取得視差資訊，接收側的處理 會變簡單。又，例如，視差資訊可藉由視差資訊取得部來 取得。在此視差資訊取得部是根據在圖像資料接收部所接 收的立體圖像資料中含的左眼圖像資料及右眼圖像資料， 在圖像內的預定位置’可取得對左眼圖像及右眼圖像的一 方之另一方的視差資訊。此情況，即使視差資訊未被送來 -9 - 201116041 ，還是可進行利用視差資訊的處理。 並且，藉由圖像資料處理部來取得被重#有重疊資訊 的左眼圖像的資料及被重疊有重疊資訊的右眼圖像的資料 。例如，藉由圖像資料發送部來將在圖像資料處理部所取 得之包含左眼圖像資料及右眼圖像資料的立體圖像資料發 送至外部機器。又，例如，藉由圖像顯示部來顯示在圖像

I 资料處理部所取得的左眼圖像資料及右眼圖像資料的立體 圖像顯示用的圖像。 如此，根據對左眼圖像及右眼圖像的一方之另一方的 視差資訊來對重疊於左眼圖像及右眼圖像的同一重疊資訊 賦予視差。因此，可使用按照圖像內的各物體的遠近感來 施以視差調整者，作爲被重疊於左眼圖像及右眼圖像的同 一重疊資訊，在重疊資訊的顯示中，可維持與圖像內的各 物體之間的遠近感的整合性。 另1外，在本發明中，例如，畫素資料處理部可對重疊 於左眼圖像及右眼圖像的同一重疊資訊賦予對應於此重疊 資訊的重疊位置的視差。此情況，由於對各重疊資訊賦予 對應於重疊位置的視差，因此可使重疊資訊具有與例如在 重疊位置所存在的物體的遠近感同等的遠近感。 並且，在此發明中，例如亦可具備：多聲道的揚聲器 、及根據對左眼圖像資料及右眼圖像資料的一方之另一方 的視差資訊來控制多聲道的揚聲器輸出之控制部。此情況 ，可使更具立體感。 -10- 201116041 [發明的效果] 若根據本發明，則在立體圖像資料的接收側，可使用 按照圖像內的各物體的遠近感來施以視差調整者，作爲被 重疊於左眼圖像及右眼圖像的同一重疊資訊，在重疊資訊 的顯示中可維持遠近感的整合性。 【實施方式】 以下，說明有關用以實施發明的形態（以下稱爲「實 施形態」）。另外，以下面的順序來進行說明。 1. 第1實施形態 2. 變形例 < 1.實施形態> [立體圖像顯示系統的構成例] 圖1是表示作爲實施形態的立體圖像顯示系統10的構 成例。此立體圖像顯示系統1 〇是具有廣播電視台1 00、機 上盒（STB: Set Top Box) 200、及電視接收機300。 機上盒200及電視接收機3 00是經由HDMI ( High Definition Multimedia Interface)纜線 400來連接。在機 上盒200設有HDMI端子202。在電視接收機300設有HDMI 端子302。HDMI纜線400的一端是連接至機上盒2〇0的 HDMI端子202，此HDMI纜線400的另一端是連接至電視接 收機300的HDMI端子302。 -11 - 201116041 [廣播電視台的說明] 廣樺電視台100會將位元流資料載於播放波來發送。 在此位元流資料含有：包含左眼圖像資料及右眼圖像資料 的立體圖像資料、聲音資料、圖形資料、本文資料、以及 作爲視差資訊的視差向量。 圖2是表示在廣播電視台1〇〇中，產生上述位元流資料 的發送(資料產生部1 1 0的構成例。此構成例是將視差向量 作爲數値資訊發送的例子。此發送資料產生部n〇是具有 :攝影機1 1 1 L ’ 1 1 1 R、視頻訊框部1丨2、視頻編碼器1 1 3 '視差向量檢測部1 1 4、及視差向量編碼器丨i 5。又，此發 送資料產生部110具有：麥克風116、音頻編碼器117、圖 形產生部118、圖形編碼器119、本文產生部120、本文編 碼器121、及多工器122 ^ 攝影機111 L是攝取左眼圖像來取得立體圖像顯示用的 左眼圖像資料。攝影機1 1 1 R是攝取右眼圖像來取得立體圖 像顯示用的右眼圖像資料。視頻訊框部1 1 2是將在攝影機 111L取得的左眼圖像資料及在攝影機iiir取得的右眼圖 像資料加工處理成對應於傳送方式的狀態。 [立體圖像資料的傳送方式例] 在此，立體圖像資料（3D圖像資料）的傳送方式， 是舉以下的第1〜第3方式，但亦可爲該等以外.的傳送方式 。在此，如圖3所示，左眼（L )及右眼（R )的圖像資料 分別舉預定的解像度，例如1 920 xl 080p的像素格式的圖像 -12- 201116041 資料時爲例來進行說明。 第1傳送方式是「Top & Bottom」方式，如圖4(a) 所不’在垂直方向的前半是傳送左眼圖像資料的各線的資 料，在垂直方向的後半是傳送左眼圖像資料的各線的資料 之方式。此情況，因爲左眼圖像資料及右眼圖像資料的線 會被間拔成1 /2，所以對於原訊號而言，垂直解像度是成 爲一半。 第2傳送方式是「Side By Side」方式，如圖4(b)所 示，在水平方向的前半是傳送左眼圖像資料的像素資料， 在水平方向的後半是傳送右眼圖像資料的像素資料之方式 。此情況，左眼圖像資料及右眼圖像資料是分別水平方向 的像素資料會被間拔成1 /2。對於現訊號而言，水平解像 度是成爲一半。 第3傳送方式是「Frame Sequential」方式，如圖4 ( c )所示，是以每場依序轉換左眼圖像資料與右眼圖像資料 來傳送的方式。 回到圖2，視頻編碼器1 13是對於在視頻訊框部1 12所 被加工處理的立體圖像資料實施MPEG4-AVC、或MPEG2 等的壓縮編碼化，產生視頻的基本流。而且，視頻編碼器 113會分割此視頻的基本流而產生視頻的PES ( Packetized Elementary Stream ) 封包，最終產生視頻的TS ( Transport Stream)封包。或，被多重化於MP4等的檔案容 器（file container)，或以即時（Real Time)用的封包 作爲容器來傳送的方式產生。 -13- 201116041 視差向量檢測部1 1 4是根據左眼圖像資料及右眼圖像 資料，在圖像內的預定位置，檢測出對左眼圖像及右眼圖 像的一方之另一方的視差資訊的視差向量。在此，圖像內 的預定位置是全部的畫素位置、由複數畫素所構成的各領 域的代表位置、或者重疊圖形資訊或本文資訊的領域的代 表位置等。 [視差向量的檢測] 說明有關視差向量的檢測例。在此是說明有關檢測出 右眼圖像對左眼圖像的視差向量的例子。如圖5所示，以 左眼圖像作爲檢測圖像，以右眼圖像作爲參照圖像。此例 是檢測出（xi，yi)及（xj，yj )的位置之視差向量。 舉例說明檢測出（Xi，yi )的位置之視差向量時。此 情況，在左眼圖像設定有以（xi，yi )的位置的畫素爲左 上之例如8x8或16x16的畫素區塊（視差檢測區塊）Bi。而 且，在右眼圖像中，探索與畫素區塊Bi匹配的畫素區塊。 此情況，在右眼圖像設定有以（xi，yi )的位置作爲 中心的探索範圍，將該探索範圍內的各畫素依序設爲注目 畫素，與上述畫素區塊Bi同樣之例如8x8或16x16的比較區 塊會被依序設定。 在畫素區塊Bi與依序設定的比較區塊之間，求取所對 應的每個畫素的差分絕對値的總和。在此，如圖6所示， 將畫素區塊Bi的畫素値設爲L(x，y)，且將比較區塊的 畫素値設爲R ( X，y)時，畫素區塊Bi與某比較區塊之間 -14- 201116041 的差分絕對値的總和是以Σ|ί ( χ，y ) -R ( χ，y )丨來表示 ο 在被設定於右眼圖像的探索範圍含有η個的畫素時， 最終求取η個的總和S1〜Sn，在其中選擇最小的總和Smin 。然後，從取得該總和Smin的比較區塊來取得左上的畫素 的位置（X厂，y i')。藉此，（X i，y i )的位置之視差向量 是像（χΓ-xi，yT-yi )那樣被檢測出。詳細說明雖省略， 但有關（xj，yj )的位置之視差向量也是在左眼圖像設定 有以（xj，yj )的位置的畫素爲左上之例如8 X 8或1 6 X 1 6的 畫素區塊Bj，而以同樣的處理過程來檢測出。 圖7 ( a )是表示在視差向量檢測部1 1 4所被檢測出之 圖像內的預定位置的視差向量VV之一例。此情況，如圖7 (b)所示，意指在此圖像內的預定位置，一旦將左眼圖 像（檢測圖像）只偏移視差向量VV，則會與右眼圖像（ 參照圖像）重疊。 回到圖2，視差向量編碼器115產生包含在視差向量檢 測部1 14所檢測出的視差向量等的視差向量的基本流。視 差向量基本流是與視頻的基本流等一起構成TS封包。 在此，於視差向量的基本流含有以下的內容。亦即， 視差檢測區塊的ID ( ID_B lock)、視差檢測區塊的垂直位 置資訊（VerticaL_Position)、視差檢測區塊的水平位置 資訊（Horizontal_Position )、視差向量（Vi ew_ Vector ) 爲1組。而且，此組是僅視差檢測區塊的數N個部分被重 複。圖8是表示視差向量的傳送內容。 -15- 201116041 另外，視差檢測區塊的垂直、水平的位置是成爲從圖 像的左上的原點到區塊的左上的畫素之垂直方向、水平方 向的偏移値。之所以在各視差向量的傳送附上視差檢測區 塊的ID，是爲了能夠取得與使重疊顯示於圖像的圖形資訊

I 、本文資訊等的重疊資訊的模式連結。 例如圖9 ( a )所示，當A〜F的視差檢測區塊存在時 ，在傳送內容中，如圖9 ( b )所示，含有該視差檢測區塊 A〜F的ID、垂直、水平的位置資訊、及視差向量。例如 ，在圖9 ( b )中，有關視差檢測區塊A，ID:!是表示視差 檢測區塊A的ID， （ Ha，Va )是表示視差檢測區塊A的垂 直、水平的位置資訊，視差向量a是表示視差檢測區塊A的 視差向暈。 在此，說明有關檢測出視差向量來傳送的時序。有關 此時序，例如可考量以下的第1〜第4的例子。 在第1例中，如圖1 0 ( a )所示，使同步於圖片的編碼 化。此情況，視差向量是以圖片單位來傳送..此圖片單位 是傳送'視差向量時最細的單位。在第2例中，如圖1 0 ( b ) 所示，使同步於視頻的場景（scene )。此情況，視差向 量是以，場景單位來傳送。 在第3例中，如圖1 〇 ( c )所示，使同步於編碼化視頻 的I圖片（Intra picture )。在第4例中，如圓1 1所示，使 同步於被重疊顯示於圖像的圖形資訊、本文資訊等的顯示 開始時序。 回到圖2 ’麥克風1 1 6是檢測出對應於以攝影機1 1 1 L， -16- 201116041 1 1 1 R所攝取的圖像之聲音，而取得聲音資料。音頻編碼器 1 17是對麥克風1 16所取得的聲音資料施以MPEG-2 Audio A AC等的編碼化，產生音頻的基本流。而且，音頻編碼器 1 17會分割此音頻的基本流來產生音頻的PES封包，最終 產生TS封包。 圖形產生部1 1 8是產生重疊於圖像的圖形資訊的資料 (圖形資料）。圖形資訊是例如爲字幕等。此圖形資料是 點陣圖資料。在此圖形資料附加顯示圖像上的重疊位置之 閒置偏移（idling offset)資訊。此閒置偏移資訊是例如 表示從圖像的左上的原點到圖形資訊的重疊位置的左上的 畫素之垂直方向、水平方向的偏移値。另外，以字幕資料 作爲點陣圖資料傳送的規格是以歐洲的數位播放規格的 DVB，作爲DVB_Subtitling被規格化，被運用。 圖形編碼器119是生成在圖形產生部118所產生的圖形 資料的基本流。而且，圖形編碼器119是最終生成上述的 TS封包。 本文產生部120是產生重疊於圖像的本文資訊的資料 (本文資料）。本文資訊是例如電子節目表、文字播放內 容等。在此本文資料中，與上述圖形資料同樣，附加有顯 不圖像上的重疊位置之閒置偏移資訊。此閒置偏移資訊是 例如表示從圖像的左上的原點到本文資訊的重疊位置的左 上的畫素之垂直方向、水平方向的偏移値。另外，傳送本 文資料的例子，有作爲節目預約運用的EPG、美國的數位 地波規格 ATSC 的 CC_data ( Closed Caption)。 -17- 201116041 本文編碼器121是生成在本文產生部120所產生的本文 資料的棊本流。 多工器122是使從視頻編碼器113、視差向量編碼器 115、音頻編碼器117，圖形編碼器119及本文編碼器121的 各編碼器輸出之被封包化的基本流多重化。然後，此多工 器122輸出作爲傳送資料的位元流資料（傳輸流）BSD。 簡單說明圖2所示的發送資料產生部11〇的動作。在攝 影機111L是左眼圖像會被攝取。在此攝影機111L所取得 之立體圖像顯示用的左眼圖像資料是被供給至視頻訊框部 112。並且，在攝影機111R是右眼圖像會被攝取。在此攝 影機111R所取得之立體圖像顯示用的右眼圖像資料是被供 給至視頻訊框部1 1 2。在視頻訊框部Π 2是左眼圖像資料及 右眼圖像資料會被加工處理成對應於傳送方式的狀態，而 可取得立體圖像資料（參照圖4 ( a )〜（c ))。 在視頻訊框部1 1 2所取得的立體圖像資料是被供給至 視頻編碼器1 1 3。在此視頻編碼器1 1 3是對立體圖像資料施 以MPEG4-AVC、MPEG2等的壓.縮編碼化，產生視頻的基 本流，最終視頻封包是被供給至多工器1 22。 並且，在攝影機1 1 1 L，1 1 1 R所取得的左眼圖像資料 、右眼圖像資料是通過視頻訊框部1 1 2來供給至視差向量 檢測部11 4。在此視差向量檢測部1 1 4是根據左眼圖像資料 及右眼圖像資料，在圖像內的預定位置，設定視差檢測區 塊，檢測出對左眼圖像及右眼圖像的一方之另一方的視差 資訊的視差向量。 -18- 201116041 在視差向量檢測部1 1 4所被檢測出的圖像內的預定位 置之視差向量是被供給至視差向量編碼器1 1 5。此情況， 視差檢測區塊的ID、視差檢測區塊的垂直位置資訊、視差 檢測區塊的水平位置資訊、視差向量會作爲1組交付。在 視差向量編碼器115是產生含視差向量的傳送內容（參照 圖8 )的視差向量的基本流，且被供給至多工器1 2 2。 並且，在麥克風116是檢測出對應於攝影機mil， 1 1 1 R所攝取的圖像之聲音。在此麥克風1 1 6所取得的聲音 資料是被供給至音頻編碼器117。在此音頻編碼器117是對 聲音資料施以MPEG-2 Audio AAC等的壓縮編碼化，產生 音頻的基本流，且被供給至多工器122。 而且，在圖形產生部118是產生重疊於圖像之圖形資 訊的資料（圖形資料）。此圖形資料（點陣圖資料）是被 供給至圖形編碼器1 1 9。在此圖形資料附加顯示圖像上的 重疊位置之閒置偏移資訊。在圖形編碼器119是對此圖形 資料施以預定的壓縮編碼化，而產生基本流，且被供給至 多工器1 22。 並且’在本文產生部12〇是產生重疊於圖像的本文資 訊的資料（本文資料）。此本文資料是被供給至本文編碼 器1 2 1。在此本文資料，與上述的圖形資料同樣，附加有 顯示圖像上的重疊位置之閒置偏移資訊。在本文編碼器 是對此本文資料施以預定的壓縮編碼化，而產生基本 流’最終取得本文的τ S封包。此本文的T S封包是被供給 至多工器122。 -19- 201116041 在多工器122是從各編碼器所供給的基本流的封包會 被多重化，可取得作爲傳送資料的位元流資料（傳輸流） BSD。 圖12是表示在圖2所示的發送資料產生部丨1〇中所被多 重化的各資料的串流例。另外，此例是顯示視差向量爲以 視頻的場景單位來檢測出而傳送時（參照圖I 0 ( b ))。 而且，在各串流的封包是被附上同步顯示用的時戳，可在 接收側對圖像控制圖形資訊、本文資訊等的重疊時序。 另外，上述圖2所示的發送資料產生部1 10是形成以視 差向量的傳送內容（參照圖8)作爲獨立的基本流來傳送 至接收側的構成。但，亦可考量在其他的串沆中埋入視差 向量的傳送內容來傳送。例如，視差向量的傳送內容是在 視頻的库流中作爲使用者資料埋入而被傳送。又，例如， 視差向量的傳送內容是被埋入圖形、或本文的串流而被傳 送。 圖1 3是表示發送資料產生部1 1 〇 A的構成例。此例也 是以視差向量作爲數値資訊來發送的例子。此發送資料產 生部1 1 0 A是形成以視差向量的傳送內容作爲使用者資料 來埋入視頻的串流而傳送的構成》在此圖13中，與圖2對 應的部分是附上同一符號，其詳細說明省略> 此發送資料產生部110A是在視頻編碼器113與多工器 1 2 2之間插入串流訊框部〗2 3。在視差向量檢測部1 1 4所被 檢測出的圖像內的預定位置之視差向量會被供給至串流訊 框部1 2 3。此情況，視差檢測區塊的id、視差檢測區塊的 -20- 201116041 垂直位置資訊、視差檢測區塊的水平位置 會作爲1組交付。 在串流訊框部123是視差向量的傳送p 會作爲使用者資料來埋入視頻的串流。 雖詳細說明省略，但實際此圖1 3所示 部11 0 A的其他是與圖2所示的發送資料產 成。 又，上述圖2所示的發送資料產生部1 示的發送資料產生部1 1 0 A是以視差向量· 發送（參照圖8 )。但，亦可考量含在用 重疊資訊（例如圖形資訊、本文資訊等） 取代以視差向量作爲數値資訊來傳送。 例如，含在圖形資訊的資料來發送時 重疊於左眼圖像的左眼圖形資訊與應重疊 眼圖形資訊的雙方所對應的圖形資料會被 左眼圖形資訊及右眼圖形資訊是同一圖形 內的顯示位置，例如對於左眼圖形資訊而 訊是僅對應於該顯示位置的視差向量的水 偏離於水平方向。 又，例如含在本文資訊的資料來發送 應重疊於左眼圖像的左眼本文資訊與應重 右眼本文資訊的雙方所對應的本文資料會 ，左眼本文資訊及右眼本文資訊是同一本 像內的重疊位置，例如對於左眼本文資訊 資訊、視差向量 3容（圖8參照） 的發送資料產生 :生部1 1 0同樣構 1 〇及上述圖1 3所 ί乍爲數値資訊來 以重疊於圖像的 的資料來發送， ，在發送側，應 於右眼圖像的右 產生。此情況， 資訊。但，圖像 言，右眼圖形資 平方向成分，會 時，在發送側， 疊於右眼圖像的 被產生。此情況 文資訊。但，圖 而言，右眼本文 -21 - 201116041 資訊是僅視差向量的水平方向成分，會偏離於水平方向。 例如，視差向量是在圖像內的複數位置所被檢測出的

I 視差向髯之中，使用對應於該重疊位置者。又，例如，視 差向量晕使用在圖像內的複數位置所被檢測出的視差向量 之中，所謂遠近感之處的最近被辨識的位置的視差向量。 圖14(a)是表示傳送方式爲上述第1傳送方式（「 Top & Bottom」方式）時之左眼圖形資訊及右眼圖形資訊 的重疊位置。該等左眼圖形資訊及右眼圖形資訊是同一資 訊。但，對於重疊於左眼圖像IL上的左眼圖形資訊LGI而 言，重疊於右眼圖像IR上的右眼圖形資訊RGI是僅視差向 量的水平方向成分VVT成爲偏離於水平方向的位置。 對於各圖像IL，IR，如圖1 4 ( a )所示，以各圖形資 訊LGI，RGI可被重疊的方式，產生圖形資料》藉此，視 聽者可:如圖14 ( b )所示般，與各圖像IL，IR—起，持視 差來觀察各圖形資訊LGI，RGI，對圖形資訊也可認得遠 近感。 例如，各圖形資訊LGI，RGI的圖形資料是如圖15 ( a

I )所示般，作爲單一領域的資料產生。此情況，各圖形資 訊LGI，RGI以外的部分的資料是只要作爲透明資料產生 既可。又，例如，各圖形資訊LGI，RGI的圖形資料是如 圖1 5 ( b )所示般，作爲別領域的資料產生。 圖16 (a)是表示傳送方式爲上述第2傳送方式（「 Side By Side」方式）時之左眼圖形資訊及右眼圖形資訊 的重疊位置。該等左眼圖形資訊及右眼圖形資訊是同一資 -22- 201116041 訊。但，對重疊於左眼圖像IL上的左眼圖形資訊LGI而言 ，重疊於右眼圖像IR上的右眼圖形資訊RGI是形成僅視差 向量的水平方向成分VVT偏離於水平方向的位置。另外’ IT是閒置偏移値。 對於各圖像IL，IR，如圖1 6 ( a )所示，以各圖形資 訊LGI，RGI可被重疊的方式，產生圖形資料。藉此，視 聽者可如圖16 ( b )所示般，與各圖像IL，IR—起，持視 差來觀察各圖形資訊LGI，RGI，對圖形資訊也可認得遠 近感。 例如，各圖形資訊LGI，RGI的圖形資料是如圖17所 示般，作爲單一領域的資料產生。此情況，各圖形資訊 LGI，RGI以外的部分的資料是只要作爲透明資料產生既 可。 圖1 8是表示發送資料產生部1 1 0B的構成例。此發送資 料產生部1 1 0B是形成使視差向量含於圖形資訊、本文資訊 的資料來發送的構成。在此圖18中，與圖2對應的部分是 附上同一符號，其詳細說明省略。 此發送資料產生部1 1 0B是在圖形產生部11 8與圖形編 碼器119之間插入圖形處理部124。並且，此發送資料產生 部1 10B是在本文產生部120與本文編碼器121之間插入本文 處理部1 25。然後，在視差向量檢測部1 1 4所被檢測出的圖 像內的預定位置之視差向量會被供給至圖形處理部1 2 4及 本文處理部1 2 5。 在圖形處理部I24是根據在圖形產生部118所產生的圖 -23- 201116041 形資料來產生重疊於左眼圖像IL上的左眼圖形資訊LG I的 資料及重疊於右眼圖像IR上的右眼圖形資訊RGI的資料。 此情況，左眼圖形資訊及右眼圖形資訊是同一圖形資訊， 但，圖像內的重疊位置，例如對於左眼圖形資訊而言，右 眼圖形資訊是僅視差向量的水平方向成分VVT，會偏離於 水平方向（參照圖14(a)、圖16(1 a))。 如此在圖形處理部124所被產生的圖形資料是被供給 至圖形編碼器1 1 9。另外，在此圖形資料是被附加顯示圖 像上的蓽疊位置之閒置偏移資訊。在圖形編碼器119是產 生在圖形處理部1 24所被產生的圖形資料的基本流。 並且，在本文處理部125是根據在本文產生部120所產 生的本文資料來產生重疊於左眼圖像上的左眼本文資訊的 資料及重疊於右眼圖像上的右眼本文資訊的資料。此情況 ，左眼本文資訊及右眼本文資訊是同一本文資訊，但圖像

I 內的重_位置，例如對於左眼本文資訊而言，右眼本文資 訊是僅視差向量的水平方向成分VVT，會偏離於水平方向 〇 如，此在本文處理部125所產生的本文資料是被供給至 本文編碼器121。另外，在此本文資料是附加有顯示圖像 上的重疊位置的閒置偏移資訊。在本文編碼器121會產生 在本文處理部所被產生的本文資料的基本流。 雖詳細說明省略，但實際此圖18所示的發送資料產生 部110B的其他是與圖2所示的發送資料產生部11〇同樣構成 24 - 201116041 [機上盒的說明] 回到圖1，機上盒200是自廣播電視台1〇〇接收載於播 放波而發送來的位元流資料（傳輸流）。在此位元流資料 含有包含左眼圖像資料及右眼圖像資料的立體圖像資料、 聲音資料、圖形資料、本文資料 '以及作爲視差資訊的視 差向量。 機上盒200是具有位元流處理部201。此位元流處理部 201是從位兀流資料抽出體圖像資料、聲音資料、圖形 資料、本文資料、視差向量等。此位元流處理部2 〇丨是利 用立體圖像資料、圖形資料、本文資料等來產生被重疊有 重疊資訊的左眼圖像及右眼圖像的資料。 在此’視差向量作爲數値資訊來發送時，是根據視差 向量與圖形資料來產生分別重疊於左眼圖像、右眼圖像的 左眼重疊資訊、右眼重疊資訊。此情況，左眼重疊資訊及 右眼重疊資訊是同一重疊資訊。但，圖像內的重疊位置， 例如對於左眼重疊資訊而言，右眼重疊資訊是僅視差向量 的水平方向成分，會偏離於水平方向。 圖19(a)是表示傳送方式爲上述第2傳送方式（「 Side By Side」方式）時之左眼圖形資訊及右眼圖形資訊 的重疊位置。 對重疊於左眼圖像IL上的左眼圖形資訊LGI而言，重 疊於右眼圖像IR上的右眼圖形資訊RGI是形成僅視差向量 的水平方向成分VVT偏離於水平方向的位置。另外’ IT是 -25- 201116041 閒置偏移値。 對各圖像IL，IR’如圖19 (a)所示般，以各圖形資 訊LGI，RGI能夠被重疊的方式產生圖形資料。 位元流處理部201是對於從位元流資料抽出的立體圖 像資料，（左眼圖像資料、右眼圖像資料）來合成所被產生 的左眼圖形資料、右眼圖形資料，而取得處理後的立體圖 像資料。若根據此立體圖像資料，則視聽者可如圖丨9 ( b )所示般’與各圖像IL ’ IR—起，持視差來觀察各圖形資 訊LGI ’ RGI，對圖形資訊也可認得遠近感。 另外’圖20 (a)是表示對於各圖像IL，iR，原封不 動重疊從位元流資料抽出的圖形資料的圖形圖像之狀態。 此情況’視聽者是如圖20 ( b )所示般，與左眼圖像il一 起觀察.圖形資訊的左半，與右眼圖像IR—起觀察圖形資訊 的右半。因此，無法正確辨識圖形資訊。 並且，視差向量作爲數値資訊來發送時，是根據視差 向量與本文資料來產生分別重疊於左眼圖像、右眼圖像的 左眼本.文資訊、右眼本文資訊。此情況，左眼本文資訊及 右眼本文資訊是同一本文資訊。但，圖像內的重疊位置， 例如對.於左眼本文資訊而言，右眼本文資訊是僅視差向量 的水平方向成分，會偏離於水平方向。 位元流處理部201是對於從位元流資料抽出的立體圖 像資料（左眼圖像資料 '右眼圖像資料）來合成所被產生 的左眼本文資訊及右眼本文資訊的資料（點陣圖資料）， 而取得處理後的IL體圖像資料。若根據此立體圖像資料， -26- 201116041 則視聽者可與上述的圖形資訊時同樣，與左眼圖像、右眼 圖像一起，持視差來觀察各本文資訊，對各本文資訊也可 認得遠近感。 此情況，作爲對左眼圖形資訊與右眼圖形資訊之間、 或左眼本文資訊與右眼本文資訊之間賦予視差的視差向量 ，可考量使用以下的視差向量。 例如，視差向量可想像使用在圖像內的複數位置所檢 測出的視差向量之中，所謂遠近感之處的最近被辨識的位 置的視差向量。圖21(a) ， （b) ， （c) ， （d)是分別 顯示在時刻TO，T 1，T2，T3的3個目標位置的視差向量（ View Vector )。 在時刻TO，對應於目標1的位置（HO，V0 )的視差向 量VV0-1會成爲最大的視差向量MaxVV(TO)。在時刻T1 ，對應於目標1的位置（Η 1，V 1 )的視差向量VV 1 - 1會成 爲最大的視差向量MaxVV ( Τ1 )。在時刻Τ2，對應於目 標2的位置（H2，V2 )的視差向量VV2-2會成爲最大的視 差向量MaxVV ( T2 )。在時刻T3，對應於目標1的位置（ H3，V3)的視差向量VV3-0會成爲最大的視差向量MaxVV (T3 )。 如此，視差向量是藉由使用在圖像內的複數位置所被 檢測出的視差向量之中，所謂遠近感之處的最近被辨識的 位置的視差向量，可在比所謂遠近感之處的最近的圖像內 的物體（目標）更眼前顯示圖形資訊、本文資訊。 圖22(a)是表示圖像上的字幕（圖形資訊）的顯示 -27- 201116041 例。此顯示例是在由背景及近景目標所構成的圖像上，字

I 幕被重疊的例子。圖22(b)是表示背景、近景目標、字 幕的遠近感，以字幕能處於最近的方式辨識。 圖23 ( a )是與圖22 ( a )同樣，表示圖像上的字幕（ 圖形資訊）的顯示例。圖23 (b)是表示用以顯示字幕的 左眼圖取資訊LGI及右眼圖形資訊RGI。圖23 ( c )是表示 爲了以字幕能處於最近的方式辨識，而賦予各圖形資訊 LGI，RGI視差。 又，視差向量可想像是在圖像內的複數位置所被檢測 出的視羑向量之中，使用對應於其重疊位置者。圖24 (a )是表示根據從位元流資料抽出的圖形資料之圖形資訊、 及根據從位元流資料抽出的本文資料之本文資訊。 圖24(b)是表示在左眼圖像重疊左眼圖形資訊LGI及 左眼本文資訊LTI的狀態。此情況，左眼圖形資訊LGI是 其重疊位置會在水平方向以閒置偏移値（ΙΤ-0 )所規制。 又，左眼本文資訊LTI是其重疊位置會在水平方向以閒置 偏移値（IT-1)所規制。 圖24(c)是表示在右眼圖像重疊右眼圖形資訊RGI及 右眼本文資訊RTI的狀態。此情況，右眼圖形資訊RGI是 其重疊，位置會在水平方向以閒置偏移値（ΙΤ-0 )所規制， 且僅對.應於此重疊位置的視差向量的水平方向成分VVT-0 ，自左眼圖形資訊LGI的重疊位置錯開。又，右眼本文資 訊RTI是其重疊位置會在水平方向以閒置偏移値（IT-1 ) 所規制，僅對應於此重疊位置的視差向量的水平方向成分 -28- 201116041 VVT- 1，自左眼本文資訊LTI的重疊位置錯開。 上述是說明在左眼圖像及右眼圖像重疊根據從位元流 資料抽出的圖形資料之圖形資訊、或根據從位元流資料抽 出的本文資料之本文資訊時。其他’亦可想像在機上盒 2〇〇內產生圖形資料或本文資料，將根據該等的資訊重疊 於左眼圖像及右眼圖像時。 該情況亦可利用從位元流資料抽出的圖像內的預定位 置的視差向量，使在左眼圖形資訊與右眼圖形資訊之間、 或在左眼本文資訊與右眼本文資訊之間具有視差。藉此’ 在圖形資訊、本文資訊的顯示中，可賦予適當的遠近感’ 其係在與圖像內的各物體（目標）的遠近感之間謀求遠近 感的整合性的維持。 圖25(a)是表示在圖像內存在A，B，C的各目標， 例如在該等各目標的近旁位置重疊顯示各目標的註釋之本 文資訊。 圖25(b)是表示A，B，C的各目標的位置、及顯示 該位置的視差向量的對應之視差向量目錄、及將各個的視 差向量利用於給予顯示A，B，C的各目標的註釋之本文資 訊視差的情況。例如，在A目標的近旁是重疊有「Text」 的本文資訊，在其左眼本文資訊與右眼本文資訊之間是被 給予對應於A目標的位置（Ha，Va )的視差向量VV-a之視 差。另外，有關重疊於B，C目標的近旁之本文資訊也是 同樣。 其次，說明視差向量含於圖形資訊、本文資訊的資料 -29 - 201116041 而發送來時。此情況，在從位元流資料抽出的圖形資料中 是含有藉由視差向量來賦予視差之左眼圖形資訊及右眼圖 形資訊的資料。同樣，在從位元流資料抽出的本文資料中 是含有藉由視差向量來賦予視差之左眼本文資訊及右眼本 文資訊的資料。 因此，位元流處理部201是對於從位元流資料抽出的 立體圖像資料（左眼圖像資料、右眼圖像資料）僅合成從 位元流資料抽出的圖形資料、本文資料，而取得處理後的 立體圖像資料。另外，有關本文資料是需要將本文資料（ 碼資料）變換成點陣圖（bitmap )資料》 [機上盒的構成例] 說明機上盒200的構成例。圖26是表示機上盒200的構 成例。此機上盒200是具有：位元流處理部201、HDMI端 子202、天線端子203、數位調諧器204 '映像訊號處理電 路205、H DMI發送部206、及聲音訊號處理電路207。又， 此機上盒 200 具有：CPU211、FlashROM212、DRAM213、 內部匯流排214、遙控接收部215、及遙控發送機216。 天線端子203是輸入在接收天線（未圖示）所接收的 電視播放訊號的端子。數位調諧器2 04是處理被輸入天線 端子2 03的電視播放訊號，而輸出對應於使用者的選擇頻 道之預定的位元流資料（傳輸流）》 位元流處理部201是如上述般，從位元流資料抽出立 體圖像資料（左眼圖像資料、右眼圖像資料）、聲音資料 -30- 201116041 、圖形資料、本文資料、視差向量等。而且，此位元流處 理部20 1是如上述般，對立體圖像資料合成重疊資訊（圖 形資訊、本文資訊）的資料，取得顯示用立體圖像資料。 並且，位元流處理部2 〇 1輸出聲音資料。位元流處理部2 0 1 的詳細構成會往後敘述。 映像訊號處理電路2 0 5因應所需對於從位元流處理部 201輸出的立體圖像資料進行畫質調整處理等，且將處理 後的立體圖像資料供給至HDMI發送部2 06。聲音訊號處理 電路2 07因應所需對於從位元流處理部201輸出的聲音資料 進行音質調整處理等，且將處理後的聲音資料供給至 HDMI發送部206。 HDMI發送部206是藉由根據HDMI的通訊，從HDMI端 子202送出基頻的圖像（映像）及聲音的資料。此情況， 爲了以HDMI的TMDS頻道來發送，而圖像及聲音的資料會 被包裝，從HDMI發送部206輸出至HDMI端子202。此 HDMI發送部206的詳細會在往後敘述。 CPU211會控制機上盒200的各部動作。Flash ROM212 是進行控制軟體的儲存及資料的保管。DR AM21 3是構成 CPU211的工作區。CPU211是將從Flash ROM212讀出的軟 體或資料展開於DRAM213上而使軟體起動，控制機上盒 200的各部。 遙控接收部21 5是接收從遙控發送機216發送的遙控訊 號（遙控碼），供應給CPU21 1。CPU21 1會根據此遙控碼 來控制機上盒200的各部。CPU211、Flash ROM212及 -31 - 201116041 DRAM213是被連接至內部匯流排214。 簡單說明機上盒200的動作。被輸入天線端子203的電 視播放訊號是被供給至數位調諧器204。在此數位調諧器 204處理電視播放訊號，輸出對應於使用者的選擇頻道之 預定的位元流資料（傳輸流）。 從數位調諧器2〇4輸出的位元流資料是被供給至位元 流處理部201。在此位元流處理部201是從位元流資料抽出 立體圖像資料（左眼圖像資料、右眼圖像資料）、聲音資 料 '圖取資料、本文資料、視差向量等。並且，在此位元 流處理部201’對立體圖像資料合成重疊資訊（圖形資訊 、本文資訊等）的資料，產生顯示用立體圖像資料β 在位元流處理部201所產生的顯示用立體圖像資料是 在映像,訊號處理電路2 05因應所需進行畫質調整處理等之 後，供,給至H D ΜI發送部2 0 6。並且，在位元流處理部2 0 1 所取得的聲音資料是在聲音訊號處理電路207因應所需進 行音質調整處理等之後，供給至HDMI發送部206。被供給 至HDMI發送部2 06的立體圖像資料及聲音資料是藉由 HDMI的TMDS頻道來從HDMI端子 202送出至HDMI纜線400 [位元流處理部的構成例] 說明位元流處理部201的構成例。圖27是表示位元流 處理部201的構成例。此位元流處理部201是成爲使對應於 上述圖2所示的發送資料產生部11〇的構成。此位元流處理 -32- 201116041 部201是具有··解多工器220'視頻解碼器221、圖形解碼 器222、本文解碼器223、音頻解碼器224、及視差向量解 碼器225。並且，此位元流處理部201是具有：立體圖像用 圖形產生部226、立體圖像用本文產生部227、視頻重疊部 228、及多聲道揚聲器控制部229。 解多工器220是從位元流資料BSD抽出視頻、音頻、 視差向量、圖形及本文的TS封包，且傳送至各解碼器。 視頻解碼器22 1是進行與上述發送資料產生部！丨〇的視 頻編碼器1 13相反的處理。亦即，此視頻解碼器221是由在 解多工器22〇所抽出的視頻的封包來再構成視頻的基本流 ，進行解碼化處理，而取得包含左眼圖像資料及右眼圖像 資料的立體圖像資料。此立體圖像資料的傳送方式是例如 上述的第1傳送方式（「Top & Bottom」方式）、第2傳送 方式（「Side By Side」方式）、第3傳送方式（「Frame Sequential」方式）等（參照圖4(a)〜（c))。 圖形解碼器222是進行與上述發送資料產生部丨10的圖 形編碼器119相反的處理。亦即，此圖形解碼器222是由在 解多工器220所抽出的圖形的封包來再構成圖形的基本流 ，且進行解碼化處理，而取得圖形資料。 本文解碼器223是進行與上述發送資料產生部no的本 文編碼器121相反的處理》亦即，此本文解碼器223是由在 解多工器220所抽出的本文的封包來再構成本文的基本流 ，進行解碼化處理，而取得本文資料。 音頻解碼器224是進行與上述發送資料產生部！ 10的音 -33- 201116041 頻編碼器117相反的處理。亦即’此音頻解碼器224是由在 解多工器220所抽出的音頻的封包來再構成音頻的基本流 ，進行解碼化處理，而取得聲音資料。 視差向量解碼器225是進行與上述發送資料產生部110 的視差向量編碼器丨15相反的處理。亦即，此視差向量解 碼器225是由在解多工器220所抽出的視差向量的封包來再 構成視羞向量的基本流，進行解碼化處理，而取得圖像內 的預定位置的視差向量。 立體圖像用圖形產生部226是根據在解碼器222所取得 的圖形資料、及在解碼器225所取得的視差向量來產生分 別重疊於左眼圖像、右眼Λ像的左眼圖形資訊、右眼圖形 資訊。此情況，左眼圖形資訊及右眼圖形資訊是同一圖形 資訊。但，圖像內的重疊位置，例如對於左眼圖形資訊而 S ’右眼圖形資訊是僅視差向量的水平方向成分，會偏離 於水平方向。然後，此立體圖像用圖形產生部226會輸出 所被產生的左眼圖形資訊及右眼圖形資訊的資料（點陣圖 資料）。

I 立:體圖像用本文產生部227是根據在解碼器223所取得 的本文，資料、及在解碼器22 5所取得的視差向量來產生分 別重疊.於左眼圖像、右眼圖像的左眼本文資訊、右眼本文 資訊。此情況’左眼本文資訊及右眼本文資訊是同一本文 資訊’但圖像內的重疊位置，例如對於左眼本文資訊而言 ’右眼本文資訊是僅視差向量的水平方向成分，會偏離於 水平方向。然後，此立體圖像用本文產生部227會輸出所 -34- 201116041 被產生的左眼本文資訊及右眼本文資訊的資料（點陣圖資 料）。 視頻重疊部228是對於在視頻解碼器221所取得的立體 圖像資料（左眼圖像資料、右眼圖像資料）重疊在圖形產 生部2M所產生的資料，及在本文產生部227所產生的資料 ，取得顯示用立體圖像資料Vout。 多聲道揚聲器控制部229是對於在音頻解碼器224所取 得的聲音資料，例如實施產生用以實現5. 1 ch環繞等的多 聲道揚聲器的聲音資料之處理、賦予預定的音場特性之處 理等。並且，此多聲道揚聲器控制部229是根據在解碼器 22 5所取得的視差向量來控制多聲道揚聲器的輸出。 視差向量的大小越大，立體感越具顯著的效果。配合 立體的程度來控制多聲道的揚聲器輸出之下，可實現更立 體體験的提供。 圖28是表示視差向量VV1朝電視顯示器，左側的視頻 目標較大時的揚聲器輸出控制例。就此控制例而言，多聲 道揚聲器的Rear Left的揚聲器音量大，Front Left的揚聲 器音量爲中程度，且Front Right，Rear Right的揚聲器音 量小。如此，將視頻內容（立體圖像資料）的視差向量往 聲音資料等其他的媒體資料來適用在接收側之下，可使視 聽者綜合性地體驗立體感。 簡單說明圖27所示的位元流處理部201的動作。從數 位調諧器204 (參照圖26 )輸出的位元流資料BSD是被供 給至解多工器22〇。此解多工器220是從位元流資料BSD抽 -35- 201116041 出視頻、音頻、視差向量、圖形及本文的1^封包’且供應 給各解碼器。 在_頻解碼器221是由在解多工器2 20所抽出的視頻的 封包來再構成視頻的基本流，且進行解碼化處理’而取得

I 包含左眼圖像資料及右眼圖像資料的立體圖像資料。此立 體圖像資料是被供給至視頻重疊部228。並且’在視差向 量解碼器225是由在解多工器220所抽出的視差向量的封包

I 來再構成視差向量的基本流，且進行解碼化處理’而取得 圖像內杓預定位置的視差向量（參照圖8 )。 在圖形解碼器222是由在解多工器220所抽出的圖形的 封包來再構成圖形的基本流，且進行解碼化處理’而取得 圖形資料。此圖形資料是被供給至立體圖像用圖形產生部 2 26。在此立體圖像用圖形產生部226也被供給在視差向量 解碼器225所取得的視差向量》 在此立體圖像用圖形產生部226是根據在解碼器222所 取得的圖形資料及在解碼器225所取得的視差向量來產生 分別重嚜於左眼圖像、右眼圖像的左眼圖形資訊、右眼圖 形資訊。此情況，左眼圖形資訊及右眼圖形資訊是同一圖 形資訊，但圖像內的重疊位置，例如對於左眼圖形資訊而 言，右眼圖形資訊是僅視差向量的水平方向成分，會偏離 於水平方向。由此立體圖像用圖形產生部226來輸出所被 產生的左眼圖形資訊及右眼圖形資訊的資料（點陣圖資料 )° 並且’在本文解碼器223是由在解多工器220所抽出的 -36- 201116041 本文的TS封包來再構成本文的基本流，且進行解碼化處理 ’而取得本文資料。此本文資料是被供給至立體圖像用本 文產生部227。在此立體圖像用本文產生部227也被供給在 視差向量解碼器22 5所取得的視差向量。 在此II體圖像用本文產生部227是根據在解碼器223所 取得的本文資料、及在解碼器22 5所取得的視差向量來產 生分別重疊於左眼圖像、右眼圖像的左眼本文資訊、右眼 本文資訊。此情況，左眼本文資訊及右眼本文資訊是同一 本文資訊，但圖像內的重疊位置，例如對於左眼本文資訊 而言’右眼本文資訊是僅視差向量的水平方向成分，會偏 離於水平方向。由此立體圖像用本文產生部227來輸出所 被產生的左眼本文資訊及右眼本文資訊的資料（點陣圖資 料）。 在視頻重疊部228是除了來自上述視頻解碼器221的立 體圖像資料（左眼圖像資料、右眼圖像資料）以外，還被 供給從圖形產生部226及本文產生部227輸出的資料。此視 頻重疊部228是對立體圖像資料（左眼圖像資料、右眼圖 像資料）重疊在圖形產生部226及本文產生部227所產生的 資料，取得顯示用立體圖像資料Vout。此顯示用立體圖像 資料V〇ut是經由映像訊號處理電路205來作爲發送圖像資 料供給至H D ΜI發送部2 0 6 (參照圖2 6 )。 並且，在音頻解碼器224是由在解多工器220所抽出的 音頻的TS封包來再構成音頻的基本流，且進行解碼化處理 ’而取得聲音資料。此聲音資料是被供給至多聲道揚聲器 -37- 201116041 控制部》29。此多聲道揚聲器控制部229是對於聲音資料， 例如實施產生用以實現5.lch環繞等的多聲道揚聲器的聲 音資料之處理、賦予預定的音場特性之處理等。 在此多聲道揚聲器控制部229也被供給在視差向量解 碼器225所取得的視差向量。而且，在此多聲道揚聲器控 制部229是根據視差向量來控制多聲道揚聲器的輸出。在 此多聲道揚聲器控制部2 2 9所取得的多聲道聲音資料是經 由聲音訊號處理電路2〇7來作爲發送聲音資料供給至HDMI 發送部2〇6 (參照圖26 )。 另外’上述圖27所示的位元流處理部2〇1是成爲使對 應於上述圖2所示的發送資料產生部110的構成。圖29所示 的位兀流處理部201A是成爲使對應於上述圖13所示的發 送資料產生部110A的構成。在此圖29中，在與圖27對應 的部分附上同一符號，省略其詳細說明。 此位元流處理部20 1A是取代圖27所示的位元流處理 部201的視差向量解碼器225 ’而設置視差向量取出部231 。此視差向量取出部231是從經由視頻解碼器221所取得的 視頻的串流來取出被埋入於該使用者資料領域的視差向量 。而且’此視差向量取出部231會將取出的視差向量供應 給立體圖像用圖形產生部206、立體圖像用本文產生部2 27 及多聲道揚聲器控制部229。 雖詳細說明省略’但實際此圖29所示的位元流處理部 201 A的其他是與圖27所示的位元流處理部201同樣構成。 又，圖30所示的位元流處理部201B是形成使對應於上 -38- 201116041 述圖18所示的發送資料產生部110B的構成。在此圖30中， 與圖27對應的部分附上同一符號，其詳細說明省略。 此位元流處理部20 1 B是從圖27所示的位元流處理部 201去除視差向量解碼器225 '立體圖像用圖形產生部206 及立體圖像用本文產生部2〇7者。此情況，視差向量是含 於圖形資訊、本文資訊的資料而發送來。並且，在發送來 的圖形資料中，如上述般，含有被重疊於左眼圖像的左眼 圖形資訊的資料及被重疊於右眼圖像的右眼圖形資訊的資 料。同樣，在發送來的本文資料中，如上述般，含有被重 疊於左眼圖像的左眼本文資訊的資料及被重疊於右眼圖像 的右眼本文資訊的資料。因此，視差向量解碼器225、立 體圖像用圖形產生部206及立體圖像用本文產生部207不要 〇 另外’在本文解碼器223所取得的本文資料是碼資料 ’因此需要予以變換成點陣圖資料的處理。此處理是例如 在本文解碼器223的最終段進行，或在視頻重疊部228的輸 入段進行。 [電視接收機的說明] 回到圖1 ’電視接收機300是接收從機上盒200經由 HDMI纜線400而送來的立體圖像資料。此電視接收機3〇〇 是具有3D訊號處理部3〇1。此3D訊號處理部3〇1是對立體 圖像資料進行對應於傳送方式的處理（解碼處理），而產 生左眼圖像資料及右眼圖像資料。亦即，此3D訊號處理 -39- 201116041 部301是進行與圖2、圖13、圖18所示的發送資料產生部 1 10，1 10A，1 10B的視頻訊框部1 12相反的處理，而取得

I 構成立體圖像資料的左眼圖像資料及右眼圖像資料。 [電,視接收機的構成例] 說明電視接收機3 00的構成例。圖3 1是表示電視接收 機3 00的構成例。此電視接收機3 00是具有：3D訊號處理 部301、11〇]^1端子302、1101^1接收部303、天線端子3 04、 數位調諧器305、及位元流處理部306。又，此電視接收機 3 〇〇是具有：映像訊號處理電路307、面板驅動電路308、 顯示面板309、聲音訊號處理電路310、聲音放大電路311 、及揚:聲器312。又，此電視接收機300是具有：CPU321 、Flash ROM322、DRAM3 23、內部匯流排324、遙控接收 部325、及遙控發送機326。 天，線端子304是輸入在接收天線（未圖示）所接收的 電視播放訊號之端子。數位調諧器305是處理被輸入至天 線端子3〇4的電視播放訊號，而輸出對應於使用者的選擇 頻道之預定的位元流資料（傳輸流）。 位元流處理部3 06是形成與圖26所示的機上盒200的位 元流處:理部201同樣的構成。此位元流處理部3 06是從位元 流資料抽出立體圖像資料（左眼圖像資料、右眼圖像資料 )、聲音資料、圖形資料、本文資料、視差向量等。而且 ’此位元流處理部306是對立體圖像資料合成重疊資訊（ 圖形資訊、本文資訊）的資料，取得顯示用立體圖像資料 -40- 201116041 。並且，位元流處理部3 0 6輸出聲音資料。 HDMI接收部3 03是藉由根據HDMI的通訊，接收經由 1101^1纜線400來供給至}1〇]^1端子3 02的非壓縮的圖像資料 (立體圖像資料）及聲音資料。此HDMI接收部303的詳細 會在往後敘述。3D訊號處理部301是對於在HDMI接收部 3〇3所接收或在位元流處理部306所取得的立體圖像資料進 行對應於傳送方式的處理（解碼處理），而產生左眼圖像 資料及右眼圖像資料。 映像訊號處理電路307是根據在3D訊號處理部301所 產生的左眼圖像資料及右眼圖像資料來產生用以顯示立體 圖像的圖像資料。又，映像訊號處理電路因應所需對圖像 資料進行畫質調整處理。面板驅動電路308是根據從映像 訊號處理電路307輸出的圖像資料來驅動顯示面板3〇9。顯 不面板 309是例如以 LCD ( Liquid Crystal Display) 、PDP (Plasma Display Panel)等所構成。 聲音訊號處理電路310是對於在HDMI接收部303所接 收，或在位元流處理部3 0 6所取得之聲音資料進行d / A變 換等必要的處理。聲音放大電路311是放大從聲音訊號處 理電路3 1 0輸出的聲音訊號，而供給至揚聲器3丨2。 CPU321是控制電視接收機300的各部動作。Fiash ROM3 22是進行控制軟體的儲存及資料的保管。DRAM323 是構成CPU321的工作區。CPU321會將從Flash ROM322讀 出的軟體或資料展開於DRAM323上而使軟體起動，控制 電視接收機300的各部。 -41 - 201116041 遙璘接收部325是接收從遙控發送機326發送的遠程控 制訊號（遙控碼），供應給CPU321。CPU321會根據此遙 控碼來控制電視接收機300的各部》CPU321、Flash ROM3 22及DRAM323是被連接至內部匯流排324。 簡單說明圖31所示的電視接收機300的動作。在HDMI 接收部3〇3是接收從經由HDMI纜線400來連接至HDMI端子 3 〇2的機上盒200所發送而來的立體圖像資料及聲音資料。 在此HDMI接收部3 03接收的立體圖像資料是被供給至3D訊 號處理部301。並且，在此HDMI接收部303所接收的聲音 資料是被供給至聲音訊號處理電路310。 被輸入天線端子304的電視播放訊號是被供給至數位 調諧器305。在此數位調諧器305是處理電視播放訊號，輸 出對應於使用者的選擇頻道之預定的位元流資料（傳輸流 )° 從屬位調g皆器305輸出的位元流資料是被供給至位元 流處理部3〇6。在此位元流處理部3〇6是從位元流資料抽出 立體圖像資料（左眼圖像資料、右眼圖像資料）、聲音資 料、圖_形資料、本文資料、視差向量等。並且，在此位元 流處理部3 06是對立體圖像資料合成重疊資訊（圖形資訊 、本文資訊）的資料，產生顯示用立體圖像資料。 在位兀流處理部306所產生的顯示用立體圖像資料是 被供給至3D訊號處理部3〇1。並且，在此位元流處理部 3〇6所取得的聲音資料是被供給至聲音訊號處理電路3 1 0。 在3D訊號處理部3〇1是對於在接收部所接收 -42- 201116041 ，或在位元流處理部306所取得的立體圖像資料進行對應 於傳送方式的處理（解碼處理），產生左眼圖像資料及右 眼圖像資料。此左眼圖像資料及右眼圖像資料是被供給至 映像訊號處理電路3 07。在此映像訊號處理電路3 0 7是根據 左眼圖像資料及右眼圖像資料來產生用以顯示立體圖像的 圖像資料。因此，藉由顯示面板309來顯示立體圖像。 並且，在聲音訊號處理電路310是對於在HDMI接收部 3〇3所接收，或在位元流處理部306所取得的聲音資料實施 D/A變換等必要的處理。此聲音資料是在聲音放大電路 311被放大後，供應給揚聲器312。因此，從揚聲器312輸 出聲音。 [HDMI發送部、HDMI接收部的構成例] 圖32是表示圖1的立體圖像顯示系統10之機上盒200的 HDMI發送部（HDMI訊號發送端）206、及電視接收機300 的HDMI接收部（HDMI訊號接收端）3 03的構成例。 HDMI發送部206是在有效圖像區間（以下亦適當稱爲 主動視頻區間）中，將對應於非壓縮的1畫面分的圖像的 畫素資料之差動訊號，以複數的頻道來於一方向發送至 HDMI接收部3 03。在此，有效圖像區間是由從一個垂直同 步訊號到其次的垂直同步訊號的區間去掉水平回掃區間及 垂直回掃區間的區間。並且，HDMI發送部206是在水平回 掃區間或垂直回掃區間，至少將附隨於圖像的聲音資料或 控制資料及其他的輔助資料等所對應的差動訊號，以複數 -43- 201116041 的頻道來於一方向發送至HDMI接收部3 03。 在由HDMI發送部206及HDMI接收部303所構成的 HDMI系統的傳送頻道是具有以下的傳送頻道。亦即，具 有3個的TMDS頻道#0〜#2，其係作爲用以從HDMI發送部 206來對HDMI接收部303，將畫素資料及聲音資料同步於 像素時脈來於一方向串聯傳送之傳送頻道。又，有作爲傳 送像素時脈的傳送頻道之TMDS時脈頻道。 HDMI發送部206是具有HDMI發送器81。發送器81是 例如將非壓縮的圖像的畫素資料變換成所對應的差動訊號 ，以複數的頻道亦即3個的TMDS頻道#0，#1，#2來於一方 向串聯傳送至經由HDMI纜線400而連接的HDMI接收部303 〇 又，發送器81是將附隨於非壓縮的圖像之聲音資料， 甚至必摩的控制資料及其他的輔助資料等變換成所對應的 差動訊，號，以3個的TMDS頻道#0，#1，#2來於一方向串聯 傳送至HDMI接收部3 03。 又，發送器81是以TMDS時脈頻道來將同步於在3個的 TMDS頻道#0，#1，#2所發送的畫素資料的像素時脈發送 至經由HDMI纜線400來連接的HDMI接收部3 03。在此，1 個的TMDS頻道#i ( i = 0，1，2 )是在像素時脈的1時脈的 期間發送1 〇位元的畫素資料。 HDMI接收部303是接收在主動視頻區間，以複數的頻 道，從HDMI發送部20 6發送於一方向而來之畫素資料所對 應的差動訊號。並且，此HDMI接收部3 03是接收在水平回 -44 - 201116041 掃區間或垂直回掃區間，以複數的頻道，從HDMI發送部 2 06發送於一方向而來之聲音資料或控制資料所對應的差 動訊號。 亦即，HDMI接收部3 03具有HDMI接收器82。此HDMI 接收器82是接收在TMDS頻道#0，#1，#2，從HDMI發送部 2 06發送於一方向而來之畫素資料所對應的差動訊號、及 聲音資料或控制資料所對應的差動訊號。此情況，與從 HDMI發送部206發送於TMDS時脈頻道而來的像素時脈同 步接收。 由HDMI發送部206及HDMI接收部303所構成的HDMI 系統的傳送頻道是除了上述的TMDS頻道#0〜#2及TMDS時 脈頻道以外，還有DDC ( Display Data Channel) 83或被稱 爲CEC線84的傳送頻道。DDC83是由含於HDMI纜線400的 2條訊號線（未圖示）所構成，供以HDMI發送部206從經 由HDMI纜線400來連接的HDMI接收部303讀出E-EDID ( Enhanced Extended Display Identification Data)時使用 ο 即，H D ΜI接收部3 0 3是除了 H D ΜI接收器8 1以外，還 具有 EDID ROM (Read Only Memory) 85，其係記憶有關 本身的性能（Configuration/capability )的性能資訊之E-EDID。HDMI發送部206是例如按照來自CPU21 1 (參照圖 26)的要求，從經由HDMI纜線400來連接的HDMI接收部 3 03經由DDC8 3讀出該HDMI接收部303的E-EDID。 HDMI發送部206是將讀出的E-EDID送至CPU211。 -45- 201116041 CPU211是將此 E-EDID 儲存於 Flash ROM212 或 DRAM213。 CPU211可根據E-EDID來辨識HDMI接收部303的性能 設定。例如，CPU211會辨識具有HDMI接收部3 03的電視 接收機3 00所能對應的圖像資料的格式（解像度、訊框速

I 率、寬高等）。 C E,C線8 4是由H D ΜI纜線4 0 0所含的1根訊號線（未圖 示）所構成，在HDMI發送部206與HDMI接收部3 03之間， 爲了進行控制用的資料的雙向通訊而被使用。此CEC線84 是構成控制資料線。 並且，在HDMI纜線400中含有被連接至所謂HPD ( Hot Plug Detect )的針腳之線（HPD線）86。訊號發送端 機器可利用該線86來檢測出訊號接收端機器的連接。而且 ，在HDMI纜線400中含有爲了從訊號發送端機器供給電源 至訊號接收端機器而被使用的線87。更在HDMI纜線400中 含有預定線8 8。 圖33是表示圖32的HDMI發送器81與HDMI接收器82的 構成例》HDMI發送器81是具有分別對應於3個的TMDS頻 道#0，#1，#2之3個的編碼器/並串列轉換器81A，81B， 81C。而且，編碼器/並串列轉換器81A，81B，81C分別將 供應於.此的圖像資料、輔助資料、控制資料予以編碼，從 並列資料來變換成串聯資料，根據差動訊號來發送。在此 ，圖像資料例如爲具有R，G，B的3成分時，B成分是被供 給至編碼器/並串列轉換器81 A，G成分是被供給至編碼器/ 並串列轉換器8 1 B，R成分是被供給至編碼器/並串列轉換 -46- 201116041 器 8 1 C。 又’輔助資料是例如具有聲音資料或控制封包，控制 封包是例如被供給至編碼器/並串列轉換器8 1 A，聲音資料 是被供應給編碼器/並串列轉換器8 1 B，8 1 C »又，控制資 料是具有1位元的垂直同步訊號（VSYNC ) 、：I位元的水平 同步訊號（HSYNC )、及各個1位元的控制位元CTL0， CTL1，CTL2，CTL3。垂直同步訊號及水平同步訊號是被 供給至編碼器/並串列轉換器8 1 A。控制位元C T L 0，C T L 1 是被供給至編碼器/並串列轉換器8 1 B，控制位元C T L 2， CTL3是被供給至編碼器/並串列轉換器81C。 編碼器/並串列轉換器8 1 A是以時間分割來發送被供應 於此的圖像資料的B成分、垂直同步訊號及水平同步訊號 、以及輔助資料。亦即，編碼器/並串列轉換器8 1 A會將被 供應於此的圖像資料的B成分設爲固定的位元數之8位元單 位的並列資料。而且，編碼器/並串列轉換器81 A會將該並 列資料予以編碼，變換成串聯資料，而以TMDS頻道#0來 發送。 並且，編碼器/並串列轉換器81 A會將供應於此的垂直 同步訊號及水平同步訊號的2位元的並列資料予以編碼， 變換成串聯資料，而以TMDS頻道#0來發送。而且，編碼 器/並串列轉換器8 1 A會將供應於此的輔助資料設爲4位元 單位的並列資料。然後，編碼器/並串列轉換器8 1 A會將該 並列資料予以編碼，變換成串聯資料，而以TMDS頻道#0 來發送。 -47- 201116041 編碼器/並串列轉換器8 1 B是以時間分割來發送供應於 此的圖像資料的G成分、控制位元CTL0，CTL1、及輔助 資料。亦即，編碼器/並串列轉換器81B會將供應於此的圖 像資料的G成分設爲固定的位元數之8位元單位的並列資 料。而旦，編碼器/並串列轉換器8 1 B會將該並列資料予以 編碼，變換成串聯資料，而以TMDS頻道#1來發送。 並且，編碼器/並串列轉換器81B會將供應於此的控制 位元CTLO，CTL1的2位元的並列資料予以編碼，變換成串 聯資料，而以TMDS頻道#1來發送。而且，編碼器/並串列 轉換器8 1 B會將供應於此的輔助資料設爲4位元單位的並列 資料。然後，編碼器/並串列轉換器81B會將該並列資料予 以編碼，變換成串聯資料，而以TMDS頻道#1來發送。 編碼器/並串列轉換器8 1 C是以時間分割來發送被供應 於此的圖像資料的R成分、控制位元CTL2，CTL3、及輔 助資料。亦即，編碼器/並串列轉換器8 1 C會將供應於此的 圖像資料的R成分設爲固定的位元數之8位元單位的並列資 料。而且，編碼器/並串列轉換器81C會將該並列資料予以 編碼，變換成串聯資料，而以TMDS頻道#2來發送。 並且，編碼器/並串列轉換器8 1 C會將供應於此的控制 位元CTL2，CTL3的2位元的並列資料予以編碼，變換成串 聯資料，而以TMDS頻道#2來發送。而且，編碼器/並串列 轉換器8 1 C會將供應於此的輔助資料設爲4位元單位的並列 資料。然後，編碼器/並串列轉換器8 1C會將該並列資料予 以編碼，變換成串聯資料，而以TMDS頻道#2來發送。 -48- 201116041 HDMI接收器82是具有分別對應於3個的TMDS頻道#0 ，#1，#2之3個的復原/解碼器82A，82B，82C。而且，復 原/解碼器82A，82B，82C是分別接受在TMDS頻道#0，#1 ’ #2根據差動訊號發送而來的圖像資料、輔助資料、及控 制資料。又，復原/解碼器82A，82B，82C會分別將圖像 資料、輔助資料、控制資料予以從串聯資料變換成並列資 料’且解碼而輸出。 亦即，復原/解碼器82A是接收在TMDS頻道#0根據差 動訊號發送而來的圖像資料的B成分、垂直同步訊號及水 平同步訊號、輔助資料。而且，復原/解碼器8 2 A會將該圖 像資料的B成分、垂直同步訊號及水平同步訊號、輔助資 料予以從串聯資料變換成並列資料，且解碼而輸出。 復原/解碼器82B是接收在TMDS頻道#1根據差動訊號 發送而來的圖像資料的G成分、控制位元CTLO，CTL1、 及輔助資料。而且，復原/解碼器82 B會將該圖像資料的G 成分、控制位元CTL0，CTL1、及輔助資料予以從串聯資 料變換成並列資料，且解碼而輸出。 復原/解碼器82C是接收在TMDS頻道#2根據差動訊號 發送而來的圖像資料的R成分、控制位元CTL2，CTL3、 及輔助資料。而且，復原/解碼器82C會將該圖像資料的R 成分、控制位元CTL2，CTL3、及輔助資料予以從串聯資 料變換成並列資料，且解碼而輸出。 圖34是表示TMDS傳送資料的構造例。此圖34是表示 在TMDS頻道#〇，，#2中，傳送橫X縱爲1920像素xl〇80 -49- 201116041 線的圖像資料時之各種的傳送資料的區間。 在HDMI的3個TMDS頻道#0，#1，#2被傳送傳送資料 的視頻場（Video Field)是按照傳送資料的種類而存在3 種類的，區間。此3種類的區間是視頻資料區間（Video Data period)、資料島區間（Data Island period)、及控 制區間（Control period)。 在此，視頻場區間是從某垂直同步訊號的作用邊緣（ active edge)到其次的垂直同步訊號的作用邊緣爲止的區 間。此視頻場區間是分成水平空白期間（horizontal blanking)、垂直空白期間（vertical blanking)、及主動 視頻區間（Active Video )。此主動視頻區間是從視頻場 區間去掉水平空白期間及垂直空白期間的區間。 視頻資料區間是被分配於主動視頻區間。在此視頻資 料區間.是被傳送構成非壓縮的1畫面分的圖像資料之1920 像素（畫素）xl080線分的有效畫素（Active pixel)的資 料。 資料島區間及控制區間是被分配於水平空白期間及垂 直空白期間。‘在此資料島區間及控制區間是被傳送輔助資 料（Auxiliary data )。亦即，資料島區間是被分配於水 平空白期間與垂直空白期間的一部分。在此資料島區間是 被傳送輔助資料的其中，無關控制的資料，例如聲音資料 的封包等。 控制區間是被分配於水平空白期間與垂直空白期間的 其他部分。在此控制區間是被傳送輔助資料的其中，有關 -50- 201116041 控制的資料，例如垂直同步訊號及水平同步訊號、控制封 包等。 圖35是表示HDMI端子211，251的針腳配列的一例。 圖35所示的針腳配列是被稱爲型式人（1丫？^八）。 傳送TMDS頻道#i的差動訊號之TMDS Data#i +及TMDS Data#i-的差動線之2條的線是被連接至分配有TMDS Data#i +的針腳（針腳號碼爲1，4，7的針腳）、及分配有 TMDSData#i-的針腳（針腳號碼爲3，6，9的針腳）。 並且，傳送控制用的資料之CEC訊號的CEC線84是被 連接至針腳號碼爲1 3的針腳，針腳號碼爲1 4的針腳是形成 空（Reserved )針腳。而且，傳送E-EDID等的SDA ( Serial Data)訊號的線是被連接至針腳號碼爲16的針腳。 傳送在SDA訊號的送接收時同步使用的時脈訊號之SCL ( Serial Clock)訊號的線是被連接至針腳號碼爲15的針腳 。上述的DDC83是藉由傳送SDA訊號的線及傳送SCL訊號 的線所構成。 又，如上述般用以檢測出訊號發送端機器連接訊號接 收端機器的HPD線（HEAC-線）86是被連接至針腳號碼爲 1 9的針腳。又，如上述般用以供給電源的線87是被連接至 針腳號碼爲1 8的針腳。 [立體圖像資料的各方式之TMD S傳送資料例] 在此，說明立體圖像資料的各方式之TMDS傳送資料 例。 -51 - 201116041 圖36是表示第1傳送方式（「τ〇ρ & Bottom」方式） 的TMDS傳送資料例。此情況，在192〇像素χ1〇8〇線的主動 視頻區間配置有1 920像素（畫素）χ1〇8〇線分的有效畫素 (Active pixel)的資料（左眼（l)圖像資料及右眼（R )圖像資料的合成資料）。此第i方式的情況，如上述般 ’左眼圖像資料及右眼圖像資料是分別垂直方向的線被間 拔成1/2。在此’應傳送的左眼圖像資料是奇數線或偶數 線的其中任一’同樣，應傳送的右眼圖像資料是奇數線或 偶數線的其中任一。 圖3 7是表示第2傳送方式（rSide By Side」方式）的 TMDS傳送資料例。此情況，在192〇像素χ1〇8〇線的主動視 頻區間配置有1 920像素（畫素）χ1〇8〇線分的有效畫素（

Active pixel)的資料（左眼（l)圖像資料及右眼（民） 圖像資料的合成資料）。此第2傳送方式的情況，如上述 ’左眼圖像資料及右眼圖像資料是分別水平方向的像素資 料被間拔成1/2。 圖,38是表不第3傳送方式（「Frame Sequential」方式 )的TMDS傳送資料例。此情況，在奇數場的192〇像素 X 1 080線的主動視頻區間配置有192〇像素（畫素）乂⑺“線 分的有效畫素（Active pixel)的左眼（L)圖像資料。並 且’在偶數場的1 920像素X 1〇8〇線的主動視頻區間配置有 1 920像素（畫素）x〗〇80線分的有效畫素（Active pixel) 的右眼（R )圖像資料。

另外’圖38所不的「Frame Sequential」方式的TMDS -52- 201116041 傳送資料例是表示在HDMI 1.4(New HDMI)的「Frame Sequential」方式。此情況，如圖39 ( a )所示，於各訊框 期間Vfreq ’在奇數場配置有左眼圖像資料，在偶數場配 置有右眼圖像資料。 但’在HDMI 1.3 ( Legacy HDMI)的「Frame Sequential 」方式時，如圖3 9 ( b )所示，在每訊框期間v fr e q，左眼 圖像資料與右眼圖像資料是交替地被傳送。此情況，訊號 發送端機器需要將顯示每訊框所被傳送的圖像資料爲左眼 圖像資料或右眼圖像資料的資訊（L，R的signaling資訊） 發送至訊號接收端機器。 將「Top & Bottom」方式、「Side By Side」方式、 「Frame Sequential」方式的立體圖像資料發送至訊號接 收端機器時，在訊號發送端機器側指定方式，且在「 Frame Sequential」方式時，使L，R在每訊框進行 signaling 〇 例如，重新定義以下的語法規則（S y n t a X )所被定義 於 Legacy HDMI規格的空白之 Vendor Specific、或 AVI InfoFrame、或者 Reserved 之一，而傳送。 HDMI 1.3時，作爲在空白期間傳送的資訊是被定義爲 其次者。

InfoFrarae Type # (8bits) 0x01: Vendor Specific 0x02： AVI InfoFrarae 0x03: Source Product Description 0x04: Audio InfoFrame 0x05： MPEG Source 0x06 - OxFF Reserved -53- 201116041 重新定義其中的 Vendor sPecific、或 AVI InfoFrame 、或者未使用領域之一，而形成以下那樣。 3DVideoFlag lbit if (3DVideoFlag) { 3DVideoFormat 3bits

Reserved 4bits } else { Reserved 7bits (0: 2D, 1: 3D) (0x0: Frame Packing Left View 0x1： Frame Packing Right View 0x2: Side by Side 0x4： Top & Bottom by Frame 0x6: Top & Bottom by Field 0x3, 5, 7: Reserved ) (0x0) (0x0) 在上述的資訊中含有3次元圖像資料及2次元圖像資料 的轉換，資訊（1位元的3DVide〇FUg資訊）、及3次元圖像 資料的格式的指定或左眼圖像資料及右眼圖像資料的轉換 的資訊（3位元的3DVideoFormat資訊）。 另外，此資訊是應被定義成在被播放同樣的內容的位 元流中’以圖片檔頭或相當於該圖片檔頭的時序來傳送的 輔助資訊者。此情況，在此位元流中擇—性地含有3次元 圖像資料（由左眼圖像資料及右眼圖像資料所構成的立體 圖像資料）或2次元圖像資料。接收機（機上盒2〇〇)是在 接收其串流時，將此通訊（Signaling)資訊送往後段的數 位介面’藉此可在顯示器（電視接收機3〇〇)中謀求進行 正確的3D變換。 並且’接收機在轉換資訊（1位元的3DVideoFlag資訊 )爲顯示3次兀圖像資料時，亦即資料流含3次元圖像資料 -54- 201116041 時，可從播放伺服器等的外部機器來下載安裝用以處理此 3次元圖像資料的軟體。 例如，爲了傳送上述3D資訊，需要在HDMI1.3對應的 系統上以追加來對應、或更新HDMI1 ·4對應的系統的軟體 。因此，在軟體的更新時，例如爲了傳送上述的3D資訊 所必要的韋刃體（Firmware)、中介軟體（Middleware)相 關的軟體會成爲更新的對象。 如上述般，在圖1所示的立體圖像顯示系統1 〇中，是 根據對左眼圖像及右眼圖像的一方之另一方的視差資訊來 對重疊於左眼圖像及右眼圖像的同一重疊資訊（圖形資訊 、本文資訊等）賦予視差。因此，可使用按照圖像內的各 物體（目標）的遠近感來實施視差調整者作爲被重疊於左 眼圖像及右眼圖像的同一重疊資訊，在重疊資訊的顯示中 ，可維持與圖像內的各物體之間的遠近感的整合性。 <2.變形例> 另外，在上述實施形態中，是從廣播電視台1 〇〇側往 機上盒200發送來圖像內的預定位置的視差向量。此情況 ’機上盒200不必根據所接收的立體圖像資料中含的左眼 圖像資料及右眼圖像資料來取得視差向量，機上盒2 0 0的 處理會變簡單。 但，立體圖像資料的接收側，亦可想像上述實施形態 是在機上盒200配置與圖2的發送資料產生部1 10的視差向 量檢測部1 1 4同等的視差向量檢測部。此情況，即使視差 -55- 201116041 向量未被送來’還是可進行利用視差向量的處理。 圖40是表示設於機上盒200的位元流處理部201C的構 成例。在此圖40中，與圖27對應的部分是附上同—符號， 其詳細說明省略。在此位元流處理部2 0 1 C是配置有視差向 量檢測部2 3 3 ’而取代圖27所示的位元流處理部201的視差

I 向量解碼器225。 此視差向量檢測部23 3是根據在視頻解碼器221所取得 之構成立體圖像資料的左眼圖像資料及右眼圖像資料來檢 測出圖像內的預定位置的視差向量。然後，此視差向量檢 測部2 3 3會將所檢測出的視差向量供應給立體圖像用圖形 產生部206、立體圖像用本文產生部22 7及多聲道揚聲器輸 出控制$ 229。 雖詳細說明省略，但實際此圖40所示的位元流處理部 201C的其他是與圖27所示的位元流處理部201同樣構成》 並且’在上述實施形態中，立體圖像顯示系統10是顯 示以廣播電視台100、機上盒200及電視接收機300所構成 者。但’電視接收機3 00是如圖31所示，具備與機上盒200 內的位元流處理部201同等功能的位元流處理部201。因此 ’如圖.41所示，亦可想像是以廣播電視台100及電視接收 機3 00所構成的立體圖像顯示系統10A。 而且’在上述實施例中是顯示包含立體圖像資料的資 料流（位元流資料）爲從廣播電視台1 〇 〇所播放的例子。 但’本發明當然可同樣適用於此資料流爲利用網際網路等 的網路來傳送至接收終端裝置的構成之系統。 -56 - 201116041 [產業上的利用可能性] 本發明是可適用於將圖形資訊、本文資訊等的重疊資 訊重疊於圖像來顯示的立體圖像顯示系統等。 【圖式簡單說明】 圖1是表示作爲本發明的實施形態之立體圖像顯示系 統的構成例的方塊圖。 圖2是表示廣播電視台的發送資料產生部的構成例的 方塊圖。 圖3是表示192〇χ 1 080p的像素格式的圖像資料的圖。 圖4是用以說明立體圖像資料（3D圖像資料）的傳送 方式之「Top & Bottom」方式，「Side By Side」方式， 「Frame Sequential」方式的圖。 圖5是用以說明檢測出右眼圖像對左眼圖像的視差向 量的例圖。 圖6是用以說明以區塊匹配方式來求取視差向量的圖 〇 圖7是表示在視差向量檢測部所被檢測出之圖像內的 預定位置的視差向量VV的一例圖。 圖8是表不視差向量的傳送內容的圖。 圖9是表示視差檢測區塊例、及該情況的視差向量的 傳送內容的圖。 圖1 〇是用以說明檢測出視差向量而傳送的時序例的圖 -57- 201116041 圖11是用以說明檢測出視差向量而傳送的時序例的圖 〇 圖12是表示在發送資料產生部中被多重化的各資料的 串流例圖。 圖1.3是表示廣播電視台的發送資料產生部的其他構成 例的方塊圖。 圖丨4是用以說明傳送方式爲第1傳送方式（「Top & Bottom」方式）時之左眼圖形資訊及右眼圖形資訊的重疊 位置等的圖。 圖15是用以說明傳送方式爲第1傳送方式（「Top & Bottom」方式）時之左眼圖形資訊及右眼圖形資訊的產生 方法的圖。 圖16是用以說明傳送方式爲第2傳送方式（^ Side By Side」方式）時之左眼圖形資訊及右眼圖形資訊的產生方 法的圖。 圖17是用以說明傳送方式爲第2傳送方式（「Side By Side」方式）時之左眼圖形資訊及右眼圖形資訊的產生方 法的圖。 圖.18是表示廣播電視台的發送資料產生部的其他構成 例的方,塊圖。 圖19是表示傳送方式爲第2傳送方式（「Side By Side j方式）時之左眼圖形資訊及右眼圖形資訊的重疊位置。 圖2 0是表示對於左眼圖像、右眼圖像，將從位元流資 -58- 201116041 料抽出之藉由以往的方法來傳送的圖形資料的圖形圖像予 以原封不動重疊的狀態圖。 圖21是表示在時刻ΤΟ’ ΤΙ ’ Τ2’ T3的3個目標位置的 視差向量（View Vector)。 圖22是表示圖像上的字幕（圖形資訊）的顯示例、及 背景、近景目標、字幕的遠近感的圖。 圖23是表示圖像上的字幕（圖形資訊）的顯示例、及 用以顯示字幕的左眼圖形資訊LGI及右眼圖形資訊RGI的 圖。 圖24是用以說明視差向量爲使用在圖像內的複數位置 所被檢測出的視差向量之中，對應於其重疊位置者的圖。 圖25是表示在圖像內存在A，B，C的各目標，在該等 各目標的近旁位置重疊顯示各目標的註釋之本文資訊的圖 〇 圖26是表示機上盒的構成例的方塊圖。 圖27是表示構成機上盒的位元流處理部的構成例的方 塊圖。 圖2 8是表示視差向量VV 1朝向電視顯示器左側的視頻 目標較大時的揚聲器輸出控制例圖。 圖2 9是表示構成機上盒的位元流處理部的其他構成例 的方塊圖。 圖3 0是表示構成機上盒的位元流處理部的其他構成例 的方塊圖。 圖3 1是表示電視接收機的構成例圖。 -59- 201116041 圖32是表示HDMI發送部（HDMI訊號發送端）與 HDMI接收部（HDMI訊號接收端）的構成例的方塊圖。 圖33是表示構成HDMI發送部的HDMI發送器、及構成 HDMI接收部的HDMI接收器的構成例的方塊圖。 圖34是表示TMDS傳送資料的構造例（傳送橫X縱爲 1 920像素X 1 08 0線的圖像資料時）。 圖35是表示訊號發送端機器及訊號接收端機器的 HDMI纜線所連接的HDMI端子的針腳配列（型式A )。 圖36是表不第1傳送方式（「Top & Bottom」方式） 的TMDS傳送資料例圖。 圖37是表示第2傳送方式（「Side By Side」方式）的 TMDS傳送資料例圖。 圖38是表不第3傳送方式（「Frame Sequential」方式 )的TMDS傳送資料例圖。 圖39是用以說明在HDMI 1_4( New HDMI)的「 Frame Sequential」方式、及在 HDMI 1.3 ( Legacy HDMI )的「Frame Sequential」方式》 圖4 0是表示構成機上盒的位元流處理部的其他構成例 r 的方塊圖。 圖41是表示立體圖像顯示系統的其他構成例圖。 圖42表示在利用兩眼視差的立體圖像顯示中，螢幕上 的目標的左右像的顯示位置與其立體像的再生位置的關係 -60- 201116041 【主要元件符號說明】 ί顯示系統 發送資料產生部 機 部 器 1 0，1 0 A :立體圖僖 1 0 0 :廣播電視台 110，1 10 A，110B ： 1 1 1 L，1 1 1 R :攝影 1 1 2 :視頻訊框部 1 1 3 :視頻編碼器 1 1 4 :視差向量檢測 1 1 5 :視差向量編碼 1 16 :麥克風 1 1 7 :音頻編碼器 1 1 8 :圖形產生部 1 1 9 :圖形編碼器 1 2 0 :本文產生部 1 2 1 :本文編碼器 122 :多工器 123 :串流訊框部 1 2 4 .圖形處理部 1 2 5 :本文處理部 2 0 0 :機上盒 2 0 1 C :位元流處理部 201，201A，201B， 202 : HDMI端子 2 0 3 :天線端子 204 :數位調諧器 -61 - 201116041 205:映像訊號處理電路 206 : HDMI發送部 207:聲音訊號處理電路

211： CPU

2 12： Flash ROM

213 ： DRAM 2 1 4 :內部匯流排 215 :遙控接收部 216 :遙控發送機 220 :解多工器 2 2 1 :視頻解碼器 222:圖形解碼器 223 :本文解碼器 224 :音頻解碼器 225:視差向量解碼器 226 :立體圖像用圖形產生部 227 :立體圖像用本文產生部 22β :視頻重疊部 229 :多聲道揚聲器控制部 2 3 1 :視差向量取出部 23 3 :視差向量檢測部 3 00 :電視接收機 301 : 3D訊號處理部 3 02 : HDMI端子 -62 201116041 3 0 3 : H D Μ I接收部 3 04 :天線端子 3 05 :數位調諧器 3 06 :位元流處理部 3 07 :映像訊號處理電路 308:面板驅動電路 3 09 :顯示面板 3 1 0 :聲音訊號處理電路 3 1 1 :聲音放大電路 312 :揚聲器 321 ： CPU 3 22 : Flash ROM 3 2 3 ： DRAM 3 2 4 :內部匯流排 3 2 5 :遙控接收部 3 26 :遙控發送機 400 ·· HDMI 纜線 -63

Claims (1)

1. 201116041 七、申請專利範圍： 1. 一種立體圖像資料發送裝置，其特徵係具備： 立體圖像資料輸出部，其係輸出包含左眼圖像資料及 右眼圖像資料的立體圖像資料； 視差資訊輸出部，其係使重疊於上述左眼圖像資料及 上述右眼圖像資料的圖像之重疊資訊位移，而輸出用以賦 予視差的視差資訊；及 資料發送部，其係與從上述立體圖像資料輸出部輸出 的立體圖像資料一起發送從上述視差資訊輸出部輸出的視 差資訊。 2·如申請專利範圍第1項之立體圖像資料發送裝置， 其中’上述資料發送部係以上述視差資訊作爲數値資訊發 送。 3 .如申請專利範圍第1項之立體圖像資料發送裝置， 其中上述資料發送部係使上述視差資訊含在用以重疊於 上述左眼圖像資料及上述右眼圖像資料的圖像之重疊資訊 的資料中而發送。 4.—種立體圖像資料發送方法，其特徵爲： 取得用以使重疊於左眼圖像資料及右眼圖像資料的圖 像之重疊資訊位移而賦予視差的視差資訊， 與包含上述左眼圖像資料及上述右眼圖像資料的立體 圖像資料一起發送上述所被取得的視差資訊。 5·—種立體圖像資料發送方法，其特徵爲： 根據用以顯示立體圖像的左眼圖像資料及右眼圖像資 -64- 201116041 料，在圖像內的預定位置，取得對左眼圖像及右眼圖像的 一方之另一方的視差資訊， 與包含上述左眼圖像資料及上述右眼圖像資料的立體 圖像資料一起發送上述所被取得的視差資訊。 6. —種立體圖像資料接收裝置，其特徵係具備： 圖像資料接收部，其係接收包含左眼圖像資料及右眼 圖像資料的立體圖像資料；及 圖像資料處理部，其係根據在上述圖像資料接收部所 接收的立體圖像資料中含的上述左眼圖像資料及上述右眼 圖像資料被處理而取得之對左眼圖像及右眼圖像的一方之 另一方的視差資訊，來對重疊於上述左眼圖像及上述右眼 圖像的同一重疊資訊賦予視差，而取得被重疊有上述重疊 資訊的左眼圖像的資料及被重疊有上述重疊資訊的右眼圖 像的資料。 7 .如申請專利範圍第6項之立體圖像資料接收裝置， 其中，上述圖像資料處理部係對重疊於上述左眼圖像及上 述右眼圖像的同一重#資訊賦予對應於該重曼資訊的重曼 位置之視差。 8 .如申請專利範圍第6項之立體圖像資料接收裝置， 其中’更具備視差資訊接收部，其係與在上述圖像資料接 收部所接收的上述立體圖像資料同步來接收上述視差資訊 〇 9 .如申請專利範圍第6項之立體圖像資料接收裝置， 其中，更具備視差資訊取得部，其係根據在上述圖像資料 -65- 201116041 接收部所接收的上述立體圖像資料中含的上述左眼圖像資 料及上述右眼圖像資料，在圖像內的預定位置，取得對左 眼圖像及右眼圖像的一方之另一方的視差資訊。 1 〇 ·如申請專利範圍第6項之立體圖像資料接收裝置， I 其中，累具備圖像資料發送部，其係將在上述圖像資料處 理部所取得之包含上述左眼圖像資料及上述右眼圖像資料 I 的立體圖像資料發送至外部機器。 1 1 .如申請專利範圍第1 〇項之立體圖像資料接收裝置 ’其中，上述圖像資料發送部係以訊框連續方式來將上述 左眼圖像資料及上述右眼圖像資料發送至上述外部機器， 更將用，以判別在各訊框所被發送的圖像資料爲上述左眼圖 像資料或者上述右眼圖像資料的訊號發送至上述外部機器 0 12. 如申請專利範圍第6項之立體圖像資料接收裝置， 其中’更具備圖像顯示部，其係顯示在上述圖像資料處理 部所取得的上述左眼圖像資料及上述右眼圖像資料之立體 圖像顯示用的圖像。 13. 如申請專利範圍第6項之立體圖像資料接收裝置， 其中，更具備： 多聲道的揚聲器；及 控制部，其係根據對上述左眼圖像資料及上述右眼圖 像資料的一方之另一方的視差資訊來控制上述多聲道的揚 聲器輸出。 1 4·一種立體圖像資料接收方法，其特徵係具備： -66- 201116041 圖像資料接收步驟，其係接收包含左眼圖像資料及右 眼圖像資料的立體圖像資料；及 圖像資料處理步驟，其係根據對左眼圖像及右眼圖像 的一方之另一方的視差資訊，來對重疊於上述左眼圖像及 上述右眼圖像的同一重疊資訊賦予視差，取得包含被重疊 有上述重疊資訊的左眼圖像的資料及被重疊有上述重疊資 訊的右眼圖像的資料之立體圖像資料。 15. —種圖像資料發送裝置，其特徵係具備： 資料流發送部，其係發送擇一性地含3次元圖像資料 或2次元圖像資料的資料流； 資訊埋入部，其係將上述3次元圖像資料及上述2次元 圖像資料的轉換資訊、及上述3次元圖像資料的格式的指 定或左眼圖像資料及右眼圖像資料的轉換的資訊埋入上述 資料流中。 16. —種圖像資料接收裝置，其特徵係具備： 資料流接收部’其係接收資料流，該資料流係擇一性 地含3次元圖像資料或2次元圖像資料，包含上述3次元圖 像資料及上述2次元圖像資料的轉換資訊、及上述3次元圖 像資料的格式的指定或左眼圖像資料及右眼圖像資料的轉 換的資訊； 圖像資料發送部’其係以數位介面來將在上述資料接 收部所接收的資料流中含的圖像資料發送至外部機器；及 資訊發送部，其係以上述數位介面來將上述資料流中 曰的上述3次兀圖像資料及上述2次元圖像資料的轉換資訊 -67- 201116041 、及上述3次元圖像資料的格式的指定或左眼圖像資料及 右眼圖像資料的轉換的資訊發送至上述外部機器。 17.—種圖像資料接收裝置，其特徵係具備： 資料流接收部，其係接收擇一性地含3次元圖像資料 或2次元圖像資料的資料流；及 下載部，其係於上述資料流接收部接收含上述3次元 圖像資料的上述資料流時，從外部機器來下載安裝用以進 行該3次元圖像資料的處理之軟體。 -68-