TWI416937B - An image information processing apparatus, an image capturing apparatus, a video information processing method, and a program - Google Patents

An image information processing apparatus, an image capturing apparatus, a video information processing method, and a program Download PDF

Info

Publication number
TWI416937B
TWI416937B TW099110899A TW99110899A TWI416937B TW I416937 B TWI416937 B TW I416937B TW 099110899 A TW099110899 A TW 099110899A TW 99110899 A TW99110899 A TW 99110899A TW I416937 B TWI416937 B TW I416937B
Authority
TW
Taiwan
Prior art keywords
depth value
unit
scene
image
switching
Prior art date
Application number
TW099110899A
Other languages
English (en)
Other versions
TW201043003A (en
Inventor
Eiji Tadokoro
Shunji Okada
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of TW201043003A publication Critical patent/TW201043003A/zh
Application granted granted Critical
Publication of TWI416937B publication Critical patent/TWI416937B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/122Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/111Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/128Adjusting depth or disparity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189Recording image signals; Reproducing recorded image signals
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28Systems for automatic generation of focusing signals
    • G02B7/282Autofocusing of zoom lenses
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/398Synchronisation thereof; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074Stereoscopic image analysis
    • H04N2013/0081Depth or disparity estimation from stereoscopic image signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Processing Or Creating Images (AREA)
  • Image Generation (AREA)

Description

影像資訊處理裝置,攝像裝置,影像資訊處理方法及程式
本發明係有關於影像資訊處理裝置,尤其是有關於,操作含有立體視覺顯示所需之縱深值之影像資訊的影像資訊處理裝置、攝像裝置、及其中的處理方法,以及令該當方法被電腦所執行的程式。
近年來,作為用來顯示內容的顯示裝置,係不只能顯示平面視覺(2維)內容,還提出了能顯示立體視覺(3維)內容的顯示裝置。此種顯示裝置是利用兩眼間產生的視差(disparity),因此兩眼的收斂角與焦距若發生矛盾時,或視差的值不適切時等情況下,就有可能對視聽者造成異樣感。
[0003]
於是有人提出了一種顯示裝置,係將立體視覺內容的生物影響度予以算出,相應於視聽者的耐性程度,來控制顯示對象的立體視覺內容之顯示狀態(例如參照專利文獻1。)。在該先前技術中,是在內容詮釋資訊中儲存內容的景深地圖資訊,若其最大縱深量較大,則將景深地圖的值變更成小於標準值而顯示。
[先行技術文獻]
[專利文獻]
[專利文獻1]日本特開2004-246725號公報(圖1)
在上述先前技術中,是藉由調整縱深量,以抑制對視聽者造成的影響。然而,在該先前技術中,是根據視聽者的耐性程度與立體視覺內容的一般關係(所謂的3D暈眩之危險度)來將顯示加以變更,並未考慮到內容隨時間的遷移。
立體視覺內容,一般而言會含有場景切換,該切換之際,縱深值會劇烈變化,而可能對視聽者造成不舒服的感覺。這不僅是在立體視覺內容中的立體映像間之切換,在立體映像與平面映像之切換時也會有同樣的問題。又,即使當靜止影像的幻燈片秀顯示時,也會有和動畫相同的問題。
本發明係有鑑於此種狀況而研發,目的在於使得立體視覺內容的場景切換時,縱深值能夠平滑地遷移。
本發明係為了解決上記課題而研發,其第1側面,係具備:場景切換偵測部,係用以偵測出內容中的場景切換;和縱深值補正部,係用以補正上記縱深值,以使得立體視覺顯示所需之縱深值之變化是在上記場景切換前後以所定顯示速度作遷移的一種影像資訊處理裝置、其影像資訊處理方法及程式。藉此就可達成,使立體視覺顯示所需之縱深值,在場景切換前後能平滑地遷移的作用。
又,於該第1側面中,亦可為,上記縱深值補正部,係補正上記縱深值,以使得對應於上記內容中之某個領域的縱深值之變化,是在上記場景切換前後,以所定顯示速度作遷移。藉此就可達成,將內容中的任一領域所對應之縱深值,在場景切換前後能平滑地遷移的作用。
又,於該第1側面中,亦可為,上記縱深值補正部,係於上記場景切換前後,將影像全體的縱深值,補正成望遠側。藉此就可達成,在場景切換前後,使影像全體的縱深值,遷移至望遠側。
又,於該第1側面中,亦可為,上記縱深值補正部,係補正上記縱深值,以使得從上記場景切換前的縱深值往上記場景切換後的縱深值是以所定顯示速度作遷移。藉此就可達成,可從場景切換前的縱深值,圓滑地遷移至上記場景切換後的縱深值的作用。
又,於該第1側面中,亦可為,上記縱深值補正部,係於上記場景切換前的所定區間、上記場景切換後的所定區間或跨越上記場景切換前後的所定區間之任一者中,使縱深值作遷移。
又,於該第1側面中,亦可為,上記場景切換偵測部,係偵測出立體視覺影像與平面視覺影像之切換,來作為上記場景切換。藉此就可達成,立體視覺影像與平面視覺影像之切換前後,能平滑地作遷移的作用。
又,於該第1側面中,亦可為,上記場景切換偵測部,係偵測出動畫與靜止影像之切換,來作為上記場景切換。藉此就可達成,動畫與靜止影像之切換前後,能平滑地作遷移的作用。
又,本發明之第2側面,係具備:固定縱深值設定部,係用以針對構成內容之影像資料進行立體視覺顯示所需的縱深值,將一定之值當作固定縱深值而加以設定;和基準縱深值特定部,係用以選擇上記影像資料之任一領域而將該當領域所對應之縱深值,當作基準縱深值而加以特定;和縱深值補正部,係針對上記影像資料之各領域所對應之縱深值,以一使得上記基準縱深值會變成上記固定縱深值的比率,來進行補正的一種影像資訊處理裝置、其影像資訊處理方法及程式。藉此就可達成,使特定領域的縱深值維持在一定值的作用。
又,本發明之第3側面,係具備:攝像影像供給部,係用以拍攝影像並供給攝像影像及立體視覺顯示所需之縱深值;和場景切換偵測部,係用以偵測出上記攝像影像中的場景切換;和縱深值補正部,係用以補正上記縱深值,以使得上記縱深值之變化是在上記場景切換前後以所定顯示速度作遷移的一種攝像裝置、其攝像處理方法及程式。藉此就可達成,使立體視覺顯示所需之縱深值,在場景切換前後能平滑地遷移的作用。
若依據本發明,則可達到在立體視覺內容的場景切換中,可使縱深值平滑地遷移之優良效果。
以下,說明用以實施本發明的形態(以下稱作實施形態)。
說明是按照以下順序進行。
1.第1實施形態(場景切換之際將縱深值設成望遠側之例子)
2.第2實施形態(場景切換之際令主影像領域的縱深值作遷移之例子)
3.第3實施形態(幻燈片秀的靜止影像切換之際補正縱深值之例子)
4.變形例
<1.第1實施形態>
[攝像裝置300的全體構成例]
圖1係本發明的實施形態中的攝像裝置300之全體構成例的圖示。該攝像裝置300,係具備:透鏡部310、操作該透鏡部310的馬達315及316、馬達驅動器319。又,該攝像裝置300,係具備:攝像元件321、類比處理部322、A/D轉換器323、數位處理部324、生成這些之時序的時序生成器325、攝像機控制部329。又,該攝像裝置300係具備:映像編碼部331、縱深資訊設定部332、檔案生成部333、檔案解碼部334、映像解碼部335、縱深資訊輸出部336。又,該攝像裝置300係具備:記憶體337、記憶體控制器338、系統控制部339。該系統控制部339上係被連接有,來自操作受理部390的訊號線。再者,攝像裝置300係還具備:錯誤訂正部341、資料調變解調部342、磁場調變驅動器343、磁頭344、伺服機電路345、馬達346、光拾取器347、驅動機控制部349、顯示部350。又,該攝像裝置300上,作為記錄映像用的記錄媒體,而被裝入有例如光碟370。
透鏡部310,係用來接受來自被攝體之光線,含有變焦透鏡311及對焦透鏡312。變焦透鏡311及對焦透鏡312係分別被連接有馬達315及316,藉由這些馬達315及316的驅動,就可移動變焦透鏡311及對焦透鏡312。又,在馬達315及316上係連接有馬達驅動器319,藉由該馬達驅動器319而控制著馬達315及316。
攝像元件321,係將透鏡部310所受光的光轉換成靜電而加以儲存用的元件,係利用例如CCD或CMOS感測器等。類比處理部322,係將來自攝像元件321的類比訊號中的雜訊,藉由相關二重取樣(CDS)而加以去除,藉由自動增益控制(AGC)來補正類比訊號的高低部分。A/D轉換器323,係將來自類比處理部322的類比訊號轉換成數位訊號。數位處理部324,係進行白平衡或伽馬轉換等之處理。
來自數位處理部324的輸出訊號,係成為映像編碼部331的映像訊號輸入。又,該數位處理部324中所偵測出來的資訊,係被傳輸至攝像機控制部329。攝像機控制部329,係基於數位處理部324所測出的資訊,對馬達驅動器319及時序生成器325進行控制。時序生成器325,係對攝像元件321、類比處理部322、A/D轉換器323及數位處理部324,生成時序訊號。此外,此處所說明的透鏡部310、攝像元件321等,係為申請專利範圍中所記載之攝像影像供給部之一例。
映像編碼部331,係進行映像訊號的編碼。縱深資訊設定部332,係將對應於映像訊號的縱深資訊,予以設定。檔案生成部333,係將已被編碼的映像訊號及縱深資訊予以多工化然後生成映像檔案(多工化資料)。檔案解碼部334,係將映像檔案予以解碼然後輸出映像訊號及縱深資訊。映像解碼部335,係將映像訊號予以解碼然後輸出至顯示部350。縱深資訊輸出部336,係將縱深資訊予以解碼然後輸出至顯示部350。
記憶體337,係用來保持映像檔案等的記憶體。記憶體控制器338,係將從檔案生成部333或錯誤訂正部341所供給來的映像檔案(多工化資料),寫入至記憶體337,又,從記憶體337中讀出多工化資料然後供給至錯誤訂正部341或檔案解碼部334。
系統控制部339,係控制著如上述的記憶體控制器338之動作或檔案生成部333及檔案解碼部334之動作。又,系統控制部339,係與驅動機控制部349連接而要求著碟片驅動機之作動。又,系統控制部339,係與攝像機控制部329連接,可獲得自動對焦是否是在正在對焦之動作中途,或是獲得焦距等,來作為自動對焦及變焦之狀態。
甚至,系統控制部339上係還連接有操作受理部390,可掌握來自使用者的操作輸入。作為該操作受理部390,係可設置例如,變焦關係的按鈕或記錄關係的按鈕。系統控制部339,係與攝像機控制部329連接,隨著來自使用者的操作輸入而進行變焦等之控制。
錯誤訂正部341,係對來自記憶體控制器338的多工化資料,附加交錯及錯誤訂正所需的碼,然後供給至資料調變解調部342。又,錯誤訂正部341,係對於來自資料調變解調部342的解調訊號,進行去交錯及錯誤訂正處理,而將多工化資料,供給至記憶體控制器338。
資料調變解調部342,係在實施了對光碟370記錄所需之所定調變後,對磁場調變驅動器343輸出,同時,輸出用來驅動光拾取器347所需的訊號。又,資料調變解調部342,係對來自光拾取器347的訊號,實施所定之解調處理,成為解調訊號而輸出至錯誤訂正部341。
磁場調變驅動器343,係隨應於記錄時所被輸入之訊號來驅動著磁頭344以對光碟370施加磁場。光拾取器347,係在記錄時,將記錄用雷射光束照射至光碟370,對光碟370記錄下訊號。又,光拾取器347,係在再生時,將再生用雷射光束照射至光碟370,根據從光碟370所反射來的光束量而光電轉換成電氣訊號,以取得再生訊號。這些動作,係隨應於來自系統控制部339的要求,由驅動機控制部349向伺服機電路345發送要求,而進行碟片驅動機全體的控制。伺服機電路345,係控制著光拾取器347的碟片徑向移動的伺服機、循軌伺服機、聚焦伺服機,或控制著馬達346的轉軸伺服機。藉此,光碟370係可進行映像檔案(多工化資料)之記錄或再生。
此外,在上述構成例中,雖然想定了進行磁場調變的光磁碟,但在相變碟片時,基本的構成係相同。亦可取代光碟370,改用硬碟等之磁碟、或SSD(Solid State Drive)等之半導體碟。
顯示部350,係基於來自映像解碼部335的映像訊號及來自縱深資訊輸出部336的縱深資訊,利用在兩眼間所產生的視差,而顯示立體視覺影像。該顯示部350進行立體視覺顯示之際的方式雖無特別限定,但該顯示部350係可藉由例如微孔方式的顯示器來實現。又,此處雖然想定了,基於映像訊號和縱深資訊來進行立體視覺顯示的顯示部,但並非限定於此。一般而言,可從縱深資訊轉換成左右視差之偏置值,因此亦可適用於左右視差方式(side-by-side)方式的顯示部。
[內容記錄單元200之構成例]
圖2係本發明的實施形態中的內容記錄單元200之構成例的圖示。該內容記錄單元200,係上述映像檔案的記錄單位。內容記錄單元200,係保持著映像資料#1乃至N(210-1乃至210-N)(以下亦簡稱作「映像資料210」)及縱深地圖#1乃至N(220-1乃至220-N)(以下亦簡稱作「縱深地圖220」)。
映像資料210及縱深地圖220,係例如以GOP(Group Of Pictures)為單位,而被分別附加對應。亦即,記錄下第1個GOP的映像資料210-1係對應縱深地圖220-1,記錄下第2個GOP的映像資料210-2係對應縱深地圖220-2。GOP係為MPEG(Moving Pictures Experts Group)規格中的動畫之畫格群。在許多場合,1GOP中是含有15畫格。若想定畫格速率是29.97畫格/秒,則1GOP係相當於0.5秒。
圖3係本發明的實施形態中的縱深地圖220之例子的圖示。縱深地圖220,係對應於畫格影像的各像素而保持著縱深值。亦即,縱深地圖220,係針對2維的XY平面上之各像素,分別保持著縱深值。縱深值,係例如8位元寬而具有「0」至「255」之範圍,從視聽者來看,越是存在於近距離則具有越大的值。在此圖的例子中,存在於前方的人物領域所對應之縱深值係標示「255」,對應於背景領域的縱深值係標示「0」。此外,縱深地圖220,一般而言也被稱作景深地圖(depth map)或是深度地圖。
圖4係本發明的實施形態中的縱深值與距離之關係例的圖示。由圖4的(a)可知,從透鏡至被攝體的距離若為0.5[m]以下則縱深值係標示「255」,距離超過5.0[m]時則縱深值係標示「0」。距離大於0.5[m]、且為5.0[m]以下時,則如圖4的(a)所示,具有「0」至「255」之範圍的值。
又,由圖4的(b)可知,縱深值係與距離的對數值呈線性關係而設定。這是考慮,人類的感覺是在近處可知覺到比遠處更多的細節而設計。
於攝像裝置300中設定縱深值時,首先設成廣角端且光圈開放狀態而將透鏡被攝景深控制成最淺,並將透鏡焦點設定成無限遠(超過5.0[m])。藉此,就可掌握畫面內領域的進行合焦之映像領域,將該領域當作背景領域而指派縱深值「0」。接著,設成廣角端且光圈開放狀態而將透鏡被攝景深控制成最淺的狀態下,將透鏡焦點設定成近距離(0.5[m])。藉此,就可掌握畫面內領域的進行合焦之映像領域,將該領域當作最近距離點而指派縱深值「255」。然後,設成廣角端且光圈開放狀態而將透鏡被攝景深控制成最淺的狀態下,使透鏡焦點從近距離(0.5[m])至無限遠(超過5.0[m])依序變化,藉由透鏡位置控制來進行距離測定。與此同步地,依序將畫面內領域所合焦之映像領域,加以記憶。如此一來,就會被指派了圖4的(a)的對應關係。
進行了如此的初期設定後,係基於被攝體的輪廓辨識或運動向量偵測解析,就可生成各像素所對應的縱深值。縱深值,係可在攝像之際即時地生成,或也可根據攝像機資訊而事後生成。攝像機資訊,係作為攝影時的設定條件等之資訊,而從數位攝像機內部所獲得之資訊。例如含有:F值、曝光時間、露光補正值、AGC增益值、閃光燈有無、鏡頭焦距、白平衡、被攝體距離、手晃補正、臉部詮釋資訊、數位變焦倍率、特效攝影、廠商名等資訊。這些攝像機資訊,係例如若是AVCHD規格,則可在修改數位視訊捆包(MDP:Modified Digital Video Pack)中記錄成為串流檔案。當藉由臉部詮釋資訊而獲知臉部存在的座標時,作為該座標位置的距離,是可利用攝像機資訊的被攝體距離。所得的距離,係可根據圖4的(a)的對應表而轉換成縱深值。
圖5係本發明的實施形態中的映像資料210與縱深地圖220之關係的圖示。圖5的(a)係圖示了映像資料210之一例。在此例中,在攝像裝置附近係照到了人物,在其背後則照到了背景。
圖5的(b)係圖示了圖5的(a)的映像資料210所對應之縱深地圖220之一例。人物領域的縱深值221,係以十六進位的「B4」,亦即十進位的「180」來表示。這是意味著,人物是位於,從攝像裝置起距離1.0[m]處。背景領域的縱深值222,係標示著「0」。這是意味著,背景是位於,從攝像裝置起算的無限遠(超過5.0[m])處。縱深地圖220中所含的各縱深值,係對應於映像資料210的各像素。
[縱深值之補正的第1態樣]
圖6係本發明的實施形態所作的縱深值之補正的第1態樣的圖示。如圖6的(a)所示,想定在章節切換之際,畫格內之領域的縱深值會劇烈變化時的情形。此處,章節#i的尾端部分中的特定領域的縱深值711,是於章節#(i+1)的開始部分,變化成縱深值714。此情況下,由於特定領域的縱深值是劇烈變化,因此可能對視聽者造成異樣感。此外,此時的特定之領域,係想定為人物等該當之畫格內的部分領域,但亦可為畫格全體。
在本發明的實施形態中,作為縱深值之補正的第1態樣,係如圖6的(b)所示,在章節切換之際,將全體的縱深值一律補正成零(無限遠)。藉此,就可抑制章節切換之際的縱深值的劇烈變化。只不過,若將縱深值設成零的補正本身若是急劇進行,則有可能因為補正而造成新的異樣感產生。於是,在縱深值補正之際,例如係耗費0.5秒以上的期間,以所定顯示速度來使縱深值作遷移,較為理想。在圖6的(b)的例子中,係從章節#i的尾端部分中的原本之縱深值721起,以使得尾端畫格的縱深值722為零的方式,而用所定顯示速度使其逐次遷移。同樣地,將章節#(i+1)的開始畫格之縱深值723設成零,然後令其逐次遷移直到成為開始部分的原本之縱深值724為止。
圖7係本發明的實施形態所作的縱深值之補正的第1態樣之章節全體的圖示。此處係想定了,由k畫格所成之章節#j。在該章節#j中,在開始部分的n畫格與尾端部分的n畫格裡分別會補正縱深值。
在章節#j的開始部分的n畫格,其縱深值係從零起逐次增加。在此例子中,縱深值是從零起每次增加(1/n),在第(n+1)畫格時收斂成為施加補正的值。亦即,若假設第(n+1)畫格的縱深值為A,則第i畫格(i是1至n之範圍的整數)的縱深值係為A×((i-1)/n)。
又,在章節#j的尾端部分的n畫格,其縱深值係朝向零而逐次減少。在此例子中,縱深值是每次減少(1/n),於第k畫格時收斂成零。亦即,若假設第(k-n)畫格的縱深值為B,則第i畫格(i是從(k-(n-1))至k之範圍的整數)的縱深值係為B×((k-i)/n)。
[縱深值之補正的第1態樣的機能構成]
圖8係本發明的實施形態中的縱深值補正機構的第1機能構成例的圖示。該縱深值補正機構,係於場景切換前後使縱深值平滑地遷移至零(望遠側)。於攝像裝置300中,係可將攝像之際的縱深值以縱深資訊設定部332進行補正後才設定縱深地圖220,或亦可將未被補正之縱深地圖220的縱深值,藉由縱深資訊輸出部336加以補正而輸出至顯示部350。因此,在攝像裝置300中,係可在縱深資訊設定部332或縱深資訊輸出部336,設置縱深值補正機構。又,該縱深值補正機構,係不只在攝像裝置,亦可在操作映像檔案的影像資訊處理裝置上來實現。
該縱深值補正機構,係具備:內容供給部110、內容讀出管理部120、遷移畫格數設定部130、內容預讀管理部140、縱深值補正部150。
內容供給部110,係用來供給所拍攝到的內容。於攝像裝置300中是藉由攝像元件321乃至攝像機控制部329等來供給內容。在影像資訊處理裝置的情況下,則是從記憶著內容的記憶部(未圖示)藉由讀出部來供給內容。
內容讀出管理部120,係將從內容供給部110所供給之內容,每次讀出1畫格而進行管理。該內容讀出管理部120,係具備:目前畫格號碼保持部121、目前畫格縱深值保持部122。目前畫格號碼保持部121,係將從內容供給部110所讀出的目前畫格的畫格號碼,加以保持。目前畫格縱深值保持部122,係將從內容供給部110所讀出的目前畫格所對應的縱深值,加以保持。
遷移畫格數設定部130,係於場景切換前後,預先設定補正對象的畫格的數目。在圖7的例子中,係於場景切換前後,分別各設定了n畫格來作為遷移畫格數。
內容預讀管理部140,係早於內容讀出管理部120所作的讀出,將內容中的比目前畫格還後續(未來)的畫格加以預讀而進行管理。該內容預讀管理部140,係具備:場景切換偵測部141、最終畫格號碼生成部142。場景切換偵測部141,係從已被預讀之內容中,偵測出場景切換之位置。場景切換係想定為,例如章節切換。最終畫格號碼生成部142,係基於已被場景切換偵測部141所偵測出來的場景切換位置,而生成目前場景的最終畫格號碼。在圖7的例子中,第k畫格係為最終畫格。
縱深值補正部150,係將被保持在目前畫格縱深值保持部122中的縱深值,予以補正。在圖7的例子中,縱深值係如下式而被補正。
補正後縱深值=補正前縱深值×m/n
其中,n係被保持在遷移畫格數設定部130中的遷移畫格數,m係隨著是屬於場景切換的開始部分或尾端部分之哪一者而被設定如下。
場景開始n畫格時;m=目前畫格號碼-1
場景尾端n畫格時;m=最終畫格號碼-目前畫格號碼此外,目前畫格號碼係由目前畫格號碼保持部121所供給,最終畫格號碼係由最終畫格號碼生成部142所供給。
[縱深值之補正的第1態樣的動作例]
圖9係本發明的實施形態中的縱深值補正之第1態樣所作的處理流程的圖示。此處,作為場景切換之一例,說明偵測章節切換之例子。
首先,於內容讀出管理部120中,進行目前畫格的更新(步驟S911)。亦即,被保持在目前畫格號碼保持部121中的目前畫格號碼會被更新,同時,被保持在目前畫格縱深值保持部122中的縱深值會被更新。
若目前畫格係章節的開始n畫格(步驟S913),則對變數m設定「目前畫格號碼-1」(步驟S914)。另一方面,若目前畫格係章節的尾端n畫格(步驟S916),則對變數m係設定「最終畫格號碼-目前畫格號碼」(步驟S917)。
然後,若目前畫格是章節的開始n畫格或尾端n畫格,則藉由縱深值補正部150,被保持在目前畫格縱深值保持部122中的縱深值,會被補正成「m/n」倍(步驟S918)。
其後,基於目前畫格的映像資料及縱深值,而在顯示部350上顯示出立體視覺影像(步驟S919)。若目前畫格是章節的開始n畫格或尾端n畫格,則使用如上述被補正過的縱深值,至於其以外的畫格則是使用未被補正的縱深值。此外,此處雖然想定了具有顯示部350的攝像裝置300來說明動作,但亦可為,以之後才會進行顯示為前提而將縱深值予以補正並記憶待用。
如此,若依據本發明的實施形態的第1態樣,則在場景切換的前後可使縱深值平滑地遷移成零(望遠側),可消除音縱深值劇烈變化所帶來的異樣感。
<2.第2實施形態>
[縱深值之補正的第2態樣]
圖10係本發明的實施形態所作的縱深值之補正的第2態樣的圖示。在上述第1態樣中是將縱深值先一律遷移成零,但在本第2態樣中則是想定,在場景切換前後,將縱深值以所定顯示速度直接作遷移。
圖10的(a),係僅在章節的尾端部分使縱深值作遷移的例子。亦即,在此例中,於章節的尾端部分是從縱深值731(a)起往縱深值732作遷移,於章節的開始部分則是從縱深值733(c)起至縱深值734都維持在一定的值。
圖10的(b),係僅在章節的開始部分使縱深值作遷移的例子。亦即,在此例中,於章節的尾端部分是從縱深值741起至縱深值742都維持在一定的值(a),於章節的開始部分是從縱深值743起往縱深值744(c)作遷移。
圖10的(c),係僅在章節的開始部分及尾端部分之兩者中,使縱深值作遷移的例子。亦即,在此例中,於章節的尾端部分是從縱深值751(a)起往縱深值752作遷移,於章節的開始部分也是從縱深值753(b)起往縱深值754作遷移。
如此,當令縱深值直接作遷移時,係可在章節切換前後之任一區間中作遷移。
[縱深值之補正的第2態樣的機能構成]
圖11係本發明的實施形態中的縱深值補正機構的第2機能構成例的圖示。該縱深值補正機構,係當縱深值發生劇烈變化時,使其變化變得平滑而作遷移。以下,作為場景切換之一例,說明偵測章節切換之例子。
該縱深值補正機構的第2機能構成,係具備:內容供給部110、內容讀出管理部120、遷移畫格數設定部130、內容預讀管理部140、縱深值補正部150這點,係和圖8所說明過的第1機能構成相同。該縱深值補正機構的第2機能構成,係在第1機能構成中還增加具備有開始縱深值保持部160。又,在內容預讀管理部140中還具備有目標縱深值生成部143。
開始縱深值保持部160係用來保持,令縱深值遷移之際的開始畫格的縱深值。在圖10的(a)的例子中,章節#i的縱深值731係為開始畫格的縱深值。在圖10的(b)的例子中,章節#(i+1)的縱深值743係為開始畫格的縱深值。又,在圖10的(c)的例子中,章節#i的縱深值751及章節#(i+1)的縱深值753,係為開始畫格的縱深值。開始畫格,係基於已被場景切換偵測部141所測出之場景切換位置及已被遷移畫格數設定部130所設定之遷移畫格數,而被決定。
目標縱深值生成部143係用來生成,縱深值補正之際的目標縱深值。在圖10的(a)的例子中,章節#i的縱深值732係為目標縱深值。在圖10的(b)的例子中,章節#(i+1)的縱深值744係為目標縱深值。又,在圖10的(c)的例子中,章節#i的縱深值752及章節#(i+1)的縱深值754,係為目標縱深值。該當於目標縱深值的畫格,係基於已被場景切換偵測部141所測出之場景切換位置及已被遷移畫格數設定部130所設定之遷移畫格數,而被決定。此外,圖10的(b)的例子中的縱深值744及圖10的(c)的例子中的縱深值754,係可想成和目前畫格的縱深值大致同等,因此可用目前畫格的縱深值來代替。又,目標縱深值係可任意決定。例如,亦可隨著下個章節全體的動態範圍來設定目標縱深值。
於該縱深值補正機構的第2機能構成中,縱深值補正部150係將縱深值補正如下。如圖10的(a)所示,在切換前的章節中進行遷移時,係針對章節的結束n畫格,以下式1來補正縱深值。
補正後縱深值=目標縱深值+(目標縱深值-補正前縱深值)×m/n (式1)
其中,m=最終畫格號碼-目前畫格號碼。
如圖10的(b)所示,在切換後的章節中進行遷移時,係針對章節的開始n畫格,以下式2來補正縱深值。
補正後縱深值=開始縱深值+(補正前縱深值-開始縱深值)×m/n (式2)
其中,m=目前畫格號碼-1。
如圖10的(c)所示,在跨越切換前後的章節而進行遷移時,係針對章節的開始n畫格,以上述的式2來補正縱深值。又,針對章節的結束n畫格,以上述的式1來補正縱深值。
[縱深值之補正的第2態樣的動作例]
圖12係本發明的實施形態中的縱深值補正之第2態樣所作的第1處理流程的圖示。該第1處理係表示了,如圖10的(a)在切換前的章節中進行遷移時的例子。
首先,於內容讀出管理部120中,進行目前畫格的更新(步驟S921)。亦即,被保持在目前畫格號碼保持部121中的目前畫格號碼會被更新,同時,被保持在目前畫格縱深值保持部122中的縱深值會被更新。又,於目標縱深值生成部143中,遷移之際的目標縱深值會被生成、設定(步驟S922)。此時的目標縱深值,係為圖10的(a)中的縱深值732。
若目前畫格係章節的尾端n畫格(步驟S926),則對變數m係設定「最終畫格號碼-目前畫格號碼」(步驟S927)。然後,藉由縱深值補正部150,被保持在目前畫格縱深值保持部122中的縱深值,會藉由上述的式1而被補正(步驟S928)。
其後,基於目前畫格的映像資料及縱深值,而在顯示部350上顯示出立體視覺影像(步驟S929)。若目前畫格是章節的尾端n畫格,則使用如上述被補正過的縱深值,至於其以外的畫格則是使用未被補正的縱深值。此外,此處雖然想定了具有顯示部350的攝像裝置300來說明動作,但亦可為,以之後才會進行顯示為前提而將縱深值予以補正並記憶待用。
圖13係本發明的實施形態中的縱深值補正之第2態樣所作的第2處理流程的圖示。該第2處理係表示了,如圖10的(b)在切換後的章節中進行遷移時的例子。
首先,於內容讀出管理部120中,進行目前畫格的更新(步驟S931)。亦即,被保持在目前畫格號碼保持部121中的目前畫格號碼會被更新,同時,被保持在目前畫格縱深值保持部122中的縱深值會被更新。
若目前畫格係章節的開始n畫格(步驟S933),則對變數m設定「目前畫格號碼-1」(步驟S934)。然後,藉由縱深值補正部150,被保持在目前畫格縱深值保持部122中的縱深值,會藉由上述的式2而被補正(步驟S935)。
其後,基於目前畫格的映像資料及縱深值,而在顯示部350上顯示出立體視覺影像(步驟S939)。若目前畫格是章節的開始n畫格,則使用如上述被補正過的縱深值,至於其以外的畫格則是使用未被補正的縱深值。此外,此處雖然想定了具有顯示部350的攝像裝置300來說明動作,但亦可為,以之後才會進行顯示為前提而將縱深值予以補正並記憶待用。
圖14係本發明的實施形態中的縱深值補正之第2態樣所作的第3處理流程的圖示。該第3處理係表示了,如圖10的(c)跨越切換前後的章節而進行遷移時的例子。
首先,於內容讀出管理部120中,進行目前畫格的更新(步驟S941)。亦即,被保持在目前畫格號碼保持部121中的目前畫格號碼會被更新,同時,被保持在目前畫格縱深值保持部122中的縱深值會被更新。又,於目標縱深值生成部143中,遷移之際的目標縱深值會被生成、設定(步驟S942)。此時的目標縱深值,係為圖10的(c)中的縱深值752。縱深值752係可使用,例如章節#i之尾端部分的縱深值與章節#(i+1)之開始部分的縱深值的平均值(b)。
若目前畫格係章節的開始n畫格(步驟S943),則對變數m設定「目前畫格號碼-1」(步驟S944)。然後,藉由縱深值補正部150,被保持在目前畫格縱深值保持部122中的縱深值,會藉由上述的式2而被補正(步驟S945)。
另一方面,若目前畫格係章節的尾端n畫格(步驟S946),則對變數m係設定「最終畫格號碼-目前畫格號碼」(步驟S947)。然後,藉由縱深值補正部150,被保持在目前畫格縱深值保持部122中的縱深值,會藉由上述的式1而被補正(步驟S948)。
其後,基於目前畫格的映像資料及縱深值,而在顯示部350上顯示出立體視覺影像(步驟S949)。若目前畫格是章節的開始n畫格或尾端n畫格,則使用如上述被補正過的縱深值,至於其以外的畫格則是使用未被補正的縱深值。此外,此處雖然想定了具有顯示部350的攝像裝置300來說明動作,但亦可為,以之後才會進行顯示為前提而將縱深值予以補正並記憶待用。
如此,若依據本發明的實施形態的第2態樣,則在場景切換的前後可使縱深值平滑地遷移,可消除音縱深值劇烈變化所帶來的異樣感。
<3.第3實施形態>
[靜止影像資料與動畫資料之關係]
圖15係本發明的第3實施形態中的靜止影像資料與動畫資料之關係的圖示。在本第3實施形態中,係想定了將靜止影像資料以幻燈片秀形式來進行立體視覺顯示。此處,藉由將靜止影像資料的每一者,分別分配n畫格,以生成動畫資料。亦即,將靜止影像資料A配置n畫格,其後,將靜止影像資料B配置n畫格,然後將靜止影像資料C配置n畫格,以此要領來配置動畫資料的各畫格。靜止影像資料,係和圖3所說明的畫格影像同樣地,具有影像資料和縱深值,支援立體視覺顯示。
此種基於靜止影像資料的動畫資料中也是,若和一般的動畫同樣地使縱深值發生劇烈變化,則可能會造成異樣感。尤其是,在幻燈片秀形式的情況下,靜止影像資料切換之際,縱深值會劇烈變化的可能性很高。
[縱深值之補正的第3態樣]
圖16係本發明的實施形態所作的縱深值之補正的第3態樣的圖示。如圖16的(a)所示,想定在靜止影像切換之際,靜止影像內之領域的縱深值會劇烈變化時的情形。此處,靜止影像A的尾端部分中的特定領域的縱深值811(d),是於靜止影像B的開始部分,變化成縱深值812(e)。此情況下,由於特定領域的縱深值是劇烈變化,因此可能對視聽者造成異樣感。此外,此時的特定之領域,係想定為人物等該當之畫格內的部分領域,但亦可為畫格全體。
在本發明的實施形態中,作為縱深值之補正的第3態樣,係如圖16的(b)所示,進行補正以使靜止影像之特定領域的縱深值成為一定值(K)。藉此,就可抑制章節切換之際的縱深值的劇烈變化。
[縱深值之補正的第3態樣的機能構成]
圖17係本發明的實施形態中的縱深值補正機構的第3機能構成例的圖示。該縱深值補正機構,係於含幻燈片秀形式之靜止影像資料的動畫資料中,用來使特定領域的縱深值維持在一定值。以下,作為場景切換之一例,說明偵測章節切換之例子。
該縱深值補正機構的第3機能構成,係具備:內容供給部110、內容讀出管理部120、縱深值補正部150這點,係和圖8所說明過的第1機能構成相同。該縱深值補正機構的第3機能構成,係於第1機能構成中摘除了遷移畫格數設定部130及內容預讀管理部140,而另具備了固定縱深值設定部170。又,在內容讀出管理部120中係還具備有基準縱深值特定部123。
基準縱深值特定部123,係針對從內容供給部110所供給之靜止影像,來特定作為基準的縱深值(基準縱深值)。為了特定該基準縱深值,係考慮將靜止影像中的某個特徵量予以抽出,基於該特徵量來特定基準縱深值。例如,可考慮於靜止影像中將臉部予以抽出,從其中選擇出最應注目的優先臉,將該優先臉的縱深值當作基準縱深值而加以特定。作為優先臉,係可選擇最接近中央的臉,或最大的臉。又,例如,亦可將位於最近距離之位置的縱深值,加以特定。
固定縱深值設定部170,係為了使作為靜止影像的特定領域的縱深值被固定,而設定一定值。被該固定縱深值設定部170所設定之一定值,稱作固定縱深值。在圖16的(b)的例子中,一定值K係被當成固定縱深值而設定。
藉此,縱深值補正部150,係將被保持在目前畫格縱深值保持部122中的縱深值,如下式進行補正。
補正後縱深值=補正前縱深值×K/y
其中,K係被固定縱深值設定部170所設定的固定縱深值,y係被基準縱深值特定部123所特定的基準縱深值。
[縱深值之補正的第3態樣的動作例]
圖18係本發明的實施形態中的縱深值補正之第3態樣所作的處理流程的圖示。此處,作為場景切換之一例,說明偵測章節切換之例子。
首先,於內容讀出管理部120中,進行目前畫格的更新(步驟S951)。亦即,被目前畫格縱深值保持部122所保持的縱深值,會被更新。又,於基準縱深值特定部123中,縱深值會根據目前畫格的靜止影像而被特定(步驟S952)。此處,作為一例,想定偵測出優先臉,將該優先臉的基準縱深值y加以特定。
然後,藉由縱深值補正部150,被保持在目前畫格縱深值保持部122中的縱深值,會被補正成「K/y」倍(步驟S958)。此處,K係被固定縱深值設定部170所設定的固定縱深值,y係被基準縱深值特定部123所特定的基準縱深值。
其後,基於目前畫格的映像資料及縱深值,而在顯示部350上顯示出立體視覺影像(步驟S959)。此外,此處雖然想定了具有顯示部350的攝像裝置300來說明動作,但亦可為,以之後才會進行顯示為前提而將縱深值予以補正並記憶待用。
如此,若依據本發明的實施形態的第3態樣,則在含幻燈片秀形式之靜止影像資料的動畫資料中,可使特定領域的縱深值維持成一定值,可消除縱深值劇烈變化所帶來的異樣感。
<4.變形例>
[幻燈片秀的變形例]
圖19係本發明的實施形態所作的縱深值之補正的第3態樣之變形例的圖示。在上述第3態樣中是將縱深值維持成一定值,但在本變形例中則是和第2態樣同樣地,想定在場景切換前後,使縱深值作遷移。
圖19的(a),係僅在靜止影像的尾端部分使縱深值作遷移的例子。亦即,在此例中,於靜止影像A的尾端部分是從縱深值831往縱深值832作遷移,於靜止影像B的開始部分則是從縱深值833起至縱深值834都維持在一定的值。
圖19的(b),係僅在靜止影像的開始部分使縱深值作遷移的例子。亦即,在此例中,於靜止影像A的尾端部分是從縱深值841起至縱深值842都維持在一定的值,於靜止影像B的開始部分是從縱深值843往縱深值844作遷移。
圖19的(c),係僅在靜止影像的開始部分及尾端部分之兩者中,使縱深值作遷移的例子。亦即,在此例中,於靜止影像A的尾端部分是從縱深值851往縱深值852作遷移,於靜止影像B的開始部分也是從縱深值853往縱深值854作遷移。
如此,當令縱深值作遷移時,係可在靜止影像切換前後之任一區間中作遷移。
為了實現此種縱深值的遷移,可利用圖11所說明的機能構成及圖12乃至14所說明的處理。亦即,幻燈片秀形式的動畫資料,雖然各畫格是由靜止影像資料所構成,但是全體來看是和一般的動畫資料沒有什麼不同。因此,可以利用上述的本發明之第2實施形態。同樣地,亦可利用本發明的第2實施形態,在靜止影像的切換之際,將全體的縱深值一律補正成零(無限遠)。
又,此處雖然著眼於立體視覺影像的場景切換來說明,但關於從立體視覺影像往平面視覺影像之切換或者是從平面視覺影像往立體視覺影像的切換時,當然也能同樣地適用。又,基於靜止影像的幻燈片秀形式之動畫資料與通常之動畫資料混合存在的動畫資料中,關於靜止影像與動畫切換時,當然也能同樣適用。
如此,若依據本發明的實施形態,就可在立體視覺內容的場景切換時,使縱深值能夠平滑地遷移。
此外,本發明的實施形態係為了具體說明本發明而舉出的一例,如上述,是與申請專利範圍中的發明技術特徵分別具有對應關係。只不過,本發明係不限定於實施形態,在不脫離本發明主旨的範圍內可施加各種變形。
又,本發明的實施形態中所說明的處理程序,係可是為具有這些一連串程序的方法,又,亦可適用使這些一連串程序在電腦上執行所需的程式乃至於記憶該程式的記錄媒體。作寔該記錄媒體,係可使用光碟、硬碟、半導體碟,其他例如CD(Compact Disc)、MD(Mini Disc)、DVD(Digital Versatile Disk)、記憶卡、藍光光碟(Blu-ray Disc(註冊商標))等。又,於圖2中,是針對被當成映像聲音串流而記錄的MPEG壓縮的GOP所分別對應的映像縱深地圖值來說明。其係可使用於,例如光碟的程式串流、Blu-Ray規格或AVCHD規格所採用的TS串流、MPEG2串流、H.264/AVC串流、MP4串流等各種映像聲音壓縮串流以及其將來的擴充規格裡。
110...內容供給部
120...內容讀出管理部
121...目前畫格號碼保持部
122...目前畫格縱深值保持部
123...基準縱深值特定部
130...遷移畫格數設定部
140...內容預讀管理部
141...場景切換偵測部
142...最終畫格號碼生成部
143...目標縱深值生成部
150...縱深值補正部
160...開始縱深值保持部
170...固定縱深值設定部
200...內容記錄單元
210...映像資料
220...縱深地圖
300...攝像裝置
310...透鏡部
311...變焦透鏡
312...對焦透鏡
315、316、346...馬達
319...馬達驅動器
321...攝像元件
322...類比處理部
323...A/D轉換器
324...數位處理部
325...時序生成器
329...攝像機控制部
331...映像編碼部
332...縱深資訊設定部
333...檔案生成部
334...檔案解碼部
335...映像解碼部
336‧‧‧縱深資訊輸出部
337‧‧‧記憶體
338‧‧‧記憶體控制器
339‧‧‧系統控制部
341‧‧‧錯誤訂正部
342‧‧‧資料調變解調部
343‧‧‧磁場調變驅動器
344‧‧‧磁頭
345‧‧‧伺服機電路
347‧‧‧光拾取器
349‧‧‧驅動機控制部
350‧‧‧顯示部
370‧‧‧光碟
390‧‧‧操作受理部
[圖1]本發明的實施形態中的攝像裝置300之全體構成例的圖示。
[圖2]本發明的實施形態中的內容記錄單元200之構成例的圖示。
[圖3]本發明的實施形態中的縱深地圖220之例子的圖示。
[圖4]本發明的實施形態中的縱深值與距離之關係例的圖示。
[圖5]本發明的實施形態中的映像資料210與縱深地圖220之關係的圖示。
[圖6]本發明的實施形態所作的縱深值之補正的第1態樣的圖示。
[圖7]本發明的實施形態所作的縱深值之補正的第1態樣之章節全體的圖示。
[圖8]本發明的實施形態中的縱深值補正機構的第1機能構成例的圖示。
[圖9]本發明的實施形態中的縱深值補正之第1態樣所作的處理流程的圖示。
[圖10]本發明的實施形態所作的縱深值之補正的第2態樣的圖示。
[圖11]本發明的實施形態中的縱深值補正機構的第2機能構成例的圖示。
[圖12]本發明的實施形態中的縱深值補正之第2態樣所作的第1處理流程的圖示。
[圖13]本發明的實施形態中的縱深值補正之第2態樣所作的第2處理流程的圖示。
[圖14]本發明的實施形態中的縱深值補正之第2態樣所作的第3處理流程的圖示。
[圖15]本發明的第3實施形態中的靜止影像資料與動畫資料之關係的圖示。
[圖16]本發明的實施形態所作的縱深值之補正的第3態樣的圖示。
[圖17]本發明的實施形態中的縱深值補正機構的第3機能構成例的圖示。
[圖18]本發明的實施形態中的縱深值補正之第3態樣所作的處理流程的圖示。
[圖19]本發明的實施形態所作的縱深值之補正的第3態樣之變形例的圖示。
255...縱深值
711...縱深值
714...縱深值
721...縱深值
722...縱深值
723...縱深值
724...縱深值

Claims (12)

  1. 一種影像資訊處理裝置,其特徵為,具備:場景切換偵測部,係用以偵測出內容中的場景切換;和縱深值補正部,係用以補正前記縱深值,以使得立體視覺顯示所需之縱深值之變化是在前記場景切換前後以所定顯示速度作遷移。
  2. 如申請專利範圍第1項所記載之影像資訊處理裝置,其中,前記縱深值補正部,係補正前記縱深值,以使得對應於前記內容中之某個領域的縱深值之變化,是在前記場景切換前後,以所定顯示速度作遷移。
  3. 如申請專利範圍第1項所記載之影像資訊處理裝置,其中,前記縱深值補正部,係於前記場景切換前後,將影像全體的縱深值,補正成望遠側。
  4. 如申請專利範圍第1項所記載之影像資訊處理裝置,其中,前記縱深值補正部,係補正前記縱深值,以使得從前記場景切換前的縱深值往前記場景切換後的縱深值是以所定顯示速度作遷移。
  5. 如申請專利範圍第1項所記載之影像資訊處理裝置,其中,前記縱深值補正部,係進行補正,以使得於前記場景切換前的所定區間中,縱深值有所遷移。
  6. 如申請專利範圍第1項所記載之影像資訊處理裝置,其中,前記縱深值補正部,係進行補正,以使得於跨越前記場景切換前後的所定區間中,縱深值有所遷移。
  7. 如申請專利範圍第1項所記載之影像資訊處理裝置,其中,前記場景切換偵測部,係偵測出立體視覺影像與平面視覺影像之切換,來作為前記場景切換。
  8. 如申請專利範圍第1項所記載之影像資訊處理裝置,其中,前記場景切換偵測部,係偵測出動畫與靜止影像之切換,來作為前記場景切換。
  9. 一種影像資訊處理裝置,其特徵為,具備:固定縱深值設定部,係用以針對構成內容之影像資料進行立體視覺顯示所需的縱深值,將一定之值當作固定縱深值而加以設定;和基準縱深值特定部,係用以選擇前記影像資料之任一領域而將該當領域所對應之縱深值,當作基準縱深值而加以特定;和縱深值補正部,係針對前記影像資料之各領域所對應之縱深值,以一使得前記基準縱深值會變成前記固定縱深值的比率,來進行補正。
  10. 一種攝像裝置,其特徵為,具備:攝像影像供給部,係用以拍攝影像並供給攝像影像及立體視覺顯示所需之縱深值;和場景切換偵測部,係用以偵測出前記攝像影像中的場景切換;和縱深值補正部,係用以補正前記縱深值,以使得前記縱深值之變化是在前記場景切換前後以所定顯示速度作遷移。
  11. 一種影像資訊處理方法,其特徵為,具備:場景切換偵測程序,係用以偵測出內容中的場景切換;和縱深值補正程序,係用以補正前記縱深值,以使得立體視覺顯示所需之縱深值之變化是在前記場景切換前後以所定顯示速度作遷移。
  12. 一種程式,其特徵為,係令電腦執行:場景切換偵測程序,係用以偵測出內容中的場景切換;和縱深值補正程序,係用以補正前記縱深值,以使得立體視覺顯示所需之縱深值之變化是在前記場景切換前後以所定顯示速度作遷移。
TW099110899A 2009-04-24 2010-04-08 An image information processing apparatus, an image capturing apparatus, a video information processing method, and a program TWI416937B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009105755A JP5434231B2 (ja) 2009-04-24 2009-04-24 画像情報処理装置、撮像装置、画像情報処理方法およびプログラム

Publications (2)

Publication Number Publication Date
TW201043003A TW201043003A (en) 2010-12-01
TWI416937B true TWI416937B (zh) 2013-11-21

Family

ID=43011169

Family Applications (1)

Application Number Title Priority Date Filing Date
TW099110899A TWI416937B (zh) 2009-04-24 2010-04-08 An image information processing apparatus, an image capturing apparatus, a video information processing method, and a program

Country Status (9)

Country Link
US (1) US8698877B2 (zh)
EP (1) EP2293584A4 (zh)
JP (1) JP5434231B2 (zh)
KR (1) KR20120034255A (zh)
CN (1) CN102067616A (zh)
BR (1) BRPI1003633A2 (zh)
RU (1) RU2010151791A (zh)
TW (1) TWI416937B (zh)
WO (1) WO2010123053A1 (zh)

Families Citing this family (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5540746B2 (ja) 2009-11-20 2014-07-02 ソニー株式会社 受信装置、送信装置、通信システム、受信装置の制御方法、及びプログラム
JP2011176541A (ja) * 2010-02-24 2011-09-08 Sony Corp 立体映像処理装置および方法、並びにプログラム
JP5562122B2 (ja) * 2010-05-31 2014-07-30 キヤノン株式会社 画像処理装置及びその制御方法
JP2012053606A (ja) * 2010-08-31 2012-03-15 Sony Corp 情報処理装置および方法、並びにプログラム
JP2012134655A (ja) * 2010-12-20 2012-07-12 Toshiba Corp 画像処理装置、画像処理方法および画像表示装置
WO2012098803A1 (ja) * 2011-01-17 2012-07-26 コニカミノルタホールディングス株式会社 画像処理装置、画像処理方法、およびプログラム
JP2012169730A (ja) * 2011-02-10 2012-09-06 Nec Personal Computers Ltd 画像処理方法及び画像処理装置
WO2012127843A1 (ja) * 2011-03-24 2012-09-27 富士フイルム株式会社 立体画像処理装置及び立体画像処理方法
WO2012132304A1 (ja) * 2011-03-30 2012-10-04 富士フイルム株式会社 立体画像表示制御装置及び立体画像表示制御方法
JP5536283B2 (ja) * 2011-06-06 2014-07-02 富士フイルム株式会社 画像加工装置、複眼撮像装置、画像加工方法及びプログラム
TR201819457T4 (tr) * 2011-06-22 2019-01-21 Koninklijke Philips Nv Bir sunum ekranı için bir sinyal oluşturmak üzere yöntem ve cihaz.
US8879826B2 (en) * 2011-07-05 2014-11-04 Texas Instruments Incorporated Method, system and computer program product for switching between 2D and 3D coding of a video sequence of images
JP2013026943A (ja) * 2011-07-25 2013-02-04 Sharp Corp 立体画像処理装置および立体画像処理方法
JP5577305B2 (ja) * 2011-08-05 2014-08-20 株式会社ソニー・コンピュータエンタテインメント 画像処理装置
JP5127973B1 (ja) * 2011-10-21 2013-01-23 株式会社東芝 映像処理装置、映像処理方法および映像表示装置
KR101872864B1 (ko) * 2011-12-19 2018-06-29 엘지전자 주식회사 전자 기기 및 전자 기기의 제어 방법
JP5899910B2 (ja) * 2011-12-26 2016-04-06 株式会社Jvcケンウッド 画像処理装置、画像処理方法及び画像処理プログラム
JP5720561B2 (ja) * 2011-12-26 2015-05-20 株式会社Jvcケンウッド 画像処理装置、画像処理方法及び画像処理プログラム
JP6215228B2 (ja) * 2012-01-04 2017-10-18 トムソン ライセンシングThomson Licensing 3d画像シーケンスの処理
CN103959769B (zh) * 2012-02-02 2016-12-14 太阳专利托管公司 用于使用视差信息的3d媒体数据产生、编码、解码和显示的方法和装置
JP5450908B1 (ja) * 2012-03-26 2014-03-26 パナソニック株式会社 立体映像処理装置および立体映像処理方法
JP5807182B2 (ja) * 2012-07-11 2015-11-10 パナソニックIpマネジメント株式会社 3次元映像表示装置および3次元映像表示方法
KR101470693B1 (ko) * 2012-07-31 2014-12-08 엘지디스플레이 주식회사 영상 데이터 처리 방법과 이를 이용한 입체 영상 표시장치
WO2014204364A1 (en) * 2013-06-19 2014-12-24 Telefonaktiebolaget L M Ericsson (Publ) 3d video switching with gradual depth transition
US9847082B2 (en) * 2013-08-23 2017-12-19 Honeywell International Inc. System for modifying speech recognition and beamforming using a depth image
US10311595B2 (en) * 2013-11-19 2019-06-04 Canon Kabushiki Kaisha Image processing device and its control method, imaging apparatus, and storage medium
CN108335292B (zh) * 2015-08-13 2021-07-30 海信集团有限公司 一种场景切换中插入图片的方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1040420A (ja) * 1996-07-24 1998-02-13 Sanyo Electric Co Ltd 奥行き感制御方法
US20090027384A1 (en) * 2005-12-19 2009-01-29 Koninklijke Philips Electronics, N.V. Method of Identifying Pattern in a Series of Data

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4354751A (en) * 1980-03-18 1982-10-19 Minolta Camera Kabushiki Kaisha Exposure system for a camera
JP2602236B2 (ja) * 1987-07-21 1997-04-23 日本放送協会 立体テレビジョン信号の処理装置
US5323204A (en) * 1992-11-03 1994-06-21 Eastman Kodak Company Automatic optimization of photographic exposure parameters for non-standard display sizes and/or different focal length photographing modes through determination and utilization of extra system speed
DE69417824T4 (de) * 1993-08-26 2000-06-29 Matsushita Electric Ind Co Ltd Stereoskopischer Abtastapparat
JP3802630B2 (ja) * 1996-12-28 2006-07-26 オリンパス株式会社 立体画像生成装置および立体画像生成方法
JPH11164328A (ja) * 1997-11-27 1999-06-18 Toshiba Corp 立体映像表示装置
JP2001204964A (ja) * 2000-01-28 2001-07-31 Square Co Ltd 球技用ゲームのプログラムを記録したコンピュータ読み取り可能な記録媒体および球技用ゲームの画像表示処理方法およびビデオゲーム装置
US7254265B2 (en) * 2000-04-01 2007-08-07 Newsight Corporation Methods and systems for 2D/3D image conversion and optimization
JP3645800B2 (ja) * 2000-08-17 2005-05-11 ペンタックス株式会社 測距装置
WO2002052565A1 (en) * 2000-12-22 2002-07-04 Muvee Technologies Pte Ltd System and method for media production
JP2004246725A (ja) 2003-02-14 2004-09-02 Sharp Corp 表示装置、表示制御方法、表示制御プログラム及びこれを記録したコンピュータ読み取り可能な記録媒体
JP2005109568A (ja) * 2003-09-26 2005-04-21 Sanyo Electric Co Ltd 映像表示装置及びプログラム
JP2005341004A (ja) * 2004-05-25 2005-12-08 Sony Corp コンテンツ再生装置,コンテンツ再生方法,コンテンツ再生システムおよびそのコンピュータプログラム
JP5011842B2 (ja) * 2006-06-22 2012-08-29 株式会社ニコン 画像再生装置
CA2627999C (en) * 2007-04-03 2011-11-15 Her Majesty The Queen In Right Of Canada, As Represented By The Minister Of Industry Through The Communications Research Centre Canada Generation of a depth map from a monoscopic color image for rendering stereoscopic still and video images
US8208009B2 (en) * 2008-02-05 2012-06-26 Disney Enterprises, Inc. Stereoscopic image generation using retinal rivalry in scene transitions
JP4695664B2 (ja) * 2008-03-26 2011-06-08 富士フイルム株式会社 立体動画像処理装置および方法並びにプログラム
US8073243B2 (en) * 2008-05-30 2011-12-06 General Instrument Corporation Replacing image information in a captured image
US9225965B2 (en) * 2008-11-07 2015-12-29 Telecom Italia S.P.A. Method and system for producing multi-view 3D visual contents

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1040420A (ja) * 1996-07-24 1998-02-13 Sanyo Electric Co Ltd 奥行き感制御方法
US20090027384A1 (en) * 2005-12-19 2009-01-29 Koninklijke Philips Electronics, N.V. Method of Identifying Pattern in a Series of Data

Also Published As

Publication number Publication date
EP2293584A1 (en) 2011-03-09
US20110261160A1 (en) 2011-10-27
JP5434231B2 (ja) 2014-03-05
KR20120034255A (ko) 2012-04-10
US8698877B2 (en) 2014-04-15
RU2010151791A (ru) 2012-06-27
WO2010123053A1 (ja) 2010-10-28
TW201043003A (en) 2010-12-01
BRPI1003633A2 (pt) 2016-02-23
CN102067616A (zh) 2011-05-18
EP2293584A4 (en) 2016-11-09
JP2010258723A (ja) 2010-11-11

Similar Documents

Publication Publication Date Title
TWI416937B (zh) An image information processing apparatus, an image capturing apparatus, a video information processing method, and a program
JP5369952B2 (ja) 情報処理装置および情報処理方法
JP5293463B2 (ja) 画像処理装置、画像処理方法およびプログラム
US8890977B2 (en) Systems and methods for concurrently playing multiple images from a storage medium
JP2007328755A (ja) 画像処理装置、画像処理方法およびプログラム
JP2009156888A (ja) 音声補正装置及びそれを備えた撮像装置並びに音声補正方法
CN107251551B (zh) 图像处理设备、图像捕获装置、图像处理方法和存储介质
JP2009065587A (ja) 音声記録装置及び音声再生装置
JP2010074323A (ja) 記録装置および方法、並びに記録再生装置および方法
US20130177287A1 (en) Reproduction apparatus, image capturing apparatus, and program
JP5604916B2 (ja) 画像処理装置及びプログラム
JP2004274253A (ja) 映像記録装置および映像送信装置
JP4797847B2 (ja) 画像処理装置、画像処理手順およびプログラム
JP4998439B2 (ja) 画像処理装置、画像処理方法およびプログラム
US20150139627A1 (en) Motion picture playback apparatus and method for playing back motion picture
KR101464535B1 (ko) 데이터 기록 방법 및 장치, 데이터 재생 방법 및 장치,기록 매체
JP2010118917A (ja) 撮像装置、画像処理装置、画像処理方法およびプログラム
JP2005303943A (ja) 映像記録装置
JP2015029211A (ja) 撮像装置
JP5306068B2 (ja) 撮像装置及びその制御方法
JP2020141189A (ja) 撮像装置およびその制御方法
JP2012175339A (ja) 立体映像信号処理装置及び処理方法
JP2012147369A (ja) 撮像装置
JP2013013037A (ja) 画像処理装置、画像処理方法、及びプログラム、並びに記録媒体
JP2010283659A5 (zh)

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees