TWI475875B - 三維影像產生裝置 - Google Patents

三維影像產生裝置 Download PDF

Info

Publication number
TWI475875B
TWI475875B TW100149265A TW100149265A TWI475875B TW I475875 B TWI475875 B TW I475875B TW 100149265 A TW100149265 A TW 100149265A TW 100149265 A TW100149265 A TW 100149265A TW I475875 B TWI475875 B TW I475875B
Authority
TW
Taiwan
Prior art keywords
image
processor
transmission interface
instruction
unit
Prior art date
Application number
TW100149265A
Other languages
English (en)
Other versions
TW201328317A (zh
Inventor
Chia Ho Pan
Ming Jiun Liaw
Shuei Lin Chen
Original Assignee
Altek Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Altek Corp filed Critical Altek Corp
Priority to TW100149265A priority Critical patent/TWI475875B/zh
Priority to US13/411,646 priority patent/US20130169758A1/en
Publication of TW201328317A publication Critical patent/TW201328317A/zh
Application granted granted Critical
Publication of TWI475875B publication Critical patent/TWI475875B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/296—Synchronisation thereof; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers

Description

三維影像產生裝置
本發明是有關於一種影像處理技術，且特別是有關於一種三維影像產生裝置。
隨著科技以及影像擷取技術的日益發展，諸多廠商積極研發立體影像擷取技術，讓人們也可自行拍攝出具有立體效果的視訊影像。圖1是習知之一種三維(three dimensional；3D)數位相機100的實施方塊圖。數位相機100利用兩個影像感測器110、112分別擷取左眼、右眼的兩張二維影像。影像處理單元130透過傳輸控制單元120依序接收上述左右眼影像，經由影像處理以產生兩個處理後的二維影像，並同時將這左右眼影像處理為3D影像。若需要進行即時顯示(Live View)，影像處理單元130利用顯示控制單元136將3D影像傳送到顯示單元160。若需要儲存這些三維的靜態影像(still image)，影像處理單元130透過資料傳輸單元134將上述3D影像儲存於可攜式儲存單元170(例如，記憶卡)當中。
由於數位相機100僅具有單顆影像處理單元130，因此，影像處理單元130無法同時處理左右兩眼的二維影像，僅能透過傳輸控制單元120往復循環地以『左眼、右眼、左眼、右眼、左眼...』的順序來依序處理每一張二維影像。另一個已擷取的二維影像則需要額外的記憶體來進行緩衝處理。處理完左右兩眼的影像後，單顆影像處理單元130還需依序3D影像格式來整合左右眼影像。藉此，數位相機100不但需要足夠大的暫存記憶體來進行緩衝，其影像素理的速度還會受限於影像處理單元130的處理速度。傳輸控制單元120在影像傳輸順序上也需要重新設計，增加了實現難度。
美國專利號US 2008151044A1揭露另一種3D影像擷取的實現方式，其揭示的立體相機透過兩組透影鏡頭及影像處理部件，以同時接收與處理左右眼的二維影像。相較於圖1中的數位相機100，其揭示的影像處理部件僅分別對左右眼影像進行色彩轉換(color convention)後，便透過系統匯流排將左右眼影像儲存至立體相機的記憶體中，因此立體相機需要比數位相機100更大的暫存記憶體來緩衝左右眼影像的資訊，需要額外增加晶片面積。因此，此技術適合用於低解析度(例如低於一百萬化素)的影像系統。相對地，對於高解析度的影像系統，由於晶片內部所需的記憶體過大，成本太高，因此上述架構並不適合實現高解析度的影像系統。另一方面，整合3D影像的動作是由立體相機中另一個總體控制部件(overall control section)來進行，許多影像處理時間皆耗費在讀寫記憶體中，造成無謂的時間耗費並緩慢了處理速度。因此，上述兩種方式皆難以達到實質上的3D影像即時顯示，並且耗費過多的緩衝記憶體。
本發明提供一種三維影像產生裝置，此三維影像產生裝置利用兩個處理單元分別處理左右眼的二維影像以整合成三維影像。藉此，本三維影像產生裝置不需大量的暫存記憶體，因此可大幅節省建置成本、保有良好的影像處理效率、增加三維影像的整合處理速度。
本發明於第一實施例提出一種三維影像產生裝置，其主要利用兩個處理器以及單個記憶單元來進行三維影像的即時顯示。此三維影像產生裝置包括第一記憶單元、第一(主要)處理器以及第二(次要)處理器。第一記憶單元可儲存所產生的三維影像。第一(主要)處理器包括第一影像處理單元、資料讀寫單元、第一指令與資料傳輸界面以及第一任務控制單元。第一影像處理單元的輸入端接收代表人類第一眼之原始影像的複數個畫素資料，並經過影像處理，產生處理後的第一影像的複數個影像畫素。資料讀寫單元耦接至第一影像處理單元與第一記憶單元，其接收來自第一影像處理單元處理後的第一影像的影像畫素，並依一選定的三維影像格式寫入第一記憶單元的相對應儲存位址當中。一第一指令與資料傳輸界面耦接至所述資料讀寫單元。第一任務控制單元則發送指令與參數至上述第一影像處理單元、資料讀寫單元、以及第一指令與資料傳輸界面，藉以負責協調與執行所述第一(主要)處理器的運作。
第二(次要)處理器耦接至第一(主要)處理器，且第二(次要)處理器包括第二影像處理單元、第二指令與資料傳輸界面以及第二任務控制單元。第二影像處理單元的輸入端接收代表人類第二眼之原始影像的複數個畫素資料，並經過影像處理產生處理後的第二影像的複數個影像畫素。第二指令與資料傳輸界面耦接至第二影像處理單元與第一(主要)處理器的第一指令與資料傳輸界面。所述第一指令與資料傳輸界面以及所述第二指令與資料傳輸界面負責所述第二(次要)處理器與第一(主要)處理器的指令與資料傳輸。第二任務控制單元，透過該第二指令與資料傳輸界面和該第一(主要)處理器溝通並發送指令至所述第二影像處理單元、第二資料讀寫單元、以及第二指令與資料傳輸界面，藉以負責協調與執行該第二(次要)處理器的運作。第二影像處理單元處理後的第二影像的複數個影像畫素會透過所述第二指令與資料傳輸界面傳輸至第一(主要)處理器的第一指令與資料傳輸界面，進而傳送至第一(主要)處理器中的資料讀寫單元，並依一選定的三維影像格式將影像畫素寫入第一記憶單元的相對應儲存位址當中，藉以產生所述的三維影像。
另一方面，本發明於第二實施例提出一種三維影像產生裝置，其利用兩個影像處理單元以及其各自具有的記憶單元來進行三維影像的即時顯示、靜態影像儲存或是動態影像錄影(video clip)。此三維影像產生裝置包括第一記憶單元、第一(主要)處理器、第二記憶單元以及第二(次要)處理器。第一記憶單元用以儲存代表人類第一眼之原始圖案的第一影像的複數個或全部的畫素資料，並可儲存所產生的三維影像。第一(主要)處理器包括第一影像處理單元、第一資料讀寫單元、第一指令與資料傳輸界面以及第一任務控制單元。第一資料讀寫單元耦接至第一記憶單元，藉以負責寫入或讀取儲存於第一記憶單元的資料。第一影像處理單元耦接至第一資料讀寫單元，其透過第一資料讀寫單元以讀取第一影像的畫素資料，經過影像處理後，產生處理後的第一影像的複數個影像畫素，並依一選定的三維影像格式寫入第一記憶單元的相對應儲存位址。第一指令與資料傳輸界面則耦接至該第一資料讀寫單元。第一任務控制單元則發送指令至第一影像處理單元、第一資料讀寫單元、以及第一指令與資料傳輸界面，藉以負責協調與執行該第一(主要)處理器的運作。
承接上述，第二記憶單元用以儲存代表人類第二眼原始圖案的一第二影像的複數個或全部的畫素資料。第二(次要)處理器則包括第二資料讀寫單元、第二影像處理單元、第二指令與資料傳輸界面以及第二任務控制單元。第二資料讀寫單元耦接至所述第二記憶單元，負責寫入與讀取儲存於第二記憶單元的資料。第二影像處理單元耦接至第二資料讀寫單元，其透過第二資料讀寫單元讀取第二影像的畫素資料，經過影像處理後產生處理後的第二影像的複數個影像畫素。第二指令與資料傳輸界面耦接至第二影像處理單元與第一(主要)處理器的第一指令與資料傳輸界面。其中，第一指令與資料傳輸界面以及第二指令與資料傳輸界面負責第二(次要)處理器與第一(主要)處理器的資料傳輸。第二任務控制單元透過第二指令與資料傳輸界面和第一(主要)處理器溝通，並發送指令至第二影像處理單元、第二資料讀寫單元、以及第二指令與資料傳輸界面，藉以負責協調與執行第二(次要)處理器的運作。
其中，第二影像處理單元處理後的第二影像的複數個影像畫素透過第二指令與資料傳輸界面傳輸至第一(主要)處理器的第一指令與資料傳輸界面，進而傳送至第一(主要)處理器中的資料讀寫單元，並依一選定的三維影像格式將這些影像畫素寫入第一記憶單元的相對應儲存位址，藉以產生所述的三維影像。
再者，本發明於第三實施例提出一種三維影像產生裝置，其利用兩個資料讀寫單元以及單個記憶單元，並依據三維影像格式分別將像素資料寫入到記憶單元的對應儲存位址，直接在記憶單元中產生三維影像，藉以進行三維影像的靜態影像儲存或是動態影像錄影(video clip)。此三維影像產生裝置包括第一記憶單元、第一(主要)處理器與第二(次要)處理器。第一記憶單元用以儲存所產生的三維影像。第一(主要)處理器包括第一影像處理單元、第一資料讀寫單元、第一指令與資料傳輸界面以及第一任務控制單元。第一(主要)處理器中的各個元件與上述第一實施例相似，在此不予贅述。
第二(次要)處理器耦接至所述第一(主要)處理器，其包括第二影像處理單元、第二資料讀寫單元、第二指令與資料傳輸界面以及第二任務控制單元。第二(次要)處理器與上述第一實施例及第二實施例中所描述第二(次要)處理器的差異在於，第二(次要)處理器中的第二資料讀寫單元耦接至第二影像處理單元與第一記憶單元。第二資料讀寫單元接收來自第二影像處理單元處理後的第二影像的畫素資料，並依一選定的三維影像格式寫入第一記憶單元的相對應儲存位址，以產生所述的三維影像。第二(次要)處理器中未揭示的其他元件則與上述第一、第二實施例相似，在此不予贅述。
基於上述，本發明實施例的三維影像產生裝置利用兩個影像處理單元來分別處理左右兩眼的二維影像，並且透過主要處理單元或是兩個資料讀寫單元，依據一選定的三維影像格式將這兩個二維影像即時地整合成三維影像。藉此，本三維影像產生裝置不需大量的暫存記憶體，因此可大幅節省建置成本、保有良好的影像處理效率、增加三維影像的整合處理速度。
為讓本發明之上述特徵和優點能更明顯易懂，下文特舉實施例，並配合所附圖式作詳細說明如下。
現將詳細參考本發明之示範性實施例，在附圖中說明所述示範性實施例之實例。另外，凡可能之處，在圖式及實施方式中使用相同標號的元件/構件/符號代表相同或類似部分。
第一實施例
圖2是依照本發明第一實施例說明一種三維影像產生裝置200及使用其之三維影像擷取設備205的功能方塊圖。三維影像擷取設備205包括有兩個影像感測器210、220以及三維影像產生裝置200。此處所指的三維影像擷取設備200可以是可擷取立體影像的數位相機、攝影機或相關設備，本實施例不應受限於上述舉例。
本實施例的影像感測器210、212則以互補金氧半導體影像感測器(CMOS IMAGE SENSOR；CIS)或是電荷藕合元件(Charge Couple Device；CCD)影像感測器作為實現方式。第一影像感測器210經由影像匯流排MB耦接至三維影像產生裝置200的第一(主要)處理器220，其可擷取代表人類第一眼(例如，右眼)的二維原始影像，並將此二維原始影像輸出至第一(主要)處理器220。同樣地，第二影像感測器212經由影像匯流排SB耦接至三維影像產生裝置200的第二(次要)處理器230，其可擷取代表人類第二眼(例如，左眼)的二維原始影像，並將此二維原始影像輸出至第二(次要)處理器230。此處所謂的『原始影像』，係指影像感測器210、212輸出的數位影像，除了可能乘上增益值，並減去偏移量(offset)外，未經過複雜的演算法(例如去雜訊與影像增強)處理，基本上維持彩色濾光片的編排方式輸出。舉例說明，若影像感測器210、212的彩色濾光片編排是貝爾圖案(Bayer pattern)，則使環境光線能夠以彩色的面貌投影在影像感測器210、212的感光元件上，所感測得到並以貝爾圖案(Bayer pattern)輸出的二維影像就是本發明所稱之『原始影像』。另有一些影像感測器其彩色濾光片的編排不是貝爾圖案，而是其它型式，只要輸出影像維持彩色濾光片的編排方式，本發明稱之為『原始影像』。
繼續參照圖2，三維影像產生裝置200包括第一記憶單元240、第一(主要)處理器220以及第二(次要)處理器230。於本實施例中，第一記憶單元240利用動態隨機存取記憶體(Dynamic Random Access Memory；DRAM)來實現。第一記憶單元240主要用以儲存所產生的三維影像。第一(主要)處理器220及第二(次要)處理器230則可以是應用於影像處理(image processing)的特定應用積體電路(Application-specific integrated circuit；ASIC)，或是利用場可編程閘陣列(FPGA)加以實現。
在此詳細說明第一(主要)處理器220及第二(次要)處理器230中各個元件的功能用途。第一(主要)處理器220主要包括第一影像處理單元222、第一資料讀寫單元221、第一指令與資料傳輸界面225以及第一任務控制單元224，上述這些位在第一(主要)處理器220中的各個元件在本實施例中統一利用第一(主要)匯流排來傳輸資訊。其中，第一指令與資料傳輸界面以第一指令傳輸界面(例如，I2 C界面225a及通用輸入輸出(GPIO)界面225b)以及第一資料傳輸界面(例如，安全數位輸入輸出(SDIO)界面225c)來實施。藉此，第一指令與資料傳輸界面225會耦接至第一資料讀寫單元221。
第一(主要)處理器220更包括與影像感測器210相耦接的感測器界面223、以及對外傳輸界面。於本實施例中，對外傳輸界面可以是耦接至外部可攜式儲存單元170的SDIO傳輸界面228，也可以是高解析度多媒體(HDMI)界面329，或者兩者皆有。
第一任務控制單元224則是在進行本實施例中所述的影像處理任務(task)時，會依照任務的編排順序以及透過第一指令與資料傳輸界面和第二(次要)處理器230的第二任務控制單元234進行溝通，並發送指令與參數至第一(主要)處理器220中第一影像處理單元222、第一資料讀寫單元221、第一指令與資料傳輸界面225甚至是影像感測器210，藉以負責協調與執行第一(主要)處理器220的運作。另一方面，第一資料讀寫單元221耦接至第一影像處理單元222與第一記憶單元240，且本實施例以DRAM控制器加以實施。
於本實施例中，第一(主要)處理器220中第一任務控制單元224會輸出相關指令與參數至第一影像感測器210，藉以控制第一影像感測器210的運作。此外，第一任務控制單元224的指令與參數也會同時輸出至第二(次要)處理器230的第二任務控制單元234，藉以透過第二任務控制單元234來控制第一影像感測器210的運作。換句話說，第一影像感測器210與第二影像感測器212皆會接收來自於第一(主要)處理器220的指令與參數進行運作。例如，本實施例利用I2 C界面232來控制影像感測器210、212的影像擷取參數與控制指令，藉以控制二維影像的焦距、光圈、傳輸速率等等。
第二(次要)處理器230則耦接至第一(主要)處理器220。第二(次要)處理器主要包括第二影像處理單元232、第二指令與資料傳輸界面235以及第二任務控制單元234。第二(次要)處理器230更包括與影像感測器212相耦接的感測器界面233。上述這些位在第二(次要)處理器230中的各個元件在本實施例中統一利用第二(次要)匯流排來傳輸資訊。
上述第二指令與資料傳輸界面235是以第二指令傳輸界面(例如，I2 C界面235a及通用輸入輸出(GPIO)界面235b)以及第二資料傳輸界面(例如，SDIO界面235c)來實施。藉此，第一指令與資料傳輸界面225跟第二指令與資料傳輸界面235互相耦接，例如，I2 C界面225a耦接至I2 C界面235a，GPIO界面225b耦接至GPIO界面235b，藉以負責第一(主要)處理器220與第二(次要)處理器230的溝通。另一方面，第一資料傳輸界面(SDIO界面225c)與第二資料傳輸界面(SDIO界面235c)互相耦接，藉以負責第一(主要)處理器220與第二(次要)處理器230之間的影像資料傳輸。
此外，類似於第一任務控制單元224，第二任務控制單元234則是在進行影像處理任務時，將會透過第二指令與資料傳輸界面和第一(主要)處理器220的第一任務控制單元224進行溝通，並發送指令與參數至第二(次要)處理器230中第二影像處理單元232、第二資料讀寫單元231、第二指令與資料傳輸界面、甚至是影像感測器212，藉以負責協調與執行第二(次要)處理器230的運作。此外，第二指令與資料傳輸界面耦接至第二影像處理單元232與第一(主要)處理器220的第一指令與資料傳輸界面。第一指令與資料傳輸界面以及第二指令與資料傳輸界面負責第二(次要)處理器230與第一(主要)處理器220的指令與資料傳輸。
於本實施例中，第一影像處理單元222與第二影像處理單元232可以分別更包含一個影像壓縮單元。此影像壓縮單元可以分別將第一影像處理單元222或第二影像處理單元232處理完後的第一影像與第二影像分別進行影像壓縮後，才進行輸出。藉此，經由第一影像處理單元222與第二影像處理單元232處理後的第一影像與第二影像可大幅縮小其檔案大小。
在此以詳細說明三維影像產生裝置200在即時顯示時影像資訊流的制動流程，圖3是依照本發明第一實施例說明三維影像產生、即時顯示與儲存的影像資訊流的處理示意圖。首先，第一影像處理單元222的輸入端經由感測器界面223以接收由影像感測器210所擷取、代表人類右眼的原始影像的複數個畫素資料，如同虛線箭頭A1所示。然後，第一影像處理單元222對代表人類右眼的原始影像即時性地進行影像處理，並在經過影像處理後產生第一影像(右眼影像)的複數個影像畫素。
接著，第一資料讀寫單元221接收來自第一影像處理單元222處理後的第一影像的影像畫素，並依照一選定的、現今較常使用的三維影像格式，將上述第一影像的影像畫素寫入第一記憶單元240的人類右眼相對應儲存位址當中(虛線箭頭A2)。
在進行上述虛線箭頭A1的同時，第二影像處理單元232的輸入端也會同時接收代表人類左眼的原始影像的複數個畫素資料，如同虛線箭頭B1所示。然後，第二影像處理單元232對代表人類左眼的原始影像即時性地進行影像處理，並在經過影像處理後產生第二影像(左眼影像)的複數個影像畫素。
接著，第二影像處理單元232處理後的第二影像的影像畫素便會透過SDIO界面235c(也就是第二指令與資料傳輸界面中的第二資料傳輸界面)傳輸至第一(主要)處理器220的SDIO界面225c(第一指令與資料傳輸界面中的第一資料傳輸界面)，進而傳送至第一(主要)處理器220中的第一資料讀寫單元221中，如虛線箭頭B2所示。藉此，第一資料讀寫單元221便可依據一選定的三維影像格式，將上述第二影像的影像畫素寫入第一記憶單元240的人類左眼相對應儲存位址當中。藉此，虛線箭頭A2及B2應該可以同時進行寫入，藉以加速處理效率。
其中，第一資料讀寫單元221與第一記憶單元240之間的傳輸速度至少需快過資料傳輸界面225c與235c的傳輸速度2倍以上。如此，第一資料讀寫單元221便可先行儲存第一影像的影像畫素(也就是先處理箭頭A2)，再儲存第二影像的影像畫素(也就是處理箭頭A2完後再行處理箭頭B2)。
在影像資料寫入第一記憶單元240之前，主要處理器220中的任務控制單元224會透過第一資料讀寫單元221先行針對第一記憶單元240依一選定的三維影像格式進行相對應儲存位址的設定。換句話說，主要處理器220會對第一記憶單元240中的特定儲存位址先行寫入三維影像的檔案標頭(file header)，並將儲存位址進行分配，讓資料讀寫單元221得知右眼影像與左眼影像所需存入的相應記憶體位址，以利於箭頭A2與B2的實現。
在此說明上述『三維影像格式』在實施上的舉例，圖4A至圖4C分別為目前最常使用之三種三維影像格式的示意圖。詳言之，圖4A、圖4B及圖4C分別為三種三維影像格式：影像集合(frame packing)格式、並行排列(side-by-side horizontal)格式以及上下排列(top-bottom)格式，在第一記憶單元240中相對應的記憶體儲存區塊示意圖。標示為『L』的二維影像表示為圖3中影像感測器210擷取並處理後的左眼影像的影像畫素，而標示為『R』的二維影像則表示為圖3中影像感測器212擷取並處理後的右眼影像的影像畫素。
請同時參考圖3與圖4A，如果主要處理器220利用影像集合格式來整合左眼影像L與右眼影像R時，第一種影像集合格式是將完整的左眼影像L先儲存於三維影像資料前端的記憶體區塊，加上具有多條空白掃描線的主動空白區域之後，再存入完整的右眼影像R於三維影像資料後端的記憶體區塊，以整合出符合影像集合格式的三維影像。
另一種影像集合格式則是將左眼影像L的奇數條掃描線、偶數條掃描線分別存入二維影像L_odd及L_even的相應記憶體位址，右眼影像R亦如同左眼影像L一般地被存入二維影像R_odd及R_even的相應記憶體位址，並依據圖4A最右方的排列方式，在每個影像之間加上具有多條空白掃描線的主動空白區域，藉以整合出符合影像集合格式的三維影像。
並行排列格式則如圖4B所示，圖3的第一資料讀寫單元221會分別捨棄左眼影像L及右眼影像R中每條掃描線畫素個數的一半，例如，捨棄每條掃描線中奇數個影像畫素或偶數個影像畫素，而存入未被捨棄的二維影像L_H及R_H至圖3的第一記憶單元240，並依據圖4B右方的排列方式來整合出符合並行排列格式的三維影像。相似地，上下排列格式如圖4C所示，圖3的主要影像單元220會分別捨棄左眼及右眼影像L與R中掃描線數量的一半，例如，捨棄奇數條或偶數條掃描線，而存入未被捨棄的二維影像L_V及R_V，並依據圖4C右方的排列方式來整合出符合上下排列格式的三維影像。
基於上述可知，第一(主要)處理器220與第二(次要)處理器230的差異在於，第一(主要)處理器220具有第二(次要)處理器230所無的第一資料讀寫單元221以及對外傳輸界面(SDIO傳輸界面228和/或HDMI界面329)。因此，利用相同的2個處理器來便可分別執行第一(主要)處理器220與第二(次要)處理器230的功能，需僅禁用第二(次要)處理器230中的資料讀寫單元以及對外傳輸界面即可。或是，第一(主要)處理器220與第二(次要)處理器230也可利用不同的2個處理器來加以實施，並且上述第一(主要)處理器220中的第一影像處理單元222與第二(次要)處理器230中的第二影像處理單元232基本上產生相同的影像處理結果。
有鑒於此，當透過上述教示而在第一記憶單元240中產生三維影像之後，主要處理器220便可透過HDMI界面229將具三維影像格式的三維影像即時地傳輸至顯示單元160，藉以進行即時顯示(箭頭C1)，或是，主要處理器220透過SDIO傳輸界面228將上述三維影像存入可攜式儲存單元170中(箭頭C2)，例如安全數位(Secure Digital；SD)卡，藉以完成三維靜態影像擷取或動態影像錄影。
於其他實施例中，透過傳輸時序的配合，三維影像產生裝置200也可以不需要第一記憶單元240來暫存，而可直接依照上述三維影像格式的順序，將取得的左右眼影像直接傳輸到HMDI界面229和/或SDIO傳輸界面228，即可實現更為快捷且不需緩衝的即時顯示、靜態影像儲存。
第二實施例
圖5是依照本發明第二實施例說明一種三維影像產生裝置500及使用其之三維影像擷取設備505的功能方塊圖。第二實施例與第一實施例相類似，兩者的差異在於，三維影像產生裝置500更包括一第二記憶單元540，第二(次要)處理器230也更包括第二資料讀寫單元521。第一資料讀寫單元221耦接至第一記憶單元240，藉以負責寫入與讀取儲存於第一記憶單元240中的資料。相類似地，第二資料讀寫單元耦接至第二記憶單元540，其負責寫入與讀取儲存於第二記憶單元540中的資料。第二任務控制單元234也會發送指令到第二資料讀寫單元521，藉以負責協調與執行第二(次要)處理器230的運作。
藉此，三維影像產生裝置500便可利用兩個影像處理單元220、230以及其各自具有的記憶單元240、540來處理具有較大檔案尺寸的3D影像，藉以進行3D影像的即時顯示、高解析度的靜態影像儲存或是動態影像錄影(video clip)。其他有關於三維影像產生裝置500的元件及功能用途皆與第一實施例相類似，在此不予贅述。
圖6是依照本發明第二實施例說明在三維影像產生、即時顯示與儲存的之影像資訊流的處理示意圖。本實施例的影像感測器210、212主要是應用於較高的解析度與較快的影像傳輸速度，其超過第一影像處理單元222與第二影像處理單元232即時運算的能力，因而需要足夠的緩衝記憶體，以先行暫存這些二維視訊影像。
因此，如同虛線箭頭A1、B1所示，影像感測器210、212所擷取代表人類左眼、右眼之原始圖案的左眼影像或右眼影像中部份或是全部的畫素資料分別透過感測器界面223、233儲存於第一記憶單元240與第二記憶單元中。上述『部份或是全部的畫素資料』的資料大小可以依據影像處理單元230、232的處理速度來進行調整，使影像處理單元230、232能夠達到最佳化的處理效能。
圖6中，影像感測器210、212所擷取代表人類左眼、右眼之原始圖案的左眼影像或右眼影像中部份或是全部的畫素資料分別由感測器界面223與233接收後，依虛線箭頭A1、B1分別通過第一影像處理單元222與第二影像處理單元232，經過一個或複數個可即時運算的預處理，例如減去直流偏移量(DC offset)、乘上數位增益(digital gain)、伽瑪(Gamma)校正等，再分別透過第一資料讀寫單元221與第二資料讀寫單元521寫入第一記憶單元240與第二記憶單元540中。
於部分實施例中，圖6中影像感測器210、212所擷取代表人類左眼、右眼之原始圖案的左眼影像或右眼影像中部份或是全部的畫素資料分別由感測器介面223與233接收後，虛線箭頭A1、B1也可以跳過(未示意於圖6)第一影像處理單元222與第二影像處理單元232，使其未經過任何預處理而直接分別透過第一資料讀寫單元221與第二資料讀寫單元521寫入第一記憶單元240與第二記憶單元540中。
影像感測器210、212所擷取的二維影像大小與擷取速率應該相同。因此，當第一記憶單元240與第二記憶單元540同時儲存到固定大小的右眼與左眼原始影像的畫素資料時，第一影像處理單元222與第二影像處理單元232分別透過第一資料讀寫單元221與第二資料讀寫單元521來讀取第一影像(右眼影像)與第二影像(左眼影像)的畫素資料，並經過影像處理後，分別產生第一影像(右眼影像)與第二影像(左眼影像)的複數個影像畫素，如虛線箭頭A2、B2所示。
之後，第一(主要)處理器220透過第一資料讀寫單元221以依一選定的三維影像格式寫入第一記憶單元240的相對應儲存位址(虛線箭頭A3)。與此同時，如虛線箭頭B4所示，第二影像處理單元232處理後的第二影像的複數個影像畫素則會透過第二指令與資料傳輸界面(SIDO界面235c)傳輸至第一(主要)處理器220的第一指令與資料傳輸界面(SIDO界面225c)，進而傳送至第一(主要)處理器220中的第一資料讀寫單元221，並依一選定的三維影像格式將這些第二影像的影像畫素寫入第一記憶單元240的相對應儲存位址。
除此之外，第二影像處理單元232處理後的第二影像的複數個影像畫素也可如虛線箭頭B3所示，先透過第二資料讀寫單元521暫儲存於第二記憶單元240，等到累積到一定的畫素數目之後，再透過第二資料讀寫單元521讀取送至第二指令與資料傳輸界面(SIDO界面235c)，傳輸至第一(主要)處理器220的第一指令與資料傳輸界面(SIDO界面225c)，進而傳送至第一(主要)處理器220中的第一資料讀寫單元221，並依一選定的三維影像格式將這些第二影像的影像畫素寫入第一記憶單元240的相對應儲存位址。
在三維影像資料寫入第一記憶單元240之前，主要處理器220中的任務控制單元224會透過第一資料讀寫單元221先行針對第一記憶單元240依一選定的三維影像格式進行相對應儲存位址的設定。換句話說，主要處理器220會對第一記憶單元240中的特定儲存位址先行寫入三維影像的檔案標頭(file header)，並將儲存位址進行分配，讓資料讀寫單元221得知右眼影像與左眼影像所需存入的相應記憶體位址，以利於箭頭A3、B3與B4的實現。
由於本實施例將兩個記憶單元240、540分別配置給處理器220、230以進行緩衝，因此三維影像產生裝置500便可以應用於具備較高解析度與較快的影像傳輸速度的影像感測器210與212上，並將產生的三維影像儲存於在第一記憶單元240中。
藉此，主要處理器220便可透過HDMI界面229將上述的三維視訊影像傳送至顯示單元160，藉以進行即時顯示(箭頭C1)。或是，主要處理器220透過SDIO傳輸界面228將上述三維視訊影像存入可攜式儲存單元170中(箭頭C2)，從而完成三維靜態影像擷取或動態影像錄影。
於其他實施例中，圖5及圖6所述的第二實施例也可以假設本實施例的影像感測器210、212將會擷取較低解析度的二維影像或是利用較慢的傳輸速度經由感測器界面接收原始影像。在此應用下，圖三所描述之控制流程也可適用於本案的第二實施例，在此不予贅述相關實施細節。
第三實施例
圖7是依照本發明第三實施例說明一種三維影像產生裝置700及使用其之三維影像擷取設備705的功能方塊圖。第三實施例與上述第一、第二實施例相類似，與上述實施例的差異在於，三維影像產生裝置700的第一(主要)處理器220及第二(次要)處理器230分別包括第一資料讀寫單元721與第二資料處理單元731。第一資料讀寫單元721與第二資料處理單元731分別利用第一讀寫匯流排與第二讀寫匯流排以共同耦接至第一記憶單元740。也就是說，第一記憶單元740是一種雙埠(dual port)記憶單元，其至少包含第一讀寫匯流排(耦接至第一資料讀寫單元721)與第二讀寫匯流排(耦接至第二資料讀寫單元731)，藉以同時被兩個處理器寫入資料與讀取資料。相對而言，第一與第二實施例之記憶單元240與540是單埠(single port)記憶單元。
藉此，三維影像產生裝置700便利用兩個資料讀寫單元721、731以及單一個雙埠記憶單元740，並依據三維影像格式分別將左眼影像及右眼影像的像素資料同時寫入到第一記憶單元740的對應儲存位址。三維影像產生裝置700便可直接在第一記憶單元740中產生所需的三維影像，從而得以進行三維影像的靜態影像儲存或是動態影像錄影(video clip)。此外，第一(主要)處理器220與第二(次要)處理器230中的各個元件與上述第一實施例相似，在此不予贅述。
圖8是依照本發明第三實施例說明在三維影像產生、即時顯示與儲存之影像資訊流的處理示意圖。本實施例主要是應用在影像感測器210、212具備較高的解析度與較快的影像傳輸速度，並超過第一影像處理單元222與第二影像處理單元232即時運算的能力，因而需要足夠的緩衝記憶體，以先行暫存這些二維視訊影像。
如同虛線箭頭A1、B1所示，影像感測器210、212所擷取代表人類左眼、右眼之原始圖案的左眼影像或右眼影像中部份或是全部的畫素資料分別透過感測器界面223、233儲存於第一記憶單元740中。上述『部份或是全部的畫素資料』的資料大小可以依據影像處理單元230、232的處理速度來進行調整，使影像處理單元230、232能夠達到最佳化的處理效能。
圖8中影像感測器210、212所擷取代表人類左眼、右眼之原始圖案的左眼影像或右眼影像中部份或是全部的畫素資料分別由感測器界面223與233接收後，依虛線箭頭A1、B1分別通過第一影像處理單元222與第二影像處理單元232，經過一個或複數個可即時運算的預處理，例如減去直流偏移量(DC offset)、乘上數位增益(digital gain)、伽瑪(Gamma)校正等，再分別透過第一資料讀寫單元721與第二資料讀寫單元731寫入第一記憶單元740。
於部分實施例中，圖8中影像感測器210、212所擷取代表人類左眼、右眼之原始圖案的左眼影像或右眼影像中部份或是全部的畫素資料分別由感測器界面223與233接收後，依虛線箭頭A1、B1也可以跳過(未示意於圖8)第一影像處理單元222與第二影像處理單元232，使其未經過任何預處理而直接分別透過第一資料讀寫單元721與第二資料讀寫單元731寫入第一記憶單元740中。
影像感測器210、212所擷取的二維影像大小與擷取速率應該相同。因此，當第一記憶單元740同時儲存到固定大小的右眼與左眼原始影像的畫素資料時，第一影像處理單元222與第二影像處理單元232分別透過第一資料讀寫單元721與第二資料讀寫單元731來讀取第一影像(右眼影像)與第二影像(左眼影像)的畫素資料，並經過影像處理後，分別產生第一影像(右眼影像)與第二影像(左眼影像)的複數個影像畫素，如虛線箭頭A2、B2所示。
之後，第一(主要)處理器220透過第一資料讀寫單元721以依一選定的三維影像格式將處理後的第一影像(右眼影像)寫入第一記憶單元740的相對應儲存位址(虛線箭頭A3)。與此同時，如虛線箭頭B3所示，第二(次要)處理器230透過第二資料讀寫單元731以依一選定的三維影像格式將處理後的第二影像(左眼影像)的複數個影像畫素寫入第一記憶單元740的相對應儲存位址
在三維影像資料寫入該雙埠記憶單元740之前，主要處理器220中的任務控制單元224會透過第一資料讀寫單元221先行針對該雙埠記憶單元740依一選定的三維影像格式進行相對應儲存位址的設定。換句話說，主要處理器220會對該雙埠記憶單元740中的特定儲存位址先行寫入三維影像的檔案標頭(file header)，並將儲存位址進行分配，讓資料讀寫單元221得知右眼影像與左眼影像所需存入的相應記憶體位址，以利於箭頭A3與B3的實現。
藉此，由於本實施例將一個雙埠記憶單元740配置給處理器220、230以進行緩衝，因此三維影像產生裝置700便可以應用於具備較高解析度與較快的影像傳輸速度的影像感測器210與212上，並將產生的三維影像儲存於在第一記憶單元740中。
藉此，主要處理器220便可透過HDMI界面229將三維影像傳輸至顯示單元160，以進行即時顯示(箭頭C1)。主要處理器220也可透過SDIO傳輸界面228將上述三維影像存入可攜式儲存單元170中(箭頭C2)，藉以完成三維靜態影像擷取或動態影像錄影。
基於上述實施例，此處所述的三維影像產生裝置利用兩個影像處理單元來分別處理左右兩眼的二維影像，並且透過主要處理單元220或是兩個資料讀寫單元，依據一選定的三維影像格式將這兩個二維影像即時地整合成三維影像。藉此，本三維影像產生裝置不需大量的暫存記憶體，因此可大幅節省建置成本、保有良好的影像處理效率、增加三維影像的整合處理速度。
此外，次要處理器230由於不需要整合三維影像，因此可選用運算效能較第一(主要)處理器220為低的運算裝置。另一方面，第二(次要)處理器230中也可以不需要對外傳輸界面(例如，HDMI界面229或是SDIO傳輸界面228)。因此，本實施例的三維影像產生裝置以及使用其之三維影像擷取設備可透過上述設計來大幅節省建置成本，並同時保有良好的影像處理效率。
雖然本發明已以實施例揭露如上，然其並非用以限定本發明，任何所屬技術領域中具有通常知識者，在不脫離本發明之精神和範圍內，當可作些許之更動與潤飾，故本發明之保護範圍當視後附之申請專利範圍所界定者為準。
100．．．三維數位相機
110、112、210、212．．．影像感測器
120．．．傳輸控制單元
130．．．影像處理單元
134．．．資料傳輸單元
136．．．顯示控制單元
160．．．顯示單元
170．．．可攜式儲存單元
200、500、700．．．三維影像產生裝置
205、505、705．．．三維影像擷取設備
220．．．第一(主要)處理器
230．．．第二(次要)處理器
221、521、721、731．．．資料讀寫單元
222、232．．．影像處理單元
223、233．．．感測器界面
224、234．．．任務控制單元
225、235．．．指令與資料傳輸界面
225a、235a．．．I2 C界面
225b、235b．．．GPIO界面
225c、235c．．．SDIO界面
228．．．SDIO傳輸界面
229．．．HDMI界面
240．．．第一記憶單元
540．．．第二記憶單元
740．．．第一記憶單元/雙埠記憶單元
A1~A3、B1~B3、C1~C2．．．虛線箭頭
CS．．．時脈訊號
L、L_H、L_V、L_odd、L_even、R、R_H、R_V、R_odd、R_even．．．二維影像
MB、SB．．．影像匯流排
圖1是習知之一種三維數位相機的實施方塊圖。
圖2是依照本發明第二實施例說明一種三維影像產生裝置及使用其之三維影像擷取設備的功能方塊圖。
圖3是依照本發明第一實施例說明在三維影像產生、即時顯示與儲存之影像資訊流的處理示意圖。
圖4A至圖4C分別為目前使用之三種三維影像格式的示意圖。
圖5是依照本發明第二實施例說明一種三維影像產生裝置及使用其之三維影像擷取設備的功能方塊圖。
圖6是依照本發明第二實施例說明在三維影像產生、即時顯示與儲存之影像資訊流的處理示意圖。
圖7是依照本發明第三實施例說明一種三維影像產生裝置及使用其之三維影像擷取設備的功能方塊圖。
圖8是依照本發明第三實施例說明在三維影像產生、即時顯示與儲存之影像資訊流的處理示意圖。
200．．．三維影像產生裝置
205．．．三維影像擷取設備
210、212．．．影像感測器
220．．．第一(主要)處理器
230．．．第二(次要)處理器
221．．．資料讀寫單元
222、232．．．影像處理單元
223、233．．．感測器界面
224、234．．．任務控制單元
225、235．．．指令與資料傳輸界面
225a、235a．．．I2 C界面
225b、235b．．．GPIO界面
225c、235c．．．SDIO界面
228．．．SDIO傳輸界面
229．．．HDMI界面
240．．．第一記憶單元
CS．．．時脈訊號
MB、SB．．．影像匯流排

Claims (21)

  1. 一種三維影像產生裝置，包括：一第一記憶單元，儲存所產生的一三維影像；一第一處理器，其包括：一第一影像處理單元，其輸入端接收代表人類第一眼之原始影像的複數個畫素資料，並經過影像處理以產生該第一影像處理單元處理後的一第一影像的複數個畫素資料；一資料讀寫單元，耦接至該第一影像處理單元與該第一記憶單元，接收來自該第一影像處理單元處理後的該第一影像的該些畫素資料，並依一選定的一三維影像格式寫入該第一記憶單元的相對應儲存位址；一第一指令與資料傳輸界面，耦接至該資料讀寫單元；以及一第一任務控制單元，發送指令與參數至該第一影像處理單元、該資料讀寫單元、以及該第一指令與資料傳輸界面，負責協調與執行該第一處理器的運作；以及一第二處理器，耦接至該第一處理器，其包括：一第二影像處理單元，其輸入端接收代表人類第二眼之原始影像的複數個畫素資料，並經過影像處理以產生該第二影像處理單元處理後的一第二影像的複數個畫素； 一第二指令與資料傳輸界面，耦接至該第二影像處理單元與該第一處理器的該第一指令與資料傳輸界面，其中該第一指令與資料傳輸界面以及該第二指令與資料傳輸界面負責該第二處理器與該第一處理器的指令與資料傳輸；以及一第二任務控制單元，透過該第二指令與資料傳輸界面和該第一處理器溝通，並發送指令至該第二影像處理單元、該第二資料讀寫單元、以及該第二指令與資料傳輸界面，負責協調與執行該第二處理器的運作；其中，該第二影像處理單元處理後的該第二影像的複數個畫素透過該第二指令與資料傳輸界面傳輸至該第一處理器的該第一指令與資料傳輸界面，進而傳送至該第一處理器中的該資料讀寫單元，並依一選定的該三維影像格式將該些畫素資料寫入該第一記憶單元的相對應儲存位址，以產生該三維影像。
  2. 如申請專利範圍第1項所述之三維影像產生裝置，其中該第一影像處理單元與該第二影像處理單元更分別包含一壓縮單元，將該處理完後的該第一影像與該第二影像分別壓縮後輸出。
  3. 如申請專利範圍第1項所述之三維影像產生裝置，其中該第一指令與資料傳輸界面分別以一第一指令傳輸界面與一第一資料傳輸界面來實施，該第二指令與資料 傳輸界面分別以一第二指令傳輸界面與一第二資料傳輸界面來實施，其中，該第一指令傳輸界面與該第二指令傳輸界面互相耦接，負責該第一處理器與該第二處理器的溝通；該第一資料傳輸界面與該第二資料傳輸界面互相耦接，負責該第一處理器與該第二處理器之間的影像資料傳輸。
  4. 如申請專利範圍第1項所述之三維影像產生裝置，更包括：一第一影像感測器，耦接至該第一處理器，用以擷取代表人類第一眼之二維的原始影像並輸出至該第一處理器；以及一第二影像感測器，耦接至該第二影像處理單元，用以擷取代表人類第二眼之二維的原始影像並輸出至該第二處理器，其中，該第一影像感測器與第二影像感測器接收來自該第一處理器的指令與參數進行運作。
  5. 如申請專利範圍第4項所述之三維影像產生裝置，其中該第一處理器的指令與參數先行輸出至該第二處理器，再透過該第二處理器傳遞到該第二影像感測器，藉以控制該第二影像感測器的運作。
  6. 如申請專利範圍第1項所述之三維影像產生裝置，其中該第一處理器與該第二處理器利用相同的2個處理器來實施，其分別執行該第一處理器與該第二處理器的功能。
  7. 如申請專利範圍第1項所述之三維影像產生裝置，其中該第一處理器與該第二處理器利用不同的2個處理器來實施，且該第一處理器中的該第一影像處理單元與該第二處理器中的該第二影像處理單元在處理相同影像資訊時產生相同的影像處理結果。
  8. 一種三維影像產生裝置，包括：一第一記憶單元，用以儲存至少一代表人類第一眼的一第一影像的複數個或全部的畫素資料，並儲存所產生的一三維影像；一第一處理器，其包括：一第一資料讀寫單元，耦接至該第一記憶單元，負責寫入或讀取儲存於該第一記憶單元的資料；一第一影像處理單元，耦接至該第一資料讀寫單元，透過該第一資料讀寫單元讀取該第一影像的該些畫素資料，經過影像處理後以產生該第一影像處理單元處理後的該第一影像的複數個影像畫素，並依一選定的一三維影像格式寫入該第一記憶單元的相對應儲存位址；一第一指令與資料傳輸界面，耦接至該第一資料讀寫單元；以及一第一任務控制單元，發送指令至該第一影像處理單元、該第一資料讀寫單元、以及該第一指令與資料傳輸界面，負責協調與執行該第一處理器的運作；以及 一第二記憶單元，用以儲存至少一代表人類第二眼的一第二影像的複數個或全部的畫素資料；一第二處理器，其包括：一第二資料讀寫單元，耦接至該第二記憶單元，負責寫入或讀取儲存於該第二記憶單元的資料；一第二影像處理單元，耦接至該第二資料讀寫單元，透過該第二資料讀寫單元讀取該第二影像的該些畫素資料，經過影像處理後以產生該第二影像處理單元處理後的該第二影像的複數個影像畫素；一第二指令與資料傳輸界面，耦接至該第二影像處理單元與該第一處理器的該第一指令與資料傳輸界面，其中該第一指令與資料傳輸界面以及該第二指令與資料傳輸界面負責該第二處理器與該第一處理器的資料傳輸；以及一第二任務控制單元，透過該第二指令與資料傳輸界面和該第一處理器溝通，並發送指令至該第二影像處理單元、該第二資料讀寫單元、以及該第二指令與資料傳輸界面，負責協調與執行該第二處理器的運作；其中，該第二影像處理單元處理後的該第二影像的複數個畫素透過該第二指令與資料傳輸界面傳輸至該第一處理器的該第一指令與資料傳輸界面，進而傳送至該第一處理器中的該第一資料讀寫單元，並依一選定的該三維影像 格式將該些畫素資料寫入該第一記憶單元的相對應儲存位址。
  9. 如申請專利範圍第8項所述之三維影像產生裝置，其中該第一影像處理單元與該第二影像處理單元更分別包含一壓縮單元，將該處理完後的該第一影像與該第二影像分別壓縮後輸出。
  10. 如申請專利範圍第8項所述之三維影像產生裝置，其中該第一指令與資料傳輸界面分別以一第一指令傳輸界面與一第一資料傳輸界面來實施，該第二指令與資料傳輸界面可分別以一第二指令傳輸界面與一第二資料傳輸界面來實施，其中，該第一指令傳輸界面與該第二指令傳輸界面互相耦接，負責該第一處理器與該第二處理器的溝通；該第一資料傳輸界面與該第二資料傳輸界面互相耦接，負責該第一處理器與該第二處理器之間的影像資料傳輸。
  11. 如申請專利範圍第8項所述之三維影像產生裝置，更包括：一第一影像感測器，耦接至該第一處理器，用以擷取代表人類第一眼之二維的原始影像並輸出至該第一處理器，並經由該第一處理器內的該第一資料讀寫單元寫入該第一記憶單元；以及一第二影像感測器，耦接至該第二處理器，用以擷取代表人類第二眼之二維的原始影像並輸出至該第二處理 器，並經由該第二處理器內的該第二資料讀寫單元寫入該第二記憶單元，其中，該第一影像感測器與第二影像感測器接收來自該第一處理器的指令與參數進行運作。
  12. 如申請專利範圍第11項所述之三維影像產生裝置，其中該第一處理器的指令與參數先行輸出至該第二處理器，再透過該第二處理器傳遞到該第二影像感測器，藉以控制該第二影像感測器的運作。
  13. 如申請專利範圍第8項所述之三維影像產生裝置，其中該第一處理器與該第二處理器利用相同的2個處理器來實施，其分別執行該第一處理器與該第二處理器的功能。
  14. 如申請專利範圍第8項所述之三維影像產生裝置，其中該第一處理器與該第二處理器利用不同的2個處理器來實施，且該第一處理器中的該第一影像處理單元與該第二處理器中的第二影像處理單元在處理相同影像資訊時產生相同的影像處理結果。
  15. 一種三維影像產生裝置，包括：一第一記憶單元，至少包含一第一讀寫匯流排與一第二讀寫匯流排，用以儲存所產生的一三維影像；一第一處理器，其包括：一第一影像處理單元，其輸入端接收代表人類第一眼之原始影像的複數個畫素資料，並經過影像處理 以產生該第一影像處理單元處理後的一第一影像的複數個畫素資料；一第一資料讀寫單元，耦接至該第一影像處理單元與該第一記憶單元的第一讀寫匯流排，接收來自該第一影像處理單元處理後的代表人類第一眼之影像的該些畫素資料，依一選定的一三維影像格式寫入該第一記憶單元的相對應儲存位址；一第一指令與資料傳輸界面，耦接至該第一資料讀寫單元；以及一第一任務控制單元，發送指令與參數至該第一影像處理單元、該第一資料讀寫單元、以及該第一指令與資料傳輸界面，負責協調與執行該第一處理器的運作；以及一第二處理器，耦接至該第一處理器，其包括：一第二影像處理單元，其輸入端接收代表人類第二眼之原始影像的複數個畫素資料，並經過影像處理以產生該第二影像處理單元處理後的一第二影像的複數個畫素；一第二資料讀寫單元，耦接至該第二影像處理單元與該第一記憶單元的第二讀寫匯流排；一第二指令與資料傳輸界面，耦接至該第二影像處理單元與該第一處理器的該第一指令與資料傳輸界面，其中該第一指令與資料傳輸界面以及該第二指令 與資料傳輸界面負責該第二處理器與該第一處理器的指令與資料傳輸；以及一第二任務控制單元，透過該第二指令與資料傳輸界面和該第一處理器溝通，並發送指令至該第二影像處理單元、該第二資料讀寫單元、以及該第二指令與資料傳輸界面，負責協調與執行該第二處理器的運作；其中，該第二資料讀寫單元接收來自該第二影像處理單元處理後的該第二影像的該些畫素資料，並將代表人類第二眼之影像依一選定的該三維影像格式寫入該第一記憶單元的相對應儲存位址，以產生該三維影像。
  16. 如申請專利範圍第15項所述之三維影像產生裝置，其中該第一影像處理單元與該第二影像處理單元更分別包含一壓縮單元，將該處理完後的該第一影像與該第二影像分別壓縮後輸出。
  17. 如申請專利範圍第15項所述之三維影像產生裝置，其中該第一指令與資料傳輸界面分別以一第一指令傳輸界面與一第一資料傳輸界面來實施，該第二指令與資料傳輸界面分別以一第二指令傳輸界面與一第二資料傳輸界面來實施，其中，該第一指令傳輸界面與該第二指令傳輸界面互相耦接，負責該第一處理器與該第二處理器的溝通；該第一資料傳輸界面與該第二資料傳輸界面互相耦接，負責該第一處理器與該第二處理器之間的影像資料傳輸。
  18. 如申請專利範圍第15項所述之三維影像產生裝置，更包括：一第一影像感測器，耦接至該第一處理器，用以擷取代表人類第一眼之二維的原始影像並輸出至該第一處理器；以及一第二影像感測器，耦接至該第二影像處理單元，用以擷取代表人類第二眼之二維的原始影像並輸出至該第二處理器，其中，該第一影像感測器與第二影像感測器接收來自該第一處理器的指令與參數進行運作。
  19. 如申請專利範圍第18項所述之三維影像產生裝置，其中該第一處理器的指令與參數先行輸出至該第二處理器，再透過該第二處理器傳遞到該第二影像感測器，藉以控制該第二影像感測器的運作。
  20. 如申請專利範圍第15項所述之三維影像產生裝置，其中該第一處理器與該第二處理器利用相同的2個處理器來實施，其分別執行該第一處理器與該第二處理器的功能。
  21. 如申請專利範圍第15項所述之三維影像產生裝置，其中該第一處理器與該第二處理器利用不同的2個處理器來實施，且該第一處理器中的該第一影像處理單元與該第二處理器中的該第二影像處理單元在處理相同影像資訊時產生相同的影像處理結果。
TW100149265A 2011-12-28 2011-12-28 三維影像產生裝置 TWI475875B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
TW100149265A TWI475875B (zh) 2011-12-28 2011-12-28 三維影像產生裝置
US13/411,646 US20130169758A1 (en) 2011-12-28 2012-03-05 Three-dimensional image generating device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW100149265A TWI475875B (zh) 2011-12-28 2011-12-28 三維影像產生裝置

Publications (2)

Publication Number Publication Date
TW201328317A TW201328317A (zh) 2013-07-01
TWI475875B true TWI475875B (zh) 2015-03-01

Family

ID=48694512

Family Applications (1)

Application Number Title Priority Date Filing Date
TW100149265A TWI475875B (zh) 2011-12-28 2011-12-28 三維影像產生裝置

Country Status (2)

Country Link
US (1) US20130169758A1 (zh)
TW (1) TWI475875B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI524735B (zh) * 2012-03-30 2016-03-01 華晶科技股份有限公司 三維影像產生方法及裝置
US20140035894A1 (en) * 2012-08-03 2014-02-06 Shenzhen China Star Optoelectronics Technology Co. Ltd. Three-Dimension LCD and the Driving Method
JP6171457B2 (ja) * 2013-03-25 2017-08-02 セイコーエプソン株式会社 ロボット制御装置、ロボットシステム、ロボット、ロボット制御方法及びロボット制御プログラム
US20150215530A1 (en) * 2014-01-27 2015-07-30 Microsoft Corporation Universal capture

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070085903A1 (en) * 2005-10-17 2007-04-19 Via Technologies, Inc. 3-d stereoscopic image display system
US20100265317A1 (en) * 2009-04-15 2010-10-21 Masaomi Tomizawa Image pickup apparatus
US20120147145A1 (en) * 2010-12-09 2012-06-14 Sony Corporation Image processing device, image processing method, and program
TW201328365A (zh) * 2011-12-27 2013-07-01 Altek Corp 具備三維去雜訊化功能之視訊編碼/解碼裝置及其控制方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW395137B (en) * 1997-06-06 2000-06-21 Matsushita Electric Ind Co Ltd Image processing device

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070085903A1 (en) * 2005-10-17 2007-04-19 Via Technologies, Inc. 3-d stereoscopic image display system
US20100265317A1 (en) * 2009-04-15 2010-10-21 Masaomi Tomizawa Image pickup apparatus
US20120147145A1 (en) * 2010-12-09 2012-06-14 Sony Corporation Image processing device, image processing method, and program
TW201328365A (zh) * 2011-12-27 2013-07-01 Altek Corp 具備三維去雜訊化功能之視訊編碼/解碼裝置及其控制方法

Also Published As

Publication number Publication date
TW201328317A (zh) 2013-07-01
US20130169758A1 (en) 2013-07-04

Similar Documents

Publication Publication Date Title
US20240073542A1 (en) High dynamic range processing based on angular rate measurements
WO2017215331A1 (zh) 全景摄像机及其拍摄方法
US9247132B2 (en) Moving picture capturing device, information processing system, information processing device, and image data processing method
US10721412B2 (en) Generating long exposure images for high dynamic range processing
US6594399B1 (en) Method and apparatus for integrating multiple 1-D filters into a digital image stream interface
NZ598897A (en) Autonomous systems and methods for still and moving picture production
US20170345129A1 (en) In loop stitching for multi-camera arrays
TWI475875B (zh) 三維影像產生裝置
AU2013346603A1 (en) Method and device for capturing and constructing a stream of panoramic or stereoscopic images
US11431941B2 (en) Method, apparatus, and system for processing digital images
US20070236511A1 (en) Techniques to facilitate use of small line buffers for processing of small or large images
JP2015053644A (ja) 撮像装置
JP2004304387A (ja) 画像処理装置
CN112703728B (zh) 用于处理数字图像的方法、装置和系统
US20140293118A1 (en) Imaging device
US11636708B2 (en) Face detection in spherical images
US11443403B2 (en) Image and video processing using multiple pipelines
JP2013055541A (ja) 撮像装置
JP2020188323A (ja) 撮像装置および撮像方法
JP2012209798A (ja) 画像処理システム及び撮像装置
JP6280713B2 (ja) 撮像装置
CN103188512B (zh) 三维影像产生装置
US20220021852A1 (en) Color fringing processing independent of tone mapping
JP6764572B2 (ja) イメージセンサ、および電子機器
JP2014072591A (ja) 画像処理装置

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees