TW201223268A - Imaging apparatus, signal processing method, and program - Google Patents

Description

201223268 六、發明說明： 【發明所屬之技術領域】 本揭示發明相關於成像裝置、信號 式。更明確地說，相關於藉由·使用具有 個影像的影像合成處理，致能具有寬動 影像之產生的成像裝置、信號處理方法 【先前技術】 用於視訊攝影機及數位靜物相機等 諸如，CCD (電荷耦合裝置）影像感測 式金屬氧化物半導體）影像感測器累積 電荷，並實施將對應於累積電荷之電信 。然而，累積在光電轉換設備中的電荷 收特定光量或較大的累積電荷量到達飽 導致將特定或更高亮度的主題區域設定 稱爲「白修剪」的現象。 爲防止此種現象，實施諸如藉由依 制光電轉換設備之電荷累積期間以調整 ，以將靈敏度控制成最佳値。例如，相 高速釋放快門，以減少曝光時間，因此 的電流累積週期，並在累積電荷量到達 信號。此種處理致能將對應於主題的梯 像的輸出。 然而，當包括亮暗部二者的主題成 處理方法、以及程 不同曝光時間之多 態範圍及高品質的 、以及程式。 的固態成像設備， 器及CMOS (互補 對應於入射光量的 號輸出的光電轉換 量有上限，且在接 和等級的情形中， 成飽和亮度等級之 據外部光的改變控 曝光時間等的處理 關於明亮主題，以 縮短光電轉換裝置 飽和等級前輸出電 度精確地再生之影 像時，以高速釋放 -5- 201223268 快門導致暗部的曝光時間不足，使S/Ν (信號-對-雜訊） 比退化且影像品質受累。爲精確地再生有亮暗部二者之主 題的拍攝影像中之亮部及暗部的亮度等級’必需針對在影 像感測器上具有些微入射光的像素實現藉由長曝光時間的 高S/Ν (信號-對-雜訊）比’以及在具有較大光輸入的像 素上避免飽和的處理。 有使用具有不同曝光時間之多個影像的相關技術。此 技術涉及針對暗影像使用長曝光期間影像’並針對使用長 曝光期間會發生白修剪之影像區域使用短曝光期間影像’ 以判定最佳的像素等級。藉由合今多個不同曝光影像’可 得到具有寬動態範圍且無白修剪的影像。 例如，日本未審查專利申請案公告案號第2〇08-99 1 5 8 號及日本未審查專利申請案公告案號第2 00 8-2 2 76 97號的 揭示係用於合成不同曝光量的多個影像，以得到具有寬動 態範圍之影像的組態。 圖1係根據相關技術之成像裝置1 〇的方塊圖，該技術 將藉由在每個垂直週期在長曝光及短曝光之間切換成像設 備的曝光時間而得到之二種靈敏度的影像合成，並產生寬 動態範圍影像。 將描述使用成像裝置10用於產生寬動態範圍影像的處 理。經由鏡頭11輸入的光在成像設備12受光電轉換，輸出 圖片信號在類比前端13受相關雙重取樣處理及AGC (自動 增益控制），然後受A/D (類比-至-數位）轉換，以變成 數位信號。將輸出自類比前端13的數位成像信號輸入至信 -6- 201223268 號處理單元20。 在信號處理單元20，首先，藉由YRGB產生電路21產 生係亮度信號的Y信號、及係色彩信號的R信號、G信號、 以及B信號，YRGB也稱爲亮度RGB。從YRGB產生電路21 輸出的Y信號、R信號、G信號、以及B信號在第一信號處 理單元22受適當的信號處理，然後實施至記憶體23的寫入 處理。 記憶體23儲存在成像設備具有不同曝光時間的低靈敏 度影像及高靈敏度影像，亦即，長曝光影像及短曝光影像 。之後，將長曝光影像及短曝光影像從記憶體23讀出，並 輸入至影像合成單元24 (實施WDR (寬動態範圍合成）） ’其中實施藉由影像合成得到寬動態範圍的處理。 隨後，將具有寬動態範圍的合成影像輸入至影像校正 單元25，以實施γ校正處理等，包括用於將YRGB信號轉換 成，例如，包括色差信號的YCbCr信號之處理，並另外在 第二信號處理單元26實施最終信號處理並產生最終輸出信 號。 須注意通常第一信號處理單元22實施頻率校正、信號 等級校正、WB (白平衡）校正等，第一信號處理單元22 及第二信號處理單元26配合記憶體23的控制實施影像的垂 直反轉、慢快門/靜止快門操作、手移動補償、電子縮放 等’且第二信號處理單元26實施削峰、色差信號的產生、 OSD (螢幕顯示）、輸出編碼處理等。 使用藉由長曝光影像及短曝光影像的合成處理產生寬 201223268 動態範圍影像的成像裝置，來自成像裝置ι〇之輸出信號等 級的額定値在尙未產生寬動態範圍影像之正常影像及已產 生寬動態範圍影像的影像之間相同。因此，在尙未產生寬 動態範圍影像的正常影像及已產生寬動態範圍影像之影像 中的主題之對比及亮度將依據主題的狀態而彼此不同，且 已產生寬動態範圍影像的影像通常不係可取影像，且因此 ，許多配置致能不產生寬動態範圍影像的正常影像及產生 寬動態範圍影像之影像二者的拍攝。提供許多配置使得依 據主題的狀態選擇是否產生寬動態範圍影像。 此處如圖1所示，藉由影像合成單元24的合成處理已 在藉由影像校正單元25的γ處理之前實施，該影像合成單 元實施藉由合成影像產生寬動態範圍影像的處理。因此， 例如，使用產生作爲輸出信號之各者爲8位元之Υ、Cr、以 及Cb的成像裝置，根據相關技術，至記憶體的讀/寫資料 受處理而以稱爲422格式的資料格式讀/寫，該格式以各者 爲10位元或以上的亮度信號（Y)、及彩色信號（G)、 (R)、以及（B)，具有一對彩色信號對亮度信號之二像 素的解析度，如圖2A及2 B所示。 如圖2A所示，資料讀/寫係以422格式實施，其中將像 素增量中的信號使用爲亮度信號（Y)，但將二像素的平 均値使用爲彩色信號（G) 、 ( R)、以及（B)。圖2B描 繪在使用1〇位元的亮度信號（Y )及12位元之彩色信號（ G) 、( R)、以及（B)實施讀/寫的情形中，設定用於各 信號之位元的範例。 -8 - 201223268 須注意針對從成像設備讀取資料的方法，相關技術包 括連續讀取法，其中，將所有像素讀出爲獨立信號，以及 交錯讀取法，其中將二垂直相鄰線的像素混合並讀出。 在從成像設備交錯讀出的情形中，用於係交錯顯示格 式之NTSC及PAL格式的成像設備驅動頻率爲13.5MHz、 14MHz、18MHz等，而在連續讀出的情形中，通常使用爲 彼等之雙倍的27MHz、28MHz、以及36MHz。 在成像設備讀取方法係連續讀取的情形中，必需針對 一次寫入實施二次讀取，以實施二影像的合成處理以產生 寬動態範圍，所以爲具有一記憶體23，該記憶體必需以至 少爲成像設備之驅動頻率三倍的頻率操作，且在連續讀取 的情形中，其係該頻率的二倍之8 1 MHz、約86MHz、以及 108MHz。 爲以422格式實施YRGB的讀/寫，每一時鐘使用 50 + 2 = 25位元的資料，所以必需使用32位元資料寬度的記 憶體或必需另外將該頻率加倍成162MHz、約171MHz、以 及2 16MHz，以使用16位元記憶體之任一者。必需儲存四 個影像以使用與NTSC或PAL格式相容的成像裝置得到寬動 態範圍影像，而即使在以連續方式操作時，少於64MB對 資料尺寸仍係充份的，133至166MHz係用於對應於64MB之 記憶體的最大頻率，所以取代使用133MHz，該資料寬度 必需爲3 2位元或必需使用高速記憶體。 使用前者，已有諸如由於記憶體控制線的增加或使用 二記憶體設備所導致的載置區域增加、由於必需使用具有 -9- 201223268 少量需求之記憶體設備類型而變得昂貴等的問題。又’在 將記憶體之資料格式降低至1 6位元或更低的情形中，已有 由於不充份的資料解析度導致影像品質退化的問題’且明 確地說，在不實施用於產生寬動態範圍之WDR合成的情形 中，影像品質中的此退化已甚顯著。又，已有錯誤影像在 切換成像裝置時發生的問題，該成像裝置藉由在係寬動態 範圍影像及正常影像的二種資料格式之間切換而操作。 【發明內容】 已可取地提供成像裝置、信號處理方法 '以及程式， 因此使用能拍攝已產生寬動態範圍影像之影像及正常影像 之二種影像的成像裝置，可減少記憶體容量、可防止在已 產生寬動態範圍影像的影像及正常影像之二種影像的拍攝 模式之間切換時發生輸出錯誤、並致能平滑模式切換。 本發明之實施例包括用於影像信號的信號處理單元， 其包括第一、第二、以及第三信號處理單元、以及儲存影 像信號的記憶體、及第一、第二、第三、以及第四切換器 。將第一切換器連接至第二信號處理單元的輸入。第一切 換器在記憶體之輸出及第一信號處理單元的輸出之間切換 。將第二切換器連接至第三信號處理單元的輸入。第二切 換器在記憶體之輸出及第二信號處理單元的輸出之間切換 。將第三切換器連接至記憶體的輸入。第三切換器在來自 第二信號處理單元之輸出及來自第一信號處理單元的輸出 之間切換。將第四切換器連接至記憶體的輸出。第四切換 -10- 201223268 器在至第三信號處理單元之輸入及至第二信號處理單元的 輸入之間切換。 在另一實施例中，控制記憶體的輸入/輸出路徑。針 對正常影像產生，在影像校正後，將影像信號儲存入記憶 體並從該記憶體讀取。針對寬動態範圍影像產生’將該等 影像信號校正前，將影像信號儲存入該記憶體並從該記憶 體讀取。 根據另一實施例，針對正常影像產生，將第一切換器 連接至第一信號處理電路的輸出。將第二切換器連接至記 憶體的輸出。將第三切換器連接至第二信號處理單元的輸 出。將第四切換器連接至至第三信號處理單元的輸入。 在另一實施例中，針對寬動態範圍影像產生，將第一 切換器連接至記憶體的輸出。將第二切換器連接至第二信 號處理單元的輸出。將第三切換器連接至第一信號處理單 元的輸出。將第四切換器連接至第二信號處理單元的輸入 〇 根據另一實施例，該第二信號處理單元包括從儲存在 該記憶體中的影像信號產生寬動態範圍影像的合成單元。 該合成單元執行影像合成處理。針對正常影像產生，影像 合成處理未執行。 在另一實施例中，第二信號處理單元包括從儲存在記 憶體中的影像信號產生寬動態範圍影像並執行影像合成處 理的影像合成單元。第二信號處理單元也包括影像校正單 元及信號處理設備。影像校正單元校正影像信號。該信號 -11 - 201223268 處理設備將影像信號轉換爲色差信號。針對正常影像產生 ，該影像合成處理不由該影像合成單元執行。 在另一實施例中，影像處理單元回應於控制器的控制 信號在正常影像產生操作及寬動態範圍影像產生操作之間 切換處理。信號處理單元包括記億體、影像校正單元、以 及切換設備。記億體儲存影像信號。影像校正單元校正影 像信號。將切換設備連接至該記憶體及該影像校正單元’ 將該記憶體的輸出路徑切換至該影像校正單元/自該影像 校正單元切換至該記憶體的輸入路徑。 在另一實施例中，記憶體的輸入/輸出路徑針對正常 影像產生及寬動態範圍影像產生受不同控制。針對正常影 像產生，將影像信號儲存在記憶體中並在藉由影像校正單 元的影像校正之後從記憶體讀出°針對寬動態範圍影像產 生，將影像信號儲存至記憶體並在藉由影像校正單元校正 影像信號之前從記憶體讀出。 在另一實施例中，影像信號處理系統包括記憶體、控 制單元、信號處理單元、以及切換單元。信號處理單元包 括影像校正單元以及影像合成單元。記憶體儲存影像信號 。控制單元執行該記憶體之輸入/輸出路徑的信號路徑控 制。影像校正單元校正影像信號。影像合成單元從儲存在 該記憶體中的該等影像信號產生寬動態範圍影像並執行影 像合成處理。將切換單元連接至該記憶體及該信號處理單 元，並該記憶體的信號路徑切換至/自該信號處理單元。 在另一實施例中，影像信號處理系統針對正常影像產 -12- 201223268 生並針對寬動態範圍影像產生控制記億體的輸入/輸出路 徑。針對正常影像產生，將影像信號儲存在記憶體中並在 藉由影像校正單元的影像校正之後從記憶體讀出。針對寬 動態範圍影像產生，將影像信號儲存入記憶體中並在藉由 合成單元合成及藉由影像校正單元校正影像信號之前從記 憶體讀出。 在其他實施例中，針對正常影像產生，影像合成處理 不由該影像合成單元執行。 本發明的其他目的及優點將如隨附圖式所描繪地從本 發明之較佳實施例的以下描述’而變得明顯。 【實施方式】 現在將參考該等圖式描述根據本揭示發明的成像裝置 、信號處理方法、以及程式。描述將以下列項目的次序提 供。 1. 關於成像裝置的整體組態範例 2. 關於當實施正常影像產生處理及寬動態範圍影像 產生處理時的設定 3. 關於儲存在記憶體中之資料的格式 4. 關於影像產生處理的詳細順序 (4-A )使用連續讀出及連續輸出的正常影像產生順 序 (4-B)使用連續讀出及連續輸出的寬動態範圍影像 產生順序（第一範例） -13- 201223268 (4-C )使用連續讀出及連續輸出的寬動態範圍影像 產生順序（第二範例） (4-D )使用連續讀出及交錯輸出的正常影像產生順 序（第一範例） (4-E )使用連續讀出及交錯輸出的正常影像產生順 序（第二範例） (1 2 3 4_F )使用連續讀出及交錯輸出的寬動態範圍影像 產生順序（第一範例） (4-G )使用連續讀出及交錯輸出的寬動態範圍影像 產生順序（第二範例） (4-H )使用連續讀出及交錯輸出的寬動態範圍影像 產生順序（第三範例） (4-1 )使用連續讀出及交錯輸出的寬動態範圍影像產 生順序（第四範例） (4_ J)在使用連續讀出及連續輸出之正常影像產生 及寬動態範圍影像產生之間切換的順序 -14- 1 .關於成像裝置的整體組態範例 2 圖3係描繪根據本揭示發明之成像裝置的實施例之方 3 塊圖。在本揭示發明藉由成像裝置之實施例描述的同時， 應牢記本揭示發明並未限制在成像裝置，並可施用至其他 形式’包括不具有用於輸入已成像信號並實施信號處理之 成像部的影像處理設備。 4 將描述圖3所示之成像裝置1 00的組態及處理。經由鏡 201223268 頭ιοί輸入的光在成像設備102受光電轉換。對應於已在成 像設備102產生之影像的電信號在類比前端103受相關雙重 取樣處理及AGC (自動增益控制），然後受A/D (類比-至-數位）轉換以變成對應於該影像的數位信號° 另外，將從類比前端1〇3輸出之數位信號輸入至信號 處理單元120的YRGB產生單元121，具有在YRGB產生單元 121產生之係亮度信號的Y信號、以及係彩色信號的R信號 、G信號、以及B信號。 從YRGB產生單元121輸出的Y信號、R信號、G信號、 以及B信號在第一信號處理單元122受適當的信號處理，然 後輸入至切換器a (以參考數字151a表示；在下文中也稱 爲「切換器1 5 1 a」）的N側輸入終端，以及切換器c (以參 考數字151c表示；在下文中也稱爲「切換器151c」）的W 側輸入終端。 將切換器1 5 1 a的輸出輸入至影像合成單元1 23並視情 況受影像合成處理，亦即，藉由短曝光影像及長曝光影像 的影像合成處理執行之產生寬動態範圍的處理。須注意當 產生正常影像時，影像合成單元123不執行影像合成處理 ，且未經改變地將具有對待在第二信號處理單元1 25上執 行之第二信號處理的充份解析度之來自第一信號處理單元 122的輸入輸出至影像校正單元（γ校正）124。 須注意第一信號處理單元1 2 2輸出能產生依照記憶體 130儲存之正常影像的資料（遵循稍後描述之圖6Α及6Β中 的格式1 ( Π )的資料）之信號，例如，YRGB各者爲1 〇位 -15- 201223268 元的信號。 影像校正單元（γ校正）124使各YRGB信號處理受γ校 正處理，並輸出已校正影像至第二信號處理單元125。 第二信號處理單元125實施，例如，用於轉換爲包括 色差信號（YCbCr )之信號的處理等，並將已處理影像輸 出至切換器b (以參考數字151b表示；在下文中也稱爲「 切換器1 5 1 b」）的W側輸入終端；以及切換器〗5〗c的n側 輸入終端。將切換器151b的輸出輸入至實施最終信號處理 的第三信號處理單元126，從而產生並輸出成像裝置輸出 信號。 切換器151c的輸出係至記憶體130的寫入資料，並將 來自記憶體130的讀取資料輸入至切換器d (以參考數字 151d表示；在下文中也稱爲「切換器i51d」）。將從切換 器151d之N側輸出終端輸出的信號輸入至切換器i5ib的N 側輸入終端，並將從切換器1 5 1 d之W側輸出終端輸出的信 號輸入至切換器1 5 1 a的W側輸入終端。 須注意使用第一信號處理單元122實施頻率校正、信 號等級信號、WB (白平衡）等。通常在第二信號處理單 元125，實施削峰、色差信號的產生等，並在第三信號處 理單元126’實施OSD (螢幕顯示）、輸出編碼處理等， 但此等信號處理單元的角色可能視情況改變。 圖3所示的成像裝置1〇〇具有能選擇性地執行下列處理 的組態； (1)正常影像產生處理，用於將從成像設備102輸出 -16- 201223268 之影像圖框產生爲一輸出影像，以及 (2) WDR (寬動態範圍）影像產生處理，其中將藉 由在各垂直週期在長曝光及短曝光之間切換成像設備102 的曝光時間而得到之二種靈敏度的影像合成，以產生具有 寬動態範圍影像的影像。 在產生爲寬動態範圍影像時，在正常影像產生處理中 具有可取亮度的主題輸出通常係陰暗且具有低對比的影像 。因此，可產生寬動態範圍影像的視訊攝影機甚至具有產 生寬動態範圍影像較佳之主題條件及正常影像較佳的主題 條件。 使用圖3所示的成像裝置1 00，控制單元1 05經由輸入 單元1 06，例如，偵測使用者設定，並致能正常影像產生 操作及寬動態範圍影像產生操作之間的切換。 或者，控制可能受影響，使得，例如，控制單元1 05 分析藉由長曝光得到的高靈敏度影像之亮度信號的統計圖 ，且在判定白修剪區域之百分比甚高的情形中，執行成像 以藉由短曝光實施低靈敏度影像的成像。例如，在黑修剪 及白修剪之區域在統計圖中甚小的情形中，當實施高靈敏 度成像時，作出產生寬動態範圍影像係不可取的判定，並 將設定切換成正常影像拍攝操作。 控制單元1 05依照記憶體實施存取控制，諸如，定址 設定及存取順序的控制。另外，在正常影像產生操作及寬 動態範圍影像產生操作之間切換時，控制單元1 05對記憶 體130執行隨附輸入/輸出路徑之切換的信號路徑控制。須 -17- 201223268 注意在儲存於其自身內的儲存部或未顯示之儲存單元中的 程式後，控制單元1 〇 5執行各種類型的處理及控制。 在正常影像產生操作及寬動態範圍影像產生操作之間 的切換處理之具體處理範例係後續處理，其係控制單元 105執行的一控制。在未於影像合成單元123實施影像合成 處理的正常影像產生時，將信號路徑控制執行成將藉由影 像校正單元124校正後的信號設定爲用於寫至記憶體130或 自其讀取的信號，且在影像合成單元123實施影像合成處 理的寬動態範圍影像產生時，將信號路徑控制執行成將藉 由影像校正單元124校正前的訊號設定爲用於寫至記憶體 13 0或自其讀取的信號。 因此，成像裝置1 〇〇係藉由使用者設定或藉由控制單 元105實施的自動控制在正常影像產生模式及寬動態範圍 影像產生模式之間切換的組態。控制單元1 0 5實施控制， 使得在正常影像產生模式的情形中，信號處理單元1 20的 切換器151a至切換器15 Id係N側連接組態，且在寬動態範 圍影像產生模式的情形中，信號處理單元1 20的切換器 151 a至切換器151d爲W側連接組態。 又，在正常影像產生模式的情形中，控制單元1 0 5實 施控制以停止在影像合成單元1 23的影像合成處理，並將 來自第一信號處理單元122的輸出直接輸入至影像校正單 元 124。 在寬動態範圍影像產生模式的情形中，在影像合成單 元123執行影像合成處理。影像合成單元123藉由執行用於 -18- 201223268 在藉由長曝光得到之高靈敏度影像的白修剪區域中設定藉 由短曝光得到之低靈敏度影像的有效像素値之影像合成處 理，產生寬動態範圍影像。 2.關於當實施正常影像產生處理及寬動態範圍影像 產生處理時的設定 使用圖3之成像裝置1 00的組態，在實施用於產生正常 影像的正常操作時及在實施用於產生寬動態範圍影像的寬 動態範圍操作時之間，切換器151a至切換器151d的設定不 同且信號的流動也不同。 將參考圖4及5描述由於此等模式中的不同所導致之在 信號流動中的不同。圖4係使用粗線描繪當實施用於產生 正常影像之正常操作時信號之流動的圖。圖5係使用粗線 描繪當實施用於產生寬動態範圍影像之寬動態範圍操作時 信號之流動的圖。 首先，將參考圖4描述當實施用於產生正常影像之正 常操作時的信號流動。在實施用於產生正常影像之正常操 作時，將切換器151a至切換器151d切換至N側。在經由類 比前端103將來自成像設備102的輸入信號轉換爲數位信號 後，將彼等輸入至信號處理單元120之YRGB產生單元121 ，並產生亮度信號Y及彩色信號R、G、B。 亮度信號Y及彩色信號R、G、B在第一信號處理單元 122受信號處理，然後經由·切換器151a輸入至影像合成單 元123。當實施正常影像產生操作時，影像合成單元123不 -19- 201223268 實施影像合成處理’並將輸入信號未經改變地輸出至影像 校正單元124。 影像校正單元124對各YRGB信號實施γ校正，並將已 校正信號輸出至第二信號處理單元125。在第二信號處理 單元125，例如，實施轉換爲包括色差信號（YCbCr)等之 信號的處理、削峰、及其他信號處理，並經由在記憶體 130之輸入部的切換器151c將已處理信號寫至記憶體丨30。 另外，經由切換器1 5 1 d及1 5 1 b將來自記憶體1 3 0的讀 取信號輸入至第三信號處理單元126。第三信號處理單元 12 6依照從記憶體130讀出的信號執行最終信號處理並產生 及輸出待從成像裝置輸出的正常影像。 其次’將參考圖5描述當實施用於產生寬動態範圍影 像之寬動態範圍操作時的信號流動。當實施字線WL產生 寬動態範圍影像的寬動態範圍操作時，將切換器1 5 1 a至切 換器151d切換至W側。 經由類比前端103將來自成像設備102的輸入信號轉換 爲數位信號，然後輸入至信號處理單元120之YRGB產生單 元121，從而產生亮度信號Y及彩色信號R、G、B。 在實施後續信號處理前，將其之亮度信號Y及彩色信 號R、G、B已在第一信號處理單元122受信號處理的YRGB 信號暫時儲存在記憶體130中。寫入至記憶體130係藉由在 記憶體130之輸入部的切換器151c實施。 如先前所描述的，用於產生寬動態範圍影像的影像合 成處理使用長曝光影像及短曝光影像之二影像。因此，將 -20- 201223268 迄今已描述之經由儲存在記憶體13 0中的影像使用成像設 備102拍攝影像之處理實施爲在係下列二者之（a)及 )的二連續拍攝影像上實施的處理 (a )短曝光影像（低靈敏度影像：Ln )以及 (b )長曝光影像（高靈敏度影像：Hn ) ° 須注意將於稍後詳細地描述具體處理順序。 儲存在記億體1 3 0中的二影像經由在記憶體1 3.0之輸出 部的切換器1 5 1 d從記憶體1 3 0讀出，並經由切換器1 5 1 a輸 入至影像合成單元123。將從記憶體130讀取影像之處理執 行爲使用下列二影像各者的記憶體儲存位址平行地讀取的 處理 (a )短曝光影像（低靈敏度影像：Ln )以及 (b)長曝光影像（高靈敏度影像：Hn)。 影像合成單元123將讀取自記憶體130的短曝光影像及 長曝光影像合成，並產生寬動態範圍影像。將已產生之寬 動態範圍影像輸出至影像校正單元1 24。 影像校正單元124在各YRGB信號上實施γ校正，並將 已校·正信號輸出至第二信號處理單元125。第二信號處理 單元125實施，例如，轉換爲包括色差信號（YCbCr)等之 信號的處理、削峰、及其他信號處理，並經由切換器1 5 1 b 將已處理信號輸入至第三信號處理單元126。第三信號處 理單元126依照從記憶體130讀出的信號執行最終信號處理 並產生待從成像裝置輸出的寬動態範圍影像。 參考圖4描述之正常影像產生處理及參考圖5描述的寬 -21 - 201223268 動態範圍影像產生處理之間的一個主要不同係隨後的記億 體讀取及寫入時序。 使用參考圖4描述的正常影像產生處理，寫至記憶體 130及自其讀取係在影像校正單元124之影像校正（γ校正 )及第二信號處理單元125的信號處理之後實施。隨後， 從記憶體130讀出的信號在第二信號處理單元125受最終信 號處理，並輸出正常影像。 另一方面，使用參考圖5描述的寬動態範圍影像產生 處理，在第二信號處理單元125的信號處理之前，實施影 像合成單元123的影像合成處理、影像校正單元124的影像 校正（γ校正）、以及依照記億體130的讀/寫處理^ 隨後，從記憶體130讀取的信號在影像合成單元123受 影像合成處理、在影像校正單元124受影像校正（γ校正） 、在第二信號處理單元125受信號處理、並另外在第二信 號處理單元125執行最終信號處理，並輸出寬動態範圍影 像。 須注意使用寬動態範圍影像產生處理，實施至記憶體 1 3 0的寫入使得將下列二影像 (a )短曝光影像（低靈敏度影像：Ln )以及 (b)長曝光影像（高靈敏度影像：Hn) 循序地寫至指定位置的個別記億體位址’並在讀取時 ，使用此等二記憶體位址平行地讀取。 須注意使用參考圖4描述的正常影像產生處理，在影 像校正單元1 24的影像校正（γ校正）之後，將信號’特別 -22- 201223268 係YCbCr信號，寫至記憶體130，並也自其讀取。 另一方面，使用寬動態範圍影像產生處理，寫入至記 憶體130及自其讀取係在影像校正單元124的後續影像校正 (γ校正）之前實施。亦即，讀寫係第一信號處理單元122 之輸出的YRGB信號。 須注意當實施參考5描述的寬動態範圍影像產生處理 時，將下列二影像各者之各YRGB的信號値 (a) 短曝光影像（低靈敏度影像：Ln)以及 (b) 長曝光影像（高靈敏度影像：Hn) 儲存在記憶體1 3 0中。 3.關於儲存在記憶體中之資料的格式 如上文所述’使用參考圖4描述之正常影像產生處理 ，將係影像校正單元124之影像校正（γ校正）及第二信號 處理單兀125的信號處理之結果的YCbCr信號寫至記憶體 130’並也自其讀取。將儲存在記憶體中之資料的組態範 例顯示爲圖6A及6B。 以具有一對色差信號（Cbn ’ Crn )用於亮度信號（Yn )之二像素的解析度之所謂的422格式，如圖6Α所示，或 以具有一對彩色信號係按照具有亮度信號（γ)的8位元及 彩色信號（Cr = R-Y，Cb = B-Y)之8位元的亮度信號之四個 像素的解析度之所謂的4 1 1格式資料格式，與圖6 b所示的 輸出信號相同，之信號的資料格式（在下文中稱爲資料格 式1 ( f 1 )) ’依照記憶體1 3 0實施資料儲存。 -23- 201223268 須注意在圖6B中的二個Cb 1意指相同的8位元資料（例 如，二像素的平均）。二個Crl也係相同之Crl的8位元資 料。另一方面，在參考圖5描述之產生寬動態範圍影像時 ，將第一信號處理單元122的輸出信號儲存在記憶體130中 〇 將此時儲存在記憶體中的資料之組態範例顯示爲圖7 。如圖7所示，以具有一對彩色信號係按照具有亮度信號 (Y )之9位元及彩色信號（G )的10位元及各彩色信號（ R)及（B)之9位元的亮度信號之四個像素的解析度之所 謂的411格式資料格式之資料格式（在下文中稱爲資料格 式2 (f2))，將資料寫至記憶體130並自其讀取。 如上文所述，控制單元1 〇5實施信號路徑控制，使得 當實施未在影像合成單元123實施影像合成處理的正常影 像產生時，將在影像校正單元124校正後的信號設定爲待 寫至記憶體1 3 0並自其讀取的信號，且當實施在影像合成 單元123實施影像合成處理的寬動態範圍影像產生時，將 在影像校正單元124校正前的信號設定爲待寫至記憶體130 並自其讀取的信號。 第二信號處理單元125輸出遵循具有亮度信號（Y)的 8位元及（Cb) 、（Cr)各者之8位元的設定，具有每二個 色差信號（Cb，Cr)依照四個亮度（Y)的比率，或具有 每一個色差信號（Cb，Cr )依照四個亮度（Y )的比率之 圖6A及6B所示的格式（Π )，相關於色差信號（Cb，Cr ) 的信號，且在未於影像合成單元123實施影像合成處理的 -24- 201223268 正常影像產生時，控制單元1 〇 5實施信號路徑控制，使得 將遵循圖6Α及6Β所示之格式（Π )的信號設定成待寫至記 憶體130並自其讀取的信號。 第一信號處理單元122輸出遵循具有亮度信號（Υ)之 9位元及（G)的10位元以及各（R)及（Β)之9位元的設 定，具有每一彩色信號（R、G、Β)依照四個亮度（Υ) 的比率之圖7所示的格式（f2 )，相關於彩色信號（R、G 、B)的信號，並在影像合成單元123實施影像合成的寬動 態範圍影像產生時，控制單元1 〇 5實施信號路徑控制，使 得將遵守格式（f2)的信號設定成待寫至記憶體130並自 其讀取的信號。 4.關於影像產生處理的詳細順序 如參考圖3至5所描述的，根據本揭示發明的成像裝置 以在參考圖4描述之正常影像模式中執行的正常影像產生 處理模式及在參考圖5描述之寬動態範圍模式中執行的寬 動態範圍影像產生處理之二模式中產生不同影像。 根據本揭示發明的成像裝置針對此等不同的影像產生 處理，實施將依照記憶體1 3 0的資料儲存改變或使記憶體 讀寫時序不同的處理。在下文中，將提供相關於根據本揭 示發明之成像裝置所實施的各種影像產生處理順序之細節 的描述。 須注意，作爲從該成像裝置讀出之像素的形式，有使 用單一掃描將構成影像之像素的像素値讀出之連續讀出， -25- 201223268 以及獨立地執行偶數線掃描及奇數線掃描以讀出的交錯讀 出。又，針對來自成像裝置之係依照顯示裝置的輸出之輸 出的形式，有以單次掃描將構成影像之像素的像素値輸出 的連續輸出，以及獨立地執行偶數線掃描及奇數線掃描以 輸出的交錯輸出。 在下文中，將個別地描述對應於此等讀出及輸出形式 之各種組合的特定影像產生處理順序之細節。將依序描述 下列各處理。 (4-A )使用連續讀出及連續輸出的正常影像產生順 序（圖8 ) (4-B )使用連續讀出及連續輸出的寬動態範圍影像 產生順序（第一範例）（圖9 ) (4-C )使用連續讀出及連續輸出的寬動態範圍影像 產生順序（第二範例）（圖1〇) (4-D )使用連續讀出及交錯輸出的正常影像產生順 序（第一範例）（圖11) (4-E )使用連續讀出及交錯輸出的正常影像產生順 序（第二範例）（圖12) (4-F )使用連續讀出及交錯輸出的寬動態範圍影像 產生順序（第一範例）（圖1 3 ) (4-G )使用連續讀出及交錯輸出的寬動態範圍影像 產生順序（第二範例）（圖1 4 ) (4-H )使用連續讀出及交錯輸出的寬動態範圍影像 產生順序（第三範例）（圖1 5 ) -26- 201223268 (4-1 )使用連續讀出及交錯輸出的寬動態範圍影像產 生順序（第四範例）（圖1 6 ) (4-J )在使用連續讀出及連續輸出之正常影像產生 及寬動態範圍影像產生之間切換的順序（圖1 7 ) (4-A )使用連續讀出及連續輸出的正常影像產生順序 首先，將參考圖8提供相關於使用連續讀出及連續輸 出的正常影像產生順序之細節的描述。圖8係描繪使用根 據本揭示發明之成像裝置藉由操作使用連續讀出的成像設 備及成像裝置輸出的連續操作在實施用於產生正常影像之 正常操作（見圖4)時的詳細順序之圖。 從左至右地顯示經過時間（時間t0至t6 )，並將下列 資料及設定顯示在各時間。 (1) 成像設備102的曝光及輸出 (2) 切換器151a及151c的設定 (3) 將位址寫至記憶體130並寫入資料 (4) 從記憶體130讀取位址並讀取資料 (5 )切換器151d及15 lb的設定 (6)成像裝置1〇〇的輸出 t0至11、11至t2等的時間間距等同於係來自成像設備 102之信號讀取週期的垂直週期。如圖8之（1)所示，成 像設備102在各垂直週期（t0至tl、tl至t2等）將（VII) 、（：VI2 ) 、（ VI3 ) 、 （ VI4 )等輸出作爲曝露的結果之 成像設備輸出。數値1、2等係指示從成像設備輸出之次序 -27- 201223268 的識別數字。 如圖8之（2 )所示，在正常影像產生模式中，將切換 器151a及151c的設定全部設定成終端N側，如參考圖4於上 文描述的。須注意此等設定係藉由控制單元1 〇5實施。 將第二信號處理單元125的處理結果儲存在遵循此等 切換器設定的記億體130中。如圖8之（3)所示，交替地 使用二記憶體位址AD1及AD2，以將資料（fl_l )、( fl_2) 、 （fl_3)等循序地儲存爲第二信號處理單元125的 處理結果。須注意Π意指記憶體中的儲存將遵循記憶體儲 存格式1實施。 格式1 ( Π )對應於先前參考圖6A及6B描述的格式， 並以圖6A或6B的第一格式儲存係第二信號處理單元125之 處理的YCbCr信號。 在正常影像產生模式中，以圖6A或6B所示的第一格式 (fl)將輸出爲第三信號處理單元126之處理結果的YCbCr 信號記錄在記億體130中。也就是說，將以具有—對色差 信號（Cbn，Crn)用於亮度信號（Yn)之二像素的解析度 之所謂的422格式之信號，如圖6Α所示，或以具有一對彩 色信號係按照具有亮度信號（Υ)的8位元及色差信號（Cr ’ Cb)之8位元的亮度信號之四個像素的解析度之所謂的 411格式之信號，如圖6B所示，寫至記憶體13〇。 須注意針對圖8之（1 )所示的成像設備輸出（VI j ) ’作爲第一信號處理單兀125之處理結果使用的資料對應 於儲存在圖8之（3)所示的記憶體中的資料（fl丨）。在 -28- 201223268 時間to至tl的期間中實施從輸出自成像設備102至儲存在記 憶體1 30中的處理。 在此時間t0至11中實施的是以格式1 ( Π )將資料（ π_1 )儲存在藉由記憶體位址AD1指定之位置的處理。 在次一時間tl至t2中，使用「（1)成像設備」至「（ 3 )寫至記憶體」的處理，在次一成像設備輸出（VI2 )上 實施與按照時間tO至tl中的成像設備輸出（VII)之處理相 同的處理。然而，須注意將資料（Π_2)寫至與已在時間 t〇至tl儲存之記憶體的位址不同之位址AD2的記億體位置 〇 在此時間tl至t2中，另外，也實施圖8中之從「（4) 自記憶體讀取」至「（ 6 )成像裝置輸出」的處理。此係 依照在時間tO至tl寫至記憶體之資料（fl_l)的處理。 如圖8之「（ 4 )自記憶體讀取」中的空白所示，資料 (fl_l)係從位址AD1位置讀出。圖8之（5)中的切換器 設定描繪切換器151d及151b的設定狀態。如參考圖4所描 述的，在正常影像產生模式中，將切換器15 Id及15 lb二者 設定爲N側連接。 在此等切換器設定後，將從記憶體1 3 0讀出的資料（ Π_1 )供應至第三信號處理單元126，受最終信號處理， 並輸出爲作爲正常影像的輸出（.V 01)。 使用圖8所示之使用連續讀取及連續輸出的正常影胃 產生順序，將二位址AD 1及AD2用於交替地寫入具有資料 格式1 ( Π )的資料。資料讀出係隨著資料寫入處理實$ -29- 201223268 ，使用與施用於寫入處理之位址以外的位址。 在時間tl後，以此方式使用位址AD 1及AD2之一者將 來自成像設備的資料輸入寫出，並使用彼等的另一者實施 預先寫至記憶體之資料的讀出。 重複並執行此處理，從而輸出正常影像的成像裝置輸 出 V01、V02、V03、V04等。 (4-B )使用連續讀出及連續輸出的寬動態範圍影像產生 順序（第一範例） 其次’將參考圖9描述使用連續讀出及連續輸出之寬 動態範圍影像產生順序的細節。圖9係描繪使用根據本揭 示發明之成像裝置藉由操作使用連續讀出的成像設備及成 像裝置輸出的連續操作在實施用於產生寬動態範圍影像之 寬動態範圍操作（見圖5 )時的詳細順序之圖。 從左至右地顯示經過時間（時間10至16 )，並將下列 資料及設定顯示在各時間。 (1 )成像設備102的曝光及輸出 (2 )切換器151a及151c的設定 (3 )將位址寫至記憶體1 3〇並寫入資料 (4a)從記憶體130讀取位址並讀取資料 (4b)從記憶體13〇讀取位址並讀取資料 (5)切換器151d及151b的設定 (6 )成像裝置100的輸出 使用此範例，將從記憶體1 3 0讀出資料執行爲待施用 -30- 201223268 至在影像合成單元123執行的影像合成處理之長曝光影像 (高靈敏度影像（Hn ))及短曝光影像（低靈敏度影像（ Ln ))的二組影像資料的讀出處理。此平行讀出處理對應 於（4a )及（4b )的處理。 t0至11、11至t2等的時間間距等同於係來自成像設備 102之信號讀取週期的垂直週期。如圖9之（1)所示，成 像設備102在各垂直週期（t0至tl、tl至t2等）將（VIL1) 、（VIH1) 、 （VIL2) 、（VIH2)等輸出作爲曝露的結 果之成像設備輸出。須注意L意指短曝光影像（低靈敏度 影像）且Η係長曝光影像（高靈敏度影像）。數値1、2等 係指示從成像設備輸出之次序的識別數字。 如圖9之（2 )所示，在寬動態範圍影像產生模式中， 將切換器15 la及151c的設定全部設定成終端W側，如參考 圖5於上文描述的。須注意此等設定係藉由控制單元105實 施。 將第一信號處理單元122的處理結果儲存在遵循此等 切換器設定的記億體130中。如圖9之（3)所示，重複地 使用四個記憶體位址ADI、AD2、AD3、以及AD4，以循序 地儲存作爲第一信號處理單元122之處理結果的資料（ f2_Ll ) 、( f2_Hl ) 、( f2_L2 ) 、（ f2_H2 )等。亦即， 循序地儲存短曝光影像（低靈敏度影像（Ln))及長曝光 影像（高靈敏度影像（Hn))。 須注意f2意指記億體中的儲存將遵循記憶體儲存格式 2實施。格式2 (f2)對應於先前參考圖7描述的格式，並 -31 - 201223268 以圖7的第二格式儲存係第一信號處理單元122之處理結果 的YRGB信號。 在寬動態範圍影像產生模式中，以圖7所示的格式將 輸出爲第一信號處理單元122之處理結果的YRGB信號記錄 在記憶體1 30中。亦即，寫入至記憶體1 30的資料係採用具 有一對彩色信號用於具有亮度信號（Y)的9位元及彩色信 號（G)之10位元及彩色信號（R)的9位元及（B )之9位 元的亮度信號之四個像素的解析度之所謂的4 1 1格式（第 二格式（f2 ))資料格式之信號。 須注意針對圖9之（1 )所示的成像設備輸出（VIL1 ) ，作爲第一信號處理單元122之處理結果使用的資料對應 於儲存在圖9之（3 )所示的記憶體中的資料（f2_L 1 )。 在時間t〇至tl的期間中實施從輸出自成像設備102至儲存在 記憶體1 3 0中的處理。 在此時間t0至11中實施的是以格式2 ( f2 )將資料（ f2_Ll )儲存在藉由記億體位址AD1指定之位置的處理。 在次一時間tl至t2中，使用「（1)成像設備」至「（ 3 )寫至記憶體」的處理，在次一成像設備輸出（VIH 1 ) 上實施與按照時間t0至tl中的成像設備輸出（VIL1)之處 理相同的處理。須注意在時間t〇至U中的成像設備輸出（ VIL1 ).及成像設備輸出（VIH1 )係待受用於產生寬動態 範圍影像之影像合成處理的二影像。 在圖9之「（3)寫至記億體」中，將資料（f2_Hl ) 寫至與已於時間t0至tl儲存之記憶體的位址AD1不同之位 -32- 201223268 址AD2的記憶體位置。 在次一時間t2至t3中，使用「（ 1 )成像設備」至「（ 3)寫至記億體」的處理，在次一成像設備輸出（VIL2 ) 上實施與按照時間t0至tl中的成像設備輸出（VIL1)之處 理相同的處理。使用圖9中的「（3)寫至記億體」，將資 料（f2_L2 )寫至與已於時間t0至tl儲存之記憶體的位址 AD1，及已於時間tl至t2儲存之記憶體的位址AD2不同之 位址AD3的記憶體位置。 另外，在次一時間t2至t3，也實施從圖9之「（4)從 記憶體讀取」至「（6)成像裝置輸出」的處理。此係依 照在時間t0至tl寫至記憶體的資料（f2_Ll)及在時間tl至 t2寫至記憶體之資料（f2_Hl )的處理。 如圖9之「（ 4a )自記憶體讀取」中的空白所示，資 料（f2_Ll )係從位址AD1位置讀出。另外，如圖9之「（ 4b )自記憶體讀取」中的空白所示，從位址AD2位置讀出 資料（f2_Hl )。 然而，須注意資料（f2_L 1 )及資料（f2_H 1 )的讀出 並未限制於此時間t2至t3，並也在後續時間t3至t4中執行 相同的資料讀出。 如圖9中的空白所示，針對t2至t3及t3至t4，使用資料 (f2_L2 )在時間t2至t3至記憶體（位址AD3 )的寫入時間 及資料（f2_H2)在時間t3至t4至記億體（位址AD4)的寫 入時間實施用於產生合成影像之二資料，亦即，來自位址 AD1之資料（f2_Ll )的讀出及來自位址AD2之資料（ -33- 201223268 f2_Hl )的讀出。 亦即，配合產生合成影像之該等二影像的寫入處理時 間，預先執行二影像的讀取以產生寫至記憶體的合成影像 圖9之（5)中的切換器設定描繪切換器151d及151b的 設定狀態。如參考圖5所描述的，在寬動態範圍影像產生 模式中，將切換器15 Id及151b二者設定爲W側連接。 將從遵循此等切換器設定之記億體130讀出的短曝光 影像資料（低靈敏度影像（f2_L 1 ))，及長曝光影像資 料（高靈敏度影像（f2_Hl ))輸出至影像合成單元123。 影像合成單元123使用此等二影像實施影像合成處理，並 產生寬動態範圍影像。 之後，將已產生之寬動態範圍影像輸出至影像校正單 元124。影像校正單元124實施γ校正，並將已校正信號輸 出至第二信號處理單元125。在第二信號處理單元125，例 如，將YRGB信號轉換爲YCbCr信號，並經由切換器151b 將已轉換信號輸入至第三信號處理單元126。 第三信號處理單元126在來自記憶體130的讀出信號上 執行最終信號處理，並產生及輸出待從成像裝置輸出的寬 動態範圍影像。最終輸出等同於圖9中的「（ 6 )成像裝置 輸出」（WV1 1 )。 使用圖9所示之使用連續讀取及連續輸出的寬動態範 圍影像產生順序，將四個記憶體位址ADI、AD2、AD3、 以及AD4循序地使用有資料格式2 ( f2 )，並將短曝光影像 -34- 201223268 資料（低靈敏度影像（f2_Ln ))及長曝光影像資料（高 靈敏度影像（f2_Hn ))，以及次一短曝光影像資料（低 靈敏度影像（f2_Ln + l ))及長曝光影像資料（高靈敏度 影像（f2_Hn+l ))的影像對循序地寫至記億體中的不同 位置。 如時間t2的處理等所示，使用配合資料寫入處理用於 寫入處理之位址以外的二位址，對用於產生合成影像的二 影像資料執行讀出。 自時間t2起，使用位址AD1至AD4之一者實施從成像 設備輸入之資料的寫入，並執行用於產生合成影像之二影 像資料的讀出，使用位址AD1及AD2或AD3及AD4之其中一 組預先寫至記憶體。重複執行此處理，以輸出寬動態範圍 影像的成像裝置輸出WV11、WV11、WV22、WV22等。 須注意WV意指寬動態範圍影像，至於後續値的順序 ，第一數値係長曝光影像（高靈敏度影像（Η ))的識別 數字且後一數値係短曝光影像（低靈敏度影像（L ))的 識別數字。 例如’在時間t2至t3中的輸出WV 1 1係藉由從記憶體讀 出之長曝光影像（高靈敏度影像（H) ) ( f2_H 1 )及短曝 光影像（低靈敏度影像（L) ) ( f2_Ll )的合成處理所產 生的寬動態範圍影像。時間t3至t4的輸出WV11也係相同輸 出。 在時間t4至t5中的輸出WV22係藉由從記憶體讀出之長 曝光影像（高靈敏度影像（H ) ) ( f2_H2 )及短曝光影像 -35- 201223268 (低靈敏度影像（L ) ) ( f2_L2 )的合成處理所產生的寬 動態範圍影像。 須注意在此處理範例中，在二連續時間12至13以及13 至t4之間的輸出影像係相同的寬動態範圍影像，且次二時 間t4至t5及t5至t6之間的輸出影像也係相同的寬動態範圍 影像。亦即，輸出率低於先前參考圖8描述之正常影像的 輸出率。 (4_C )使用連續讀出及連續輸出的寬動態範圍影像產生 順序（第二範例） 其次，將參考圖10描述使用連續讀出及連續輸出之寬 動態範圍影像產生順序的另一範例。圖1 0所示的處理範例 係以與圖9所示之處理範例相同的方式，使用連續讀出及 連續輸出的寬動態範圍影像產生順序。然而，須注意圖1 〇 所示之處理在將待從記憶體1 30讀出以產生寬動態範圍影 像的影像對固定地設定爲最新影像的該點上不同。 例如，使用圖9所示之順序，在時間t2至t3，執行從位 址AD1讀出資料（f2_Ll)，及從位址AD2讀出資料（ f2_Hl ) ’且另外，在時間t3至t4，執行從位址AD1讀出資 料（f2_Ll )，及從位址AD2讀出資料（f2_Hl )。 另一方面’使用圖10所示的順序，在圖9之未實施讀 出的時間tl至t2中’開始從位址AD1讀出資料（f2_Ll)， 且另外’在時間t2至t3 ’執行從位址AD 1讀出資料（f2_L 1 )及從位址AD2讀出資料（f2 — HI)，並在次一時間t3至t4 -36- 201223268 ，執行從位址AD3讀出資料（f2_L2 )及從位址aD2讀出資 料（f2 —Η 1 )。 亦即，圖1 0所示的處理範例在時間t2至t3實施從位址 AD3讀出資料（f2 —L2 )的該點上不同。此資料（f2_L2 ) 係已在緊接於時間t2至t3之前寫至記憶體130的資料。此處 理範例係使用儲存在記憶體i 30中的資料之最新資料的組 合用於將寬動態範圍影像產生爲合成影像的順序。 在圖1 〇所示的順序中，「（ 1 )成像設備」至「（ 3 ) 寫至記憶體」的處理與圖9相同。如上文所述，（4a)及 (4b )之「從記憶體讀取」的處理在讀取儲存於記憶體中 的資料之最新資料’亦即，寫至記憶體130之具有最後時 序的資料，的該點上不同。 「（ 5 )切換器設定」與圖9所示的順序相同，如參考 圖5於先前描述的’設定成連接至w側。「（ 6 )成像裝置 輸出」係與參考圖9描述之順序中的輸出不同之影像。亦 即，待用於產生寬動態範圍影像之影像的組合不同。 如圖10之「（6)成像裝置輸出」所示，該等設定係 使得時間t2至t3的輸出爲WV1 1，時間t3至t4的輸出爲 WV12’時間t4至t5的輸出爲WV22，且時間t5至t6的輸出 爲WV23。須注意WV意指寬動態範圍影像，至於後續値的 順序’第一數値係長曝光影像（高靈敏度影像（Η ))的 識別數字且後一數値係短曝光影像（低靈敏度影像（L ) )的識別數字。 例如，在時間t2至t3中的輸出WV1 1係藉由從記億體讀 -37- 201223268 出之長曝光影像（高靈敏度影像（Η) ) ( f2_Hl )及短曝 光影像（低靈敏度影像（L ) ) ( f2_Ll )的合成處理所產 生的寬動態範圍影像。在時間t3至t4中的輸出WV 12係藉由 從記憶體讀出之長曝光影像（高靈敏度影像（H))( f2_Hl )及短曝光影像（低靈敏度影像（L ) ) ( f2_L2 ) 的合成處理所產生的寬動態範圍影像。 因此，此處理範例係得到儲存在記憶體中的最新可使 用影像及實施合成處理以產生寬動態範圍影像的處理範例 。以此方式，使用圖10所示的處理範例，使用記憶體130 之四個位址AD1至AD4以資料格式2(f2)循序地實施第一 信號處理單元122之輸出的寫入。相關於從記憶體讀取資 料，讀取各高靈敏度資料及低靈敏度資料的最新資料。 影像合成單元123使用最新的影像對產生製造寬動態 範圍的視訊信號，並輸出爲成像裝置輸出WV11、WV12、 WV22、WV23、WV33、WV34等。因此，此處理範例容許 待施用至用於產生寬動態範圍之處理，待基於最新拍攝影 像產生之低靈敏度影像及高靈敏度影像的組合。 (4-D )使用連續讀出及交錯輸出的正常影像產生順序（ 第一範例） 其次，將參考圖11描述使用連續讀出及交錯輸出之正 常影像產生順序的細節。圖1 1係描繪使用根據本揭示發明 之成像裝置藉由操作使用連續讀出的成像設備及成像裝置 輸出的交錯操作在實施用於產生正常影像之正常操作（見 -38- 201223268 圖4)時的詳細順序之圖。 從左至右地顯示經過時間（時間10至16 )，並將下列 資料及設定顯示在各時間。 (1) 成像設備102的曝光及輸出 (2) 切換器151a及151c的設定 (3 )將位址寫至記憶體130並寫入資料 (4 )從記憶體1 3 0讀取位址並讀取資料 (5 )切換器151d及151b的設定 (6)成像裝置100的輸出 t0至tl、tl至t2等的時間間距等同於係來自成像設備 102之信號讀取週期的垂直週期。 如圖1 1之「（ 4 )自記憶體空間讀取」所示，使用交 錯輸出’在每個垂直週期讀取成像設備之奇數線輸出及成 像設備的偶數線輸出。須注意在時間t2至t3中的記憶體讀 出資料（fl _ 1 〇 )意指，例如，儲存在記憶體中的資料係 依據格式1(Π)的第一奇數域（〇)。此處，「〇」奇數 編號域的資料’且「e」係偶數編號域的資料。 使用交錯輸出，藉由在每個垂直週期讀取成像設備之 奇數編號線輸出及成像設備的偶數編號輸出，顯示於（6 )中的成像裝置輸出係依據奇數及偶數域VOlo、Vole、 V02o、Vo2e、V03o、Vo3e等的次序輸出。亦即，實現交 錯輸出。由於此輸出，藉由合成採用奇數+偶數之組合的 輸出信號，可得到不具有交錯模糊的影像。 如圖11之（1)所示，成像設備102在每二個垂直週期 -39- 201223268 (to 至 t2、t2 至 t4等）將（VII) 、（： VI2) 、（VI3)等輸 出爲作爲曝露結果的成像設備輸出。 如圖11之（2)所示，在正常影像產生模式中，將切 換器151a及151c的設定全部設定成終端N側，如參考圖4描 述的。須注意此等設定係藉由控制單元105實施。 如圖1 1之（3 )所示，交替地使用二記憶體位址AD 1 及AD2，以將資料（fl_l) 、（fl_2) 、（fl_3)等循序 地儲存爲第二信號處理單元125的處理結果。須注意fl意 指儲存在遵循參考圖6A及6B描述之格式1的記憶體中。在 時間t2將資料（fl_l )儲存在記憶體位址adi中。在時間 t4將資料（fl_2 )儲存在記憶體位址AD2中。在時間t6將 資料（f 1 _3 )儲存在記憶體位址AD 1中。 另外’在時間t2之後的週期中，也實施從圖「（ 4)從記憶體讀取」至「（6)成像裝置輸出」的處理。此 等處理係依照寫至記憶體之資料的處理。 在時間t2至t3中’如圖1 1之「（ 4 )從記憶體讀取」中 的空白所示’從位址ADlo位置讀出資料（π_1ο)。須注 意位址A D 1 〇係對應於組態一部分位址a D 1之奇數域的資料 讀取位址。 位址ADn具有可分割爲對應於奇數域的資料讀取位址 ADno及對應於偶數域之資料讀取位址ADne並使用的組態 〇 從位址ADlo位置讀取的資料（fl —1〇)僅係構成輸出 圖框之所有域之奇數域的資料。 -40- 201223268 圖11之（5)中的切換器設定描繪切換器151d及151b 的設定狀態。如參考圖4所描述的，在正常影像產生模式 中，將切換器151d及151b二者設定爲N側連接。 在此等切換器設定後，將從記憶體130讀出的資料（ Π_1ο )供應至第三信號處理單元126，受最終信號處理， 並輸出爲作爲正常影像的輸出（VOlo )。 輸出（VOlo)係基於從位址ADlo位置讀出之資料（ fl_lo )產生的輸出，且僅係構成輸出圖框之所有域的奇 數域的輸出。 在次一時間t3至t4中，從藉由位址ADle自記憶體130 讀出的資料（fl_le.)產生對應於奇數域輸出（VOlo)的 偶數域輸出（VOle)，並輸出。 因此，使用此處理範例，在每個垂直週期從記憶體 1 3 0讀出成像設備的奇數線輸出及成像設備之偶數線輸出 ，從而將成像裝置輸出輸出爲奇數及偶數域輸出VOlo、 VOle、V02o、V02e、V03o、V03e 等，並可藉由以奇數 + 偶數的組合合成輸出信號以得到不具有交錯模糊的影像。 (4-E )使用連續讀出及交錯輸出的正常影像產生順序（ 第二範例） 其次，將參考圖12描述使用連續讀出及交錯輸出的正 常影像產生順序之第二範例的細節。圖1 2係描繪使用根據 本揭示發明之成像裝置藉由操作使用連續讀出的成像設備 及成像裝置輸出的交錯操作在實施用於產生正常影像之正 -41 - 201223268 常操作（見圖4)時的詳細順序之圖。 從左至右地顯示經過時間（時間tO至t6 )，並將下列 資料及設定顯示在各時間。 (1)成像設備102的曝光及輸出 (2 )切換器151a及151c的設定 (3 )將位址寫至記憶體1 3 0並寫入資料 (4)從記憶體130讀取位址並讀取資料 (5 )切換器151d及151b的設定 (6)成像裝置100的輸出 t〇至tl、tl至t2等的時間間距等同於係來自成像設備 102之信號讀取週期的垂直週期。 圖1 2所示範例係使用連續讀取及交錯輸出的正常影像 產生順序，與先前描述的圖11相同。圖11及12之間的不同 爲「（6)成像裝置輸出」的順序。 使用參考圖11描述的處理，輸出的次序係VOlo、 VOle、V02o、V02e等，亦即，以奇數域及偶數域之次序 的輸出組態。 另一方面，使用參考圖12描述的處理，輸出次序係 VOle、V01o、V02e、V02o等，亦即，以偶數域及奇數域 之次序的輸出組態。 由於輸出次序改變，「（ 4 )從記憶體讀取」的次序 具有在奇數域（fl_l〇 )之前讀取的偶數域（。其 他點與先前參考圖11描述的處理相同。 使用此處理範例，以與先前參考圖11描述之處理範例 -42 - 201223268 相同的方式，在每個垂直週期從記億體130讀出成像設備 的奇數線輸出及成像設備之偶數線輸出，從而將成像裝置 輸出輸出爲偶數及奇數域輸出VOle、VOlo' V02e、V02o 、V03e、V03o等，並可藉由以偶數+奇數的組合合成輸出 信號以得到不具有交錯模糊的影像。 (4-F )使用連續讀出及交錯輸出的寬動態範圍影像產生 順序（第一範例） 其次，將參考圖13描述使用連續讀出及交錯輸出之寬 動態範圍影像產生順序的細節。圖1 3係描繪使用根據本揭 示發明之成像裝置藉由操作使用連續讀出的成像設備及成 像裝置輸出的交錯操作在實施用於產生寬動態範圍影像之 寬動態範圍操作（見圖5 )時的詳細順序之圖。 從左至右地顯示經過時間（時間tO至t6 )，並將下列 資料及設定顯示在各時間。 (1 )成像設備102的曝光及輸出 (2 )切換器151a及151c的設定 (3 )將位址寫至記憶體1 3 0並寫入資料 (4a)從記憶體130讀取位址並讀取資料 (4b )從記憶體1 30讀取位址並讀取資料 (5 )切換器151d及151b的設定 (6 )成像裝置100的輸出 使用此範例，將從記憶體1 30讀出資料執行爲待施用 至在影像合成單元123執行的影像合成處理之長曝光影像 -43- 201223268 (高靈敏度影像（Hn))及短曝光影像（低靈敏度影像（ Ln ))的二組影像資料的讀出處理。此平行讀出處理對應 於（4a )及（4b )的處理。 時間間距t0至11、11至t2等等同於係來自成像設備1 02 之信號讀取週期的垂直週期。如圖1 3之（1 )所示，成像 設備102在各垂直週期（t0至tl、tl至t2等）將（VIL1)、 (VIH1) 、（VIL2) 、（VIH2)等輸出作爲曝露的結果 之成像設備輸出。須注意L意指短曝光影像（低靈敏度影 像）且Η係長曝光影像（高靈敏度影像）。數値1、 2等係 指示從成像設備輸出之次序的識別數字。 如圖1 3之（2 )所示，在寬動態範圍影像產生模式中 ’將切換器151a及151c的設定全部設定成終端W側，如參 考圖5於上文描述的。須注意此等設定係藉由控制單元！ 05 實施。將第一信號處理單元122的處理結果儲存在遵循此 等切換器設定的記憶體130中。 如圖1 3之（3 )所示，重複地使用四個記憶體位址 ADI、AD2、AD3、以及AD4，以循序地儲存作爲第一信號 處理單元122之處理結果的資料（f2_Ll) 、（f2_Hl)、 (f2_L2) 、（f2_H2)等。亦即，循序地儲存短曝光影像 (低靈敏度影像（Ln ))及長曝光影像（高靈敏度影像（ Hn))。 格式2(f2)對應於先前參考圖7描述的格式，並以圖 7的第二格式儲存係第一信號處理單元122之處理結果的 YRGB信號。 -44- 201223268 須注意針對圖13之（1)所示的成像設備輸出（VILl )，作爲第一信號處理單元122之處理結果使用的資料對 應於儲存在圖13之（3)所示的記憶體中的資料（f2_Ll) 〇 在時間tO至tl的期間中實施從輸出自成像設備102至儲 存在記憶體1 3 0中的處理。在此時間t0至tl中實施的是以格 式2 ( f2 )將資料（f2_Ll )儲存在藉由記憶體位址AD1指 定之位置的處理。 在次一時間tl至t2中，使用「（1)成像設備」至「（ 3 )寫至記憶體」的處理，在次一成像設備輸出（VIH1 ) 上實施與按照時間tO至tl中的成像設備輸出（VIL1)之處 理相同的處理。須注意在時間tO至tl中的成像設備輸出（ VIL1 )及成像設備輸出（VIH1 )係待受用於產生寬動態 範圍影像之影像合成處理的二影像。 在圖13之「（3)寫至記憶體」中，將資料（f2_H 1 ) 寫至與已於時間tO至tl儲存之記憶體的位址AD1不同之位 址AD2的記憶體位置。 在次一時間t2至t3的週期中，使用「（ 1 )成像設備」 至「（3)寫至記憶體」的處理，在次一成像設備輸出（ VIL2)上實施與按照時間tO至tl中的成像設備輸出（VIL1 )之處理相同的處理。 使用圖1 3中的「（ 3 )寫至記憶體」，將資料（f2_L2 )寫至與在時間tO至tl中用於記憶體寫入之位址adi，及 在時間11至t2中用於記憶體寫入之位址AD2不同的位址 -45- 201223268 AD3之記憶體位置。 另外，在次一時間t2至t3的週期中，也實施從圖13之 「（4)從記憶體讀取」至「（6)成像裝置輸出」的處理 。此係依照在時間t0至tl寫至記憶體的資料（f2_Ll )及在 時間11至t2寫至記憶體之資料（f2_H 1 )的處理。 如圖1 3之「（ 4a )自記憶體讀取」中的空白所示，資 料（f2_Ll 〇 )係從位址ADlo位置讀出。另外，如圖1 3之「 (4b )自記憶體讀取」中的空白所示，從位址AD2o位置 讀出資料（f2_Hlo )。 須注意位址AD 1 〇係對應於組態一部分位址AD丨之奇數 域的資料讀取位址。位址ADn具有可分割爲對應於奇數域 的資料讀取位址ADno及對應於偶數域之資料讀取位址 ADne並使用的組態。 在時間t2至t3中，從位址ADlo位置讀取的資料（ f2_Llo)係短曝光影像（低靈敏度影像（L))的奇數域 資料。從位址AD2o位置讀取的資料（f2_Hl〇 )係長曝光 影像（高靈敏度影像（H))的奇數域資料。 圖13之（5)中的切換器設定描繪切換器151d及151b 的設定狀態。如參考圖5所描述的，在寬動態範圍影像產 生模式中，將切換器151d及151b二者設定爲W側連接。 將從遵循此等切換器設定之記憶體130讀出的短曝光 影像資料（低靈敏度影像（L ))之奇數域資料（f2_L 1 〇 )及長曝光影像資料（高靈敏度影像（Η))的奇數域資 料（f2_Hlo)輸出至影像合成單元123。影像合成單元123 -46 - 201223268 使用此等二影像實施影像合成處理，並產生對應於寬動態 範圍影像之奇數域的合成影像。 之後，將已產生之對應於奇數域的寬動態範圍影像輸 出至影像校正單元124。影像校正單元124實施γ校正，並 將已校正信號輸出至第二信號處理單元125。在第二信號 處理單元125，例如，將YRGB信號轉換爲YCbCr信號，並 經由切換器151b將已轉換信號輸入至第三信號處理單元 126。 第三信號處理單元12 6在來自記憶體130的讀出信號上 執行最終信號處理，並產生及輸出待從成像裝置輸出的寬 動態範圍影像。最終輸出等同於圖1 3中的「（ 6 )成像裝 置輸出」（WV1 1〇 )。 須注意WV意指寬動態範圍影像，至於後續値的順序 ，第一數値係長曝光影像（高靈敏度影像（Η ))的識別 數字且後一數値係短曝光影像（低靈敏度影像（L ))的 識別數字。此處，「〇」指示奇數編號域影像，且「e」指 示偶數編號域影像。此成像裝置輸出（WV 1 1 〇 )僅係奇數 域影像。 在後續時間（t3至t4 )中，產生並輸出對應於成像裝 置輸出（WV1 1〇 )的偶數域影像（WV1 le )。在時間t3至 t4中，從位址ADle位置讀取資料（f2_Lle )。另外，如圖 13之「（4b)自記憶體讀取j中的空白所示，從位址AD2e 位置讀出資料（f2_H 1 e )。須注意位址AD 1 e係對應於組態 一部分位址AD 1之偶數域的資料讀取位址。 -47- 201223268 在時間12至13中，從位址A D 1 e位置讀取的資料（ f2_Lle)係短曝光影像（低靈敏度影像（L))的偶數域 資料。從位址AD2e位置讀取的資料（f2_Hle)係長曝光影 像（高靈敏度影像（Η ))的偶數域資料。 圖13之（5)中的切換器設定描繪切換器I5ld及151b 的設定狀態。如參考圖5所描述的，在寬動態範圍影像產 生模式中，將切換器151d及151b二者設定爲w側連接。 將從遵循此等切換器設定之記憶體1 3 0讀出的短曝光 影像資料（低靈敏度影像（L ))之奇數域資料（f2_L 1 e )及長曝光影像資料（高靈敏度影像（Η))的奇數域資 料（f2_Hle)輸出至影像合成單元123。影像合成單元123 使用此等二影像實施影像合成處理，並產生對應於寬動態 範圍影像之偶數域的合成影像。 之後，將已產生之對應於偶數域的寬動態範圍影像輸 出至影像校正單元124。影像校正單元124實施γ校正，並 將已校正信號輸出至第二信號處理單元125。在第二信號 處理單元125 ’例如，將YRGB信號轉換爲YCbCr信號，並 經由切換器151b將已轉換信號輸入至第三信號處理單元 126。 第三信號處理單元126在來自記憶體130的讀出信號上 執行最終信號處理，並產生及輸出待從成像裝置輸出的寬 動態範圍影像。最終輸出等同於圖1 3中的「（ 6 )成像裝 置輸出」（WV1 1 e )。 此成像裝置輸出（WV 1 1 e )僅係奇數域影像。此係在 -48- 201223268 先前時間（t2至t3)隨著成像裝置輸出（WVllo)的輸出 ，並顯示整體圖框影像。 使用此處理範例，藉由在每個垂直週期交替二種曝光 時間而得到之高靈敏度及低靈敏度的成像設備輸出VIL 1、 VIH1、VIL2、VIH2、VIL3、VIH3等在第一信號處理單元 122受信號處理，然後儲存在循序地施用四個不同位址 AD1至AD4的記憶體130中。 另外，在每個垂直週期將位址AD1至AD4的奇數線輸 出及偶數線輸出讀出，受影像合成校正處理，以及信號處 理，且該成像裝置輸出係具有個別的奇數及偶數域的輸出 。由於此處理，如圖13之（6)所示，將輸出信號合成爲 如WVllo、WVlle、WV22o、WV22e等之奇數+偶數的組合 ，並執行交錯輸出。使用此處理範例，實現具有些許交錯 模糊之寬動態範圍影像的輸出。 (4-G)使用連續讀出及交錯輸出的寬動態範圍影像產生 順序（第二範例） 其次，將參考圖14描述使用連續讀出及交錯輸出的寬 動態範圍影像產生順序之第二範例的細節。圖1 4描繪藉由 操作使用連續讀出的成像設備及該成像裝置輸出之交錯操 作，在實施用於產生寬動態範圍影像之寬動態範圍操作（ 見圖5)時的詳細順序的圖。 從左至右地顯示經過時間（時間⑺至t6 )’並將下列 資料及設定顯示在各時間。 -49- 201223268 (1 )成像設備102的曝光及輸出 (2 )切換器151a及151c的設定 (3 )將位址寫至記憶體1 30並寫入資料 (4a)從記憶體130讀取位址並讀取資料 (4b)從記憶體130讀取位址並讀取資料 (5 )切換器151d及151b的設定 (6 )成像裝置100的輸出 使用此範例，將從記憶體1 3 0讀出資料執行爲待施用 至在影像合成單元123執行的影像合成處理之長曝光影像 (高靈敏度影像（Hn))及短曝光影像（低靈敏度影像（ Ln ))的二組影像資料的讀出處理。此平行讀出處理對應 於（4a )及（4b )的處理。 t0至tl、tl至t2等的時間間距等同於係來自成像設備 102之信號讀取週期的垂直週期。 於此圖14所示的範例係使用連續讀出及交錯輸出的寬 動態範圍影像產生順序，與上文描述之圖1 3中的範例相同 。圖1 3及1 4之間的不同爲「（ 6 )成像裝置輸出」的順序 〇 使用參考圖13描述的處理，輸出的次序係WV 1 1 〇、 WVlle、WV22o、WV22e等，亦即，以奇數及偶數域之次 序的輸出組態。 另一方面，使用參考圖14描述的處理，輸出次序係 WVlle、WVllo' WV22e、WV22o 等，亦即，以偶數及奇 數域之次序的輸出組態。 -50- 201223268 由於輸出次序改變，「（4)從記憶體讀取」的次序 具有在奇數域（f2_Hlo)之前讀取的偶數域（f2_Hle)。 其他點與先前參考圖13描述的處理相同。 使用此處理範例，在每個垂直週期從記憶體1 3 0讀出 成像設備的奇數線輸出及成像設備之偶數線輸出，從而將 成像裝置輸出輸出爲偶數及奇數域輸出WVlle、WVllo、 WV22e、WV22o等，並可藉由以偶數+奇數的組合合成輸 出信號以得到不具有交錯模糊的影像。 (4-H )使用連續讀出及交錯輸出的寬動態範圍影像產生 順序（第三範例） 其次，將參考圖15描述使用連續讀出及交錯輸出的寬 動態範圍影像產生順序之第三範例的細節》 圖1 5所示之處理範例係使用連續讀出及交錯輸出的寬 動態範圍影像產生順序，與圖1 3中的範例相同。然而，須 注意圖1 5所示之處理在將待從記憶體1 3 0讀出以產生寬動 態範圍影像的影像對固定地設定爲最新影像的該點上不同 〇 例如，使用圖1 3所示的順序，在時間t2至t3中，在（ 4a)執行從位址ADlo讀出資料（f2_Llo)，及在（4b)執 行從位址AD2o讀出資料（f2_Hlo )，且另外，在時間t3至 t4中，在（4a)執行從位址ADle讀出資料（f2_Lle)，及 在（4b)執行從位址AD2e讀出資料（f2_Hle)。 另一方面，使用圖15所示順序，在時間tl至t2，在（ -51 - 201223268 4a )執行從位址ADI e讀出資料（f2_Lle )，並在時間t2至 t3 ’在（4a)中實施從位址ADlo讀出資料（f2_Llo )，並 在（4b )執行從位址ADlo讀出資料（f2_H1〇 )，並在次 —時間t3至t4’在（4a)中執行從位址AD3e讀出資料（ f2_L2e)，並在（4b)執行從位址AD2e讀出資料（f2_Hle )° 亦即，圖15所示之此處理範例在用於讀取資料的最新 資料之該點上不同。使用此處理範例，在各讀出時序讀出 可用資料’得到最新資料。此處理範例係使用儲存在記憶 體130中的資料之最新資料的組合用於將寬動態範圍影像 產生爲合成影像的順序。 在圖15所示的順序中，「（1)成像設備」至「（3) 寫至記億體」的處理與圖1 3相同。在時間11從記憶體讀出 資料等與圖13的不同處爲產生設定，以從已儲存在記憶體 中的資料讀取最新資料。 圖13中的「（5)切換器設定」顯示切換器I51d及 1 5 1 b的狀態。如參考圖5所描述的，在寬動態範圍影像產 生模式中，將切換器〗51d及151b二者設定爲W側連接。 將從遵循此等切換器設定之記憶體130讀出的資料輸 入至影像合成單元123，並實施藉由影像合成的寬動態範 圍影像產生處理。然而，須注意，在時間tl至t2中，僅有 短曝光影像資料（低靈敏度影像（L ) ) ( f2_L 1 e )已從 (4a)位址AD le讀出，且長曝光影像資料（高靈敏度影像 (Η ))的讀出尙未執行，所以未在此時間11至t2執行影 -52- 201223268 像合成處理。 在時間t2至t3中，分別在（4a)及（4b)從記憶體130 讀出的短曝光影像資料（低靈敏度影像（L ))資料（ f2_Llo )，及長曝光影像資料（高靈敏度影像（H))資 料（f2_Hlo )受影像合成處理，並產生僅有奇數域的寬動 態範圍影像。 之後，將已產生之寬動態範圍影像輸出至影像校正單 元124。影像校正單元124實施γ校正，並將已校正信號輸 出至第二信號處理單元125。在第二信號處理單元125’例 如，將YRGB信號轉換爲YCbCr信號，並經由切換器151b 將已轉換信號輸入至第三信號處理單元126。 第三信號處理單元126在來自記憶體130的讀出信號上 執行最終信號處理，並產生及輸出待從成像裝置輸出的寬 動態範圍影像。最終輸出等同於圖1 3中的「（ 6 )成像裝 置輸出」（WV1 1〇 )。 此成像裝置輸出（WV 1 1 〇 )僅係奇數域影像。此係在 次一時間（t3至t〇隨著成像裝置輸出（wvile)的輸出 ，並顯示整體圖框影像。 如圖15之「（4a)自g己憶體讀取」中的空白所示，在 時間U至Μ ’從位址ADk位址讀取資料（f2 HU)。 在時間t2至t3中’從位址AD3e位置讀出的資料 )的偶數域 係長曝光影 f2_L2e )係短曝光影像（低靈敏度影丨象（L ) 資料。從位址AD2e位置讀出的資料（f2 Ηΐ〆 像（高靈敏度影像（Η ))的偶數域資％。 -53- 201223268 圖15中的「（5)切換器設定」顯示切換器151d及 1 5 1 b的狀態。如參考圖5所描述的，在寬動態範圍影像產 生模式中’將.切換器151d及151b二者設定爲W側連接。 將遵循此等切換器設定讀出的短曝光影像資料（低靈 敏度影像（L))之偶數域資料（f2_L2e)及長曝光影像 資料（高靈敏度影像（H))的偶數域資料（f2_Hle)輸 出至影像合成單元123。影像合成單元123使用此等二影像 實施影像合成處理，並產生對應於寬動態範圍影像之偶數 域的合成影像。 之後，將已產生之寬動態範圍影像輸出至影像校正單 元124。影像校正單元124實施γ校正，並將已校正信號輸 出至第二信號處理單元125。在第二信號處理單元125，例 如，將YRGB信號轉換爲YCbCr信號，並經由切換器151b 將已轉換信號輸入至第三信號處理單元126。 第三信號處理單元126在來自記憶體130的讀出信號上 執行最終信號處理，並產生及輸出待從成像裝置輸出的寬 動態範圍影像。最終輸出等同於圖1 5中的「（ 6 )成像裝 置輸出」（WV12e)。此成像裝置輸出（WV12e)僅係偶 數域影像。此係在先前時間（t2至t3 )隨著成像裝置輸出 (WVllo)的輸出，並顯示整體圖框影像。 使用此處理範例，藉由在每個垂直週期交替二種曝光 時間而得到之高靈敏度及低靈敏度的成像設備輸出VIL1、 VIH1、VIL2、VIH2、VIL3、VIH3等在第一信號處理單元 122受信號處理，然後儲存在循序地施用四個不同位址 -54- 201223268 AD1至AD4的記憶體130中。 另外，在每個垂直週期將位址AD1至AD4的奇數線輸 出及偶數線輸出讀出，受影像合成及校正處理，以及信號 處理，且該成像裝置輸出係具有個別的奇數及偶數域的輸 出。 由於此處理，如圖15之（6)所示，將交錯輸出執行 爲WVllo、WV12e、WV22o、WV23e等。使用此處理範例 ，可基於較新的拍攝影像產生待施用至寬動態範圍處理之 低靈敏度影像及高靈敏度影像的組合。 (4-1 )使用連續讀出及交錯輸出的寬動態範圍影像產生順 序（第四範例） 其次，將參考圖16描述使用連續讀出及交錯輸出的寬 動態範圍影像產生順序之第四範例的細節。圖16描繪藉由 操作使用連續讀出的成像設備及該成像裝置輸出之交錯操 作’在實施用於產生寬動態範圍影像之寬動態範圍操作（ 見圖5 )時的詳細順序的圖。 從左至右地顯示經過時間（時間t0至t6 )，並將下列 資料及設定顯示在各時間。 (1 )成像設備102的曝光及輸出 (2)切換器151a及151c的設定 (3 )將位址寫至記憶體130並寫入資料 (4a)從記億體130讀取位址並讀取資料 (4b)從記憶體130讀取位址並讀取資料 -55- 201223268 (5 )切換器151d及151b的設定 (6 )成像裝置100的輸出 使用此範例’將從記憶體1 3 0讀出資料執行爲待施用 至在影像合成單元123執行的影像合成處理之長曝光影像 (高靈敏度影像（Hn))及短曝光影像（低靈敏度影像（ L η ))的二組影像資料的讀出處理。此平行讀出處理對應 於（4〇及（4b )的處理。 時間間距tO至tl、tl至t2等等同於係來自成像設備1 〇2 之信號讀取週期的垂直週期。 於此圖1 6所示的範例係具有連續讀出及交錯輸出的寬 動態範圍影像產生順序，與上文描述之圖1 5中的範例相同 。圖15及16之間的不同爲「（6)成像裝置輸出」的順序 〇 使用參考圖15描述的處理，輸出的次序係WV 1 1 〇、 WV12e、WV22o、WV23e等，亦即，以奇數及偶數域之次 序的輸出組態。另一方面，使用圖16所示的處理，輸出次 序係 WVlle、WV12o、WV22e、WV23o 等，亦即，以偶數 及奇數域之次序的輸出組態。 由於輸出次序改變，（4)的次序也改變。亦即，偶 數域資料及奇數域資料的次序或讀出在圖15及16間切換。 其他點與先前參考圖15描述的處理相同。 使用此處理範例，在每個垂直週期從記億體130讀出 成像設備的奇數線輸出及成像設備之偶數線輸出，從而將 成像裝置輸出的交錯輸出實施爲偶數域及奇數域輸出 -56- 201223268 WVlle、WV12o、WV22e、WV23o 等。使用此處理範例， 可基於較新的拍攝影像產生待施用至寬動態範圍處理之低 靈敏度影像及高靈敏度影像的組合。 (4-J )在使用連續讀出及連續輸出之正常影像產生及寬 動態範圍影像產生之間切換的順序 其次，將參考圖17描述用於在使用連續讀出及連續輸 出的正常影像產生及寬動態範圍影像產生之間切換的順序 。顯示在此圖17中的處理係用於於中途在參考圖8於先前 描述之處理及參考圖9描述的處理之間切換的處理順序。 亦即，此係用於在下列二者之間切換的處理 (4-A )使用連續讀出及連續輸出的正常影像產生順 序（圖8 ) (4-B )使用連續讀出及連續輸出的寬動態範圍影像 產生順序（第一範例）（圖9 )。 圖17係描繪使用操作使用連續讀出的成像設備以及用 於成像裝置輸出之連續操作的設定’在用於產生正常影像 之正常模式（見圖4 )及寬動態範圍模式（見圖5 )之間實 施切換控制之情形中的詳細順序之圖。 須注意在切換模式時’執行控制以切換切換器1 5 1 3至 151d的所有連接設定，從N-連接至W-連接，或全部從W-連接反向爲N-連接。此切換係由控制單元1〇5實施。 圖1 7從左至右地顯示經過時間（時間t0至t1 7 )’並將 下列資料及設定顯示在各時間。 -57- 201223268 (1 )成像設備102的曝光及輸出 (2 )切換器151a及151c的設定 (3 )將位址寫至記憶體1 3 0並寫入資料 (4a)從記憶體130讀取位址並讀取資料 (4b)從記億體130讀取位址並讀取資料 (5 )切換器151d及151b的設定 (6 )成像裝置100的輸出 直到時間Ta ( t6 )，在正常模式操作中實施係正常影 像產生處理的處理。時間t0至t6的處理係先前參考圖8描述 的處理，亦即，實施與（4-A )使用連續讀出及連續輸出 的正常影像產生順序相同的處理。圖1 7之「（ 1 )成像設 備的曝光/輸出」至「（6)成像裝置輸出」所示的設定與 用於圖8所示之時間t0至t6的處理之設定相同。 在時間Ta ( t6 )，控制單元1 05開始從正常影像產生 處理轉移至寬動態範圍影像產生處理。須注意，如先前描 述的，此模式切換處理係藉由控制單元105在基於所取用 影像之分析結果的自動控制下，或基於藉由輸入單元106 的使用者指令實施。 在時間Ta ( t6 )後，在成像設備，交替地取用短曝光 影像（低靈敏度影像（L ))及長曝光影像（高靈敏度影 像（H) ) 〇 在從正常操作至寬動態範圍範例的切換處理時，控制 單元105實施下列切換控制。首先，僅將其係在記憶體130 之輸入部的切換器之切換器151c切換至W側。此係用於時 -58- 201223268 間Ta ( t6 )至Tb ( t8 )之週期的切換設定。 此切換設定顯示於圖18中。如圖18所示，僅將其係在 記憶體130之輸入部的切換器之切換器151c切換至W側。其 他切換器151a、151b、以及15 Id仍保持爲N側連接設定。 在時間Ta ( t6 )至Tb ( t8 )，將相同位址AD2維持成 用於從記憶體1 3 0讀取資料的位址。由於施用相同讀取位 址的資料讀取處理，此週期的輸出維持係正常輸出之（ VO 6 )的輸出，如「（6)成像裝置輸出」所指示的。 又，在時間Ta ( t6 )至Tb ( t8 )，使用此讀取位址 AD2以外的位址，經由切換器151c將在成像設備102成像並 在第一信號處理單元122受信號處理的短曝光影像（低靈 敏度影像（L ))及長曝光影像（高靈敏度影像（Η ))記 錄在記憶體1 3 0中。 亦即，如圖17所示，在時間t6至t7，遵循位址AD3將 短曝光影像（低靈敏度影像（L))資料（f2_Ll )寫入。 在時間t7至t8，遵循位址AD4將長曝光影像（高靈敏度影 像（Η ))資料（f2_Hl )寫入。 在時間Ta ( t6 )至Tb ( t8 )，在將待施用至用於產生 寬動態範圍影像之合成處理的二影像寫入後，將切換器 151a、15 1b、以及15 Id切換至W側，亦即，至參考圖5描述 之寬動態範圍模式設定。在此時間Tb ( t8 )，從正常模式 至寬動態範圍模式的切換完成。 亦即，在從正常模式切換至寬動態範圍模式時，僅有 至記憶體1 3 0的輸入資料預先切換成寬動態範圍影像的輸 -59- 201223268 入資料’並將來自記憶體130的輸出及其他處理部的連接 維持在用於正常模式的設定（N側設定）。 在將用於產生寬動態範圍影像的影像儲存在記億體 1 3 0後’亦即，在時間Tb ( t 8 )，將來自記憶體1 3 0的輸出 及其他處理部的連接改變成寬動態範圍模式設定（W側連 接）。 在圖17中，時間Tb ( t8 )至Tc ( tl4 )的處理係於先 前參考圖9描述的處理，亦即，實施與（4-B )使用連續讀 出及連續輸出的寬動態範圍影像產生順序（第一範例）相 同的處理。針對圖17中的時間Tb ( t8 )至Tc ( tl4 ) ， 「 (1)成像設備的曝光/輸出」至「（6)成像裝置輸出」 所示的設定與用於圖8所示之時間t0至t6的處理之設定相同 〇 須注意在圖17的時間t6至t8中，已預先將AD3及AD4 使用爲記憶體寫入位址，所以在圖9及1 7之間的位址及資 料識別符中有移位。該處理對任一者均相同。 在時間Tc ( tl4 )，控制單元105開始從寬動態範圍影 像產生處理轉移至正常影像產生處理。須注意，如上文所 述，此模式切換處理係藉由控制單元1〇5在基於所取用影 像之分析結果的自動控制下，或基於藉由輸入單元1〇6的 使用者指令實施。 自時間T c ( 11 4 )起，正常影像循序地在成像設備成 像。在實施從寬動態範圍操作至正常操作的切換處理時’ 控制單元1 05實施下列切換控制。 -60- 201223268 首先，僅將其係在記憶體13〇之輸入部的切換器之切 換器1 5 1 C切換至N側。此係用於時間Tc ( 11 4.)至Td ( 11 5 )之週期的切換設定。 此切換設定顯示於圖19中。如圖19所示’僅將其係在 記憶體130之輸入部的切換器之切換器151c切換至N側。其 他切換器151a、151b、以及151d仍保持爲W側連接設定。 在時間Ta ( tl4 )至Tb ( tl5 )，將來自先前週期tl3至 U4的相同位址AD3及AD4維持爲用於從記憶體130讀取資 料的位址。由於施用相同讀取位址的資料讀取處理，此週 期的輸出維持如^ (6)成像裝置輸出」所指示的係寬動 態範圍影像輸出之（WV33 )的輸出。 又，在時間Tc ( U4 )至Td ( tl5 )，使用此讀取位址 以外的位址，經由切換器151c將在成像設備102成像並在 第二信號處理單元125受信號處理的正常影像記錄在記憶 體130中。 亦即，如圖1 7所示，在時間T c ( 11 4 )至T d ( 11 5 )， 針對記憶體1 3 0的資料讀取位址，使位址AD 1維持與先前 時間tl3至tl4之讀取位址AD3及AD4相同的位址。由於施 用相同讀取位址的此資料讀取處理，將此週期的輸出維持 在「（6)成像裝置輸出」所示之（WV33)的寬動態範圍 影像的輸出。切換器1 5 1 a係在W側，在影像合成單元1 2 3產 生寬動態範圍影像（WV3 3 )，並經由切換器1 5 1 c將作爲 校正單元124及第二信號處理單元125之處理結果的格式1 之寬動態範圍影像的資料（f 1 _ W V 3 3 )寫至記憶體1 3 0 » 5 -61 - 201223268 在時間Tc(tl4)至Td(tl5)，在將正常影像寫至記 億體130後，將切換器i5la、151b、以及151d切換至N側， 切換成參考圖4描述的正常影像模式設定。在此時間Tc( tl4)至Td(tl5)，輸出寬動態範圍影像，且在Te(16) ’完成從寬動態範圍模式至正常模式的切換。 此切換描述係在控制單元1 05的控制下執行。在正常 影像產生處理模式及寬動態範圍影像產生處理模式之間切 換時，控制單元1 0 5招致控制，以在資料切換後提供設定 成將對應於該模式的資料輸入爲至記憶體130之輸入資料 的轉移週期，並在切換前將對應於該模式的資料輸出爲來 自記憶體1 3 0的輸出資料，並在轉移週期經過後，在切換 後將對應於該模式的資料輸出爲來自記憶體1 3 0的輸出資 料。 具體地說，控制單元1 05實施控制，使得在切換後的 模式係寬動態範圍影像產生處理模式的情形中，轉移週期 係直到將用於產生寬動態範圍影像的長曝光影像（高靈敏 度影像）及短曝光影像（低靈敏度影像）之儲存結束的週 期，且在切換後的模式係正常影像產生處理模式的情形中 ，轉移週期係直到將用於產生正常影像的影像之儲存結束 的週期。 因此，使用根據本揭示發明的模式切換處理，產生使 得僅預先切換記憶體輸入資料的組態，且在用於產生正常 影像之一影像資料或用於產生寬動態範圍影像之二影像的 儲存已在記憶體完成該點，將記憶體輸出資料及其他處理 -62- 201223268 電路的切換器切換。 由於此控制，在各切換時序來自成像裝置的輸出係使 得以確定方式將正常影像或寬動態範圍影像之一者輸出， 在模式切換時，實施平滑模式切換及沒有任何影像破損的 影像輸出。 現在，圖20描繪在所有切換器15 la至d於相同時序切 換之情形中的處理順序，作爲參考順序。如圖20所示，實 施此種控制導致記億體讀取錯誤或成像裝置輸出錯誤發生 在模式切換後的特定週期。 例如，在圖20中的時間Ta，若在從正常影像模式切換 至寬動態範圍影像模式時，將切換器151a至151d全部從N 切換爲W連接，寬動態範圍影像輸出將在沒有用於產生寬 動態範圍影像之影像儲存在記億體中的狀態中開始，導致 無影像可輸出的狀態（圖20中的「ERR」）。 在圖20的時間Tb，若在從寬動態範圍影像模式切換至 正常影像模式時，將切換器151a至151d全部從W切換至N 連接，正常影像輸出將在沒有用於產生正常影像之影像儲 存在記憶體中的情形中開始，導致無影像可輸出的狀態（ ERR)。 與此相反，藉由執行控制，使得預先將記憶體輸入資 料單獨切換，如參考圖17所描述的，可實現平滑模式切換 及影像輸出切換而不在成像裝置輸出中導致錯誤。 又，當可在儲存於記憶體中的資料上實施諸如垂直反 轉等的處理時，例如，且在執行此種處理的情形中，對記 -63- 201223268 憶體130的讀/寫可藉由對垂直反轉實施，諸如，在記憶體 130之輸入部的切換器151c單獨受切換時，相關該記憶體 寫入位址，或緊接在切換剩餘切換器151a、151b、以及 1 5 1 d之後相關該記憶體讀取位址的控制而執行，以不針對 特定週期垂直反轉等。亦即控制單元105控制資料至記 憶體的讀/寫，以無錯誤地維持位址及資料之相關。 使用根據本揭不發明的成像裝置，當在產生正常影像 的正常操作中，針對儲存在記憶體中的資料，可用先前參 考圖6A及6B描述之各者爲8位兀之YCrCb的422格式實施記 錄。 又，在寬動態範圍操作時，基於長曝光影像（高靈敏 度影像）及短曝光影像（低靈敏度影像）之二影像，在合 成單元產生合成影像。在此影像合成時，實施根據像素値 設定將二影像之像素値乘於小於1的値然後相加之合成處 理。此合成處理補償各影像的不充份解析度，並產生已產 生成寬動態範圍的影像。 又，如先前參考圖6A至7所描述的，在正常影像產生 模式及寬動態範圍影像產生模式中以不同的資料格式實施 使用根據本揭示發明之成像裝置將資料儲存至記億體1 3 0 〇 在正常影像產生模式中，儲存係以圖6 A所示之依照8 位元亮度信號（Y)之一對8位元色差信號（Cb、Cr )的 422格式之信號的資料格（資料格式1 ( fl ))，或以圖6B 所示之依照亮度信號（Y)的四個像素之一對色差信號（ -64 - 201223268

Cr、Cb )的41 1格式實施。 又’在寬動態範圍影像產生模式中，儲存係以具有一 對彩色信號係按照具有亮度信號（Y)之9位元、彩色信號 (G )的10位元、及各彩色信號（R)及（b)之9位元的 亮度信號之四個像素的解析度之所謂的4 1 1格式之信號的 資料格式（資料格式2(f2))實施。 藉由以此方式使用根據該情形的記憶體儲存格式，使 用具有，例如’ 16位元資料寬度、1 33MHz的存取速度、 以及64MB的記億體容量之一記億體設備的組態，實施致 能相容於NTSC及PAL格式之正常影像及寬動態範圍影像的 二影像之輸出的成像裝置，可實現記憶體使用降低、載置 區域減少、及成本減少。 又’如參考圖1 7所描述的，藉由實施控制以在模式轉 移時預先切換記憶體輸入資料，即使在正常操作時及寬動 態範圍操作時的記憶體資料格式不同，可防止由於資料格 式不同所導致的輸出或錯誤影像，並可實施平滑模式轉移 〇 已參考具體實施例描述本揭示發明。然而，熟悉本技 術的人士可不言自明地產生實施例的修改及替代而爲脫離 本揭示發明的本質。亦即，揭示係以用例示形式產生，且 不應受限制性地解釋。對本揭示發明之本質的任何解釋應 參考申請專利範圍產生。 又，描述於本說明書的處理系列可藉由硬體、軟體、 或二者之組合組態執行。在藉由軟體執行處理的情形中， -65- 201223268 可將記錄處理順序的程式安裝在建造爲專用硬體之電腦的 記憶體中並執行，或可將該程式安裝在能執行各種類型處 理之通用電腦中並執行。例如，可將該程式預先記錄在記 錄媒體中。除了從記錄媒體安裝至電腦，可經由網路，諸 如’ LAN (區域網路）、或網際網路等接收該程式，並安 裝在儲存媒體中，諸如，內建硬碟等。 須注意描述於本說明書中的各種類型的處理並未限制 爲以所描述的時間順序執行，且可能依據執行該處理之設 備的處理能力或視情況平行地或獨立地執行。又，在本說 明書中，術語「系統」係指多個設備的邏輯群組組態，且 並未限制成在相同外殻內之各組態的設備。 本揭示發明包含與於2010年8月31日向曰本特許廳申 請之日本優先權專利申請案案號第2010-193692號所揭示 的主題內容相關之主題內容，該專利之教示全文以提及之 方式倂入本文中。 熟悉本發明之人士應能理解不同的修改、組合、次組 合、及變更可能取決於設計需求及其他因素而在隨附之申 請專利範圍或其等同範圍內發生。 【圖式簡單說明】 圖1係描畫藉由合成二種靈敏度之影像產生寬動態範 圍影像的成像裝置之組態範例的圖； 圖2 A及2B係描畫儲存在成像裝置之記億體中的資料之 組態範例的圖； -66- 201223268 圖3係描畫根據實施例之成像裝置的組態範例之圖； 圖4係描畫使用根據實施例的成像裝置，當設定用於 產生正常影像之正常影像模式時的切換器設定及處理之圖 * 圖5係描畫使用根據實施例的成像裝置，當設定用於 產生寬動態範圍影像之寬動態範圍模式時的切換器設定及 處理之圖； 圖6 A及6B係描畫使用根據實施例之成像裝置儲存在記 憶體中之資料的格式之範例的圖； 圖7係描畫使用根據實施例之成像裝置儲存在記億體 中之資料的格式之範例的圖； 圖8係描畫使用根據實施例的成像裝置之使用連續讀 出及連續輸出的正常影像產生順序之圖； 圖9係描畫使用根據實施例的成像裝置之使用連續讀 出及連續輸出的寬動態範圍影像產生順序（第一範例）之 圖， 圖10係描畫使用根據實施例的成像裝置之使用連續讀 出及連續輸出的寬動態範圍影像產生順序（第二範例）之 圖； 圖11係描畫使用根據實施例的成像裝置之使用連續讀 出及交錯輸出的正常影像產生順序（第一範例）之圖； 圖1 2係描畫使用根據實施例的成像裝置之使用連續讀 出及交錯輸出的正常影像產生順序（第二範例）之圖； 圖13係描畫使用根據實施例的成像裝置之使用連續讀 -67- 201223268 出及交錯輸出的寬動態範圍影像產生順序（第一範例）之 圖， 圖14係描畫使用根據實施例的成像裝置之使用連續讀 出及交錯輸出的寬動態範圍影像產生順序（第二範例）之 圖， 圖1 5係描畫使用根據實施例的成像裝置之使用連續讀 出及交錯輸出的寬動態範圍影像產生順序（第三範例）之 圖； 圖16係描畫使用根據實施例的成像裝置之使用連續讀 出及交錯輸出的寬動態範圍影像產生順序（第四範例）之 圖； 圖1 7係描畫使用根據實施例的成像裝置，在使用連續 讀出及連續輸出的正常影像產生及寬動態範圍影像產生之 間切換的順序之圖； 圖18係描畫使用根據實施例的成像裝置，在用於在使 用連續讀出及連續輸出的正常影像產生及寬動態範圍影像 產生之間切換的順序中之切換器設定的圖； 圖1 9係描畫使用根據實施例的成像裝置，在用於在使 用連續讀出及連續輸出的正常影像產生及寬動態範圍影像 產生之間切換的順序中之切換器設定的圖；且 圖2 0係描畫在用於正常影像產生及寬動態範圍影像產 生之間切換的順序中之問題的圖。 【主要元件符號說明】 -68- 201223268 1 0、1 0 0 :成像裝置 1 1、1 0 1 :鏡頭 12、 102 :成像設備 13、 103 :類比前端 20、120 :信號處理單元 21 : YRGB產生電路 22、 122 :第一信號處理單元 23、 130 :記憶體 24、 123 :影像合成單元 25、 124 :影像校正單元 26:第二信號處理單元 105 :控制單元 106 :輸入單元 121 : YRGB產生單元 125 :第二信號處理單元 126:第三信號處理單元 151a、 151b、 151c、 151d:切換器 -69-

Claims (1)

1. 201223268 七、申請專利範園： 1· 一種用於影像信號的信號處理單元，包含： 第一、第二、以及第三信號處理單元； 記憶體，儲存影像信號； 第一、第二、第三、以及第四切換器； 其中將該第一切換器連接至該第二信號處理單元的輸 入’該第一切換器在該記憶體之輸出及該第一信號處理單 元的輸出之間切換， 其中將該第二切換器連接至該第三信號處理單元的輸 入，該第二切換器在該記憶體之輸出及該第二信號處理單 元的輸出之間切換， 其中將該第三切換器連接至該記憶體的該輸入，該第 三切換器在來自該第二信號處理單元之該輸出及來自該第 —信號處理單元的該輸出之間切換，且 其中將該第四切換器連接至該記憶體的該輸出，該第 四切換器在至該第三信號處理單元之該輸入及至該第二信 號處理單元的該輸入之間切換。 2 .如申請專利範圍第1項之信號處理單元， 其中該記憶體的輸入/輸出路徑係可控制使得（a )針 對正常影像產生，僅在藉由該第二信號處理單元的影像校 正後，將影像信號儲存在該記憶體中及/或從該記憶體讀 取，以及（b)針對寬動態範圍影像產生’在藉由該第二 信號處理單元校正該等影像信號前’將影像信號儲存入該 記憶體及/或從該記憶體讀取。 -70- 201223268 3 .如申請專利範圍第1項之信號處理單元， 其中針對正常影像產生，將該第一切換器連接至該第 一信號處理單元的該輸出、將該第二切換器連接至該記億 體的該輸出、將該第三切換器連接至該第二信號處理單元 的該輸出'並將第四切換器連接至該第三信號處理單元的 該輸入。 4·如申請專利範圍第1項之信號處理單元， 其中針對寬動態範圍影像產生，將該第一切換器連接 至該記憶體的該輸出、將該第二切換器連接至來自該第二 信號處理單元的該輸出、將該第三切換器連接至該第一信 號處理單元的該輸出、並將第四切換器連接至該第二信號 處理單元的該輸入。 5 ·如申請專利範圍第丨項之信號處理單元， 其中該第二信號處理單元包括合成單元，從儲存在該 記憶體中的影像信號產生寬動態範圍影像並執行影像合成 處理， 其中針對正常影像產生，該影像合成處理不由該合成 單元執行。 6.如申請專利範圍第丨項之信號處理單元， 其中該第二信號處理單元包括 影像合成單元，產生儲存在該記憶體中的寬動態 範圍信號並執行影像合成處理， 影像校正單元，校正該等影像單元信號，以及 信號處理設備，將影像信號轉換爲色差信號， -71 - 201223268 其中針對正常影像產生，該影像合成處理不由該影像 合成單元執行。 7. —種信號處理單元，在正常影像產生操作及寬動態 範圍影像產生操作之間切換，以回應於來自控制器的控制 信號，該信號處理單元包含： 記憶體，儲存影像信號， 影像校正單元，校正該等影像信號；以及 切換設備，連接至該記憶體及該影像校正單元，將該 記憶體的輸出路徑切換至該影像校正單元/自該影像校正 單元切換至該記憶體的輸入路徑。 8. 如申請專利範圍第7項之信號處理單元， 其中將該等輸入/輸出路徑控制成使得（a)針對正常 影像產生，僅在藉由該影像校正單元的影像校正後，將影 像信號儲存在該記億體中及/或從該記憶體讀取，以及（b )針對寬動態範圍影像產生，在藉由該影像校正單元校正 該等影像信號前，將影像信號儲存入該記憶體及/或從該 記億體讀取。 9. 如申請專利範圍第7項之信號處理單元， 其中該等切換設備包括第一、第二、第三、以及第四 切換器， 其中將該第一切換器連接至該影像校正單元的輸入， 該第一切換器在該記憶體的輸出及輸入影像信號之間切換 ， 其中將該第二切換器連接至該信號處理單元的輸出， -72- 201223268 該第二切換器在該記憶體之輸出及該影像校正單元的輸出 之間切換， 其中將該第三切換器連接至該記憶體的該輸入，該第 三切換器在來自該影像校正單元的該輸出及該輸入影像信 號之間切換，且 其中將該第四切換器連接至該記憶體的該輸出，該第 四切換器在該信號處理單元之該輸出及至該影像校正單元 的該輸入之間切換。 10.如申請專利範圍第9項之信號處理單元， 其中針對正常影像產生，將該第一切換器連接至該輸 入影像信號、將該第二切換器連接至該記憶體的該輸出、 將該第三切換器連接至該影像校正單元的該輸出、並將該 第四切換器連接至該信號處理單元的該輸出。 1 1 ·如申請專利範圍第9項之信號處理單元， 其中針對寬動態範圍影像產生，將該第一切換器連接 至該記憶體的該輸出、將該第二切換器連接至來自該影像 校正單元的該輸出、將該第三切換器連接至該輸入影像信 號、並將第四切換器連接至該影像校正單元的該輸入。 12.如申請專利範圍第7項之信號處理單元， 另外包含影像合成單元’從儲存在該記憶體中的影像 信號產生寬動態範圍影像並執行影像合成處理， 其中針對正常影像產生，該影像合成處理不由該影像 合成單元執行。 1 3 .如申請專利範圍第7項之信號處理單元， -73- 201223268 另外包含信號處理設備，將影像信號轉換爲色差信號 ，以及影像合成單元，從儲存在該記憶體中的影像信號產 生寬動態範圍影像並執行影像合成處理， 其中針對正常影像產生’影像合成處理不由該影像合 成單元執行。 14. —種影像ig號處理系統，包含： 記憶體，用於儲存影像信號； 控制單元，執行該記億體之輸入/輸出路徑的信號路 徑控制； 信號處理單元，包括 影像校正單元’校正該等影像信號，以及 影像合成單元，從儲存在該記憶體中的該等影像 信號產生寬動態範圍影像並執行影像合成處理； 切換單元，連接至該記憶體及該信號處理單元，該記 憶體的信號路徑切換至/自該信號處理單元。 15. 如申請專利範圍第14項之影像信號處理系統， 其中將該記憶體的該等輸入/輸出路徑控制成使得（a )針對正常影像產生’僅在藉由該影像校正單元的影像校 正後，將影像信號儲存在該記億體中及/或從該記億體讀 取，以及（b)針對寬動態範圍影像產生’在（1)藉由該 合成單元合成且（2)藉由該影像校正單元校正該等影像 信號前，將影像信號儲存入該記憶體及/或從該記憶體讀 取。 1 6 .如申請專利範圍第1 4項之影像信號處理系統， -74- 201223268 其中針對正常影像產生，影像合成處理不由該合成單 元執行^ 17. 如申請專利範圍第14項之影像信號處理系統， 其中該等切換單元包括第一、第二、第三、以及第四 切換器，_ 其中將該第一切換器連接至該信號處理單元的輸入， 該第一切換器在該記憶體的輸出及輸入影像信號之間切換 ， 其中將該第二切換器連接至該影像信號處理系統的輸 出，該第二切換器在該記憶體之輸出及該信號處理單元的 輸出之間切換， 其中將該第三切換器連接至該記憶體的該輸入，該第 三切換器在來自該信號處理單元的該輸出及該輸入影像信 號之間切換，且 其中將該第四切換器連接至該記憶體的該輸出，該第 四切換器在該信號處理系統之該輸出及至該信號處理單元 的該輸入之間切換。 18. 如申請專利範圍第17項之影像信號處理系統， 其中針對正常影像產生，將該第一切換器連接至該輸 入影像信號、將該第二切換器連接至該記憶體的該輸出、 將該第三切換器連接至該信號處理單元的該輸出、並將該 第四切換器連接至該處理系統的該輸出。 19. 如申請專利範圍第17項之影像信號處理系統， 其中針對寬動態範圍影像產生，將該第一切換器連接 -75- 201223268 至該記憶體的該輸出、將該第二切換器連接至來自該信號 處理單元的該輸出、將該第三切換器連接至該輸入影像信 號、並將第四切換器連接至該信號處理單元的該輸入。 2 0 .如申請專利範圍第1 4項之影像信號處理系統’ 其中該信號處理單元另外包含信號處理設備’將影像 信號轉換爲色差信號。 -76-