TWI243584B - Apparatus and method for processing output from image sensor - Google Patents

Apparatus and method for processing output from image sensor Download PDF

Info

Publication number
TWI243584B
TWI243584B TW091119092A TW91119092A TWI243584B TW I243584 B TWI243584 B TW I243584B TW 091119092 A TW091119092 A TW 091119092A TW 91119092 A TW91119092 A TW 91119092A TW I243584 B TWI243584 B TW I243584B
Authority
TW
Taiwan
Prior art keywords
component
value
difference
slope
absolute value
Prior art date
Application number
TW091119092A
Other languages
English (en)
Inventor
Soon-Jae Cho
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Application granted granted Critical
Publication of TWI243584B publication Critical patent/TWI243584B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/12Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with one sensor only
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/84Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/843Demosaicing, e.g. interpolating colour pixel values
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2209/00Details of colour television systems
    • H04N2209/04Picture signal generators
    • H04N2209/041Picture signal generators using solid-state devices
    • H04N2209/042Picture signal generators using solid-state devices having a single pick-up sensor
    • H04N2209/045Picture signal generators using solid-state devices having a single pick-up sensor using mosaic colour filter
    • H04N2209/046Colour interpolation to calculate the missing colour values

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Color Television Image Signal Generators (AREA)
  • Image Processing (AREA)

Description

1243584 9926pifl
九、發明說明: 【發明所屬之技術領域】 本發明是有關於一種電子攝影機。特別是,有關於使 用複數個方向係數來處理單一感應器彩色電子攝影機的影 像感應器(sensor)輸出的數位資料的方法。 【先前技術】 用以將輸入景象轉換成電子信號的影像感應器,可感 測光線的強度,其隨著該感應器上的各個分割區域而改 麦’亦即’像素的規則圖案。濾、色陣列(C〇i〇r Filter Array, 簡稱CFA)是安裝在感應器上的,以及該感應器的每一像素 感應通過該CFA的彩色信號的強度。 在將彩色仏號轉換成電子信號中,最好在三個彩色平 面上,其分別感應紅、綠、及藍,感應的影像資料全部同 時擷取。這是因為在三個彩色平面上感應的影像f料必須 被洽當地混合,藉以得到高品質的彩色圖像(picture)。 假如/、使用一個能夠感應三個顏色的平面來代,替三 ,彩色平面,則此平面稱為單—感應器。通常,單一感應 器CFA具錢色鏡的正規圖_結構,所轉個像素會感 應一個顏色。單—感應器電仙合裝置(Charge Coupled SI, =CDi CM〇S影像感應器的裝置是用來感 二數位機Ϊ:、象二以及輪出具有關於顏色強度的資 ^CD 1 cCm’ 〃是由每一像素所感應的。單一感應器 d tf像感應11輪㈣視訊㈣項目只具有關 ;、e簡稱R)、綠(Green,簡稱G)、及藍(胸,簡 ,-i ,-i
I243584 9926pifi 稱B)中的一個顏色信號的資訊。因此,單一感應器影像感 應器的資料項目應該使用内插法來產生關於其餘兩個顏色 的資訊。 —個資料結構,其中並未具有用以表示一個像素的關 於全部三個顏色的顏色資訊資料項目,但是具有三個顏色 中的任何一個顏色的資訊,被稱為Bayer陣列結構。 第1圖是Bayer陣列的圖式。在第1圖的Bayer陣列 、,可以使用不同的内插法來求得每一像素的R、G、及B, 並且内插效能會隨所選擇的内插法而有很大的變化。 首先,現在要解釋使用一階濾波法的内插法。 當使用線性_法時,具有關於B成分的資訊 素(U)的G成分表示如下式·· 冬 G — G〇i +fi〇 +(λ, 在線性内插法中,影像的複雜部分的圖像 2 ’例如,具有空間邊緣(spa :門- 張與硬幣之間的邊界處合有二:„下’在紙 為了解決此_ l!;、有不連續信號的空間邊緣。 平方向成分及垂直方向成八方法,將邊緣成分分成水 的方向做内插。例如,以求彳If邊緣斜率為較小角度 分時,假如水平方向邊=圖的像素⑽的G成 假如垂直方向邊緣斜率的 率的角度,則的角度小於垂直方向邊緣斜 角度 小於水平方向邊緣斜率的角度,則 1243584 9926pifl 會惡I而,在此方法中,具有對角線邊緣成分的圖像品質 為了解決上述兩個方法的問題,提出 Lapladan濾、波的方法。 用一階 在Laplacian濾波法中,假設在影像 色信號之間的差異為常數(G;_死财",〇局。卩區域的彩 以及取-尺;⑽β ’其巾]:表示像素的位’广⑽G ’ 插法。例如,假如水平方向的邊緣成分較 的G成分為 則像素(2,2) Άι - Ri} 4 n _Gu+G7· 2 對於正常㈣像’此方法的伽為铺結構 及 =放此。然而,在某些此假設不成立的情況 緣’例如,在合成影像中,此方、本益 的對角線邊 化’如同其他現存的方法。 冢口口吳的心 【發明内容】 以;^為了解決上述問題,本發明之第—目的是提#-種用 複數個方向係數來處理電子攝=2#=中藉由使用 位資料。 %謂~簡祕感絲輸出的數 本發明之第二目的是提供一種用處 ;以;料之方法,於其中藉由使二 電子攝影機的影像感應器輸出的數位資料。 依照本發明之一觀點,提出—錄闲考 旦 器之輪★ MW W目士 種用處理—影像感應 出貝枓之裝置’具有—線記憶模組,用以接收及儲 1243584
9926_ 丨更D
I _ j. _ ______ 器之輸出資料,具有關於在每-像素感 :之“出;5及42 ’ 一延遲模組’用以接收該影像感應 时之輪出貝枓及雜記憶模組之輸出資料 號將所接收之輸出資料延遲一預定時 之輪屮眘枓.士: 寻間,然後輸出所接收 =,—方向健值選擇器1以接收該延遲模组 的擇複數個方向係數值,用以定義所要求得 «^G)^M(BlUe, iL内ί: ί緣成分,以及輸出所選擇的數值;以及- 且ί r二Μ以接收該延遲模組之輸出資料,以及求得 G、=:t像素的…成分’具有R成分的像素的 , 刀以及具有B成分的像素的G及R成分,藉 接收之該延遲模組之輸出資料來執行内插 於5亥方向係數值選擇器之輸出資料。 〜 ^線魏模組具H線記憶體,用以儲存 感應益之輪出資料;—第二線記憶體,用以 輸出資料;以及—第四線記憶體,用以儲 存苐二線記憶體之輸出資料。 最好’該延遲模組包括複數個延遲方塊,其中每一個 ϊιΐ數辦接的移位暫存㈣及延賴影像感應器之輸 為四個取好’對於每—延遲方塊’串接的移位暫存器的數目 個彩色最餘值選抑具有-計算單元,由複數 成刀计^早元形成,個別用以判斷在水平方向及/ 吏 1243584 9926pifl ^直方向及/或㈣線方向之邊緣成分是否存在於一任 思像素之每一 R、G、及B成分,對於要忐八 以及計算該存在的邊緣成分的肖度;以及刀,’ 用以藉由比較該計算單it之輪出資料與 二 值(threshold)來決定該些複數個方向係數值疋数曰的啟始 最好’根據將求的彩色成分的像素具杨是那 形色成分,該些複數個彩色成分計算單元具 〜 成分計算單元,用以求得該G成分之邊絡 和 辛且右R w 邊緣成分,假如該像 ΐΐί 以及不執行動作,假如該像 ^ G成分’-第二彩色成分計算單元,用以求得該 刀之水平邊緣成分’假如該像素具有該R成分,求得 If分之水平邊緣成分’假如該像素具有該G成分,以 ^’、付该B成分之水平邊緣成分,假如該像素具有該B成 及—第三彩色成分計算單元,用以求得該R成分之 垂直邊緣成分,假純像素具㈣R成分,轉該g成分 =直邊緣成分,假如該像素具有該G成分,以及求得該 成分]之垂直邊緣成分’假如該像素具有該B成分。 最好,該第-彩色成分計算單元計算以Μ者之間之 差異’由㈣求㈣色成分之該任轉素在該水平方向辦 ΐϊ減少之G成分之絕對值(該G成分之該水平斜率之i 、' )’以及由該像素在該垂直方向增加或減少之g成分 之絕對值(該G成分之垂直斜率之絕對值)。 最好,其中假設任意像素(i,j)(其中i及j為整數)之〇 ^分為CV賴第—彩色成分計算單元具有—第—功能方 ^用以求得G㈣·與•之間之差異之絕對值(水平成 Γ7& .u 1243584 9926pifl
=方塊之輸出信號與該第二功能方口 最好,假如該任意像素具有該R 成f之左邊斜率心= =成分之左邊斜率之絕對值與右邊斜之 間之差異,或假如該任意像素具有該Β成;羊== 异該Β成分之左邊斜率之絕對值與右邊斜率之絕對值之間 2 ί 及C意像素具有該r成分,該第三彩色 ,刀h早兀4异獻成分之上部斜率之絕對值食下部 率之絕對值之間之差異;假如該任咅 ^ ;=成t之:部斜率之絕對“下部斜之 意像素具有該B成分,計算該b成 77 值與下部斜率之絕對值之間之差異。 最好’射假設任意像素(i,j)(其中⑷為整數 12B成分分別為A今及A,則該第 二衫Ά异早疋具有—第三功能方塊’用以求得々 ”及㈣之〜之差異之絕對值,求 ρ ;之,值,或求得糾㈣之間之差異丄账 =功此方塊’用以求得&㈣與&之間之差異之絕對值, Ί %之間之差異之絕對值,或求得~-2)與心 之間之差異之絕對值;以及—第二減法器,用以求得該第 三功能方塊讀出錢触第四舰魏之如信號之間 12 1243584 9926pifl 二差㊁二^三彩色成分計算單元具有-第五功能方 ,用以求件A與/^/之間之差異之絕對值 間之差異之絕對值二 值,或求得%功與七之間之差異之絕 減法益,帛財得該細功能錢之輸 ^ 能方塊之輸出信號之間之差異。 彳。就與及第/、功 之負值色成分計算單元之輸^大於―啟始值 之負值以及小於该啟始值之正值,該比 意方向係數為-第-狀態值;假如該彩色成=== 輸出小於該啟始值之負值,選擇該任意方 狀悲值’以及假如該彩色成分計算單元 二 值之正值,選擇該任意方向係數為—第三狀態^^啟始 數。最好β亥第一至第二啟始值為大於4且小於2〇之整 及該第最/狀n狀態值為1/2 ’該第二狀態值為丨,以 最好,該適應内插器具有一 G成分内插器 據該延遲模組及财向係數值轉㈣之輸$錢 々 行内巧來輸出該G成分,;-R成分内_,用心 延遲模組及該方向絲值選擇器之輸出信號,藉二 插來輸出該R成分;以及—B成分内插器,用= 選擇器之輸出信號,藉由執捻 13 1243584 9926pifl 用、^二^成分内插11財—低_減分計算器, 向係數值選擇器之輸出信號選擇結果,接收 ΐ 組之輸出信鱿中之複數個G成分’執行計 :棱命方:=ί選擇結ΐ;一高g波成分計算器,用以 二f值選擇器之輪出信號選擇該結果,接收來 H輸出信號中之複數個R成分或B成分,執 且輸ΐ該選擇結果;以及-加法器,用以對該 夕ϋ—ζ #异$之輸出信號及該高通滤波成分計算器 之輸出信號執行OR運算。 _最^該低通濾波成分計算器具有—第—邏輯方塊單 =/、/复數個邏輯方塊’分別用以對要求得的像素⑼ G (U1)jQ °Tr Gi〇+I)H G(i+I)j' Gi(j+1)% G(i-1)j' Gi(j-1)M 以如ί/㈣·、以及〜一 G㈣執行0R運算, 以2 第二邏輯方塊單元,具有 輪出信二也η:邏輯方塊單元之 =據== 、心 列巧㈣及GV⑽,該第一 單元之輸出錢以及該第二邏輯方塊單元之^出 L唬之中的一個,並且輸出該選擇結果。 -最好’該高it濾波成分計算器具有_第三邏輯方 ?,具有複數個邏輯方塊,用以將々與 ㈣〆間之差異除以2,將々與—之間之 差〆、或仏·與及㈣之間之差異除以2,以及將々與足㈣ 1243584 9926pifl r? .J 丄一.
-.H 之差異或々與^之間之差異除以2;-第四邏輯方 包括複數個邏輯方塊,用以選擇地對該第三邏輯 塊早7C之該些輸出信號執行QR運算,以及將該⑽結 ^除以2 —第五賴方解元,包括複數鋪輯方塊, H擇地對該第四軸方塊單元之軸輸^信號執行 運异,以及將該OR結果除以2 ;以及一第二選擇器, 用以依據該方向係數值選擇器之輸出信號,選擇該第丄至 第五邏輯方塊之輸出信號之中的一個。 — ▲最好,假如要求的是G成分為已知的像素⑽的以成 該R冬分内插器回應於該第二方向係數,撰癦 2 , 2 4 -^ 分
Gn + Git Τ'中的一個,以及輸出該選擇結果,以及假 如要求的是Β成分為已知的像素(丨①的尺成分則求 ί!+ί(ΐ的+”線的四個像素的算術平均數 ( ---LlijL^O 及“+1VM) + 穴(/+1X7+1) \4 ,以及輸出該結果;叹該B成分 内插器,假如要求的是G成分為已知的像素(ij)的B八 該回應於第三方向係數,選擇 '川/Gd,、刀, 心+ - G,(. - I D 及^ 2中的一個 以及輸出該選擇結果,以及假如要长 =像素⑼的B成分,則求在像素^ 异術平均數 +B 、 4 '^ 四個 ’以及輪 15 1243584 9926pifl a- 丄 L—、二 ^ 9.r π 出該結果。 依照本發明之另一觀點,提出一種用以處理一影 應器之輸出資料之方法,該影像感應器用以將一輪入旦1 轉換成一電子信號,該方法包括儲存該影像感應器之二 資=;選擇至少三個方向餘值,用以蚊要求得的‘素 分的強度’藉由使用所儲存的該影像_器之輸 出貝枓與目前的該影像感應器之輸出資料;以及藉由使用 驟巾選擇的複數個方向係數以及該影像感應器的 輸出貝料,執行⑽,藉財得具有G成分的 B成分,具有R成分的像素的G及B成分,以及具 成分的像素的G及Rm巾該些方向係數包括一第_ 數’用以指示該像素的邊緣具有那個成分,在該水 = ㈣直成分、及該對角線成分之中,—第二方向 ΐ自該水平邊緣成分的角度,其具有一預定寬 又自5亥水平線起,以及包括該上部成分、該下 部及下部成分兩者,自該水平線起,以及一第= =及in以及包括該左邊成分、以 ^ 及忒左邊及右邊成分兩者,自該垂直線起。 在儲存該影像感應器之輸出資料之步驟中1 =象感應器之輸出資料分割成複數個預定單位 …固別用以儲存-個單位,儲存該分 的°, 四個單位,以》外在—οσ ^ J貝料之中的至少 田杯产、联〇預疋早為8矽沉陣列結構中的一行。 好’在、擇三财向魏狀步驟t,㈣判斷f+ 於要求得純籍之-任意料衫已具料 16 1243584 9926pifl
如该任意像素已且有 數值及該第三方;:以值成U依士選擇該第二方向係 是該G成分,則判^ ^ °^任思像素的彩色成分不 於-第-啟始差異的絕對值是否小 的G成分的絕對值( ^ : &水平方向增加或減少 的絕對值),以及自哕任立傻jG成分的水平斜率成分 G成分的絕對值(二將= 素為起=方向增加或減少的 第-敬始值=Γ=Γ差異的絕對值小於該 以;5 第—方向係數設定為—第—狀態值, 成八方向係數的值;判斷該G成分的水平斜率 =、、讀值與該G成分的垂直斜率成分的絕對值之間的 =疋否小於該第-啟始值的負值;假如該G成分的水平 ^率成分的騎值與該〇成分_直斜率成分的絕對值之 二,差異小於該第一啟始值的負值,則將該第一方向係數 设定為一第二狀態值,以及選擇該第二方向係數的值;假 士 成为的水平斜率成分的絕對值與該G成分的垂直斜 率成分的絕對值之間的差異大於該第一啟始值的正值,則 將該第一方向係數設定為一第三狀態值;以及假如該第一 方向係數被設定為該第一狀態值或該第三狀態值,則接著 選擇該第三方向係數的值。 最好,該G成分的水平斜率成分的絕對值與該G成 分的垂直斜率成分的絕對值之間的差異為 Ι^ζ·6·〜广6沿_7)|—1%_/)厂0(7+7力|,其中待求的像素如 為Gy,以及i及j為整數。 17 1243584 9926pifl 最好,當待求的該像素 選擇該第二方向係數值與哕裳:、〇x成分時用以依序 括判斷下面兩者之間的差' =二方向係數值的步驟中,包 值,該任意像素的左邊的像素否小於一第二啟始 平方向增加或減少(以下稱^的成分的絕對值,其在水 絕對值),以及該任意像辛的=f成分的左邊斜率成分的 值,其在水平方向增力丨成分的絕對 斜率成分的絕對值);假如 ^為_ G成分的右邊 對值與該G成分的右邊的左邊斜率成分的絕 對值小於該第二啟始值絕:值之間的差異的絕 該〇成分的右邊二成邊斜率成分的絕對值與 第二啟始值的負值值之間的差異是否小於該 值盥兮八沾+ 2又如忒G成分的左邊斜率成分的絕對 邊::率成分的絕對值之間的差異丄 :狀恶值;假如該G成分的左邊斜率 二= i;:=;第二方向係二== iU ί絕對值,其在垂直方向增加或減少(以下 G成勿的上部斜率成分的絕對值)’以及該任音 少(1751 素分的絕對值’其在垂直方向増加^減 (以下稱為该G成分的下部斜率成分的絕對值);假如該
G成分的上部斜率成分的絕對值與該G成分的下部斜率S ----1 ----1 !修「c …一 L年 一,,、,紙 1243584 9926pifl 分的絕對值之間的差異的絕對值小於該第三啟始值,則將 該第三方向係數的值設定為該第一狀態值;判斷該G成分 的上部斜率成分的絕對值與該G成分的 對值之間的差異是否小於該第三啟始值的負== 成分的上部斜率成分的絕對值與該G成分的下部斜率成分 的、”ε對值之間的差異小於該第三啟始值的負值,則將該第 一方向係數的值设定為該第二狀態值;以及假如該G成分 的上部斜率成分的絕對值與該〇成分的 2值之間的差異大於該第三啟始值,則將該第三方=數邑 的值設定為該第三狀態值。 、 最好,當該待求的像素(⑶的G成分為 以及i 為=時,該G成分的左邊斜率成分的絕對值 g刀的,邊斜率成分的絕對值之間的差異 及該G成分的上部斜率成分的絕 丨㈣的差異為 及選二狀態值以 素的彩色成分是否具斷該任意像 時,判斷下面兩者之間的差異的:=成分 始值,該任意像素的左邊的像素的小於一第二啟 水平方向增加或減少(以τ稱為該R 值,其在 的絕對值),以及該任意像素的右邊的率成分 值,其在水平方向增加或減少(以 二、成为的絕對 率成分的絕對值);假如該汉成 成分的右邊斜 、左邊斜率成分的絕對值 94; 1243584 9926pifl 斜絕:值之間的差異的絕對值 -狀離貝將该第二方向係數的值設定為該第 成分=邊3,成分的左邊斜率成分的絕對值與該R 啟值之間的差異是否小於該第二 二率成f的絕對值之間的差異小於該第二 “;假如3向係數的值設定為該第二狀 ::;£其:二=二== ==分的絕對值),以及該任意像素的右邊的像素 =的右邊斜率成分的絕對值)二二:成== :=Γ與該以分的右邊斜率成分的絕對值= 的值:第二啟始值’則將該第二方向係數 的值;判斷該b成分的左邊斜率成分 成分的右邊斜率成分的絕 匕 於該第二啟始值的負值;假如該B成分的左邊斜; =與該Β成分的右邊斜率成分 間 二ίΐί χ及假如該β成分的左邊斜率成分 的絕對值與該β成分的右邊斜率成分的絕對值之:ii; 20 1243584 琢 9926pifl 啟始值,則將該第二方向係數的值設定為該第 整數時最:…及i及』為 =斜二成分的絕對值之間的差购為 ^以,主以及當待求的像素⑼的B成分為 值7的R j ^ I數時,^成㈣左邊斜*成分的絕對 解絲.雜⑼的差異(△叫 最好,假如該第-方向係數被設定為該 ,第三狀態值則接著選擇該第三方向係數的:;或 Ϊ==素的彩色成分是否為R成分;假如:像 素的办色成刀為R成分,則判斷下 =否小於該第三啟始值,該任意像素之:= 成分的上部斜率的絕對===為該尺 絕對值,其在丄向及増象= 絕對值與該反成分的下部斜率的絕對2 = 的 值小於該第三啟始值,則將 二:差異的絕對 二狀態值;判斷該R成分的上部斜‘的絕^二匕亥第 的下部斜率的絕對值之間的差異是 成分 部斜率的絕對值之間的差異小_第的下 將料二方向係數的值設定為該第二狀態值;假如該R = 21 1243584 9926pifl 94 ' '7 U.、 率的f對值與該尺成分的下部斜率的絕ttn =;大於該第三啟始值,則將該第三方二=; =判:下;兩者之間的差敗 亩°太J任思像素之上的像素的B成分的絕對值,1在垂 ^ ΪΙ之下的像素的β成分的絕對值,立 在垂直方向增加錢少⑽下稱之為該 的絕對你假如該Β絲的上料 分的下部斜率的絕對值之_差異的絕對值小於該第:ί 始值,則將該第三方向係數的值設定為 ^了 斷該Β成分的上部斜率的絕對值與該 ^率^ 絕對值之間的差異衫小於該第三啟始值的負值 Β成为的上将率的絕對值與該Β成分的下料率的絕對 值之間的小於該第三啟始值的負值,則將該第三方向 係數的值設定為該第二狀態值;以及假如該B成分的上部 斜率的絕f值與該B成分的下部斜率的絕對值之間的差異 大於該第三啟始值,則將該第三方向係數的值 三狀態值。 最好’該R成分的上部斜率成分的絕對值與該r成 分的下部斜率成分的絕對值之間的差異為 ΙΑ—力·| ’其中待求的像素(iJ)的r成分為&, 以及^及j為整數,以及該B成分的上部斜率成分的絕對 值與該B成分的下部斜麵分的絕靠之卩㈣差異(构 為丨乂-如·2力|-|况厂化+2力彳,其中待求的像素㈤·)的β成分為 22 1243584 j 9926pifl ^
以及1及j為整數。 1/2 5 20的=該第—啟始值至該第三啟始值為切4且小於 幹出執㈣插之辣包括計算該雜感應器之 =Γΐ 情所聰的方㈣數值,在所計算的資 ^中k擇對應於所選擇的方向係數值的資料項目,者作 計算該影像感應器之輸出,以及針對所選“方 =二ί所計算的資料之中選擇對應於所選擇的方向 二選擇的方向係數值’在所計算的資料 ^擇對應於所選擇的方向係數值的資料項目 成分。 取好_’其中更包括一個或多個狀態值,以及該些狀熊 值用來指示具有有不同斜率的對祕成分的邊緣,^有^ 不同斜率的水平成分的邊緣,以及具有有不同斜率的垂直 成分的邊緣的斜率的角度。 為讓本發明之上述和其他目的、特徵和優點能更明顯 易懂,下文特舉較佳實施例,並配合所附圖式,作詳細說 明如下。 U V。 【實施方式】 第2圖是依照本發明的較佳實施例的處理 器的輸出資料的裝置的方塊圖。請參照第2圖, 23 1243584 「: ------------------- ? 9926pifl 之上―产〜:丨夕Η
I y 1 Ά /-^ ΐ 卜"* 2 j 明的處理影像感應器的輸出資料的裝置包括線記憶模組 20、延遲模組25、方向係數值選擇器26、及適應内插器 27 〇 口口 、線記憶模組2〇接收及儲存單一影像感應器輸出的資 料,以及具有關於在每一像素感應的彩色信號的資訊。延 遲模組25接收影像感應器輸出的資料及線記憶模組2〇輸 出的負料,使用一時脈信號將所接收的資料延遲一預 間,然後輸出該資料。 方向係數值選擇器26接收延遲模組25輸出的資料, 再,用延遲模組25輸出的資料選擇複數個方向係數值,用 以定義所要求得的像素的R、G、及B成分的邊緣成分, 以及輸出所選擇的數值。適應内插器27接收延遲模組Μ 輸出的資料,以及,回應於方向係數值選擇器26的輸出資 料,内插所接收的延遲模組25的輸出資料,藉以求得只具 有G成分的像素的R&B成分,只具有R成分的像素^ G&B成分,以及只具有B成分的像素的G及R成分。 _、 線記憶模組20包括第一線記憶體21,用以儲存影像 f應器的輸出資料(INPUT),第二線記憶體22,用以儲存 第了線記憶體21的輸出資料,第三線記憶體23,用以儲 存第二線記憶體22的輸出資料,以及第四線記憶體24, 用以儲存第三線記憶體23的輸出資料。 第3圖是第2圖的延遲模組25的電路圖。請參照第 3圖,延遲模組25包括第一延遲方塊251至第五延遲'方塊 255 〇 第一延遲方塊251至第五延遲方塊255中的每一個依 24 1243584 9926pifl
I Γ * ,
;::? I 據時脈信號(CLOCK),以及具有串接的四個移位暫存器。 第一延遲方塊251延遲影像感應器的輸出資料(lNpu^)。 第二延遲方塊252延遲第-線記憶體21的輸出資料。第三 延遲方塊253、第四延遲方塊254、及第五延遲方塊255 分別延遲第二線記憶體22、第三線記憶體23、及第四 憶體24的輸出資料。 、° >第4圖是第2圖的方向係數值選擇器%的電路圖。 請參照第4圖,方向係數值選擇器26包括計算單元261 , =以判斷在水付向及/錢直方向及/或對歸方向的邊 緣成分是否存在於任意的像素的每一 R、G、及B成分, 對於要求得的彩色成分,以及計算該邊緣成分的角度^以 及比較測定器263,用以藉由比較計算單A加的輸出資 料與至少三個啟始值(thresh〇ld)來決定至少三個方向係數 值。 、 _,算單元261包括第一、第二、及第三彩色成分計算 、2613及2615 ’其求得邊緣成分,依據待求得 、任思像素已具有的為那一個彩色成分。亦即,計算單元 261具有第一彩色成分計算單元2611,用以求得分的 邊緣成分,假如該像素具有R成分或B成分,以及不執行 動作,假如該像素具有G成分,第二彩色成分計算單元 、、用以求彳于R成分的水平邊緣成分,假如該像素具有 Ί刀求得G成分的水平邊緣成分,假如該像素具有G 成刀^以及求得B成分的水平邊緣成分,假如該像素具有 成刀以及第二彩色成分計算單元2615,用以求得r成 分的垂直邊緣成分,假如該像素具有R成分,求得G成分 25 1243584 9926pifl
假如該像素具有g成分,以及求得b成 i V假如該像素具有b成分。假設是要求 = (2,2)的RM ’則對於計算單元261的彩色成分會被 才示不。 現在要更詳細地說明計算單元的運作。 显,*第所^十算單疋2611計算以下兩者之間的差 7 '^成分的任意像素在水平方向增加或減 成分的水平斜率的絕對值)= G成“直斜率的、=)或減少的G成分的絕對值(該 單元==2有R成分’則第二彩色成分計算 早兀2613计开以下兩者之間的差異,該任咅
值,其在水平方向增:或減^ R 的1成料社邊的像素 的右邊斜==)其在水衫向增域減少(該R成分 ,如該任意像素具有G成分,則第二彩色 瞀 = 2613计异以下兩者之間的差異,該 z 像素的G成分的絕龍,其在水平額㈤加7 =邊的 =左邊的,的絕對值)’以及該任意像以 〇〇假如該任意像素具有B成分,則第二彩名士、 = 2613計算以下兩者之間的差異,該任意像素=异 像素的B成柿_,其在水平方向增加 26 ^584 9926pifl 广Ϊ u 成分的左邊斜率的絶斟 的B成分的絕對值,复,以及該任意像素的右邊的像素 的右邊斜率的絕對值)了水平方向增加或減少(該B成分 假如該任意像素且 單元2615計算以下。彩色成分計算 素的R成分的絕對值,豆千^八,5亥任意像素之上的像 分的上部斜率_對奸順少(該R成 成分的絕對值,其麵直方^m象权下的像素的r 斜率的絕對值)。方向〜加或減少(該R成分的下部 單元G成分,則第三彩色成分計算 素的G成分:絕對值,壬意像素之上的像 分的上部斜率的絕對奸以及^或減少(該G成 =二在垂直方向増加或減少(該。成分的下 假如該任意像素具有Β成分 其在垂直方向增加或減少(該B成分的下部 第一彩色成分計算單元2611包括繁一 古治 2616、第二功能方塊2617、及第—減法器丄。第二功能 方塊鳩包括第二減法器勘,用以求得知盥〜之間 的彩色成分差異’以及第-方塊2623 ’用以求得第二減法 27 1243584 9926pifl
器2622的輸出資料的絕對值。第二功能方塊2617包括第 二減法為2624 ’用以求付與之間的彩色成分差異, 以及第二方塊2625,用以求得第三減法器2624的輪出資 料的絕對值。第一減法器5001求得第一方塊2623的輪出 資料與第二方塊2625的輸出資料的差異,以及輸出該差異 (XI)。 /、 第二彩色成分計算單元2613由與第一彩色成分計算 單元2611相同結構的電路所形成,以及求得及22與及〜之 間的彩色成分差異的絕對值,及及22與及20之間的彩色成分 差異的絕對值,以及輸出此兩個絕對值之間的差異(X2)。 第三彩色成分計算單元2615由與第一彩色成分計算 單元2611相同結構的電路所形成,以及求得及22與及心之 間的彩色成分差異的絕對值,及7?22與及02之間的彩色成分 差異的絕對值,以及輸出此兩個絕對值之間的差異(x3)。 比較測定器263包括第一比較測定器2631、第二比 較測定器2633、及第三比較測定器2635。 第一比較測定器2631選擇第一方向係數為第一狀態 值,假如第一彩色成分計算單元2611的輸出(χΐ)大於第一 啟始值的負值以及小於第一啟始值的正值;選擇第一方向 係數為第二狀態值,假如第一彩色成分計算單元2611的輸 出(xl)小於第一啟始值的負值;以及選擇第一方向係數為 第三狀態值,假如第一彩色成分計算單元2611的輸出(xl) 大於第一啟始值的正值。然後,第一比較測定器2631輸出 該第一方向係數(%)。 第二比較測定器2633選擇第二方向係數為第一狀態
··
28
1243584 BfT
9926pifl VM 值,假如第二彩色成分計算單元2613的輸出(χ2)大於第二 啟始值的負值以及小於第二啟始值的正值;選擇第二方向 係數為第二狀態值,假如第二彩色成分計算單元2613的輸 出(x2)/^於第二啟始值的負值;以及選擇第二方向係數為 第三,態值,假如第二彩色成分計算單元2613的輸出(χ2) 大於第二啟始值的正值。然後,第二比較測定器%%輸出 該第二方向係數(%)。 第較測定器2635選擇第三方向係數為第一狀態 值’假如第二彩色成分計算單元2615的輸出(Χ3)大於第三 啟始值的負值以及小於第三啟始值的正值;選擇第三方向 係數為第二狀態值,假如第三彩色成分計算單元2615的輸 出(x3)小於第三啟始值的負值;以及選擇第三方向係數為 第三狀態值’假如第三彩色成分計算單元2615的輸出(χ3) 大於第三啟始值的正值。然後,第三比較測定器2635輸出 該第三方向係數(ctv)。 在一個實施例中,第一啟始值至第三啟始值為大於4 且小於20的整數,第一狀態值為1/2,第二狀態值為i, 以及第三狀態值為〇。 第5圖是第2圖的適應内插器27的電路圖。請參照 第5圖,適應内插器27包括G成分内插器27卜R成分内 插器275、及B成分内插器277。 G成分内插器271包括低通濾波(Low Pass Filter,簡 稱LPF)成分計算器272、高通濾波(High Pass Filter,簡稱 HPF)成分計算器273、及第一加法器274。 LPF成分計算器272接收來自延遲模組25的輸出信 29 1243584 9926pifl i .¾¾ I… 哭數成分’執行計算’依據方向係數值選擇 的輪出信號選料算結果,以及輸出該計算結果 ^PF成分計异器273接收來自延遲模組25的輸出户 複數個R成分或B成分’執行計算,依據方向ί ίΐ^Γ/。26的如錢轉計算絲,収輸出該計算狄抑第—加法器274包括—加法器,用以對LPF成分朴 H 27>1的輸出信號’及HPF成分計算器273的輸出_ 唬(G^/)執行〇R運算。^分内㈣275’假如要求的是G成分為已知的像 素(U)的一回應於第二方向係數⑹,選擇RKJ+1) + ~~川)+ 2Gij - G.(j_2) - G,一 2 ~~~τ
R
Kj-\)
2 Gu + G 及 2 (R〇),以 中的一個,以及輸出該選擇結果 及假如要求的是B成分為已知的像素π 則求在#素的對角I的四個像素的算術平 成/刀’ / 上1^0-1) ^(/-1)(7>1) +^(/+1)(7-1) +^(/·Μ)(/+η (R〇) ’以及輸出該結果 素(i,j)的B $分二回應於第三方向係數(^), ’ 万“,」、+ 召" 1、 2(?〜(7 心+1) /(7+2) 1内插器2J7:,要求的是G成分為已知的像 選擇
30 2 1243584 9926pifl
G + G
中的一個 (馬),以 以及輪出該選擇結果 則炎^榇1要求的是R成分為已知的像辛(i Π的B杰八 則求料數分 (B〇) 以及輸出該結果 請灸昭第第66圖円是,5圖的LPF成分計算器272的電路圖。 元⑹1、至6=tPF成分計算器272包括第—邏輯方塊單 、集合)、第二邏輯方塊單元(617至621的集 θ )、及第一選擇器630。 第一邏輯方塊單元611至616包括複數個邏輯方塊 611至616’分別用以對^與知、知與知、知與〜、 G2;與G32、G2/與g;2、以及與G2/執行OR運算,以 及將每一 OR結果除以2。 第一邏輯方塊單兀617至621包括複數個邏輯方塊 617至621,各自選擇第一邏輯方塊單元611至616的輸出 信號之中的兩個,以及將該選擇的輸出除以2。 第一選擇器630,回應於方向係數值選擇器26的輸 出 k 號(%、%、及 αν),選擇 G;2、G27、及 ,第一 ,輯方塊單元611至616的細㈣,以及第二邏輯方塊 單元617至621的輸出信號,之中的一個,以及輸出該選 擇結果(Gw)。 第7圖疋第5圖的HPF成分計算器273的電路圖。 31 94
941243584 FT 9926pifl 成刀叶鼻器273包括第三邏輯方 元712至715、第四邏輯方抬^ 、铒方塊早 ^ ^ 7?? ^ iif. 方鬼早70 716至72卜第五邏輯方 塊早兀722至726、及第二選擇m ^輯方 第三邏輯方塊單元712 5 715 4权…虹/m 712至715,用以將及22匕括複數個邏輯方塊 異除以2,將;^與及之門H馬2與〜之間)的差 2,將…之間(或=;二之=異除以 及將=:(.或一之間二二Ϊ,以 爪至72广用以由第早jy二6 ^ 121包括複數個邏輯方塊 數個輸出信號之中選===;715輪出的複 π耗η重管 個不同的輸出信號,對所選擇的 U^utOR運异,以及將該⑽結果除以2。 第五邏輯方塊單元722 i 726包括複數個邏輯方塊 722至726二用以由第四邏輯方塊單元?16至π輸出的複 數個輸出職之巾選擇兩個不同的輸出錢,對所選擇的 信號執行OR運算,以及將該〇11結果除以2。 第二選擇器730,回應於方向係數值選擇器26的輸 出#號(〜、%、及〇:v),選擇邏輯方塊712至邏輯方塊726 的輸出信號之中的一個,以及輸出所選擇的信號(^时)。 第8圖是依照本發明的較佳實施例的用以處理影像 感應器的輸出資料的方法的流程圖。請參照第8圖,依照 本發明的用以處理影像感應器的輸出資料的方法包括步驟 810 至 870。 在此用以處理影像感應器的輸出資料的方法中,其中 該影像感應器將輸入景象轉換成電子信號,在步驟810 32 1243584 向一 i 、
中將。亥衫像感應器的輪出資料儲存起來。 4·,830中’選擇至少三個方向係數值,用以決定 要求ϋί素的彩色成分的強度,藉域㈣存的影像感應 器的輸出資料與目前的影像感應ϋ的輸出資料。 在步驟870中’藉由使用在步驟83〇中選擇的複數個 方向係數以及影像感應H的輸出資料,執行内插,藉以求 付具有G成分的像素的R及Β成分,具有r成分的像素 的G及B成分’以及具0成分的像素的mr成分。 在此處,該些方向係數包括第一方向係數,用以指示 該像素的邊緣具有那個成分,在水平成分、垂直成分及 對角線成分之中’第二方向係數,用以指示水平邊緣成分 的角度,其具有預定寬度,自該水平線起,以及包括上部 成分j下部成分、以及上部及下部成分兩者,自該水平線 起以及第二方向係數,用以指示垂直邊緣成分的角度, 其具有預定寬度,自該垂直線起,以及包括左邊成分、右 邊成分以及左邊及右邊成分兩者,自該垂直線起。 最好,在步驟810中,將影像感應器的輸出資料分割 成複數個預定單位,以及用以儲存一個單位的線記憶體^ 少儲存四個單位的分割資料,於其中該預定單位為'B 陣列結構中的一行。 第9圖是第8圖的用以選擇方向係數值的步驟83〇 的詳細流程圖。請參照第9圖,用以選擇三個方向係數值 的步驟830包括步驟831至851。 在步驟831中,其判斷對於要求的彩色成分的任意像 素是否已具有G成分。 “ 33 1243584 9i 9926pifl
在步驟833及835巾,假如該任 分,貝選擇第二方向係數值及第三方向係數值有G成 、在乂驟37巾,假如該任意像素的彩色成分不是G 苐啟始值⑹,自该任意像素起在水 的G成分的絕對值(以下將之稱為G成分的水;斜=工 ΓΪΖ),以及自該任意像素起在垂直方向增加或減ί的 Lt)值(以下將之稱為G成分的垂直斜率成分的 在步驟839及841巾,假如該G成分的水平斜率成 分的絕對值與該G成分㈣直斜率成分的絕對值之間的差 異的絕對值(叫)小於第-啟始值(Τι),則將第__方向係數 (〜)設定為第-狀態值(i /2),以及選擇第二方向係數⑹的 值0 在步驟843中,判斷該G成分的水平斜率成分的絕 對值與該G成分的垂直斜率成分的絕對值之間的差異 是否小於第一啟始值(T〇的負值(一τ,)。 在步驟845及847中,假如該G成分的水平斜率成 分的絕對值與該G成分的垂直斜率成分的絕對值之間的差 異(△ G)小於第一啟始值(T i)的負值(__T i),則將第一方向係 數(心)設定為第二狀態值(1),以及選擇第二方向係數(%) 的值。 在步驟849中,假如該G成分的水平斜率成分的絕 對值與該G成分的垂直斜率成分的絕對值之間的差異(AG) 大於第一啟始值(T〇的正值,則將第一方向係數(%)設定為 34 1243584 9926pifl I— fci 第三狀態值(…。 1 ϋ (m 8- ^nt * - ^ ^ (^ ^ ^ ^ ^ # f第二狀值(〇),則選擇第三方向係數(《V)。 直钭f ^刀的水平斜率成分的絕對值與該G成分的垂 I斜J成分的絕對值之間的差異cG) 2 為,其中待求的像素⑽ 為^ μ及i及j為整數。 又77 擇第二第是第9 s的當該像素已具有G成分時用以選 用以:埋:係數值的步驟833的流程圖。請參照第10圖, 8339=第二方向係數值的步驟833包括步驟8331至 值(|Δ(^驟随中,其判斷下面兩者之間的差異的絕對 素H小於第二啟始值⑹,該任意像素的左邊的像 在广成/刀的絕對值,其在水平方向增加或減少(以下稱 右的左邊斜率齡賴對值),錢齡意像素的 右邊的,素的G成分的絕對值,其在水平方向增加或減少 (以下%為G成分的右邊斜率成分的絕對值)。 在步驟幻33中,假如該G成分的左邊斜率 對值與該G成分的右邊斜率成分的絕對值之間的差显的絕 值3又疋為第一狀態值(l/2) 〇 在步驟8335中,其判斷該G成分的左邊斜率的 絕對值與該G成分的右邊斜率成分的絕對值之間的差異 (△Q)是否小於第二啟始值(Γ2)的負值(一^)。 Β 、 在步驟8337中,假如該G成分的左邊斜率成分的絕 35 丨1 i. ‘ ..水 1243584 9926pifl 對值與该G成分的右邊斜率成分的絕對值之間的差显(△〇 小於第二啟始值⑹的負值(,,則將第二方向係數^ 的值設定為第二狀態值(1)。 ) 在步驟8339中,假如該G成分的左邊斜率成分 對值與該G成分的右邊斜率成分的絕對值之間的差 大於第二啟始值⑹,則將第二方向係數(⑹的值蚊力) 三狀態值(0)。 ^ 該〇成分的左邊斜率成分的絕對值與該G成分的右 邊斜率成分的絕對值之間的差異(△&)為 丨%—GVwl -1%- 其中待求的像素為 %,以及i及j為整數。 风刀為 ㈣第9 _當該像素已具成分時用以選 步驟835的流程圖。請參照第u圖, 8359。 一向係數值的步驟835包括步驟8351至步驟 8351中,其判斷下面兩者之間的差異的絕對 t 帛三啟雜(?3),齡練权上的像辛 A G成八沾刀、邑對值’其在垂直方向增加或減少(以下稱 為G成77的下部斜率成分的絕對值)。 在步驟8353中,假如該^成分 ==分的下部斜率成分的絕=== 狀ί-:叫則•方向係數(= 36
丨I 1243584 9926pifl 在步驟8355中,其判斷該G成分的上部斜率成分的 絕對值與該G成分的下部斜率成分的絕對值之間的差異 (△Gv)是否小於第三啟始值⑺)的負值(一j3)。 在步驟8357中,假如該(3成分的上部斜率成分的絕 對值與該G成分的下部斜率成分的絕對值之間的差異(Δ(^) 小於第三啟始值(Κ)的負值(―〇,則將第三方向係數^的 值設定為第二狀態值(1)。 v 在步驟8359中,假如該G成分的上部斜率成分的絕 對值與該G成分的下部斜率成分的絕對值之間的差異(ar) 大於第二啟始值⑹’ |、ij將第三方向係數⑹的值設定為第 三狀態值(0)。 该G成分的上部斜率成分的絕對值與該G成分的下 部斜率成分的絕對值之間的差異(AGv)為 -IC^-G#2力·|,其中待求的像素(丨①的G成分為 (¾,以及i及j為整數。 第I2圖是第9圖的用以當對於待求彩色成分的該像 素的彩色成分不是G成分時卿第二方向餘值的步驟 841至847的流程圖。 口月參照第12圖’用以選擇第二方向係數值的步驟841 至847包括步驟8411至8421。 在步驟8411中’其判斷該任意像素的彩色成分是否 具有R成分。 齡τ彡步:8412中’當該任意像素具有R成分時,其判 ^下面兩者之間的差異的絕對值_献否小於第二啟始 (〇 ,雜意像素的左邊的像素的R成分的絕對值,其 37 1243584 9926pifl
在水平方向增加或減少(以下稱為R成 的絕對值)’以及該任意像素的右邊的像素的r = S 其在水平方向增加錢少(以下_ 成分的絕對值)。 7石遠斜羊 在步驟8413中,假如該R成分的左邊斜率成 對值與該R成分的右邊斜率成分的絕的 對值(I△灿小於第二啟始值⑹二方=差妹的= 值設定為第-狀態值(1/2)。 门係數⑹的 々在步驟8414中,其判斷該R成分的左邊斜率成分的 與該 '成分的右邊斜率成分的絕對值之間的差= (/0疋否小於第一啟始值(ο的負值(一jy。 在步驟8415中,假如該R成分的左邊斜率成分 對值與触成分的右祕率成分的絕對值之_差異(編) 小於第二啟始值(7y的負值(_巧),則 的值設定為第二狀態值⑴。 卩㈣㈨) 在步驟8416中,假如該R成分的左邊斜率成分的絕 對值與該右雜料分的_狀間的差異⑽) 大於第二啟始值⑺)’則將第二方向係數⑹的值設 三狀態值(0)。 在步驟8417中,當該任意像素不具有R成分時,盆 判斷下面兩者之間的差異的絕對值(丨△万a|)是否小於第二启支 始值(7¾,該任意像素的左邊的像素的B成分的絕對值, f在水平方向增加或減少(以下稱為B成分的左邊斜率成 分的絕對值),以及該任意像素的右邊的像素的B成分的絕 對值,其在水平方向增加錢少(以τ稱為B成分的右邊斜 38 1243584 9926pifl 率成分的絕對值)。 在步驟8418中,假如該B成分的左邊斜率成分的絕 對值與該B成分的右邊斜率成分的絕對值之間的差異的絕 對值(|Δβ⑴小於第二啟始值(7¾,則將第二方向係數(%)的 值設定為第一狀態值(1/2)。 在步驟8419中,其判斷該Β成分的左邊斜率成分的 絕對值與該Β成分的右邊斜率成分的絕對值之間的差異 (△私)是否小於第二啟始值⑺)的負值(一72)。 ” 在步驟8420中,假如該Β成分的左邊斜率成分的絕 對值與該Β成分的右邊斜率成分的絕對值之間的差異(△万 小於第二啟始值(7^)的負值(一乃),則將第二方向係數) 的值設定為第二狀態值(1)。 h 在步驟8421中 斜插盘m了 亥成为的左邊斜率成分的絕 對值,、,亥B成为的右邊斜率成分的絕對值之間的差里 始值⑹,則將第二方向係輪^ 邊斜率成τ二 邊斜=====成分的右 第13圖是第9圖的用以當該任意像素具有的彩色成 39 1243584 9926pifl
:不:參G4=擇用第三方向係數值的步驟851的流程 包括步驟選擇第三方向係數值的步驟⑸ 為ΙΐΪ/驟8511巾,其判斷該任意像素的彩色成分是否 則其二 =門=,的彩色成⑽成分, 三啟始值⑹,#任4,異的絕對值(_)是否小於第 其在垂直(4二== 成:的絕對值, 像素的‘成2= 率的絕對值)。^或減少(以下稱之為R成分的下部斜 在ッ驟8513中’叙如該R成分的上 ==的下部斜率的絕對值之間的差異= (=二=)值⑹’則將第三方向係數⑹的值設 在步驟8514中,其判斷該R成分的上部斜率的絕對 值與該R成分的下部斜率的絕對值之間的差昱(Δπ否 小於第三啟始值(Γ3)的負值(一Γ3)。 ’、 ν 在步驟8515中,假如該r成分的上部斜率的絕對值 與该R成分的下部斜率的絕對值之間的差異(△Αν)小於第 三啟始值⑸的負值(-Ο,則將第三方向係數(<)的值設定 為第二狀態值(1)。 在步驟8516中,假如該R成分的上部斜率的絕對值 與該R成分的下部斜率的絕對值之間的差異(△及Ο大於第 1243584 9926pifl l·咚 L—
Γ二 I i(t)始值⑺),則將第三方向係數(αν)的值設定為第三狀態 在步驟8517中,假如該像素的彩色成分 分’則其韻下面兩者之間的差異 於第三啟始值(r3),該任音偾去々L十值(1△屯丨)疋否小 斜棺盆,千U 素之上的像素的b成分的絕 =的====任意像素之下的像素 斜率的絕H 減少(以下稱之為B成分的下部 在步驟8518中’假如該B成分的上部斜率的絕對值 ”該B成分的下料率的絕對值之 (陶小於第三啟始值⑹,則將第三方向係數(《)Γ= 定為第-狀態值(1/2)。 双、㈣值-又 在步驟8519中’其判斷該B成分的上部斜率的絕對 值與該B成分的下料率的絕對值之_差 小於第三啟始值CT3)的負值(_Γ3)。 Μ ▲在步驟8520中、,假如該B成分的上部斜率的絕對值 與戎B成分的下部斜率的絕對值之間的差異(小 三啟始值(Γ3)的負值(-Γ3)’則將第三方向係數(%)的值設定 為第二狀態值(1)。 在步驟8521中,假如該Β成分的上部斜率的絕對值 與该Β成分的下部斜率的絕對值之間的差異(△万γ)大於第 二啟始值(Γ3) ’麟第二S向係數(心)的值設定為第欠態 值(0) 〇 “ 該R成分的上部斜率成分的絕對值與該R成分的下 佟 1243584 9926pifl ί 5 H分的絕對值之間的差異(△九)為 ^ i ί j ,^ R ^ 部斜该分的上部斜率成分的絕對值與該6成分的下 3 =率,分的絕對值之間的差異(Δ5ν)為 以及=』’其中待求的像働的β成分為〜 小於=整::啟始值(Γι)至第三啟始值⑹為大於4且 龄出4f,_步驟包括—步驟為用輯算影像感應器的 料之二摟D及針對所選擇的方向係數值,在所計算的資 擇對應於所選擇的方向係數值㈣料項目,當作 u 繪不),一步驟為用以計算影像感應器的輸出, 對岸擇的方向係數值,在所計算的請之中選擇 i,擇的方向係數值的資料項目’當作g成分(未 ==及—步驟為㈣計算影像缝器_出,以及針 ΐϊϊί的方向係數值,在所計算的資料之中選擇對應於 所&擇的方向係數值的資料項目’當作Β成分(未緣示)。 ,1、在用以處理影像感應器的輸出資料的方法中,更包括 =二個或多個狀態值,以及該些狀態值可以用來指示且 同斜率的對角線成分的邊緣,具有有不同斜率的i 斜率緣,以及具有有不同斜率的垂直成分的邊緣的 現在要解釋依照本發明的用以處理影像感應器 出資料㈣置及綠賴·礎。 甸 42 第1圖的像素(2,2)的G值與R值之間的差異,可以 藉由使用鄰近像素(2,2)的四個像素(2,ι)、(2,3)、(1,2)、及 (3,2)的G值與R值來求得。亦即,像素(2,1)的g值與R 值之間的差異被乘上預定的權重值(α)。類似的,其餘的像 素(2,3)、(1,2)、及(3,2)的G值與R值之間的差異分別被乘 上預定的權重值Θ、y、及(5。然後,假如四個計算結果被 相加(權重總和),則該結果為像素(2,2)的G值與R值之間 的差異。亦即,像素(2,2)的G值與R值之間的差異由下面 的等式1求付· G22-i?22=«(C?27^2/)+AG25^23)+7(G72-i?72)+^(Gi2^32 )…··⑴ 在此處,〇 等式1可以表示下面的等式2,相關於像素(2,2)的影 像的邊緣成分的方向: ^22^22=«^[«Α(^27-^27)+(1-αΛ)(σ25-^25)] +(1 ~ad) [ad(G12-R12)+( 1 -av)(G32-R 32)] ••…(2) 在此處’〜表示疋否存在水平方向邊緣成分或垂直 方向邊緣成分,%表示水平方向邊緣的角度,以及〜表示 垂直方向邊緣成分的角度。 現在將解釋求付方向係數(配合%、%、及…)的方法, 配合求得像素(2,2)的G值的實例。 首先,表示水平方向邊緣的角度或垂直方向邊緣成分 的角度的〜藉由下面的方程式3來決定。 if {-T1<\G23'G2i\-\G12-G32\<T1)^ then α/=1/2 else if (\G23-G2ih\G12-G32\<-T1)y then a^l 43 1243584 9926pifl
正赫 94 二 年月'
else a^O •…·(3) 請多照方程式3,假如鄰近像素(2,2)的像素(2,3)與 (2,1)的G成分在水平方向之間差異的絕對值|G^_G鱼 鄰近像素(2,2)的像素(1,2)與(3,2)的G成分在垂直方向之間 差異的絕對值|g72·%,之間縣異的㈣值小於第一啟 始值則0^1/2。假如鄰近像素(2,2)的像素(2,3)與(2,1) 的G成分在水平方向之間差異的絕對值,與鄰近 像素(2,2)的像素(1,2)與(3,2)的G成分在垂直方向之間差異 的絕對值|C^Gy,之間的絲的絕對值小於第—啟始值 (D的負值(―Γ7),則α尸卜否則αρ〇。 w表不自目前的像素起的水平方向邊緣成分的角度的 Α藉由下面的方程式4來決定。 Ζ/("Γ2<Ι^22^^ΙΗ^2^2,|<Γ2)5 then ah=l/2 else ^(l^22^2〇h|^22^2,|<^72)? then ah=l else au=0 ^ …··⑶ 請參照方程式4,假如鄰近像素(2,2)的像素(2,2)與 (2,0)的R成分在水平方向之間差異的絕對值n|,與鄰 近像素(2,2)的像素(2,2)與⑽的R成分在垂直方向之間差 異的絕對_22_‘| ’之間的差異的絕對值小於第 二啟始值 (心)’則%=1/2。假如鄰近像素(2,2)的像素(2,2)與(2,〇)的r 成分在水付向之異的絕·與鄰近像素 (2,2)的像素(2,2)與(2,4)的R成分在垂直方向之間差異的絕 對值|知如| ’之間的差異的絕對值小於第二啟始值⑸的 負值(-r2)’m ’以及在其他的情形時,㈣。 表示垂直方向邊緣成分的角度的〜藉由下面的方程 1243584 9926pifl -
R
Pi 式5來決定: if{-T3<\R22'R02\~\R22-R42\<T3\ then a =1/2 如,/队為2HH|<-tu else av=0 明參照方耘式5,假如鄰近像素 方向之間差異的絕對舰二與鄰 異之間的差異的絕對值小於第= 假如鄰近像素(2,2)的像素似)與⑽的r 成刀、iff方向之異的簡_22%,與鄰近像素 (2,2)的像素(2,2)與(4,2)的R成分在垂直方向之間差里的絕 對值1知如|,之間的差異的絕對值小於第三啟始值⑺)的 負值(一〇 ’則av=q,否則,αρ〇。 在此處’ Γ7、:Γ2、及為大於4且小於Μ的整數。 假設該些係數的值全部為1/2(α^=αν=ι/2),藉以簡 的等式6 R1} R _R22+K —穴 22 + ^Λ7 化解釋’ _近像素(2,2)的像素的R成分可以表示成下面
R 12 2 及 2 …···(6)
.....一 qV久寸 結果,求1|像言(2巧G分的值如下面 σ22=^LtSLtg^i ^+^~r2o _ r24 - R R 使用此假設(α尸,以及等式6及等式2的 •⑺ 45 4 1243584 9926pifl f 94. /:i ί :'! ί 像素=====—任意的 輸出資賴觸感應器的 類的表袼,其可^A、種邊緣。第15圖是將邊緣歸 個方值的三 影像//liH出4 依照本發明的處理 成分ia、h 可以處理所有的對角線邊緣 成刀(b、c、|d),水平邊緣成分(f h j、bn q、及r),以及垂直邊緣成分(、k ^ 十特別是’四個邊緣成分(0、p、q、*r)可以p應用U 以處理水平成分及垂直成分的兩個方法。 因為當要求的是具有G值的像素的R值或β
在一個方向使用,所以計算可以簡化。用來求R 值的方法可以以相同方式絲作為求3值的方法。因此, 在此只有R值為要求的值。同時、,其在求g平面值中 使用,在此處並未使用,以及只冑,其為水平邊緣成 被考慮。 、取η 第16圖的表格顯示像素(2,3)的R成分相關於方向係 數α/ι ’以及滿足R成分的邊緣成分的分類。 使用内插方法,可以求出具有R值的像素的Β值, 或具有Β值的像素的R值。然而,因為任意像素的r值及 B值不太影響圖像的品質,所以以近似值來求出該些數值 不會造成問題。 一 例如,具有R值的像素(2,2)的B值可以藉由計算鄰 46 1243584
9926pif 丨 K 丄 月 ΪΓΓί!((1,Τ(1,3^ 出。以相同的方法,可以求出具有Β值的任意: 資料據,本發明的處理影像感應器的輸出 可以得到高品質的圖像,而不管影傻 ^:益的-個任意像素所感應的不同彩色的強度之間的差 =否為細或残㈣。同時,—娜像的所有邊緣, =括水平邊緣,垂直邊緣,對角線邊緣,角轉緣,以及 厚的或薄的邊緣,可以被適應地處理。 雖然本發明已以較佳實施例揭露如上,然其 用以蚊本發明,任何_此㈣者,林麟本發 精神和範_,當可作些許之更動與潤飾,因此本發 保護範圍當視後附之申請專利範圍所界定者為準。 【圖式簡單說明】 第1圖是Bayer陣列的圖式。 第2圖是依照本發明的較佳實施例的用以處理影 感應器的輸出資料的裝置的方塊圖。 ~ 第3圖是第2圖的延遲模組的電路圖。 第4圖是第2圖的方向係數值選擇器的電路圖。 第5圖是第2圖的適應内插器的電路圖。 第6圖是第5圖的低通濾波成分計算器的電路圖。 第7圖是第5圖的高通濾、波成分計算器的電路圖。 第8圖是依照本發明的較佳實施例的用以處理影像 感應器的輸出資料的方法的流程圖。 〜 1243584 9926pifl
、擇方向係數值的步 流程圖。 第10圖是第9圖的當兮 擇第二方向係數值的步驟的已具有G成分時用以選 第11圖是第9圖的春^彳==。 擇第三方向舰值的步驟;^程圖已具有G成分時用以選 第12圖是第9 素的彩色成分4二 於待求彩色成分的該像 流程圖。 &時選㈣二方向係數值的步驟的 分不是第第選;^ 第14圖鱗w依照二:的= 的二圖。 輸出資料的方法所處理的19種邊緣的處理衫像感應器的 第I5圖是將邊緣歸類的表格,其可 :意像素⑽的G值的三個方向係數㈨、二及二= 【主要元件符號說明】 20線記憶模組 21第一線記憶體 22第^一線§己憶體 23第三線記憶體 24第四線記憶體 48 1243584 9926pifl
25延遲模組 251第一延遲方塊 252第二延遲方塊 253第三延遲方塊 254第四延遲方塊 255第五延遲方塊 26方向係數值選擇器 261計算單元 2611第一彩色成分計算單元 2613第二彩色成分計算單元 2615第三彩色成分計算單元 2616第一功能方塊 2617第二功能方塊 2622第二減法器 2623第一方塊 2624第三減法器 2625第二方塊 5001第一減法器 263比較測定器 2631第一比較測定器 2633第二比較測定器 2635第三比較測定器 27適應内插器 271 G成分内插器 272低通濾波(Low Pass Filter,簡稱LPF)成分計算器 49 1243584 關羅一
"26_匚i」L」!J 273高通濾波(High Pass Filter,簡稱HPF)成分計算 器 274第一加法器274 275 R成分内插器 277 B成分内插器 611至616邏輯方塊 617至621邏輯方塊 630第一選擇器 712至715第三邏輯方塊單元 716至721第四邏輯方塊單元 722至726第五邏輯方塊單元 730第二選擇器

Claims (1)

  1. 扶 1243584 9926pifl Η m 十、申請專利範圍: 1.一種用以處理一影像感應器之輸出資料之裝置,包 括·· 一線§己憶核組’用以接收及儲存一早一影像感應哭之 輸出資料,具有關於在每一像素感應之彩色信號之資訊· 一延遲模組,用以接收該影像感應器之輪出資料及令亥 線記憶模組之輸出資料,使用一時脈信號將所接收之輪^ 資料延遲一預定時間,然後輸出所接收之輸出資料;· 一方向係數值選擇器,用以接收該延遲模組之輪出次 料,選擇複數個方向係數值,用以定義所要求得的像素二 紅(Red,簡稱R)、綠(Green,簡稱G)、及藍(Blue,簡年i B)成分的邊緣成分,以及輸出所選擇的數值;以及"冉 一適應内插器,用以接收該延遲模組之輸出資料, 及求得具有G成分的像素的R&B成分,具有尺成 像素的G及B成分,以及具有B成分的像素的G及汉成 分,藉錢用所接收之該延賴組之輸出資料來執 插,回應於該方向係數值選擇器之輸出資料。 2·如申請專利範圍第丨項所述之裝置,其 模組包括: 1己憶 -第-線$憶體,用以儲存該影像感應器之輪出資 一第二線記憶體’用以儲存該第—線記憶體之輪出資 第一線。己憶體,用以儲存該第二線記憶體之輪出資 51 1243584 9926pifl 一第四線記憶體,用以儲存第三線記憶體之輸出資 料。 、 3·如申請專利範圍第〗項所述之裝置,其中該延遲模 組包括複數個延遲方塊,其中每一個具有複數個串接的移 位暫存器以及延遲該影像感應器之輸出資料。 4·如申請專利範圍第3項所述之裝置,其中對於每一 延遲方塊,串接的移位暫存器的數目為四個。 5·如申請專利範圍第丨項所述之裝置,其中該方向係 數值選擇器包括: 一計算單元,由複數個彩色成分計算單元形成,個別 用以判斷在水平方向及/或垂直方向及/或對角線方向之邊 緣成分是否存在於一任意像素之每一 R、G、及B成分, 對於要求得的彩色成分,以及計算該存在的邊緣成分的角 度;以及 一比較測定器,用以藉由比較該計算單元之輸出資料 與一預定數目的啟始值(threshold)來決定該些複數個方向 係數值。 ^ =申請專利範圍帛5項所述之裝置,其中根據待求 的%色成分的像素具有的是那—種彩色成分 彩色成分計算單元包括: — 第形色成分计异單元,假如該像素具有該R # 分或該B成分,用以求得該(^成分之邊緣成分,以 該像素具有該G成分,不執行動作; 又〇 一第二彩色成分計算單元,假如該像素呈 分,用以求得該R成分之水平邊緣成分,假如該像素具^ 52 A243584 "26pjfi
    ‘ϋ: g成分之水平邊緣成分,以及假如該像 ' a ^分’求得該B成分之水平邊緣成分 ;以及 直、軎射成料算單元得該R成分之垂 色成專:範圍第6項所述之裂置,其中該第-彩 算以下兩者之間之差異,㈣要求得彩 絶對m壬意f素在該水平方向增加或減少之g成分之 兮士古二成分之水平斜率之絕對值),以及由該像素在 〜垂直方向增加或減少之G成分 直斜率之絕對值)。 成刀之絕對值㈣G成分之垂 像去/·η明專她圍第6項所述之裝置,其中假設任意 成分二單:1 包及括j為整數)之〇成分為g",_^ 之間之差 一第一功能方塊,用以求得Gri.+仏與 異之絕對值(水平成分); j -第-減法器’用以求得該第—功能方塊之輸出信號 與該第二功能方塊之輸出信號之間之差異。 9.如申請專利範圍第6項所述之裝置,其中該第二彩 色成分計算單元計算該R成分之左邊斜率之絕對值與右邊 ^率之:絕對值之間之差異,假如該任意像素具有該R成 分,計算該G成分之左邊斜率之絕對值與右邊斜率之絕對 53 1243584 9926pifl βί」k 车 1 一'11 一 一· 換 r-] al 元計算車或計算單 部斜率之絕對值之t二成/7之上部斜率之絕對值與下 分,計瞀]之差八,寧如該任意像素具有該R成 值之間G異,部ΐ率之絕對值與下部斜率之絕對 Β成分之上讀素具有該G成分,或計算該 里成^上部斜率之絕對值與下部斜率之絕對值之間之差 異,假如該任意像素具有該Β成分。*值之間之差 立禮如申請專利範圍第6項所述之裝置,其中假設任 二分^ϋ其^及j為_之R成分、G成分、及B成 括:‘、、、υ y、及乂·,則該第二彩色成分計算單元包 ㈣估一 It魏方塊’用財得&似·㈣之間之差異之 盘方,’付%與G_之間之差異之絕對值,或求得 /、及〇·岣之間之差異之絕對值; 絕對功能方塊’用以求得‘與々之間之差異之 命 ,侍之間之差異之絕對值,或求得丑 與方//之間之差異之絕對值;以及 ♦) _第一四第=咸=器’ ί以求得該第三功能方塊之輸出信號 ,、5亥苐四功旎方塊之輸出信號之間之差異,以及 該第三彩色成分計算單元包括·· 之_,第7能方ΐ ’用以求得々與“之間之差異 之絕對值,求得%與之間之差異之絕對值 及;/與万和2力之間之差異之絕對值; < 54 1243584 A-' i 9926pifl 一第六功能方塊’用以求得&與 絕對值’求得與%之間之差異之絕對值,或^異之 與^之間之差異之絕對值;以及 °-2)j 第二減法器,用以求得該第四功能方塊之 與該第六魏方塊之輸心號之間之差異。 4 一 11. 如申請專利範圍第5項所述之裝置,其 彩色成分計算單元之輸出大於一啟始值之負值以=該 啟始值之正值,該比較測定器選擇一任意方 ^ 一狀態值,假如該彩色成分計算單元之輸出小於itf 之負值,選擇該任意方向係數為-第二狀態值,以 該衫色成分計算單元之輸出大於該啟始值之正值 2 任意方向係數為一第三狀態值。 、擇该 12. 如申請專利範圍第u項所述之裝置,其 至第二啟始值為大於4且小於2〇之整數。 13. 如申請專利範圍第u項所述之裝置, 狀恶值為1/2,該第二狀態值為丨,以及該第三狀態 内插器it申請專利顧第1項所述U置,其切適應 - G成分内插器,用簡由執行内插來輸 分’依據該延遲模組及該方向係數值選擇器之輸出成 、- R成分内插H,用簡由執行嶋來輸出該^ =及依據該延遲獅及該方㈣數值轉器之輸出信號; - B成分内插器,用以藉由執行 分,依據該延遲模組及該方向係數值選擇器之輸出;^成 55 1243584 9926pifl 技A Ί'Ι . -y Λ 二:」 15. 如申請專利範圍第14 g 分内插器包括:_ 14項所奴裝置,其中該G成 一低通濾波成分計算器,用以接收 輸出信號中之複數個G成分,執杆ϋ自狀遲松、,且之 轨仃3十异,依據該方向係數 值選擇益之輸出域選擇結果,以 一高通渡波成分計算器,用以接收來自且之 輸出信號中之複數個R成分或B成八 遲杈、、且之 方向係數值珊n之輸出錢選擇^ 擇結果;以及 以及輸出该選 -加,器’用以對該低職、波成 及該高通舰成分計算器之輸出信號執行出域 16. 如申請專利範圍第15項所述 = 渡波成分計算ϋ包括: ϋ #中该低通 -第-邏輯方塊單元,包括複數 以對要求得的像素_ 與 =^刀別用 G啊)與G㈣』·、Gi㈣與G(i+l)j、G ▲州卜、G(,、 Hl·!) 與執行0R運算,以及將每一 〇r έ=ς = g,· 一第二邏輯方塊單元’包括複數個邏 乂 擇地對該些第-邏輯方塊單元之輸 ^各自選 OR運算,以及將該〇R結果除以2; ^之中的兩個執行 仲一擇器’用以依據該方向係數值選擇器之γ山 域,選擇、%+;;及G 裔之輪出 號 π.如申請專利範圍第15項所述之裳置,其中% 塊單元之輸出信號,以及該第二邏輯輯方 之中的一個’以及輸出該選擇結果。Α早兀之輪出信 通 56 9926pifl
    1243584 濾波成分計算器包括: 一第三邏輯方塊單元,包括複數個邏輯方 足)·與~+初之間之差異或汉>·與七之間之差里、; 將尺;/與化W之間之差異或A與士,之間之差里、' 2 將足)·與尺丫/+々之間之差異或及:/與及·〇·切之間之差里= 以及將A與死㈣之間之差異或~與万㈣之間之差^除以 -第四邏輯方塊單元,包括複數麵輯 擇地對該第三邏輯方塊單元之該些輪出信號執杆=$ 算,以及將該OR結果除以2 ; 迷 -第五邏輯方塊單元,包括複數個邏輯 擇地對該第四邏輯方塊單元之該些輪出信號執r = 算,以及將該OR結果除以2 ;以及 T 連 一第二選擇器,用以依據該方向係數值選 信號,選擇該第三至第五邏輯方塊之輸出信號之中°的一 ^固。 、丨8·如申請專利範圍第14項所述之裝置,其 求的是G成分為已知的像素(丨⑴的以成分,^又 r·成刀内插器回應於苐二方向係數,選擇 RiU-\) + Ri^\) , 2Gu - G. - Q 個 ,以及輸出該選擇結果,以及假如要求的是B成 分為已知的像素⑼的R成分,則求在像素(i,j)的對角線的 四個像素的算術平均數 J^Xy+i)、 ,以及輸出該 57 1243584 9926pifl 結果;以及 該B成分内插器,假如要求的是G成分為已 f 0£LB匕災焚第三方向係數,選擇 、 ’乂、 1 2 及㈣中的〜 個’以及輸出該選擇結果,以及 、假如要求的是R成分為已知的像素(i_ B H 58 1 角線的四個像素的算術平%數 2 ,以及輸出該結果。 19.-種用以處理—影像感應器m料 该影像感應器用以將-輸人景象轉換成-電子錄,f, 法包括下列步驟:儲存該影像感應^之輪出資料P。亥方 彩色成 由"^要求得的像素的 資料與目前的該影影=應器之輪出 ㈣在上面步驟中選擇的複數個方向係數以及 ’像感應裔的輪出資料,執及 分的像素的11及只占八,i古R #八稭以求侍具有G成 分,以及呈古ΰ成刀八有成刀的像素的G及β成 〃 Β成分的像素的G及R成分, 成八其千ϋ些方向係數包括一第一方向係數,用以在水平 刀、^直成分、及對角線成分之中 具有那個成分;一莖一方6減,用心哀像素的邊緣 3 ?、八平線起具有一預定寬度,並且包括上部成 下。丨成刀、以及自水平線起的該上部及下部成分兩者, 1243584 9926pifi 條 疋 替 年 B! 成起甘以及—第三方向係數’用以指示垂直邊緣 軎ίΓ直線起具有一預定寬度,並且包括左 分兩i。邊成刀、Μ及自該垂直線起的該左邊及右邊成 該影19項Γ之方法,其中在儲存 :二個預定單位’即複數個線記憶體,其個 位,以乃ί個早位’儲存該分割資料之中的至少四個單 Μ及該預定單位Mayer陣列結構中的一行。 三個ϋΛΐ專利範圍第19項所述之方法,其中在選擇 —方向係數值之步驟中,包括下列步驟: 該對於要求得彩色成分之—任意像素是否已具有 下面二 的彩^从該G Μ,則判斷 該任意像素起在2的絕對值疋否小於1—啟始值,自 (以下將之稱m方向增加或減少# g成分的絕對值 該任意像素w千成*的水平斜率成分的絕對值),以及自 (以下將之稱“直方向增加或減少的G成分的絕對值 假如d成分的垂直斜率成分的絕對值); 的垂直斜率"成八&分的水平斜率成分的絕對值與該G成分 啟始值,絕對值之間的差異的絕對值小於該第一 選擇該第二方:係;::係數設定為一第-狀態值,以及 59 1243584 9926pif|l I Ί);· ΐ替J 0^1'. 年 片 Bi G成分財平斜钱分㈣職频g =2率成分的絕對值之間的差異是否小於該第—啟始 沾卡G成分的水平斜钱分的絕紐錢G成分 =於該第-敗始值的 測二方丄=係數—第二狀態值-及選 3汝及G成分的水平斜率成分的絕對值斑該 八 的垂直斜率成分的絕對值之間的差 /、 刀 正值,則將該第一方向異〇於5亥第-啟始值的 m楚 數為一弟三狀態值;以及 ιίΓ目fr方㈣數被設定為該第—狀態值或該第 二狀t值,則接著選擇該第三方向係數的值。 弟 2 2.如中請專利範圍第2丨項所述之方法,豆中 ;=::=丨=值:該2分的垂直斜率成分的 的像素刚㈣ 23·如申請專利範圍第21項所述之方法,宜中 :^^如成分時用以依序選擇該第二方以 ㈣,包括下列倾: 之間的差異的絕對值是否小於-第-,始值’該任意像素的左邊的像素的G成分㈣對第: 曾力 =減少(以下稱為該G成分的左邊斜率成 右邊斜率成分的絕對值” 3 〃 ιχτ&為e G成分的 1243584 9926pifl '龙 r\ Bj I 的右成分#邊斜率成分的輯值與該g成分 啟妒值ΐ 對紅_差異的絕對料於該第二 σ判^將該第二方向係數的值設定為該第—狀態值; 的右邊H 社邊斜率成分峡雜_G成分 =ί: 對值之間的差異是否小於該第二啟始 的右成分的左邊料成分的絕職無g成分 負值=3的絕對值之間的差異小於該第二啟始值的 、、:μ弟一方向係數的值設定為該第二狀態值; 的六、G齡的左邊斜率齡的_健該G成分 的Γ值之間的差異大於該第二啟始值, 、第一方向係數的值設定為該第三狀態值; 上述步驟決定之該第二方向係數值,判斷下面兩 ^之間的差異的絕對值是否小於-第三啟始值,該任奇像 麵G成分魏雜,其在Μ料增加销 成分的上部斜核分的絕對值),以及該 :„之下的像素的G成分的絕對值,其在垂直方向增 口或減少(以下稱為該G成分的下料率成分的絕對值); 假如該G成分的上部斜率成分的闕值與該G成分 、邛斜率成分的絕對值之間的差異的絕對值小於該第三 啟始值,則賴第三方向係數的值設定為該第—狀態值; 判斷該G成分的上部斜率成分的絕對值與該G成分 =部斜率成分的_值之_差異衫小於 啟始 值的負值; 假如該G成分的上部斜率成分的絕對值與該g成分 正替換 . 94 7.- l年 月 1243584 9926pifl ^部斜率成分的絕對值之間的差異小於該第三啟 及,則將該第三方向係數的值設定為該第二狀態值;以 的如該G成分的上部斜率成分的_值與該G成分 率成分的絕對值之間的差異大於該第三啟始值, 、J將邊苐三方向係數的值設定為該第三狀態值。 24·如中請專利範圍帛23項所述之方^,其中 成=素的G成分為G(/ ’以及i及j為整數時=g 部斜率成分的 25·如申明專利範圍第21項所述之方法,JL中用& @ 亥第-方向係數設定為一第二狀態值 該!用= 係數的值的步驟包括下列步驟: 禪^弟一方向 判斷該任意像素的彩色成分是否具有R成分. 差異的像否素f具有!成分時,判斷下面兩者之間的 的像辛的沾於第一啟始值’該任意像素的左邊 的像素的R成分的絕對值,其在 透 稱為該左邊斜率成分的絕對二 〆=r成 的右邊斜率成分的絕對值對值與該r成分 啟始值,_第二方===, 62 換 1243584 9926pifi 的古、R成分的左邊㈣成分的絕對值料R点八 率成分的絕對值之間的差異是否小於該第1:: 的右值錢R成分 nr 第 的右邊w成/的=邊之=的大絕對值與該R成分 =異是=第!:= 下稱分的絕對值’其在水平方向增:或減: 減少(以的絕對值,其在水平方向增加或 假如^ Λ 斜率成分的絕對值); 的右邊斜率i分的^對值與該?成分 啟始:斷:將二第,方向係數 的右邊斜率^分^左邊斜率成分的絕對值與該Β成分 值的負值;77、、、’憤之間的差異是否小於該第二啟始 的右對值與該β成分 ^值’則將該第二方向係數的值設;為:第值: 63 橡 1243584 9926pifq ' #4, Y 假如該B成分的左邊斜率成分的絕對值與該B Γ丨ίίϊ率成分的絕對值之間的差異大於該第二啟始值, 、:以第二方向係數的值設定為該第三狀態值。 26·如申請專利範圍第25項所述之方法,其中去 = R成分為〜以及i及j為整數時’該:成分 ς邊斜率成分的絕對值與該R成分的 的左邊^率 分為心以及1及j為整數時,該B成分 判斷祕的步射,姑1r列步驟: 成分; 之間的差里的補色不成刀為成分’則判斷下面兩者 之上的推2的、、、邑對值疋否小於該第三啟始值,該任意傻音 (以下稱之分的輯值,其在垂直方向增加或減少 像素之下的的上部斜率_難),以及該任意 減少(以下稱之為:絕對值,其在垂直方向增加或 假如兮t 的下部斜率的絕對值); 部斜率部斜率的絕對值與該R成分的下 則將第:方⑽=的差異的絕對值小於該第三啟始值, Λ的值奴騎第—狀態值; 部斜率的絕對值之的絕對值與該以分的下 之間的差異是否小於該第三啟始值的負 64 If £ 1243584 9926pifl 值; 假如該R成分的上部斜率的絕對值與該尺成分的下 絕對值之間的差異小於該第三啟始值的負值,則 將该弟二方向係數的值設定為該第二狀態值; 假如該R成分的上部斜率的絕對值與該&成分的下 ^斜率的絕對值之間的差異大_第三啟始值,則將該第 二方向係數的值設定為該第三狀態值; 假如該像素的彩色成分不是&成分,則其判斷下面 :之間的差異的絕對值是否小於該第三啟始值,該任意 ϊί,之上的像素的Β成分的絕對值,其在垂直方向增加或 下稱之為該Β成分的上部斜率的絕對值),以及該 之下的像素的Β成分的絕對值,其在垂直方向增 ”、、广(,下稱之為該Β成分的下部斜率的絕對值); 鄉Β成分的上部斜率的絕對值與該Β成分的下 口==絕對值之_差異的絕對值小於該第三啟始值, 、1將^二方向係數的值設定為該第一狀態值; 部斜率Β 值; 之間的差異疋否小於該第三啟始值的負 邱斜Β ^分的上部斜率的絕對值與該Β成分的下 Ζ值之_差異小於該第三啟始值的負值,則 將5亥^錄的值設定為該第二狀態值;以及 邱Θ B成分的上部斜率的絕對值與該B成分的下 H的f對值之間的差異大於該第三啟始值,則將該第 二方向係數的值設定為該第三狀態值。 65 1243584 9926pifi R 夂 Η 卜如中睛專利範财27項所述之方法,該R成分的 ^斜率成分的絕靠與糾成分的τ料率成分的絕對 3 ^差異為K為··於化—々吻卜其中待求的像素⑽ 魅ίί為以及⑷為整數,以及該3成分的上部 的絕對值與該Β成分的下部斜率成分的絕對值之 的Β二3雜々為—方㈣1,其中待求的像素 的成刀為况y,以及i及j為整數。 妝铲二睛專乂範圍第21項所述之方法,其中該第-A,為1/2,該第二狀態值為!,以及該第三狀態值為〇。 第27=:,,圍第21項、第23項、第25項、^ ^7頁之中之任一項所述之方法’其中該第一啟始值至該 第二啟始值為大於4且小於2〇的整數。 人 31. 如申請專利範圍帛19項所述 行内插之步驟包括下列步驟·· 无,、中用以執 吕十异該影像感應器之輪出警料 向係數值,在所計算的資料之出二3 係數值的資料項目,當作R成分;、〜;所選擇的方向 計算該影像感應器之輪出,以及 數值,在所計算的資料之中擇的方向係 值的資料項目,當作應於所選擇的方向係數 計算該影像感應器之輪出,以及針 數值,在所計算的資料之中撰淫 、擇的方向係 值的資料項目,當作擇對應於所選擇的方向係數 32. 如申請專利範圍第21項所述之 一個或多個狀態值,以及該些狀態值用來指示 66 I243584 [W 正替 "26pifI
    a ^的對祕成分_緣,具有有不⑽率的水平成分的 以及具有有不同斜率_域分_緣的斜率的角 包括·33·一種用以處理一影像感應器之輸出資料之裝置, 記賴、LX接收及儲存—單—f彡像感應器之 輸出-貝料,具有關於在每一像素感應之彩色俨 ㈣;;延遲模組,⑽接收該影像感絲之輸出、料及該 次料組之輸出資料,使用—時脈信號將所接收之輸出 貝枓預定時間,然後輸出所接收之輸出資料; 粗、=向係數值選擇器’用以接收該延遲模組之輸出資 $’Λ 财向餘值,用以定義待求的像素的紅 二的R)、綠(Green ’簡稱G)、及藍(Blue,簡稱Β) 成刀的邊緣成分,以及輸出所選擇的數值;以及 及求;U内插器,用以接收該延遲模組之輸出資料,以 像辛^ « β成分的像素的RAB成分,具有R成分的 像素的G及B成分,η 曰> ^ 分,藉由使用有成分的像素的mm 许二Γ所接收之該延遲模組之輸出資料來執行内 插’回/f該方向趣值選擇ϋ之輸出資料 二中,:向係數值選擇器包括: 用以刹兀,由複數個彩色成分計算單元形成,個別 方向及/或垂直方向及/或對角線方向之邊 t 任意像素之每—R、G、及Β成分, 度;、以及、杉色成分,以及計算該存在的邊緣成分的角 67 1243584 9926pifl
    一比較測定器,用以藉由比較該計算單元之輸出資料 與一預定數目的啟始值來決定該些複數個方向係數值。 68
TW091119092A 2001-09-13 2002-08-23 Apparatus and method for processing output from image sensor TWI243584B (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR10-2001-0056442A KR100396898B1 (ko) 2001-09-13 2001-09-13 이미지센서 출력데이터 처리장치 및 처리방법

Publications (1)

Publication Number Publication Date
TWI243584B true TWI243584B (en) 2005-11-11

Family

ID=19714232

Family Applications (1)

Application Number Title Priority Date Filing Date
TW091119092A TWI243584B (en) 2001-09-13 2002-08-23 Apparatus and method for processing output from image sensor

Country Status (6)

Country Link
US (1) US7142239B2 (zh)
JP (1) JP4127638B2 (zh)
KR (1) KR100396898B1 (zh)
DE (1) DE10243306A1 (zh)
NL (1) NL1021335C2 (zh)
TW (1) TWI243584B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI395154B (zh) * 2009-04-14 2013-05-01 Holtek Semiconductor Inc Color Filter Array Image Enhancement Method and Device
TWI400961B (zh) * 2007-08-24 2013-07-01 Holtek Semiconductor Inc 用於ymcg彩色濾波陣列的色彩內插法

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7202894B2 (en) 2002-06-04 2007-04-10 Micron Technology, Inc. Method and apparatus for real time identification and correction of pixel defects for image sensor arrays
KR100510532B1 (ko) 2003-06-10 2005-08-26 삼성전자주식회사 베이어 패턴 컬러 신호에 대한 적응형 노이즈 제거 필터,이를 구비한 디지털 영상 신호 처리 장치, 및 그 방법
US7446812B2 (en) * 2004-01-13 2008-11-04 Micron Technology, Inc. Wide dynamic range operations for imaging
CN1326088C (zh) * 2004-02-10 2007-07-11 华晶科技股份有限公司 补足像素色彩的内插法
EP1729523B1 (en) * 2004-02-19 2014-04-09 Mitsubishi Denki Kabushiki Kaisha Image processing method
JP4133908B2 (ja) 2004-03-31 2008-08-13 シャープ株式会社 画像処理装置、画像処理方法、画像処理プログラムおよび画像処理プログラムを格納した記憶媒体
KR101087345B1 (ko) * 2004-04-21 2011-11-25 인텔렉츄얼 벤처스 투 엘엘씨 컬러 보정 방법
KR100585004B1 (ko) 2004-04-21 2006-05-29 매그나칩 반도체 유한회사 이미지센서의 디지털 신호 처리 장치
KR100699831B1 (ko) 2004-12-16 2007-03-27 삼성전자주식회사 베이어 패턴의 컬러 신호를 보간하는 방법 및 보간기
KR100587979B1 (ko) * 2004-12-20 2006-06-08 한국전자통신연구원 이미지 확대를 위한 경계선 및 귀퉁이 기반 보간 방법
KR100708465B1 (ko) * 2005-02-03 2007-04-18 삼성전자주식회사 컬러 상관 유사도와 다방향 에지 정보를 이용한 컬러 필터보간 방법
KR100782812B1 (ko) 2005-06-15 2007-12-06 삼성전자주식회사 에지 적응적 컬러 보간 방법 및 장치
US7830426B2 (en) * 2005-12-29 2010-11-09 Micron Technology, Inc. Method and apparatus providing color interpolation in color filter arrays using edge detection and correction terms
US20070263918A1 (en) * 2006-02-13 2007-11-15 David Jenya Method and system of recognizing profiles and defects in wood processing
KR100809687B1 (ko) 2006-02-28 2008-03-06 삼성전자주식회사 영상신호에 포함된 잡음을 제거할 수 있는 영상신호처리장치 및 방법
KR100929349B1 (ko) * 2007-01-30 2009-12-03 삼성전자주식회사 유기물 컬러 필터를 포함하지 않는 컬러 픽셀, 이미지 센서, 및 컬러 보간방법
CN101452573B (zh) * 2007-12-04 2013-01-30 比亚迪股份有限公司 一种图像边缘增强方法
CN101903907B (zh) * 2007-12-21 2012-11-14 杜比实验室特许公司 针对边缘的图像处理
US20090237530A1 (en) * 2008-03-20 2009-09-24 Ilia Ovsiannikov Methods and apparatuses for sharpening images
WO2011081226A1 (ko) * 2009-12-29 2011-07-07 포항공과대학교 산학협력단 컬러 이미지를 그레이스케일 이미지로 변환하는 방법 및 이를 수행하는 프로그램이 기록된 기록매체
JP5631769B2 (ja) * 2011-02-17 2014-11-26 株式会社東芝 画像処理装置
TW201305965A (zh) * 2011-07-18 2013-02-01 Novatek Microelectronics Corp 影像處理方法
CN102905083A (zh) * 2011-07-27 2013-01-30 联咏科技股份有限公司 图像处理方法
KR101921964B1 (ko) 2012-03-05 2019-02-13 삼성전자주식회사 라인 메모리 및 이를 이용한 시모스 이미지 집적회로소자
WO2016074300A1 (zh) * 2014-11-10 2016-05-19 李德龙 具有皮肤冷却功能的高功率vcsel激光治疗装置及其封装结构
US10366471B2 (en) * 2015-12-02 2019-07-30 Texas Instruments Incorporated Universal and adaptive de-mosaicing (CFA) system
JP6627528B2 (ja) * 2016-01-25 2020-01-08 株式会社Jvcケンウッド 画像処理方法及び画像処理装置
GB2559776B (en) * 2017-02-17 2022-04-06 Grass Valley Ltd Decoding a bayer-mask or like coded image

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5347599A (en) * 1991-06-14 1994-09-13 Matsushita Electric Industrial Co., Ltd. Adaptive interpolation method and apparatus using correlation detection
KR0125108B1 (ko) * 1992-12-11 1997-12-01 가나이 쯔또무 정지화상기록 디지탈 카메라
US5382976A (en) * 1993-06-30 1995-01-17 Eastman Kodak Company Apparatus and method for adaptively interpolating a full color image utilizing luminance gradients
JP3392564B2 (ja) * 1995-02-27 2003-03-31 三洋電機株式会社 単板式カラービデオカメラ
US5629734A (en) 1995-03-17 1997-05-13 Eastman Kodak Company Adaptive color plan interpolation in single sensor color electronic camera
US5652621A (en) * 1996-02-23 1997-07-29 Eastman Kodak Company Adaptive color plane interpolation in single sensor color electronic camera
GB9605527D0 (en) * 1996-03-15 1996-05-15 Vlsi Vision Ltd Image restoration
US5631703A (en) * 1996-05-29 1997-05-20 Eastman Kodak Company Particular pattern of pixels for a color filter array which is used to derive luminance and chrominance values
KR100196922B1 (ko) * 1996-09-19 1999-06-15 윤종용 4판식 이미지 센서를 이용한 고해상도 영상 신호처리 장치 및 방법
JP3612891B2 (ja) * 1996-10-02 2005-01-19 松下電器産業株式会社 固体撮像素子の撮像出力の輪郭強調方法
JP3787927B2 (ja) * 1996-11-18 2006-06-21 ソニー株式会社 撮像装置及びカラー画像信号の処理方法
US6339479B1 (en) * 1996-11-22 2002-01-15 Sony Corporation Video processing apparatus for processing pixel for generating high-picture-quality image, method thereof, and video printer to which they are applied
KR100222971B1 (ko) * 1997-06-20 1999-10-01 윤종용 3판식 고해상도 촬상 장치
US6563537B1 (en) * 1997-07-31 2003-05-13 Fuji Photo Film Co., Ltd. Image signal interpolation
JPH11122626A (ja) 1997-10-17 1999-04-30 Nikon Corp 画像処理方法及び装置並びに画像処理プログラムを記録した記録媒体
US6229578B1 (en) * 1997-12-08 2001-05-08 Intel Corporation Edge-detection based noise removal algorithm
JP4066484B2 (ja) * 1997-12-08 2008-03-26 ソニー株式会社 画像処理装置および画像処理方法、並びにカメラ
JP3771054B2 (ja) * 1998-07-01 2006-04-26 株式会社リコー 画像処理装置及び画像処理方法
US6774943B1 (en) 1998-09-01 2004-08-10 Ess Technology, Inc. Method and apparatus for edge enhancement in digital images
JP3680922B2 (ja) 1999-07-14 2005-08-10 シャープ株式会社 画像処理装置
EP1111904A3 (en) 1999-12-20 2005-03-16 Texas Instruments Incorporated Digital camera system and method
US6836289B2 (en) * 1999-12-20 2004-12-28 Texas Instruments Incorporated Digital still camera architecture with red and blue interpolation using green as weighting factors
US6771835B2 (en) * 2000-06-12 2004-08-03 Samsung Electronics Co., Ltd. Two-dimensional non-linear interpolation system based on edge information and two-dimensional mixing interpolation system using the same
KR100390847B1 (ko) * 2001-06-30 2003-07-12 주식회사 하이닉스반도체 이미지 센서의 칼라 보간 장치

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI400961B (zh) * 2007-08-24 2013-07-01 Holtek Semiconductor Inc 用於ymcg彩色濾波陣列的色彩內插法
TWI395154B (zh) * 2009-04-14 2013-05-01 Holtek Semiconductor Inc Color Filter Array Image Enhancement Method and Device

Also Published As

Publication number Publication date
DE10243306A1 (de) 2003-04-24
KR20030023294A (ko) 2003-03-19
US20030081465A1 (en) 2003-05-01
JP4127638B2 (ja) 2008-07-30
US7142239B2 (en) 2006-11-28
NL1021335C2 (nl) 2005-06-13
KR100396898B1 (ko) 2003-09-02
JP2003143615A (ja) 2003-05-16
NL1021335A1 (nl) 2003-03-14

Similar Documents

Publication Publication Date Title
TWI243584B (en) Apparatus and method for processing output from image sensor
US8340407B2 (en) System and method for image demosaicing
WO2021047345A1 (zh) 图像降噪方法、装置、存储介质及电子设备
US8295631B2 (en) Iteratively denoising color filter array images
US8203633B2 (en) Four-channel color filter array pattern
US8345130B2 (en) Denoising CFA images using weighted pixel differences
US20080123997A1 (en) Providing a desired resolution color image
JP2019012998A (ja) Raw画像処理システム及び方法
JP2013066146A (ja) 画像処理装置、および画像処理方法、並びにプログラム
TW201225656A (en) Dual image sensor image processing system and method
CN110930301A (zh) 图像处理方法、装置、存储介质及电子设备
WO2019011154A1 (zh) 白平衡处理方法和装置
WO2007089519A1 (en) Bayesian demosaicing using a two-color image
TWI703872B (zh) 影像色彩還原與增強電路
TW200836555A (en) Solid state photographing device
US20150237264A1 (en) System and method for multiple-frame based super resolution interpolation for digital cameras
US11816858B2 (en) Noise reduction circuit for dual-mode image fusion architecture
KR20230053594A (ko) 오브젝트 카테고리화에 기초한 이미지 프로세싱
WO2014127665A1 (zh) 一种改进的数字图像缩放方法
CN107466410A (zh) 用于原始图像处理的新边缘感测量度
WO2019196109A1 (zh) 一种抑制图像伪彩的方法及装置
JP2017045273A (ja) 画像処理装置、画像処理方法、及びプログラム
TWI493979B (zh) 去馬賽克方法、非暫時性機器可讀取儲存媒體以及影像訊號處理器
TWI464704B (zh) 色彩資訊插補方法
KR101782809B1 (ko) 펜토미노 경로 기반 디모자이킹 방법

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees