TWI520606B - 影像處理設備及影像處理設備之控制方法 - Google Patents

影像處理設備及影像處理設備之控制方法 Download PDF

Info

Publication number
TWI520606B
TWI520606B TW101124269A TW101124269A TWI520606B TW I520606 B TWI520606 B TW I520606B TW 101124269 A TW101124269 A TW 101124269A TW 101124269 A TW101124269 A TW 101124269A TW I520606 B TWI520606 B TW I520606B
Authority
TW
Taiwan
Prior art keywords
unit
image
black level
mode
synthesizing
Prior art date
Application number
TW101124269A
Other languages
English (en)
Other versions
TW201304530A (zh
Inventor
吉田明光
Original Assignee
佳能股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 佳能股份有限公司 filed Critical 佳能股份有限公司
Publication of TW201304530A publication Critical patent/TW201304530A/zh
Application granted granted Critical
Publication of TWI520606B publication Critical patent/TWI520606B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/57Control of the dynamic range
    • H04N25/58Control of the dynamic range involving two or more exposures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/72Combination of two or more compensation controls
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/84Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/88Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/57Control of the dynamic range
    • H04N25/58Control of the dynamic range involving two or more exposures
    • H04N25/587Control of the dynamic range involving two or more exposures acquired sequentially, e.g. using the combination of odd and even image fields
    • H04N25/589Control of the dynamic range involving two or more exposures acquired sequentially, e.g. using the combination of odd and even image fields with different integration times, e.g. short and long exposures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/63Noise processing, e.g. detecting, correcting, reducing or removing noise applied to dark current

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Image Processing (AREA)

Description

影像處理設備及影像處理設備之控制方法
本發明涉及一種能夠進行多重曝光拍攝的影像處理設備以及用以影像處理設備的控制方法。
傳統上,已討論了除單純的相加以外還進行各種處理的多重曝光拍攝設備。例如,日本專利申請案公開第2003-69888號討論了藉應用根據用以多重曝光拍攝的幀數的增益來實現相加平均處理的數位照相機。
日本專利申請案公開第平11-225308號討論了藉切換算術運算電路、除進行相加平均處理以外還比較要合成的兩個影像的像素的亮度值從而產生合成影像的多重曝光拍攝設備。
然而,日本專利申請案公開第2003-69888號中討論的技術未如日本專利申請案公開第平11-225308號公報中討論的那樣比較亮度值以優化用以合成影像的多重曝光拍攝模式的處理。
本發明的目的是提供一種進行適合於用以比較像素值以合成影像的多重曝光拍攝模式的處理的影像處理設備,以及一種用以影像處理設備的控制方法。
根據本發明的一態樣,影像擷取設備包括影像擷取單 元,用以校正從影像擷取單元輸出的影像信號的黑階的第一校正單元,用以從多個其黑階已由第一校正單元校正的多個影像信號中選擇要使用的像素以產生合成影像信號的合成單元,以及用以校正由合成單元產生的合成影像信號的黑階的第二校正單元。
由以下參考附圖對示範實施例的詳細說明,本發明的其他特徵和態樣將變得明顯。
以下將參考附圖詳細說明本發明的各種示範實施例、特徵和態樣。
圖1A繪示根據第一示範實施例的作為影像處理設備的例子的影像擷取設備10。
當快門開關SW2(未示出)被按下時,已入射到影像擷取鏡頭100的光束通過光圈101,然後在影像感測器102上形成被攝體影像。影像感測器102將被攝體影像的光學影像轉換成電信號以產生影像信號。
影像感測器102具有如圖1B中所示的R、G1、G2和B的像素被規則配置的拜耳陣列的結構。從影像感測器102輸出的類比信號被類比/數位(A/D)轉換器103轉換成數位信號(以下稱為“原始(RAW)資料”)並且暫時儲存在記憶體106中。圖3示意性繪示影像感測器102中配置的像素陣列。
如圖3中所示,影像感測器102包括作為光電轉換元 件的光電二極體受到光的照射的有效像素區域200、以及利用鋁薄膜對預定區域中的光電二極體遮光的光學黑區域(OB區域)201。
OB積分單元104將OB區域201中的像素值按照拜耳陣列的R、G1、G2和B中的各個進行積分,並且針對R、G1、G2和B中的各個輸出OB的平均值。由OB箝位單元105來進行OB箝位,在OB箝位中,從有效像素區域200的各像素的像素值中減去作為暗階(黑階)的、與各像素值的像素(R、G1、G2、B)的顏色相對應的OB積分單元104的輸出值。OB箝位處理能夠防止例如由暗電流所引起的諸如褪黑化(washed-out black)以及顏色偏移等問題的發生。
記憶體106儲存原始資料以及由信號處理單元110處理後的影像資料。明暗校正單元107校正包括來自A/D轉換單元103的數位影像信號的原始資料的畫面中的亮度水平,以對由影像擷取鏡頭100的特性以及影像感測器102的諸如像差等的特性所引起的明暗進行校正。
白色平衡(WB)處理單元108對從明暗校正單元107輸出的影像資料進行用以將畫面中的白色基準調整為白色的WB處理。根據本示範實施例,明暗校正根據影像感測器102中的二維座標位置對各個像素應用增益,並且WB處理對拜耳陣列的R、G1、G2以及B分別應用不同的增益。
合成單元109根據各個多重曝光拍攝模式進行各類運 算。根據本示範實施例,合成單元109根據包括相加模式、平均相加模式、亮保留模式以及暗保留模式的四種多重曝光拍攝模式分別進行各類運算。合成單元109進行如本示範實施例中以下所述的處理。信號處理單元110對原始資料以及由合成單元109合成後的原始資料上進行諸如顏色矩陣處理和伽馬處理等的顯像處理。
記錄單元111記錄原始資料、由合成單元109合成後的原始資料、以及由信號處理單元110進行了顯像處理的影像資料。控制單元112進行影像擷取設備10的總體控制。
圖2繪示根據本示範實施例的多重曝光拍攝的流程,在上述根據本示範實施例的各種多重曝光拍攝模式(相加模式、相加平均模式、亮保留模式以及暗保留模式)中,該流程是共同的。
在步驟S100中,影像擷取設備10經由用戶的操作開始多重曝光拍攝,並且在步驟S101中,設置用以多重曝光拍攝的幀的數量“N”。在步驟S102中,控制單元112初始化用以控制要拍攝的幀的數量的變數“i”。在步驟S103中,用戶按下快門開關SW2,然後在步驟S104中,影像擷取設備10對拍攝到的原始資料進行處理。將參考圖5說明對拍攝到的原始資料的各幀進行的處理。
在步驟S200中,當對原始資料的各幀的處理開始時,接著在步驟S201中,OB積分單元104計算拍攝到的原始資料的暗階(計算黑階)。在步驟S202中,基於計算 出的暗階,OB箝位單元105進行OB箝位、即第一校正。在步驟S203中,明暗校正單元107校正畫面中的亮度明暗以及顏色明暗。
在步驟S204中,WB處理單元108進行用以調整各個顏色成分的信號水平的WB處理。在步驟S205中,當對原始資料的各幀的處理完成時,接著在步驟S105中(圖2),控制單元112判斷已拍攝的幀的數量是否達到“N”。在已拍攝的幀的數量達到“N”的情況下(步驟S105中為“否”),處理進入步驟S107中的合成處理。在已拍攝的幀的數量未達到“N”的情況下(步驟S105中為“是”),則在步驟S106中,控制單元112使用以控制要拍攝的幀的數量的變數“i”遞增,並且重複在步驟S103以及S104中的處理直到已拍攝的幀的數量達到“N”。
將說明步驟S107中各個多重曝光拍攝模式中的合成處理。根據本示範實施例,包括相加、相加平均、亮保留以及暗保留的四種合成(混合)處理操作各自都能夠產生合成影像。尚未合成的各個影像的各個像素值定義為I_i(x,y)(i=1至N,“x”和“y”表示畫面中的座標),並且將藉合成“N”個影像而獲取到的影像的像素值定義為I(x,y)。像素值可以是從WB處理單元108輸出的拜耳陣列中R、G1、G2以及B信號各自的值,或者可以是從R、G1、G2以及B信號組獲得的亮度信號的值(亮度值)。此外,可以對拜耳陣列中的信號進行插值處理以使得各個像素中都存在R、G、B信號,並且可以計算各個像素的 亮度值。用以計算亮度值的示例公式包括以Y=0.3xR+0.59xG+0.11xB的方式對R、G、B信號加權平均來計算亮度值Y。在這樣的定義下,相加模式由I(x,y)=I_1(x,y)+I_2(x,y)+...+I_N(x,y)表示。對各個像素進行了用以將“N”個影像的像素值相加的處理的資料成為合成影像資料。
相加平均模式由I(x,y)=(I_1(x,y)+I_2(x,y)+...+I_N(x,y))/N表示。對各個像素進行了用以平均“N”個影像的像素值的處理的資料成為合成影像資料。
亮保留模式由I(x,y)=max(I_1(x,y),I_2(x,y),...,I_N(x,y))表示。針對各個像素選擇出“N”個影像的像素值中的最大值的資料成為合成影像資料。
暗保留模式由I(x,y)=min(I_1(x,y),I_2(x,y),...,I_N(x,y))表示。
針對各個像素選擇出“N”個影像的像素值中的最小值的資料成為合成影像資料。此外,在亮保留模式或者暗保留模式中像素值如上所述作為亮度值的情況下,進行比較並且用以計算選擇出的亮度值的R、G1、G2以及B信號的值被選擇作為合成影像資料的各個像素的信號值。
根據本示範實施例,在圖3繪示的有效像素區域200和OB區域201中都進行上述各個多重曝光拍攝模式中的合成處理。具體地,作為已進行合成處理的合成影像,產生根據各個合成方法以合成有效像素區域200的影像資料 而獲取的影像資料、以及根據各個合成方法以合成OB區域201的影像資料而獲取的影像資料。根據本示範實施例,將有效像素區域200以及OB區域201作為一個影像資料同時處理。然而,可以對有效像素區域200以及OB區域201中的各個分別進行合成處理。
在步驟S107中,當合成處理完成時,接著在步驟S108中,控制單元112判斷多重曝光拍攝模式。在該模式是相加模式或者相加平均模式的情況下(步驟S108中為“否”),處理進入步驟S110。在該模式是亮保留模式或者暗保留模式的情況下(步驟S108中為“是”),則在步驟S109中,OB積分單元104以及OB箝位單元105對合成後的原始資料進行OB箝位,即第二校正。
如上所述,根據本示範實施例,與作為要觀看的影像資料的與有效像素區域200相對應的影像資料相似,也保持與OB區域201相對應的影像資料。對與OB區域201相對應的影像資料進行與在有效像素區域200上所進行的處理類似的、包括合成處理的影像處理。因此,與步驟S202中對影像資料的各幀進行的OB箝位處理相似,在步驟S109中,OB積分單元104計算合成影像的OB區域中像素的OB(暗階)的平均值,然後OB箝位單元105對其進行OB箝位。
在步驟S110中,信號處理單元110進行顯像處理,在步驟S111中,記錄單元111記錄已進行顯像處理的影像資料,然後在步驟S112中,影像擷取設備10完成多重 曝光拍攝。
以下將說明在步驟S108和S109中的處理根據多重曝光拍攝模式而變化的原因。圖4示意性繪示在各個多重曝光拍攝模式中隨機雜訊的量。圖4中的圖(1)顯示合成前的影像的隨機雜訊的量。隨機雜訊分佈在以平均值Ave1為中心上下方向上±δ1的範圍內。圖4中的圖(2)顯示在相加模式和相加平均模式中隨機雜訊的量。
在相加模式和相加平均模式中以合成“N”個影像而獲取的影像的隨機雜訊的變化減小到合成前的一個影像的1/sqrt(N)。然而,隨機雜訊的平均值Ave2不變(Ave1=Ave2)。圖4中的圖(3)和(4)分別顯示在亮保留模式和暗保留模式中隨機雜訊的量。在亮保留模式中,由於總是針對各個像素選擇更大的像素值,因此隨機雜訊的變化更小。然而,平均值Ave3比合成前的一個影像大(Ave1<Ave3)。
另一方面,在暗保留模式中,由於總是針對各個像素選擇更小的像素值,因此隨機雜訊的平均值Ave4比合成前的一個影像小(Ave1>Ave4)。
將同樣地說明暗階。由於在合成原始資料前進行OB箝位,因此正確地校正了合成前的原始資料的暗階。在相加模式和相加平均模式中,由於暗階相對於合成前的原始資料的暗階未改變,因此即使省略步驟S109中的OB箝位也沒有問題。然而,在亮保留模式以及暗保留模式中,由於隨機雜訊引起原始資料合成後的暗階發生變化,因此 需要進行OB箝位以防止發生褪黑化或者陰影細節的丟失。
因此,以步驟S109中進行的OB箝位,可以校正變化的暗階,以使得合成後的影像能夠具有想要的影像品質。圖8繪示根據本示範實施例的多重曝光拍攝中的資料流程。
由OB積分單元104以及OB箝位單元105對拍攝到的各個原始資料(原始資料1至N)在合成前進行OB箝位處理。此外,由明暗校正單元107進行明暗校正處理,並且由WB處理單元108進行WB處理。
明暗校正單元107中使用的校正值根據諸如光圈101、影像感測器102的國際標準化組織(ISO)感光度、以及曝光時間等的拍攝條件而變化。當對影像擷取設備10設置WB模式或者自動白色平衡(AWB)設置,WB處理單元中使用的增益也根據被攝體而變化。因此,需要對各個原始資料進行OB箝位,以使得能夠對各原始資料進行適當的暗階校正。
由合成單元109對已完成到WB處理為止的影像資料(I_1到I_N)順次地進行根據各個多重曝光拍攝模式的合成處理。更具體地,在相加模式中,滿足以下等式:I2(x,y)=I_1(x,y)+I_2(x,y),I3(x,y)=I2(x,y)+I_3(x,y),...I(x,y)=IN(x,y)=IN-1(x,y)+I_N(x,y)
此外,在相加平均模式中,滿足以下等式:I2(x,y)=(I_1(x,y)+I_2(x,y))/2,I3(x,y)=I2(x,y)/3+I_3(x,y)/3,...I(x,y)=IN(x,y)=IN-1(x,y)/N+I_N(x,y)/N
此外,在亮保留模式中,滿足以下等式:I2(x,y)=max(I_1(x,y),I_2(x,y)),I3(x,y)=max(I2(x,y),I_3(x,y)),...I(x,y)=IN(x,y)=max(IN-1(x,y),I_N(x,y))
此外,在暗保留模式中,滿足以下等式:I2(x,y)=min(I_1(x,y),I_2(x,y)),I3(x,y)=min(I2(x,y),I_3(x,y)),...I(x,y)=IN(x,y)=min(IN-1(x,y),I_N(x,y))合成處理的方法不限於上述的方法。例如,如上述的等式那樣,可以同時合成“N”個影像。
在相加模式以及相加平均模式中,已完成從I_1到I_N的合成處理的影像資料(I(x,y),合成後的原始資料)被作為合成後的輸出影像輸出到用以進行隨後的顯示和記錄的各個單元。在亮保留模式以及暗保留模式中,如上所述,由OB積分單元104以及OB箝位單元105藉對合成後的原始資料進行OB箝位處理而獲取的資料被作為合成後的輸出影像輸出到各個隨後的單元。
如上所述,根據本示範實施例,在進行用以從多個影像資料幀中選擇像素以將其合成的合成處理的拍攝模式(亮保留以及暗保留)中,對合成後的原始資料進行OB箝位。以該配置,能夠減少由合成處理引起的諸如褪黑化以及陰影細節的丟失等的問題。
根據本示範實施例,作為需要對合成後的影像信號進行OB箝位(用以校正黑階的處理)的處理,說明在亮保留模式以及暗保留模式中的合成處理。然而,由於黑階的偏移是由從多個影像信號中根據預定規則選擇像素並且將其合成所引起的黑階的隨機性的損失而造成的,因此根據本示範實施例的合成影像的方法不限於上述方法。更具體地,如本示範實施例中所述進行用以校正如下信號的黑階的處理是有效的,該信號是已進行從多個影像資料的幀中選擇像素以將其合成的合成處理的合成影像信號。
此外,根據本示範實施例,作為影像處理設備的例子,說明影像擷取設備的結構。然而,本發明不限於上述的影像擷取設備。只要影像處理設備在關於有效像素區域的資訊與關於OB區域的資訊相關聯的狀態下獲取各個拍攝影像,影像處理設備就能夠對合成前的各個影像進行OB箝位、進行本示範實施例中所述的合成處理、以及在合成影像上進行OB箝位。
此外,根據本示範實施例,為校正各個影像信號以及合成影像信號的暗階,使用利用了影像信號中所設置的OB區域的值的OB箝位處理。然而,本發明不限於上述的 OB箝位處理。發明可以藉被稱為“黑相減處理(black subtraction processing)”的在已拍攝各影像信號之後以遮光的方式產生再次拍攝的暗影像信號、然後從各影像信號中減去暗影像信號來實現。在這種情況下,可以藉與各個影像信號相對應地減去暗影像信號來進行在原始資料合成前的暗階校正。在亮保留模式以及暗保留模式中對合成後的影像信號進行的暗階校正可以如下進行:與根據本示範實施例的對OB區域進行的處理同樣,藉對暗影像信號應用與對通常影像信號進行的處理同樣的處理、根據同樣的方法合成影像信號,然後從通常合成影像信號中減去獲取到的合成後的暗影像信號。
根據第一示範實施例,在合成原始資料後是否進行OB箝位只根據多重曝光拍攝模式來判斷。根據第二示範實施例,還根據其他拍攝條件來判斷。以下將參考圖6說明第二示範實施例。
到步驟S107為止,進行與第一示範實施例相同的處理。在步驟S301中對多重曝光拍攝模式進行判斷後,在步驟S302中,控制單元112判斷是否對合成後的原始資料進行OB箝位。在不需要OB箝位的情況下(步驟S302中為“否”),處理進入步驟S110。在需要OB箝位的情況下(步驟S302中為“是”),接著在步驟S303中,控制單元112進行OB箝位。
以下參考圖7詳細說明步驟S302中的處理。圖7是繪示在進行拍攝時的ISO感光度、曝光時間Tv、影像感 測器的溫度Temp.與OB箝位處理的必要性之間的關係的表格。附圖標記“o”表示需要OB箝位的拍攝條件,並且附圖標記“×”表示不需要OB箝位的拍攝條件。即使在用以多重曝光拍攝的“N”幀中只有一幀具有需要OB箝位的拍攝條件的情況下,也進行OB箝位。只有在“N”幀都不需要OB箝位的情況下,才不進行OB箝位。
典型地,ISO感光度越高,曝光時間越長,以及影像感測器的溫度越高,隨機雜訊就增加得越多。然而,由於預先估計了隨機雜訊的量,可以在影像擷取設備10的非易失性記憶體(未繪示)中儲存圖7中繪示的表格。
如上所述,根據本示範實施例,在進行用以從影像資料的多個幀中選擇像素以將其合成的合成處理的拍攝模式(亮保留、暗保留)中,對合成後的原始資料進行OB箝位。以該配置,能夠減少由合成處理引起的諸如褪黑化以及陰影細節的丟失等的問題。此外,當進行拍攝時,根據ISO感光度、曝光時間Tv以及影像感測器的溫度Temp.判斷OB箝位處理的必要性,因此,能夠僅在需要OB箝位時才進行OB箝位,從而以更高的速度進行處理。
本發明的態樣也可以以系統或者設備的電腦(或者諸如CPU或MPU等的裝置)讀出並且執行記憶體裝置上記錄的程式以進行上述實施例的功能而實現,以及以方法實現,該方法的步驟由系統或者設備的電腦以例如讀出並且執行記憶體裝置上記錄的程式以進行上述的實施例的功能而進行。為了該目的,將程式例如通過網路或者從用作記 憶體裝置(例如,電腦可讀的媒體)的各種儲存媒體提供給電腦。
儘管已經參考示範實施例說明了本發明,但是應該理解,本發明不限於所揭示的示範實施例。所附申請專利範圍符合最寬的解釋,以包含所有這類修改、等同結構和功能。
10‧‧‧影像擷取設備
102‧‧‧影像感測器
103‧‧‧類比/數位(A/D)轉換器
104‧‧‧OB積分單元
105‧‧‧OB箝位單元
106‧‧‧記憶體
107‧‧‧明暗校正單元
108‧‧‧WB處理單元
109‧‧‧合成單元
110‧‧‧信號處理單元
111‧‧‧記錄單元
112‧‧‧控制單元
200‧‧‧有效像素區域
201‧‧‧OB區域
包含在說明書中並構成說明書的一部分的附圖顯示本發明的示範實施例、特徵和態樣,並和說明書一起用來解釋本發明的原理。
圖1A是根據第一示範實施例的影像擷取設備的方塊圖。圖1B繪示影像感測器的像素的拜耳陣列。
圖2是根據第一示範實施例的多重曝光拍攝的流程。
圖3示意性繪示影像感測器中配置的像素陣列。
圖4示意性繪示在各個多重曝光拍攝模式中隨機雜訊的量。
圖5繪示在尚未合成的原始資料上進行的處理的流程。
圖6繪示根據第二示範實施例的多重曝光拍攝的流程。
圖7繪示根據第二示範實施例要對合成影像進行的光學黑(OB)箝位的條件。
圖8是用以合成原始資料的流程的方塊圖。
10‧‧‧影像擷取設備
100‧‧‧影像擷取鏡頭
101‧‧‧光圈
102‧‧‧影像感測器
103‧‧‧類比/數位(A/D)轉換器
104‧‧‧OB積分單元
105‧‧‧OB箝位單元
106‧‧‧記憶體
107‧‧‧明暗校正單元
108‧‧‧WB處理單元
109‧‧‧合成單元
110‧‧‧信號處理單元
111‧‧‧記錄單元
112‧‧‧控制單元

Claims (14)

  1. 一種影像擷取設備,包括:影像擷取單元;控制單元,用以判斷各種多重曝光拍攝模式中的多重曝光拍攝模式;第一校正單元,用以校正從該影像擷取單元輸出的影像信號的黑階;合成單元,用以合成多個其黑階已由該第一校正單元校正的影像信號以產生合成影像信號,其中,該合成單元用以根據多重曝光拍攝模式的分別模式進行各類運算;以及第二校正單元,用以在亮保留模式或者暗保留模式中的情況下校正由該合成單元所產生的合成影像信號的黑階,並且在相加模式或者相加平均模式的情況下不校正由該合成單元所產生的合成影像信號的黑階。
  2. 根據申請專利範圍第1項所述的影像擷取設備,其中,該合成單元用以在亮保留模式中的情況下從多個影像信號中,針對各像素選擇具有高像素值的像素。
  3. 根據申請專利範圍第1項所述的影像擷取設備,其中,該合成單元用以在暗保留模式中的情況下從多個影像信號中,針對各像素選擇具有低像素值的像素。
  4. 根據申請專利範圍第1項所述的影像擷取設備,其中,還包括處理單元,該處理單元用以對多個其黑階已由該第一校正單元校正的影像信號進行白色平衡校正以及 明暗校正的至少其中一個,其中,該合成單元用以根據由該處理單元處理後的多個影像信號產生該合成影像信號。
  5. 根據申請專利範圍第1項所述的影像擷取設備,其中,在相加模式或相加平均模式的情況下該合成單元能夠對多個影像信號針對各像素進行相加或者相加平均來產生該合成影像信號。
  6. 根據申請專利範圍第1項所述的影像擷取設備,其中,還包括黑階計算單元,該黑階計算單元用以根據該影像擷取單元中包括的影像感測器上的預定遮光區域中的影像信號來計算黑階,其中,該第一校正單元以及該第二校正單元用以基於由該黑階計算單元所計算出的黑階來進行黑階的校正。
  7. 根據申請專利範圍第1項所述的影像擷取設備,其中,還包括判斷單元,該判斷單元用以根據經由該合成單元合成該多個影像信號的方法、當拍攝該多個影像信號時使用的ISO感光度、曝光時間以及影像感測器的至少其中一個來判斷是否由該第二校正單元進行校正。
  8. 一種用以合成多個影像信號的影像處理設備,該影像處理設備包括:獲取單元,用以獲取該多個影像信號;控制單元,用以判斷各種多重曝光拍攝模式中的多重曝光拍攝模式;合成單元,用以從合成該獲取單元輸出的該多個影像 信號以產生合成影像信號,其中,該合成單元用以根據多重曝光拍攝模式的分別模式進行各類運算;以及校正單元,用以在亮保留模式或者暗保留模式中的情況下校正由該合成單元所產生的合成影像信號的黑階,並且在相加模式或者相加平均模式的情況下不校正由該合成單元所產生的合成影像信號的黑階。
  9. 根據申請專利範圍第8項所述的影像處理設備,其中,該合成單元用以在亮保留模式中的情況下從該多個影像信號中選擇具有高像素值的像素以產生該合成影像信號。
  10. 根據申請專利範圍第8項所述的影像處理設備,其中,該合成單元用以在暗保留模式中的情況下從該多個影像信號中選擇具有低像素值的像素以產生該合成影像信號。
  11. 根據申請專利範圍第8項所述的影像處理設備,其中,該校正單元用以校正已從該獲取單元輸出並且尚未由該合成單元所合成的各個影像信號的黑階。
  12. 根據申請專利範圍第8項所述的影像處理設備,其中,還包括黑階計算單元,該黑階計算單元用以根據該影像信號中已進行影像擷取的預定遮光區域中的影像信號來計算黑階,其中,該校正單元用以基於由該黑階計算單元所計算出的黑階來進行黑階的校正。
  13. 一種影像擷取設備的控制方法,用以該影像擷取 設備包括影像擷取單元、用以校正影像信號的黑階的校正單元以及用以合成多個影像信號的合成單元,該方法包括:判斷各種多重曝光拍攝模式中的多重曝光拍攝模式;校正從該影像擷取單元輸出的影像信號的黑階;合成多個已校正黑階的影像信號的像素以產生合成影像信號,其中,該合成單元用以根據多重曝光拍攝模式的分別模式進行各類運算;以及在亮保留模式或者暗保留模式中的情況下校正所產生的合成影像信號的黑階,並且在相加模式或者相加平均模式的情況下不校正由該合成單元所產生的合成影像信號的黑階。
  14. 一種用以合成多個影像信號的影像處理方法,該影像處理方法包括以下步驟:判斷各種多重曝光拍攝模式中的多重曝光拍攝模式;合成該多個影像信號的像素以產生合成影像信號,其中,該合成步驟用以根據多重曝光拍攝模式的分別模式進行各類運算;以及在亮保留模式或者暗保留模式中的情況下校正所產生的合成影像信號的黑階,並且在相加模式或者相加平均模式的情況下不校正由該合成單元所產生的合成影像信號的黑階。
TW101124269A 2011-07-11 2012-07-05 影像處理設備及影像處理設備之控制方法 TWI520606B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011152960 2011-07-11

Publications (2)

Publication Number Publication Date
TW201304530A TW201304530A (zh) 2013-01-16
TWI520606B true TWI520606B (zh) 2016-02-01

Family

ID=46679092

Family Applications (1)

Application Number Title Priority Date Filing Date
TW101124269A TWI520606B (zh) 2011-07-11 2012-07-05 影像處理設備及影像處理設備之控制方法

Country Status (5)

Country Link
US (2) US9491381B2 (zh)
EP (1) EP2547091B1 (zh)
JP (2) JP6021465B2 (zh)
CN (1) CN102883108B (zh)
TW (1) TWI520606B (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013054403A1 (ja) * 2011-10-12 2013-04-18 キヤノン株式会社 撮像装置及び撮像装置の制御方法
WO2015049990A1 (ja) * 2013-10-02 2015-04-09 オリンパス株式会社 撮像装置および撮像方法
JP6351452B2 (ja) * 2014-09-08 2018-07-04 オリンパス株式会社 撮像装置、撮像方法およびプログラム
CN104469191B (zh) * 2014-12-03 2018-07-27 东莞宇龙通信科技有限公司 图像降噪的方法及其装置
JP6736279B2 (ja) * 2015-10-14 2020-08-05 オリンパス株式会社 撮像装置、画像処理装置、画像処理方法
JP6289439B2 (ja) * 2015-12-16 2018-03-07 オムロンオートモーティブエレクトロニクス株式会社 画像処理装置
CN109040523B (zh) * 2018-08-16 2020-11-10 Oppo广东移动通信有限公司 伪影消除方法、装置、存储介质及终端
US11245845B2 (en) * 2020-06-04 2022-02-08 Hand Held Products, Inc. Systems and methods for operating an imaging device
US20230096541A1 (en) * 2021-10-26 2023-03-30 Canon Kabushiki Kaisha Image processing apparatus and image processing method

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2602217B2 (ja) * 1987-01-07 1997-04-23 キヤノン株式会社 撮像装置
JP2545999B2 (ja) * 1989-11-29 1996-10-23 日本電気株式会社 γ補正回路
JP3092577B2 (ja) 1998-02-06 2000-09-25 日本電気株式会社 デジタルカメラの多重撮影装置
JP3750462B2 (ja) * 2000-02-22 2006-03-01 コニカミノルタフォトイメージング株式会社 デジタルカメラおよび記録媒体
WO2002100093A1 (fr) 2001-05-31 2002-12-12 Matsushita Electric Industrial Co., Ltd. Appareil et procede de traitement d'image
JP2003069888A (ja) 2001-08-23 2003-03-07 Nidec Copal Corp 多重撮影機能付デジタルカメラ
CN1272961C (zh) * 2001-09-07 2006-08-30 三洋电机株式会社 摄像装置
US7076023B2 (en) * 2001-10-26 2006-07-11 Siemens Medical Solutions Usa, Inc. X-ray therapy electronic portal imaging system and method for artifact reduction
JP2004159252A (ja) * 2002-11-08 2004-06-03 Sanyo Electric Co Ltd 画像信号処理回路及びこれを用いた撮像装置
JP2004222161A (ja) * 2003-01-17 2004-08-05 Fuji Photo Film Co Ltd デジタルカメラ
JP4082318B2 (ja) * 2003-09-04 2008-04-30 カシオ計算機株式会社 撮像装置、画像処理方法及びプログラム
JP4403873B2 (ja) 2004-05-07 2010-01-27 株式会社ニコン クランプレベル調整装置および電子カメラ
JP4940639B2 (ja) 2005-09-30 2012-05-30 セイコーエプソン株式会社 画像処理装置、画像処理方法及び画像処理プログラム
JP4509925B2 (ja) * 2005-12-27 2010-07-21 株式会社メガチップス 画像処理装置及びカメラシステム並びに画像処理方法及び動画像表示方法
US8059174B2 (en) * 2006-05-31 2011-11-15 Ess Technology, Inc. CMOS imager system with interleaved readout for providing an image with increased dynamic range
JP4341691B2 (ja) 2007-04-24 2009-10-07 ソニー株式会社 撮像装置、撮像方法、露光制御方法、プログラム
MY151485A (en) * 2007-06-14 2014-05-30 Sony Corp Imaging apparatus, imaging control method, and imaging control program
JP2009017078A (ja) * 2007-07-03 2009-01-22 Fujifilm Corp ディジタル・スチル・カメラおよびその動作制御方法
JP5028574B2 (ja) * 2007-08-10 2012-09-19 株式会社メガチップス デジタルカメラシステム
JP2009276956A (ja) * 2008-05-14 2009-11-26 Fujifilm Corp 画像処理装置および方法並びにプログラム
JP4735994B2 (ja) * 2008-08-27 2011-07-27 ソニー株式会社 撮像装置及び方法、プログラム、並びに記録媒体
JP5028371B2 (ja) * 2008-09-26 2012-09-19 富士フイルム株式会社 撮影装置
US20110149111A1 (en) * 2009-12-22 2011-06-23 Prentice Wayne E Creating an image using still and preview
US8994843B2 (en) * 2010-09-01 2015-03-31 Qualcomm Incorporated High dynamic range image sensor
JP5622513B2 (ja) * 2010-10-08 2014-11-12 オリンパスイメージング株式会社 画像処理装置、画像処理方法、および撮像装置

Also Published As

Publication number Publication date
EP2547091A2 (en) 2013-01-16
JP2013038770A (ja) 2013-02-21
CN102883108A (zh) 2013-01-16
JP6227084B2 (ja) 2017-11-08
JP6021465B2 (ja) 2016-11-09
US20130016252A1 (en) 2013-01-17
TW201304530A (zh) 2013-01-16
US9838625B2 (en) 2017-12-05
EP2547091B1 (en) 2018-03-07
JP2016226059A (ja) 2016-12-28
US20170034461A1 (en) 2017-02-02
EP2547091A3 (en) 2013-10-16
US9491381B2 (en) 2016-11-08
CN102883108B (zh) 2015-10-28

Similar Documents

Publication Publication Date Title
TWI520606B (zh) 影像處理設備及影像處理設備之控制方法
US8890981B2 (en) Method and apparatus for eliminating crosstalk amount included in an output signal
US9843735B2 (en) Image processing apparatus, imaging apparatus comprising the same, and image processing method
TWI422234B (zh) An image signal correcting means, an image capturing means, an image signal correcting means, and an image signal correcting processing means
US10630920B2 (en) Image processing apparatus
KR101536060B1 (ko) 고체 촬상 장치 및 카메라 모듈
US10419685B2 (en) Image processing apparatus, image processing method, and computer-readable recording medium
JP2007189544A (ja) 撮像装置
JP2009044367A (ja) 撮影方法及び撮影装置
US10416026B2 (en) Image processing apparatus for correcting pixel value based on difference between spectral sensitivity characteristic of pixel of interest and reference spectral sensitivity, image processing method, and computer-readable recording medium
US10044957B2 (en) Imaging device and imaging method
JP6529109B2 (ja) 撮像装置、画像処理方法
US20100245590A1 (en) Camera sensor system self-calibration
US10623674B2 (en) Image processing device, image processing method and computer readable recording medium
JP2012191378A (ja) 撮像装置
JP5299159B2 (ja) 撮像装置およびプログラム
JP2013219452A (ja) 色信号処理回路、色信号処理方法、色再現評価方法、撮像装置、電子機器、及び、試験装置
US8941760B2 (en) Image processing apparatus, image processing method and electronic camera
JP2007053659A (ja) 計測用撮像装置
JP2009171493A (ja) つなぎ段差補正方法、つなぎ段差補正装置およびデジタルカメラ
JP2004200888A (ja) 撮像機器
JP2018147417A (ja) 画像処理装置、画像処理方法、及びプログラム
JP2018151422A (ja) 焦点検出装置
JP2006324789A (ja) 映像信号処理方法および映像信号処理装置

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees