TW201515466A - 控制裝置、控制方法及電子機器 - Google Patents

控制裝置、控制方法及電子機器 Download PDF

Info

Publication number
TW201515466A
TW201515466A TW103125392A TW103125392A TW201515466A TW 201515466 A TW201515466 A TW 201515466A TW 103125392 A TW103125392 A TW 103125392A TW 103125392 A TW103125392 A TW 103125392A TW 201515466 A TW201515466 A TW 201515466A
Authority
TW
Taiwan
Prior art keywords
pixel
exposure amount
mode
control
control unit
Prior art date
Application number
TW103125392A
Other languages
English (en)
Other versions
TWI661727B (zh
Inventor
Masashi Nakata
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of TW201515466A publication Critical patent/TW201515466A/zh
Application granted granted Critical
Publication of TWI661727B publication Critical patent/TWI661727B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/555—Constructional details for picking-up images in sites, inaccessible due to their dimensions or hazardous conditions, e.g. endoscopes or borescopes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H04N23/672—Focus control based on electronic image sensor signals based on the phase difference signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50—Control of the SSIS exposure
    • H04N25/57—Control of the dynamic range
    • H04N25/58—Control of the dynamic range involving two or more exposures
    • H04N25/581—Control of the dynamic range involving two or more exposures acquired simultaneously
    • H04N25/583—Control of the dynamic range involving two or more exposures acquired simultaneously with different integration times
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/703—SSIS architectures incorporating pixels for producing signals other than image signals
    • H04N25/704—Pixels specially adapted for focusing, e.g. phase difference pixel sets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H04N23/673—Focus control based on electronic image sensor signals based on contrast or high frequency components of image signals, e.g. hill climbing method
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/743—Bracketing, i.e. taking a series of images with varying exposure conditions

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Studio Devices (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Power Engineering (AREA)
  • Color Television Image Signal Generators (AREA)
  • Electromagnetism (AREA)
  • Condensed Matter Physics & Semiconductors (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Microelectronics & Electronic Packaging (AREA)

Abstract

本揭示係關於可高速地設定適切之曝光量之控制裝置、控制方法、及電子機器。 控制部係控制由複數個像素2維狀配置而成之像素群之曝光量。具體而言，控制部係於開始記錄攝影圖像之前之第1模式中，對像素群設定複數種曝光量，於記錄攝影圖像之第2模式中，對像素群設定種類少於第1模式之曝光量。本揭示之技術可應用於例如控制固體攝像元件之控制裝置等。

Description

控制裝置、控制方法及電子機器
本揭示係關於控制裝置、控制方法及電子機器，尤其是關於可高速地設定適切之曝光量之控制裝置、控制方法及電子機器。
近年，作為擴展攝影時之動態範圍之技術，提出相對於矩陣狀配置之像素群，使設定較大曝光量之像素與設定較小曝光量之像素混合存在之技術(例如，參照專利文獻1)。
然而，於像素群包含曝光量較大之像素與曝光量較小之像素之情形時，例如曝光量較大之像素於亮處容易飽和，且飽和時僅曝光量較小之像素成為可輸出之像素。此時，由於可使用於形成圖像之像素減少，故解析度降低。
另一方面，於像素群之全部像素以相同曝光量統一之情形時，像素飽和時無法全部獲得資訊。即，由於欠缺有何種被攝體、有何種亮度之資訊，故無法全部取得自動曝光(AutoExposure)、自動聚焦(Auto Focus)、自動白平衡(Auto White Balance)等控制所需要之資訊。
[先前專利文獻] [專利文獻]
[專利文獻1]日本特開2010-28423號公報
近年，如智慧型手機等所代表之具有觸控面板之攝像裝置正普及。例如，於攝影中之圖像內碰觸之位置進行如自動聚焦等對準動作之情形時，若觸碰位置飽和，則由於完全沒有該部位以何種程度之累積時間變為不飽和之資訊，故直至將曝光量調至適切值較耗費時間。
即，曝光量大至一定以上時，由於日光燈、太陽光均同樣地飽和，且由於日光燈與太陽光均以相同輸出值輸出，故無法識別明顯之差。因此，無法瞬間判別將曝光量降低至如何程度可變為不飽和，由於只可慢慢地降低曝光量，故將曝光值調至適切值較耗費時間。
本揭示係鑑於此種狀況而完成者，係可高速地設定適切之曝光量者。
本發明之第1態樣之控制裝置具備控制由複數個像素2維狀配置而成之像素群之曝光量之控制部，上述控制部係於開始記錄攝影圖像之前之第1模式中，對上述像素群設定複數種曝光量，於記錄攝影圖像之第2模式中，對上述像素群設定種類少於上述第1模式之曝光量。
本揭示之第1態樣之控制方法係以控制由複數個像素2維狀配置而成之像素群之曝光量之控制裝置，於開始攝影圖像之記錄之前之第1模式中，對上述像素群設定複數個種類之曝光量，於記錄攝影圖像之第2模式中，對上述像素群設定較第1模式較少種類之曝光量。
本揭示之第2態樣之電子機器具備固體體攝像元件，其具備由複數個像素2維狀配置而成之像素群；控制部，其於開始記錄攝影圖像之前之第1模式中，對上述像素群設定複數種曝光量，於記錄 攝影圖像之第2模式中，對上述像素群設定種類少於上述第1模式之曝光量。
於本揭示之第1及第2之態樣中，於開始記錄攝影圖像之前之第1模式中，於上述像素群設定複數種曝光量，於記錄攝影圖像之第2模式中，於上述像素群設定較上述第1模式種類少之曝光量
控制裝置及電子機器係可為獨立之裝置，亦可為構成1個裝置之內部區塊。
根據本發明之第1及第2之態樣，可高速地設定適切之曝光量。
另，本發明係並非限定於此處記載之效果者，亦可為記載於本揭示中之任一項之效果。
1‧‧‧攝像裝置
11‧‧‧光學透鏡
12‧‧‧光學濾光器
13‧‧‧固體攝像元件
14‧‧‧A/D轉換部
15‧‧‧箍位部
16‧‧‧記憶部
17‧‧‧倍率運算部
18‧‧‧長畜短畜合成部
19‧‧‧3A控制部
20‧‧‧動態被攝體檢測部
21‧‧‧解馬賽克部
22‧‧‧LM/WB/灰度係數修正部
23‧‧‧亮度色度信號生成部
24‧‧‧顯示器
25‧‧‧觸控面板
26‧‧‧記錄控制部
27‧‧‧記錄媒體
28‧‧‧圖案檢測部
29‧‧‧記憶部
30‧‧‧控制部
51‧‧‧像素
52‧‧‧區域
53‧‧‧圖像
54-1‧‧‧圖像
54-2‧‧‧圖像
54-3‧‧‧圖像
54-4‧‧‧圖像
101‧‧‧攝像裝置
102‧‧‧攝像裝置
103‧‧‧攝像裝置
121‧‧‧半導體晶片
122‧‧‧像素區域
123‧‧‧控制電路
124‧‧‧邏輯電路
131‧‧‧第1半導體晶片部
132‧‧‧第2半導體晶片部
133‧‧‧像素區域
134‧‧‧控制電路
135‧‧‧邏輯電路
141‧‧‧第1半導體晶片部
142‧‧‧第2半導體晶片部
143‧‧‧像素區域
144‧‧‧控制電路
145‧‧‧邏輯電路
200‧‧‧膠囊內視鏡
210‧‧‧框體
211‧‧‧相機
211a‧‧‧固體攝像元件
211b‧‧‧光源
212‧‧‧記憶體
213‧‧‧無線發送機
214‧‧‧天線
215‧‧‧CPU
216‧‧‧線圈
217‧‧‧導線開關
300‧‧‧智慧型手機
311‧‧‧揚聲器
312‧‧‧顯示器
313‧‧‧操作按鈕
314‧‧‧話筒
315‧‧‧攝像部
400‧‧‧眼鏡型攝像裝置
411‧‧‧眼鏡框
412‧‧‧固體攝像元件
413‧‧‧眼鏡鏡片
414‧‧‧框體
415‧‧‧纜線
S1‧‧‧利用HDR攝影模式開始驅動
S2‧‧‧將短曝光資料供給於倍率運算部，且將長曝光資料供給於長畜短畜合成部及解馬賽克部
S3‧‧‧倍率修正短曝光資料
S4‧‧‧合成倍率修正後之短曝光資料與長曝光資料
S5‧‧‧將合成資料供給於3A控制部等
S6‧‧‧基於合成資料進行3A控制
S7‧‧‧基於長曝光資料顯示圖像
S8‧‧‧於顯示器是否有觸控？
S9‧‧‧顯示觸控位置，輸出3A控制對象區域信號
S10‧‧‧觸控位置是否為長畜像素飽和之區域
S11‧‧‧使用短曝光資料進行3A控制
S12‧‧‧使用長曝光資料進行3A控制
S13‧‧‧錄影按鈕是否按下？
S14‧‧‧藉由普通攝影模式開始驅動
圖1係總結普通攝影模式與HDR攝影模式之特徵之圖。
圖2係說明普通攝影模式與HDR攝影模式之差異之圖。
圖3A、B係說明普通攝影模式與HDR攝影模式之差異之圖。
圖4係顯示本揭示之攝像裝置之構成例之方塊圖。
圖5A、B係顯示固體攝像元件之像素群之一部分之圖。
圖6A、B係說明倍率修正處理之圖。
圖7係顯示HDR攝影模式時攝影圖像資料之流程之圖。
圖8A、B係說明預覽攝影時之像素插補之圖。
圖9係說明預覽攝影時之剪輯處理之圖。
圖10係顯示利用HDR攝影模式之圖像資料之概念圖。
圖11係顯示普通攝影模式時之攝影圖像資料之流程之圖。
圖12係比較說明圖4之攝像裝置與一般普通攝影模式及HDR攝影模式之圖。
圖13係顯示利用本揭示之攝像裝置之攝影處理流程之圖。
圖14係說明預覽攝影處理之流程圖。
圖15係說明相位差像素之圖。
圖16係顯示將本揭示之攝像裝置設為晶片形態之構成例之圖。
圖17係顯示搭載本揭示之攝像裝置之膠囊內視鏡之剖面構成之圖。
圖18係顯示包含本揭示之攝像裝置之智慧型手機之外觀構成之圖。
圖19係顯示具備本揭示之攝像裝置之眼鏡型攝像裝置之構成例之圖。
以下，對用以實施本揭示之形態(以下，稱為實施形態)進行說明。另，說明係以以下之順序進行。
1.普通攝影模式與HDR攝影模式之說明
2.攝像裝置之構成例
3.HDR攝影模式之攝影圖像資料之流程
4.普通攝影模式之攝影圖像資料之流程
5.攝影處理之流程
6.預覽攝影處理之處理流程
7.變化例
8.對電子機器之應用例
<1.普通攝影模式與HDR攝影模式之說明>
以下詳細記述之攝像裝置1(圖4)具有普通攝影模式與HDR攝影模式2種攝影模式(攝影方法)，此等係藉由動作狀態而區分使用。
因此，首先參照圖1至圖3，對普通攝影模式及HDR攝影模式之一般特徵進行說明。
圖1係總結普通攝影模式與HDR攝影模式之特徵之圖。
普通攝影模式中，於以拜耳排列配置之各像素中，設定統一之曝光量。接著，基於其設定之曝光量，獲得各像素之輸出信號。普通攝影模式具有所謂解析度高之優點，相反地，亦有所謂無放大動態範圍之功能之缺點。「R1」係表示受光紅色光之R像素，「G1」係表示受光綠色光之G像素，「B1」係表示受光藍色光之B像素。
另一方面，HDR攝影模式係可獲得高動態範圍(HDR)之輸出信號之模式，於拜耳排列配置之像素群中，有設定較大曝光量之像素，及設定較小曝光量之像素。此處，所謂曝光量係使用快門時間與增益，以曝光量=快門時間×增益之關係表示之控制量。
以下，亦將曝光量較大之像素稱為長畜像素，曝光量較小之像素稱為短畜像素。圖1中「R1」、「G1」、「B1」所表示之白色之像素係表示長畜像素，「R0」、「G0」、「B0」所表示之黑色之像素係表示短畜像素。
於圖1中，顯示長畜像素與短畜像素之配置格式不同之2種HDR攝影模式。HDR攝影模式之排列P1係奇數列全部設定為長畜像素，偶數列全部設定為短畜像素之排列方法。HDR攝影模式之排列P2係以長畜像素與短畜像素分別以3像素為單位於縱方向與橫方向交替，以作為整體為斜向之列之方式配置之排列方法。
於HDR攝影模式中，例如，由於即使長畜像素已飽和亦可以短畜像素獲得信號，故即使於單一曝光量之普通攝影模式中飽和之情景時，亦可使用短畜像素使其具備灰階。與此相反，於長畜像素已飽和之情景時，由於無法自長畜像素獲得信號，故解析度降低。
以攝影之圖像之例，對普通攝影模式與HDR攝影模式之差異進一步進行說明。
例如，考慮如圖2所示之將風景作為被攝體進行攝影之情形。圖2所示之被攝體係上部區域因太陽光之影響而為明亮區域(亮處)， 下部區域因樹蔭而為較暗區域(暗部)。
圖3A係顯示以一般普通攝影模式攝影圖2之被攝體之圖像，圖3B係顯示以一般HDR攝影模式攝影圖2之被攝體之圖像。
於圖3A之普通攝影模式之情形中，由於於暗部即下部區域設定最佳曝光量，動態範圍不充分，故亮處即上部區域飽和。
相對於此，於圖3B之HDR攝影模式之情形中，可確保亮處與暗部兩者之灰階。然而，雖圖式中未顯現，但亮處即上部區域之長畜像素飽和而成為缺損像素，由於僅以短畜像素表現，故解析度降低。又，暗部即下部區域由於亦於短畜像素中雜訊變大，故於不使用短畜像素而僅使用長畜像素之情形時，解析度依然降低。因此，一般可說是若動態範圍優先，則期望為HDR攝影模式，若解析度優先，則期望為普通攝影模式。
本揭示之攝像裝置1係於開始記錄攝影圖像前之預覽攝影中，執行HDR攝影模式，於記錄攝影圖像之記錄攝影中，使用以HDR攝影模式取得之曝光量資訊，執行普通攝影模式。
<2.攝像裝置之構成例>
圖4係顯示本揭示之攝像裝置之構成例之方塊圖。
光學透鏡11係進行入射於固體攝像元件13之被攝體光焦距之調整。於光學透鏡11之後段中，設置有對入射於固體攝像元件13之被攝體光之光量進行調整之光圈(未圖示)。光學透鏡11之具體構成係任意，例如，光學透鏡11亦可藉由複數個透鏡而構成。
透過光學透鏡11之被攝體光係例如經由作為透過紅外光以外之光之IR截斷濾光器等構成之光學濾光器12入射於固體攝像元件13。
固體攝像元件13具有由複數個像素2維配置而成之像素群(像素陣列部)，將被攝體光以像素單位轉換為電性信號，且將其電性信號供給於A/D轉換部14。
固體攝像元件13係於預覽攝影時，藉由後述之3A控制部19設定為HDR攝影模式而動作。另一方面，於記錄攝影時，固體攝像裝置13係藉由3A控制部設定為普通攝影模式而動作。
圖5A係顯示以HDR攝影模式動作時之固體攝像元件13之狀態之圖。
圖5B係顯示以普通攝影模式動作時之固體攝像元件13之狀態之圖。
於HDR攝影模式中，如圖5A所示，將長畜像素與短畜像素以2列為單位交替配置之方式，對以拜耳排列所排列之各像素設定曝光量。
另一方面，於普通攝影模式中，如圖5B所示，對以拜耳排列所排列之各像素設定單一之曝光量。另，對普通攝影模式而言，於HDR攝影模式中對長畜像素所設定之曝光量為對全部像素統一地設定。
返回至圖4，A/D轉換部14係將自固體攝像元件13供給之類比電性信號(像素信號)轉換為數位像素信號。A/D轉換部14係將A/D轉換後之數位像素信號供給於箍位部15。
箍位部15係自A/D轉換部14輸出之像素信號減去判定為黑色之位準即黑色位準。接著，箍位部15將黑色位準減算後之像素信號輸出於記憶部16。
記憶部16係暫時記憶來自箍位部15之像素信號(像素資料)。接著，記憶部16將長畜像素之像素資料(以下，亦稱為長曝光資料)供給於長畜短畜合成部18及解馬賽克部(demosaic portion)21，且將短畜像素之像素資料(以下，亦稱為短曝光資料)供給於倍率運算部17。
倍率運算部17藉由將自記憶部16供給之短曝光資料乘以曝光 比，將短曝光資料倍率修正為長曝光資料之感光度。接著，倍率運算部17係將倍率修正後之短曝光資料供給於長畜短畜合成部18。
圖6係說明利用倍率運算部17之倍率修正處理。
圖6A係顯示長曝光資料與短曝光資料之關係。即使如長畜像素中飽和之情形，短畜像素中由於曝光量較小，故未達到飽和位準，而難以飽和。
倍率運算部17係藉由對短曝光資料乘以長畜與短畜之曝光比，生成圖6B所示之倍率修正後之短曝光資料。藉此，生成高動態範圍之信號。另，倍率修正後之短曝光資料之斜率與長曝光資料之斜率相等。
再返回至圖4，長畜短畜合成部18，於HDR攝影模式中，係合成自倍率運算部17供給之倍率修正後之短曝光資料與自記憶部16供給之長曝光資料。接著，長畜短畜合成部18將合成之結果獲得之合成資料供給於3A控制部19、動態被攝體檢測部20、及圖案檢測部28。
另一方面，於普通攝影模式中，由於長畜像素之曝光量於全部像素統一地設定，故全部像素之像素值作為長曝光資料，自記憶部16供給於長畜短畜合成部18。長畜短畜合成部18係將其長曝光資料供給於3A控制部19、動態被攝體檢測部20、及圖案檢測部28。
另，自長畜短畜合成部18供給於3A控制部19、動態被攝體檢測部20、及圖案檢測部28之合成資料及長曝光資料可為像素單位資料，亦可為將像素群分割為複數個區塊，且區塊內之各像素資料之平均值等之區塊單位之像素資料。
3A控制部19，於HDR攝影模式中，係基於自長畜短畜合成部18供給之高動態範圍之信號即合成資料進行3A控制。另一方面，於普通攝影模式中，3A控制部19係基於自長畜短畜合成部18供給之長 曝光資料進行3A控制。
此處，所謂3A控制係指自動曝光(AutoEcposure)、自動聚焦(Aoto Focus)、自動白平衡(Auto White Balance)之控制。
因此，若更具體而言，則3A控制部19係基於自長畜短畜合成部18供給之合成資料等之對比資訊判定是否聚焦、且基於其判定結果進行驅動光學透鏡11之控制。又，3A控制部19係基於自長畜短畜合成部18供給之合成資料等決定固體攝像元件13之各像素之快門時間及增益，且設定於固體攝像元件13。此外，3A控制部19係基於自長畜短畜合成部18供給之合成資料等，生成用以進行白平衡等顏色處理之顏色控制資訊，且供給於LM/WB/灰度係數修正部22。
動態被攝體檢測部20係執行檢測攝影圖像中之動態被攝體之處理，並將其檢測結果供給於控制部30。
解馬賽克部21係藉由對來自記憶部16之長曝光資料進行解馬賽克處理而進行顏色資訊之插補等，且轉換為RGB資料。解馬賽克部21係將解馬賽克處理後之圖像資料供給於LM/WB/灰度係數修正部22。
LM/WB/灰度係數修正部22係對來自解馬賽克部21之圖像資料，使用來自3A控制部19之顏色控制資訊進行顏色特性之修正。具體而言，LM/WB/灰度係數修正部22係為填補以規格決定之原色(RGB)之色度點與實際相機之色度點之差，使用矩陣係數修正圖像資料之各顏色信號，且進行使顏色再現性改變之處理。又，LM/WB/灰度係數修正部22係藉由針對圖像資料之各通道值設定相對於白色之增益，而調整白平衡。此外，LM/WB/灰度係數修正部22係調節圖像資料之顏色與輸出裝置特性之相對關係，進行用以獲得更接近原圖顯示之灰度係數修正。LM/WB/灰度係數修正部22係將修正後之圖像資料供給於亮度色度信號生成部23。
亮度色度信號生成部23係自LM/WB/灰度係數修正部23供給之圖像資料生成亮度信號(Y)與色差信號(Cr，Cb)。亮度色度信號生成部23於生成亮度色度信號(Y，Cr，Cb)時，將其亮度信號與色差信號供給於顯示器24與記錄控制部26。
顯示器24係由例如LCD(Liquid Crystal Display：液晶顯示器)或有機EL(Electro Luminescence：電致發光)顯示器等顯示器，及驅動該顯示器之顯示器驅動器裝置等構成。
顯示器24係基於自亮度色度信號生成部23供給之圖像資料(亮度色度信號)而顯示圖像。換言之，顯示器24係顯示以固體攝像元件13攝影之動態圖像或靜止圖像。於顯示器24上，重疊觸控面板25，其可檢測藉由使用者之手指等朝顯示器24之操作輸入。將藉由觸控面板25檢測之觸控輸入資訊供給於控制部30。
記錄控制部26於未圖示之錄影按鈕被操作等而接獲指示記錄開始之情形時，對自亮度色度生成部23供給之圖像資料，藉由特定之編碼方式實施壓縮編碼處理，且記錄於記錄媒體27。記錄媒體27係可由例如半導體記憶體、磁性記錄媒體、光磁性記錄媒體等構成，並記憶(記錄)經壓縮編碼之攝影圖像之圖像資料。
圖案檢測部28係基於自長畜短畜合成部18供給之合成資料等，於攝影圖像之中，檢測是否與預先登錄於記憶部29之圖案圖像一致者，且將其檢測結果供給於控制部30。記憶部29係記憶藉由圖案檢測部28進行圖案檢測所需要之臉或物體之圖案圖像。
控制部30係控制攝像裝置1整體之動作。例如，控制部30係基於操作記錄開關之錄影按鈕(未圖示)之操作，判斷係預覽攝影或記錄攝影，且將切換普通攝影模式與HDR攝影模式之控制信號供給於3A控制部19。3A控制部19係基於來自控制部30之控制信號，對固體攝像元件13之各像素，設定與普通攝影模式或HDR攝影模式對應 之曝光量。
又，控制部30係基於由動態被攝體檢測部20供給之動態被攝體資訊、自觸控面板25供給之觸控輸入資訊、自圖案檢測部28供給之圖案檢測資訊等，生成顯示3A控制之對象區域之3A控制區域信號，且供給於3A控制部19。
具體而言，控制部30係基於自觸控面板25供給之觸控輸入資訊，將顯示攝影圖像中使用者指定之區域之資訊，作為對準聚焦或曝光量等之3A控制之對象區域，供給於3A控制部19。
又例如，控制部30係基於由動態被攝體檢測部20供給之動態被攝體資訊，將顯示於攝影圖像中檢測之特定物體存在之區域之資訊，作為對準聚焦或曝光量等之3A控制之對象區域，供給於3A控制部19。
或又，控制部30係基於自圖案檢測部28供給之圖案檢測資訊，將顯示在攝影圖像內檢測之使用者臉之區域的資訊，作為對準聚焦或曝光量等之3A控制之對象區域，供給於3A控制部19。
因此，動態被攝體檢測部20、觸控面板25及圖案檢測部28係作為特定出成為進行3A控制(例如，曝光量之決定)之對象區域之像素群之特定區域的區域特定部發揮功能。
另，控制部30係可任意選擇或組合使用動態被攝體資訊、觸控輸入資訊、及圖案檢測資訊。
另，3A控制部19或控制部30係可藉由讀取記憶於ROM(Read Only Memory：唯讀記憶體)之程式並於CPU(Central Processing Unit：中央處理單元)執行而實現，亦可將3A控制部19與控制部30作為一個控制部(控制裝置)而設置。
又，3A控制部19或控制部30係亦可與固體攝像元件13一起構成為一個晶片之形態，或與光學透鏡11或光學濾光器12一起封裝之 攝像模組之形態。
或又，3A控制部19或控制部30係亦可與倍率運算部17或長畜短畜合成部18等一起構成為一個控制裝置。即，攝像裝置1之各構成係可以任意之單位分割或合併，作為一個裝置、模組、晶片等構成
攝像裝置1係如以上般而構成。
<3.HDR攝影模式之攝影圖像資料之流程>
圖7係顯示攝像裝置1以HDR攝影模式動作時之攝影圖像資料之流程。
將固體攝像元件13中設定於長畜像素與短畜像素之任一者而得之各像素之像素資料供給、記憶於記憶部16。
接著，短畜像素之像素資料即短曝光資料係自記憶部16供給於倍率運算部17，以倍率運算部17進行倍率修正後，供給於長畜短畜合成部18。
另一方面，長畜像素之像素資料即長曝光資料係自記憶部16供給於長畜短畜合成部18與解馬賽克部21。
於長畜短畜合成部18中，合成倍率修正後之短曝光資料與長曝光資料，且將其結果獲得之合成資料供給於3A控制部19。因此，於HDR攝用模式中，基於高動態範圍之合成資料，執行3A控制。
又，亦對動態被攝體檢測部20與圖案檢測部28供給高動態範圍之合成資料。藉此，即使於如普通無法看見飽和之區域存在動態被攝體或使用者臉之區域之情形，動態被攝體檢測部20及圖案檢測部28仍可檢測該等。
另一方面，於解馬賽克部21中，自記憶部16僅供給長曝光資料。因此，預覽攝影時顯示於顯示器24之圖像成為基於如圖8A所示之經去掉中間部分之信號之圖像。
雖預覽攝影時顯示於顯示器24之圖像亦可為基於經去掉中間部分之信號之圖像，但當然，亦可顯示如圖8B所示之插補經缺損之短畜像素之像素資料之圖像。
插補短畜像素之像素資料之方法亦有自周邊之像素資料以雙線性插補等推斷之方法，但亦可例如使用短畜像素之像素資料。於此情形時，長畜短畜合成部18將合成倍率修正後之短曝光資料與長曝光資料之合成資料供給於解馬賽克部21。然而，與供給於3A控制部19之合成資料不同，如圖9所示，不供給飽和位準以上之像素資料，而將與長畜像素相同輸出範圍內剪輯之合成資料作為顯示器顯示用之信號，自長畜短畜合成部18供給於解馬賽克部21。
例如，將長畜像素之像素資料設為以10位元之1024灰階運算時，短畜像素之倍率修正資料亦以1024灰階顯示。理由為：若為短畜像素之倍率修正資料，則如圖6B所示，雖可表現更明亮區域，其係由於記錄攝影時將以普通攝影模式動作作為前提，故預覽攝影與記錄攝影中，顯示器顯示用之像素信號之動態範圍不具有差異。藉此，由於預覽攝影時顯示於顯示器24之圖像，及記錄攝影時顯示於顯示器24之圖像未產生差異，故於記錄攝影時可攝影、記錄使用者期望之影像。
圖10係顯示攝影裝置1之利用HDR攝影模式之圖像資料之概念圖。
圖10之上段係顯示輸入於記憶部16之短畜像素與長畜像素之像素資料之概念圖。於像素信號之運算位元數為10位元之情形時，短畜像素與長畜像素之任一者均以1024灰階表現。
圖10之下段係顯示以長畜短畜合成部18合成處理後之合成資料之概念圖。合成處理後之合成資料係以超過1024灰階之高動態範圍表現。
然而，如上述般，超過1024階調之號動態範圍合成資料僅輸入於3A控制部19，而於顯示器24中，顯示合成資料以1024灰階剪輯之圖像。
由於對3A控制部19輸入超過1024灰階之高動態範圍之合成資料，故即使於例如於顯示器24上之顯示為指定經編輯之區域作為3A控制對象區域之情況，亦可立刻以使其區域變為最佳曝光之方式執行3A控制。
於一般之HDR攝影模式中，由於即使顯示器24之顯示亦使用超過1024灰階之高動態範圍之合成資料，故於本揭示之攝像裝置1中，該方面與一般之HDR攝影模式不同。
<4.普通攝影模式之攝影圖像資料之流程>
圖11係顯示攝像裝置1以普通攝影模式動作時之攝影圖像資料之流程。
於普通攝影模式中，固體攝像元件13之全部像素均設定為相同之曝光量。於本實施形態中，如上述般，由於固體攝像元件13之全部像素設定為預覽攝影時之最適合曝光量即長畜像素曝光量，故於記憶部16中，記憶長曝光資料。
接著，將記憶於記憶部16之長曝光資料供給於長畜短畜合成部18及解馬賽克部21。
長畜短畜合成部18係將自記憶部16供給之長曝光資料直接供給於3A控制部19、動態被攝體檢測部20、及圖案檢測部28。因此，於普通攝影模式之中，基於全部像素中統一曝光量獲得之像素資料，執行3A控制。
又，由於亦對解馬賽克部21供給全部像素設定為長畜像素之曝光量獲得之像素資料，故設定為最佳曝光量之高解析度之畫像顯示於顯示器24，且記錄於記錄媒體27。
<一般普通攝影模式及HDR攝影模式之比較>
參照圖12，進一步比較說明本揭示之攝像裝置1、及一般普通攝影模式及HDR攝影模式。
於一般普通攝影模式中，預覽攝影時顯示於顯示器24之顯示圖像、使用於3A控制之信號、及記錄攝影時顯示於顯示器24之顯示圖像(記錄圖像亦相同)之任一者，均成為解析度高但動態範圍狹小之圖像。
相反地，於一般之HDR攝影模式中，預覽時顯示於顯示器24之顯示圖像、使用於3A控制之信號、及記錄攝影時顯示於顯示器24之顯示圖像之任一者，均成為動態範圍大但犧牲了解析度之圖像。
相對於此，於攝像裝置1中，預覽攝影係以與一般HDR攝影模式相同之驅動控制固體攝像元件13，雖3A控制中使用與一般HDR攝影模式相同之高動態範圍之信號，然而作為顯示於顯示器24之顯示圖像係僅使用長畜像素之信號。而且，記錄攝影時，亦由於基於長畜像素之信號將圖像顯示於顯示器24，故於攝像裝置1中，有所謂預覽攝影之顯示圖像、及記錄攝影之顯示圖像之外觀不改變之特徵。
又，於攝像裝置1中，由於3A控制使用高動態範圍之信號，故即使於例如一般普通攝影模式中使用者將飽和之區域作為3A控制對象區域進行觸控輸入之情形，亦可即時運算且控制觸控位置之合適之曝光量。
接著，於開始記錄攝影之情形時，由於對全部像素設定其合適之曝光量，故可顯示、記錄解析度高之圖像。
因此，根據攝像裝置1，即使於攝影明暗差顯著之情景之情形，於預覽攝影中，亦可瞬時地將曝光量或聚焦等設定為最佳值，且可解決一般HDR攝影模式中發生之記錄攝影圖像之解析度降低之 問題。
換言之，攝像裝置1係於不留有圖像之預覽攝影中，進行使用高動態範圍廣之像素信號之控制，於留有圖像之記錄攝影中，進行設定為單一曝光量而提高解析度之控制。
<5.攝影處理之流程>
圖13係顯示利用攝像裝置1進行攝影處理之流程。
於預覽攝影中，動態範圍狹小(經剪輯)之圖像51顯示於顯示器24。
接著，例如，使用者於顯示於顯示器24之圖像51中，將飽和區域(像素)52作為3A控制對象區域進行觸控。此時，以觸控面板25檢測之觸控位置經由控制部30供給於3A控制部19。
於3A控制部19中，由於供給基於合成資料之高動態範圍之信號，故3A控制部19可運算顯示器24上未顯示之區域52之適當之3A控制量，且將觸控位置控制為適合正確之曝光量、聚焦位置、及白平衡。藉此，曝光量、聚焦位置等對準於觸控位置而適當地設定之圖像53顯示於顯示器24。
接著，按下錄影按鈕時，攝影使適當地設定之曝光量應用全部像素之動態圖像(圖像54-1、54-2、54-3、……)，顯示於顯示器24，且記錄於記錄媒體27。
一般之普通攝影模式中，於觸控位置飽和之情形時，由於完全沒有該部位以何種程度之累積時間變為不飽和之資訊，只可慢慢地降低曝光量，故直至將曝光量調至適切值較耗費時間。
於本揭示之攝像裝置1中，如上述般，由於3A控制係基於合成資料使用高動態範圍之信號，故即使觸控位置於顯示器24上已飽和之情形，亦可高速且正確地設定合適正確之曝光量，且亦可對準聚焦。
換言之，於本揭示之攝像裝置1中，藉由僅於預覽攝影之3A控制中，應用基於合成資料之高動態範圍之信號，可高速且正確地設定合適正確之曝光量，且亦可對準聚焦。
<6.預覽攝影處理之處理流程>
接著，參照圖14之流程圖，對攝像裝置1之預覽攝影時之處理即預覽攝影處理進行說明。例如，對攝像裝置1通入電源時，開始圖14之處理。
首先，於步驟S1中，3A控制部19基於來自控制部30之指令，以HDR攝影模式驅動固體攝影元件13。固體攝像元件13以HDR攝影模式開始驅動。於HDR攝影模式中，如圖5A所示，以成為長畜像素或短畜像素之任一者之方式設定曝光量，且將所攝影之像素資料供給於記憶部16。
於步驟S2中，記憶部16係將短曝光資料(短畜像素之像素資料)供給於倍率運算部17，且將長曝光資料(長畜像素之像素資料)供給於長畜短畜合成部18及解馬賽克部21。
於步驟S3中，倍率運算部17將自記憶部16供給之短曝光資料乘以曝光比，且將倍率修正後之短曝光資料供給於長畜短畜合成部18。
於步驟S4中，長畜短畜合成部18係合成自倍率運算部17供給之倍率修正後之短曝光資料與自記憶部16供給之長曝光資料。
接著，於步驟S5中，長畜短畜合成部18將合成結果獲得之合成資料供給於3A控制部19、動態被攝體檢測部20、及圖案檢測部28。
於步驟S6中，3A控制部19基於高動態範圍之信號即合成資料進行3A控制。
於步驟S7中，顯示器24顯示基於長曝光資料之圖像。另，步驟S7之處理可與上述步驟S3至步驟S6之處理並行執行。
於步驟S8中，控制部30基於來自觸控面板25之觸控輸入資訊，判定顯示器24是否有使用者之觸控。
於以步驟S8判定無使用者觸控之情形時，處理返回至步驟S1，再度執行其以後之處理。即，繼續基於合成資料之3A控制，及基於長曝光資料之圖像於顯示器24之顯示。
另一方面，於以步驟S8判定有使用者觸控之情形時，處理進行至步驟S9，控制部30基於來自觸控面板25之觸控輸入資訊，將顯示觸控位置之3A控制對象區域信號輸出於3A控制部19。
於步驟S10中，3A控制部19基於所取得之3A控制對象區域信號，判定觸控位置是否為長畜像素飽和之區域。
於以步驟S10判定觸控位置為長畜像素飽和之區域之情形時，處理進行至步驟S11，3A控制部19使用觸控位置周邊之短曝光資料進行3A控制。
3A控制部19係可例如藉由以下之計算式，使用短畜像素之像素資料，瞬時地計算最佳之曝光量。
最佳曝光量Y<飽和信號值a÷(短畜像素值b×曝光比c)×長畜曝光量d
另，最佳曝光量之計算式並非限定於上述之計算式，可採用任意之計算式。
另一方面，於以步驟S10判定觸控位置並非長畜像素飽和之區域之情形時，處理進行至步驟S12，3A控制部19使用觸控位置之長曝光資料進行3A控制。
於步驟S11及步驟S12之處理中，長畜像素之曝光量設定為最佳之曝光量。短畜像素之曝光量係預先設定之任意(固定之)曝光量，或，可設為相對於設定為最佳值之長畜像素之曝光量以特定之曝光比求出曝光量。
於步驟S13中，控制部30判定錄影按鈕是否按下。於以步驟S13判定錄影按鈕尚未按下之情形時，處理返回至步驟S1，重複上述之處理。
另一方面，於以步驟S13判定錄影按鈕按下之情形時，處理進行至步驟S14，控制部30將攝影模式自HDR攝影模式變更為普通攝影模式，且固體攝像元件13藉由普通攝影模式開始驅動，完成預覽攝影處理。
另，開始普通攝影模式時，將HDR攝影模式中設定於固體攝像元件13之長畜像素之曝光量，對全部像素進行設定。
<7.變化例>
於上述之例中，於預覽攝影時之HDR攝影模式中將長畜像素之像素資料供給於顯示器24，且於記錄攝影時之普通攝影模式中，雖於長畜像素之曝光量統一全部像素之曝光量，但亦可使用短畜像素之像素資料。即，於預覽攝影時之HDR攝影模式中亦可將短畜像素之像素資料供給於顯示器24，於記錄攝影時之普通攝影模式中，則將全部像素之曝光量統一為短畜像素之曝光量。於此情形時，於上述步驟S11及S12之處理中設定為最佳之曝光量時，成為短畜像素。
於使用短畜像素之像素資料之情形時，由於短畜像素難以飽和，故3A控制亦可使用未飽和之信號。然而，短畜像素之像素資料由於累積時間短故雜訊較大(S/N比較小)，因此進行3A控制時，例如，基於對比度而對準聚焦位置之AF方法等產生弊端。因此，長畜像素未飽和之區域，係如圖14之流程圖說明般，期望使用雜訊較小(S/N比較大)之長畜像素進行3A控制(對比度AF等)。
於上述實施形態中，雖將預覽攝影時之HDR攝影模式中之曝光量種類設為短畜與長畜2種類，但HDR攝影模式中之曝光量之種類可設為3以上種類。於此情形時，記錄攝影時之普通攝影模式中曝 光量之種類成為較預覽攝影時HDR攝影模式中之曝光量之種類更少之種類。
例如，攝像裝置1於預覽攝影時之HDR攝影模式中，使用曝光量+、曝光量++、曝光量+++、曝光量++++之4種曝光量進行3A控制。此處，「+」表示一定之曝光量，「+」之個數越多，表示曝光量越大。
於此情形，於預覽攝影中，攝像裝置1將使用曝光量+++與曝光量++++之曝光量較大之2種像素資料之圖像顯示於顯示器24。接著，攝像裝置1以曝光量+++與曝光量++++之像素成為最佳之曝光量之方式進行3A控制。此後，於自HDR攝影模式變更為普通攝影模式時，攝像裝置1將全部像素之曝光量設定為曝光量+++或曝光量++++所得之圖像記錄於記錄媒體27。
如以上般，攝像裝置1於預覽攝影時之HDR攝影模式中，可對像素群設定複數種曝光量，於記錄攝影時之普通攝影模式中，可對像素群設定包含預覽攝影時之曝光量之至少一者、且較HDR攝影模式較少種類之曝光量。即使於此種情形，記錄攝影時，由於比預覽攝影時曝光量之種類更為減少而提高解析度，故可較預覽攝影時更提高解析度。
又，預覽攝影時之HDR攝影模式中之短畜像素與長畜像素之排列方法亦並非限定於圖5A所示之排列，可任意為之。亦可為例如如圖1所示之如排列P1或P2之排列方法。此外，亦可為如日本特開2010-28423號公報所記載，將2×2像素視為1個單位像素之排列。
另，於上述之例中，雖主要針對3A控制中曝光量(AE)之控制進行說明，但當然自動聚焦控制、或自動白平衡控制亦可同樣地控制。
又，自動聚焦控制既可使用短畜像素之對比度資訊進行，亦可 如圖15所示排列於3×3像素之中央部之、像素之一部分被遮光之相位差像素混合存在於固體攝像元件13之像素群中，且使用來自相位差像素之信號，由3A控制部19進行自動聚焦控制。
相位差像素由於一部分被遮光，故即使作為長畜像素設定曝光量亦比普通像素難以飽和，於假定飽和之情形時，使用作為短蓄像素設定曝光量之相位像素進行自動聚焦控制即可。另，使用相位差像素信號控制自動聚焦之方法記載於例如日本特開2010-160313號公報。
於曝光量較大之長蓄像素中，即使是日光燈、太陽光均能引起飽和，但只要短蓄像素為某程度之亮度(例如日光燈)則可設定為不飽和。即，由於可獲得達到光源之發光源附近之信號(越自光源遠離，越難以推斷混雜複數種光源顏色)，故自其光源之RGB比，可更正確地推斷光源。3A控制部19可基於光源推斷之結果，適切地控制自動白平衡。例如，若光源為暖色係白熱燈泡，則可設為略微加強紅色之白平衡，進行接近記憶色等控制。 <8.電子機器之應用例>
上述之攝像裝置1之攝像功能對於例如數位靜態照相機或攝錄影機、具有攝像功能之智慧型手機(多功能行動電話機)等攜帶終端、膠囊內視鏡、眼鏡上附加攝像功能之眼鏡型攝像裝置等全部電子機器均可應用。
以下，說明應用攝像裝置1之攝像功能的電子機器之具體例。另，所謂攝像裝置1之攝像功能係指固體攝像元件13生成像素信號之功能、與倍率運算部17、長畜短畜合成部18、3A控制部19、解馬賽克部21、控制部30等進行之使用所生成之像素信號進行控制之功能。
<晶片形態之攝像裝置>
圖16係顯示將攝像裝置1之攝像功能設為晶片形態之構成例。即，攝像裝置1之攝像功能可設為如圖16中作為攝像裝置101至103顯示之晶片形態之構成。
於圖16上段所示之攝像裝置101係構成為，於1個半導體晶片121內，搭載像素群所形成之像素區域122；控制電路123，其將控制信號供給於像素群；及邏輯電路124，其包含上述3A控制部19或控制部30之信號處理電路。
於圖16中段所示之攝像裝置102係由第1半導體晶片部131及第2半導體晶片部132構成。於第1半導體晶片部131中，搭載像素區域133及控制電路134，於第2半導體晶片部132中，搭載邏輯電路135，其包含上述3A控制部19或控制部30之信號處理電路。且，第1半導體晶片部131與第2半導體晶片部132藉由互相電性連接，而構成作為1個半導體晶片之攝像裝置102。
於圖16下段所示之攝像裝置103係由第1半導體晶片部141與第2半導體晶片部142構成。於第1半導體晶片部141中，搭載像素區域143，於第2半導體區域142中，搭載控制電路144、及包含上述3A控制部19或控制部30之信號處理電路之邏輯電路145。而且，第1半導體晶片部141與第2半導體晶片部142藉由互相電性連接，構成作為1個半導體晶片之攝像裝置103。
<膠囊內視鏡之應用>
圖17係顯示搭載攝像裝置1之攝像功能之膠囊內視鏡之剖面構成之圖。
圖17之膠囊內視鏡200係於例如兩端面為半球狀且中央部為圓筒狀之框體210內，具備相機(超小型相機)211，其係用以攝影體腔內之圖像；記憶體212，其用以記錄藉由相機211攝影之圖像資料；及無線發送機213，其係於膠囊內視鏡200被排出於被驗者體外後， 將所記錄之圖像資料經由天線214朝外部發送。
進而於框體210內中，設有CPU 215及線圈(磁力．電流轉換線圈)216。
CPU 215係控制藉由相機211攝影、及對記憶體212之資料累積動作，且控制自記憶體212利用無線發送機213朝框體210外之資料接收裝置(未圖示)之資料發送。
線圈216係對相機211、記憶體212、無線發送機213、天線214及後述之光源211b進行電力供給。
進而於框體210中，設置有於將膠囊內視鏡200安裝於資料接收裝置時用以檢測此安裝之導線(磁性)開關217。此導線開關217於檢測到對資料接收裝置之安裝，而可發送資料之時點，自線圈216開始朝無線發送機213之電力供給。
相機211具有例如用以攝影體腔內圖像之包含對物光學系之固體攝像元件211a，及照亮體腔內之複數個(此處為2個)光源211b，光源211b係例如以LED(Light Emitting Diode：發光二極體)構成。
固體攝像元件211a與圖4之固體攝像元件13對應，且CPU 215係對應於圖4之3A控制部19或控制部30進行控制。
<智慧型手機之應用例>
圖18係顯示搭載攝像裝置1之攝像功能之智慧型手機之外觀構成之圖。
智慧型手機300具有揚聲器311、顯示器312、操作按鈕313、話筒314、攝像部315等。
以智慧型手機300執行電話功能之情形時，自話筒314取得之發話聲音經由通信部(未圖示)發送於基地台，來自對手之受話聲音自通信部供給於揚聲器311重現聲音。
顯示器312係包含例如LCD(Light Crystal Display：液晶顯示 器)，顯示電話待機畫面等特定之畫面。於顯示器312中，重疊有觸控面板，可檢測藉由使用者之手指等對顯示器312之操作輸入。智慧型手機300係可根據所檢測之使用者操作輸入，進行特定之處理，例如進行攝像功能之執行等。
攝像部315係包含固體攝像元件與光學透鏡等，攝像被攝體，且將其結果獲得之圖像資料記憶於內部記憶體等。攝像部315之固體攝像元件與圖4之固體攝像元件13對應，且3A控制部19或控制部30係以設於智慧型手機300內之CPU實現。
<眼鏡型攝像裝置之應用例>
圖19係顯示搭載攝像裝置1之攝像功能之眼鏡型攝像裝置之構成例。
圖19之眼鏡型攝像裝置400係包含固體攝像元件412，其係安裝於眼鏡框411中央部；框體414，其係固定眼鏡透鏡413，且內建有能驅動控制固體攝像元件412之圖像信號處理電路。
固體攝像元件412係與圖4之固體攝像元件13對應，設置於框體414內之圖像信號處理電路係具備圖4之3A控制部19及控制部30之控制功能，檢測使用者眼球之移動，且配合眼球之朝向(移動)，進行3A控制。
以固體攝像元件412攝影之圖像資料係經由通信纜線415朝外部電路發送。當然，眼鏡型攝像裝置400亦可具備無線通信功能，而藉由無線通信發送圖像資料。又，以固體攝像元件412攝影之圖像亦可投影於眼鏡鏡片413上。
本揭示之實施形態係並非限定於上述實施形態者，於未脫離本揭示要旨之範圍中可有各種變更。
例如，可採用組合上述之複數個實施形態之全部或一部分之形態。
於上述例中，雖將固體攝像元件13之像素群作為利用拜耳排列所排列者進行說明，亦可藉清除位元排列等其他之排列配置。又，關於彩色濾光器亦不僅為R、G、B，亦可包含白色濾光器(W)或紅外濾光器(IR)等。此外，固體攝像元件13係可為背面照射型及表面照射型之固體攝像元件，亦可為如揭示於日本特開2011-29337號公報之於縱方向層積有機光電轉換膜與無機光電轉換層之縱方向分光型之固體攝像元件。
另，於本說明書中，當然，記述於流程圖之步驟係可於沿記載之順序時間系列進行，即使於並非按時間系列之處理，亦可以並列地、或進行傳喚時等必要之時間執行。
記載於本說明書之效果僅為示例並非限定者，亦可有記載於本說明書者以外之效果。
另，本揭示係亦可採用如以下之構成。
(1)
一種控制裝置，其包含：控制部，其控制由複數個像素2維配置而成之像素群之曝光量；上述控制部係於開始記錄攝影圖像之前之第1模式中，對上述像素群設定複數種曝光量，於記錄攝影圖像之第2模式中，對上述像素群設定種類少於上述第1模式之曝光量。
(2)
如上述(1)之控制裝置，其中上述控制部係將上述第1模式中對上述像素群設定之上述複數種曝光量中之至少1種，於上述第2模式中對上述像素群設定。
(3)
如上述(1)或(2)之控制裝置，其中 上述控制部係於上述第1模式中，將不使用飽和像素之像素信號，而使用非飽和像素之像素信號求出之上述曝光量設定於上述像素群。
(4)
如上述(3)之控制裝置，其中上述控制部係將上述複數種曝光量之像素信號中、使用S/N比較大之上述非飽和像素之像素信號求出之上述曝光量設定於上述像素群。
(5)
如上述(1)至(4)中任一項之控制裝置，其中上述控制部係於上述第1模式中，設定使用上述複數種曝光量之像素信號中之高動態範圍像素信號求出之上述曝光量。
(6)
如上述(5)之控制裝置，其中上述控制部係設定使用較顯示器顯示用之像素信號更高之上述高動態範圍之像素信號求出之上述曝光量。
(7)
如上述(5)之控制裝置，其中更具備區域特定部，其特定出成為決定上述曝光量之對象區域之上述像素群之特定區域，上述控制部係設定使用藉由上述區域特定部特定出之區域之上述高動態範圍之像素信號求出之上述曝光量。
(8)
如上述(7)之控制裝置，其中上述區域特定部特定出上述攝影圖像內之使用者之臉部區域作為成為決定上述曝光量之對像區域之上述特定區域。
(9)
如上述(7)之控制裝置，其中上述區域特定部特定出上述攝影圖像內之使用者指定之區域作為成為決定上述曝光量之對像區域之上述特定區域。
(10)
如上述(7)之控制裝置，其中上述區域特定部特定出上述攝影圖像內之特定物體存在之區域作為成為決定上述曝光量之對像區域之上述特定區域。
(11)
如上述(1)至(10)中任一項之控制裝置，其中上述控制部於上述第1模式中，對上述像素群設定2種曝光量，於上述第2模式中，對上述像素群設定1種曝光量。
(12)
如上述(11)之控制裝置，其中更包含合成部，其合成將曝光量較小之像素之像素信號藉由乘以曝光比而經倍率修正之像素信號、與曝光量較大之像素之像素信號。
上述合成部係於上述第1模式中，合成上述經倍率修正之像素信號與上述曝光量較大之像素之像素信號且供給於上述控制部，於上述第2模式中，將1種曝光量之像素信號供給於上述控制部。
(13)
如上述(1)至(12)中任一項之控制裝置，其中更包含合成部，其合成將曝光量較小之像素之像素信號乘以曝光比而經倍率修正之像素信號，與曝光量較大之像素之像素信號。
上述合成部係於上述第1模式中，將上述經倍率修正之像素信號與上述曝光量較大之像素之像素信號進行合成之信號，以上述第 2模式之顯示灰階將經剪輯之信號作為顯示器顯示用之信號輸出。
(14)
如上述(12)之控制裝置，其中上述控制部於上述第1模式中，基於藉由上述合成部所合成之上述信號而亦進行自動聚焦控制。
(15)
如上述(12)或(14)之控制裝置，其中上述控制部於上述第1模式中，基於藉由上述合成部所合成之上述信號而亦生成用以白平衡之顏色控制資訊。
(16)
如上述(1)至(15)中任一項之控制裝置，其中於上述像素群中，包含相位差像素，上述控制部使用上述相位差像素之像素信號而亦進行自動聚焦控制。
(17)
一種控制方法，其係控制由複數個像素2維配置而成之像素群之曝光量之控制裝置，於開始記錄攝影圖像之前之第1模式中，於上述像素群設定複數種曝光量，於記錄攝影圖像之第2模式中，於上述像素群設定較上述第1模式種類少之曝光量。
(18)
一種電子機器，其包含：固體攝像元件，其包含由複數個像素2維配置而成之像素群；控制部，其於開始記錄攝影圖像之前之第1模式中，對上述像素群設定複數種曝光量，於記錄攝影圖像之第2模式中，對上述像素群設定種類少於上述第1模式之曝光量。
11‧‧‧光學透鏡
12‧‧‧光學濾光器
13‧‧‧固體攝像元件
14‧‧‧A/D轉換部
15‧‧‧箍位部
16‧‧‧記憶部
17‧‧‧倍率運算部
18‧‧‧長畜短畜合成部
19‧‧‧3A控制部
20‧‧‧動態被攝體檢測部
21‧‧‧解馬賽克部
22‧‧‧LM/WB/灰度係數補正部
23‧‧‧亮度色度信號生成部
24‧‧‧顯示器
25‧‧‧觸控面板
26‧‧‧記錄控制部
27‧‧‧記錄媒體
28‧‧‧圖案檢測部
29‧‧‧記憶部
30‧‧‧控制部

Claims (18)

  1. 一種控制裝置，其包含控制部，該控制部控制由複數個像素2維配置而成之像素群之曝光量，上述控制部於開始記錄攝影圖像前之第1模式中，對上述像素群設定複數種曝光量，於記錄攝影圖像之第2模式中，對上述像素群設定種類少於上述第1模式之曝光量。
  2. 如請求項1之控制裝置，其中上述控制部係將上述第1模式中對上述像素群設定之上述複數種曝光量中之至少1種，於第2模式中對上述像素群設定。
  3. 如請求項1之控制裝置，其中上述控制部係於上述第1模式中，將不使用飽和像素之像素信號而使用非飽和像素之像素信號求出之上述曝光量設定於上述像素群。
  4. 如請求項3之控制裝置，其中上述控制部係將上述複數種曝光量之像素信號中、使用S/N比較大之上述非飽和像素之像素信號求出之上述曝光量設定於上述像素群。
  5. 如請求項1之控制裝置，其中上述控制部於上述第1模式中，設定上述複數種曝光量之像素信號中之使用高動態範圍之像素信號求出之上述曝光量。
  6. 如請求項5之控制裝置，其中上述控制部係設定使用較顯示器顯示用之像素信號更高之上述高動態範圍之像素信號求出之上述曝光量。
  7. 如請求項5之控制裝置，其更包含區域特定部，該區域特定部特定出成為決定上述曝光量之對象區域之上述像素群之特定區域，上述控制部係設定使用藉由上述區域特定部特定出之區域之 上述高動態範圍之像素信號求出之上述曝光量。
  8. 如請求項7之控制裝置，其中上述區域特定部特定出上述攝影圖像內之使用者之臉部區域作為成為上述決定曝光量之對像區域之上述特定區域。
  9. 如請求項7之控制裝置，其中上述區域特定部特定出上述攝影圖像內使用者所指定之區域作為成為上述決定曝光量之對像區域之上述特定區域。
  10. 如請求項7之控制裝置，其中上述區域特定部特定出上述攝影圖像內之特定物體存在之區域作為成為上述決定曝光量之對像區域之上述特定之區域。
  11. 如請求項1之控制裝置，其中上述控制部於上述第1模式中，對上述像素群設定2種曝光量，於上述第2模式中，對上述像素群設定1種曝光量。
  12. 如請求項11之控制裝置，其更包含合成部，其合成將曝光量較小之像素之像素信號藉由乘以曝光比而經倍率修正之像素信號、與曝光量較大之像素之像素信號，上述合成部於上述第1模式中，合成上述經倍率修正之像素信號與上述曝光量較大之像素之像素信號且供給於上述控制部，於上述第2模式中，將1種曝光量之像素信號供給於上述控制部。
  13. 如請求項11之控制裝置，其更包含合成部，其合成將曝光量較小之像素之像素信號乘以曝光比而經倍率修正之像素信號、與曝光量較大之像素之像素信號，上述合成部於上述第1模式中，將上述經倍率修正之像素信號與上述曝光量較大之像素之像素信號合成而成之信號，以第2模式之顯示灰階進行剪輯之信號作為顯示器顯示用之信號輸出。
  14. 如請求項12之控制裝置，其中上述控制部於上述第1模式中，基於由上述合成部所合成之上述信號而亦進行自動聚焦控制。
  15. 如請求項12之控制裝置，其中上述控制部於上述第1模式中，基於由上述合成部所合成之上述信號而亦生成用於白平衡之顏色控制資訊。
  16. 如請求項1之控制裝置，其中於上述像素群中，包含相位差像素，上述控制部使用上述相位差像素之像素信號而亦進行自動聚焦控制。
  17. 一種控制方法，其係以控制由複數個像素以2維配置而成之像素群之曝光量之控制裝置，於開始攝影圖像之記錄前之第1模式中，對上述像素群設定複數種曝光量，於記錄攝影圖像之第2模式中，對上述像素群設定較上述第1模式種類少之曝光量。
  18. 一種電子機器，其包含：固體攝像元件，其包含由複數個像素2維配置而成之像素群；控制部，其於開始記錄攝影圖像前之第1模式中，對上述像素群設定複數種曝光量，於記錄攝影圖像之第2模式中，對上述像素群設定種類少於上述第1模式之曝光量。
TW103125392A 2013-08-22 2014-07-24 控制裝置、控制方法及電子機器 TWI661727B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2013-171966 2013-08-22
JP2013171966A JP2015041890A (ja) 2013-08-22 2013-08-22 制御装置、制御方法、および電子機器

Publications (2)

Publication Number Publication Date
TW201515466A true TW201515466A (zh) 2015-04-16
TWI661727B TWI661727B (zh) 2019-06-01

Family

ID=52483518

Family Applications (1)

Application Number Title Priority Date Filing Date
TW103125392A TWI661727B (zh) 2013-08-22 2014-07-24 控制裝置、控制方法及電子機器

Country Status (6)

Country Link
US (1) US9998679B2 (zh)
JP (1) JP2015041890A (zh)
KR (1) KR102184916B1 (zh)
CN (1) CN105379248B (zh)
TW (1) TWI661727B (zh)
WO (1) WO2015025740A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9467632B1 (en) 2015-07-13 2016-10-11 Himax Imaging Limited Dual exposure control circuit and associated method

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150024098A (ko) * 2013-08-26 2015-03-06 삼성전자주식회사 디지털 카메라에서 사진 합성 방법 및 장치
JP6146293B2 (ja) * 2013-12-25 2017-06-14 ソニー株式会社 制御装置、制御方法および制御システム
CN104243827A (zh) * 2014-09-23 2014-12-24 深圳市中兴移动通信有限公司 拍摄方法和装置
US9848137B2 (en) * 2015-11-24 2017-12-19 Samsung Electronics Co., Ltd. CMOS image sensors having grid array exposure control
WO2017149932A1 (ja) * 2016-03-03 2017-09-08 ソニー株式会社 医療用画像処理装置、システム、方法及びプログラム
JP6584639B2 (ja) 2016-03-24 2019-10-02 富士フイルム株式会社 固体電子撮像装置の制御装置およびその制御方法
JP6675917B2 (ja) * 2016-04-19 2020-04-08 オリンパス株式会社 撮像装置及び撮像方法
US10097766B2 (en) * 2016-08-31 2018-10-09 Microsoft Technology Licensing, Llc Provision of exposure times for a multi-exposure image
GB2561163B (en) * 2017-03-30 2021-05-12 Apical Ltd Control systems and image sensors
WO2019035245A1 (ja) * 2017-08-18 2019-02-21 富士フイルム株式会社 撮像装置、撮像装置の制御方法、及び撮像装置の制御プログラム
JP2020043522A (ja) * 2018-09-12 2020-03-19 キヤノン株式会社 撮像装置及びその制御方法、プログラム、記憶媒体
JP2020198470A (ja) * 2019-05-30 2020-12-10 ソニーセミコンダクタソリューションズ株式会社 画像認識装置および画像認識方法
JP6628925B2 (ja) * 2019-07-01 2020-01-15 キヤノン株式会社 画像表示装置及びその制御方法
WO2021034311A1 (en) * 2019-08-19 2021-02-25 Google Llc Dual exposure control in a camera system
JP7457473B2 (ja) 2019-09-12 2024-03-28 キヤノン株式会社 撮像装置及びその制御方法
KR20230032359A (ko) * 2021-08-30 2023-03-07 에스케이하이닉스 주식회사 전자 장치 및 그 동작 방법
US20230269486A1 (en) * 2022-02-24 2023-08-24 Qualcomm Incorporated Multi-frame auto exposure control (aec)
CN117241134B (zh) * 2023-11-15 2024-03-08 杭州海康威视数字技术股份有限公司 用于摄像机的拍摄模式切换方法

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4869474B2 (ja) 2000-10-26 2012-02-08 オリンパス株式会社 撮像装置
JP2002232777A (ja) * 2001-02-06 2002-08-16 Olympus Optical Co Ltd 撮像システム
JP4628937B2 (ja) 2005-12-01 2011-02-09 オリンパス株式会社 カメラシステム
JP2009053296A (ja) * 2007-08-24 2009-03-12 Olympus Imaging Corp 撮影装置および撮影装置の制御方法
JP4661912B2 (ja) 2008-07-18 2011-03-30 ソニー株式会社 固体撮像素子およびカメラシステム
TW201108728A (en) * 2009-08-25 2011-03-01 Hon Hai Prec Ind Co Ltd Method and system for exposing photograph by separated regions in camera devices
JP2011059337A (ja) 2009-09-09 2011-03-24 Fujifilm Corp 撮像装置
JP5713752B2 (ja) 2011-03-28 2015-05-07 キヤノン株式会社 画像処理装置、及びその制御方法
JP5609788B2 (ja) * 2011-06-23 2014-10-22 株式会社Ｊｖｃケンウッド 画像処理装置及び画像処理方法
EP2538661B1 (en) 2011-06-23 2014-07-16 JVC KENWOOD Corporation Image processing apparatus and image processing method
JP6019692B2 (ja) * 2012-04-16 2016-11-02 ソニー株式会社 撮像素子、撮像素子の制御方法、および、撮像装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9467632B1 (en) 2015-07-13 2016-10-11 Himax Imaging Limited Dual exposure control circuit and associated method

Also Published As

Publication number Publication date
US20160173751A1 (en) 2016-06-16
TWI661727B (zh) 2019-06-01
CN105379248A (zh) 2016-03-02
WO2015025740A1 (ja) 2015-02-26
KR102184916B1 (ko) 2020-12-01
CN105379248B (zh) 2019-08-09
KR20160045051A (ko) 2016-04-26
JP2015041890A (ja) 2015-03-02
US9998679B2 (en) 2018-06-12

Similar Documents

Publication Publication Date Title
TWI661727B (zh) 控制裝置、控制方法及電子機器
US8723974B2 (en) Image pickup apparatus, image pickup method and recording device recording image processing program
TWI524709B (zh) 影像擷取設備、影像擷取設備之控制方法及電子裝置
JP5652649B2 (ja) 画像処理装置、画像処理方法および画像処理プログラム
JP5123137B2 (ja) 撮像装置および撮像方法
JP2014530376A (ja) 可動部品を含まないズームフラッシュ
JP2017022610A (ja) 画像処理装置、画像処理方法
JP2005269373A (ja) 映像信号処理システムおよび電子映像機器
JP5223686B2 (ja) 撮像装置および撮像方法
JP2008092071A (ja) 撮影装置
JP5138521B2 (ja) 撮像装置及び撮像方法
JP5277863B2 (ja) 撮像装置および撮像方法
JP2006323282A (ja) 撮影装置
JP2013192121A (ja) 撮像装置及び撮像方法
JP5247900B2 (ja) 画像センサ補償
JP2009033289A (ja) 撮像装置及び撮像方法
JP4335648B2 (ja) デジタルカメラ及びデジタルカメラの撮像方法
JP5310331B2 (ja) 撮像装置および撮像方法
JP2010068331A (ja) 撮像装置および撮像方法
JP6300514B2 (ja) 撮像装置、および撮像装置の制御方法
JP5091734B2 (ja) 撮像装置および撮像方法
JP5169540B2 (ja) 撮像装置および撮像方法
JP4326997B2 (ja) 撮像装置および合焦方法、制御プログラム、記録媒体
JP4635899B2 (ja) カメラ
JP4323912B2 (ja) 撮像装置