TWI386056B - A composition determination means, a composition determination method, and a composition determination program - Google Patents

A composition determination means, a composition determination method, and a composition determination program Download PDF

Info

Publication number
TWI386056B
TWI386056B TW097134573A TW97134573A TWI386056B TW I386056 B TWI386056 B TW I386056B TW 097134573 A TW097134573 A TW 097134573A TW 97134573 A TW97134573 A TW 97134573A TW I386056 B TWI386056 B TW I386056B
Authority
TW
Taiwan
Prior art keywords
composition
subject
image
detected
image data
Prior art date
Application number
TW097134573A
Other languages
English (en)
Other versions
TW200930091A (en
Inventor
Shingo Yoshizumi
Hiroki Yamawaki
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to US12/370,708 priority Critical patent/US8477117B2/en
Publication of TW200930091A publication Critical patent/TW200930091A/zh
Application granted granted Critical
Publication of TWI386056B publication Critical patent/TWI386056B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/64Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/695Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2101/00Still video cameras

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Description

構圖判定裝置、構圖判定方法、構圖判定用程式
本發明係關於例如以作為靜止圖之圖像資料作為對象,進行關於其圖內容所具有之構圖之處理之裝置即構圖判定裝置及其方法。而且,關於該類裝置所執行之程式。
例如作為用以可拍攝給予良好印象之照片之技術性之一要素,可舉出構圖設定。於此所謂構圖亦稱為定框,其指例如作為照片之畫面內之被照體配置。
用以取定良好構圖之一般、基本手法雖有數種,但若未具有關於照片拍攝之充分知識、技術,一般相機使用者拍攝良好構圖之照片絕非簡單之事。因此要求例如可輕易且簡單地獲得良好構圖之照片圖像之技術架構。
例如於專利文獻1揭示一種作為自動追蹤裝置,檢出一定時間間隔之圖像間之差異,算出圖像間之差異之重心,從該重心之移動量、移動方向檢出對於被照體圖像之攝像畫面之移動量、移動方向,控制攝像裝置,將被照體圖像設定於攝像畫面之基準區域內之技術架構。
而且,於專利文獻2揭示一種於作為自動追蹤裝置自動追蹤人物之情況時,為了使人物臉部位於畫面中央,將相對於畫面上之人物像全體面積,從該人物上之上側成為20%之面積之位置設為畫面中央並進行追蹤,藉此可一面確實地拍攝人物臉部一面追蹤之技術。
若從構圖決定之觀點來看該等技術架構,可自動地搜索作為人物之被照體,於拍攝畫面中,以某種既定構圖來配置該被照體。
[專利文獻1]日本特開昭59-208983號公報
[專利文獻2]日本特開2001-268425號公報
對應於例如關於被照體之特定狀況、狀態等,據判最佳構圖亦不同。然而,根據上述專利文獻之技術僅可以某固定構圖來配置追蹤之被照體。因此,無法對應於被照體之狀況等來變更構圖而拍攝。
因此,本申請發明係以提案針對例如作為照片等之圖像,用以輕易地獲得良好構圖之技術作為目標後,以屆時亦適應被照體之狀況‧狀態之變化,來進行更先進並具有靈活性之構圖決定為目的。
因此,本發明係考慮上述問題,作為構圖判定裝置如下構成。
總言之,包含:被照體檢出部件,其係檢出根據圖像資料之圖像中之特定被照體;被照體方向檢出部件,其係對藉由該被照體檢出部件所檢出之被照體即檢出被照體,逐一檢出表示檢出被照體在上述圖像中所面向之方向之被照體方向資訊;及構圖判定部件,其係根據被照體方向資訊來判定構圖;構圖判定部件係構成如:於藉由上述被照體檢出部件檢出複數被照體時,根據對應於上述複數被照體之複數上述被照體方向資訊之關係來判定構圖。
於上述架構,針對於圖像資料之畫面所檢出之被照體即檢出被照體,可檢出其特定部位所面向之方向,獲得表示該檢出之方向之被照體方向資訊。
並且,檢出被照體為複數之情況時,根據對應於該等複數之每檢出被照體之複數被照體方向資訊所示之方向之關係,來進行構圖判定。
例如雖可採最佳之構圖會依被照體所面向之方向而不同之想法,但若根據本申請發明,可因應存在複數被照體之情況下之該等被照體所面向之方向之關聯性,來獲得最佳構圖。
[發明之效果]
於被照體為複數之情況下,關於各個被照體所面向之方向係產生某些關聯性,根據本申請發明,對應於該類複數被照體方向之關聯性之適度複雜之條件,來決定構圖。總言之,可自動地進行較至今更先進並具有靈活性之構圖決定。藉此,利用適用本申請發明之裝置之使用者無須花費人力時間,即可獲得最佳構圖之圖像,可提供例如較至今更高之便利性。
以下,進行關於用以實施本申請發明之最佳型態(以下稱為實施型態)之說明。作為本實施型態舉例將根據本申請發明之架構,適用於包含數位相機及安裝有該數位相機之雲台之攝像系統之情況。
圖1係藉由正面圖表示作為本實施型態之攝像系統之外觀架構例。
如該圖所示,本實施型態之攝像系統係包含數位相機1及雲台10。
數位相機1可根據藉由設置於主體正面側之面板之鏡頭部3進行攝像所獲得之攝像光,來產生靜止圖像資料,並使其記憶於裝填在內部之記憶媒體。總言之,具有將作為照片所拍攝之圖像,作為靜止圖像資料記憶保存於記憶媒體之功能。以手動進行該類照片拍攝時,使用者係按下操作設置於主體上面部之快門(釋放)按鈕。
雲台10能以固定上述數位相機1之方式安裝。總言之,雲台10及數位相機1包含可用以相互安裝之機構部位。
然後,於雲台10包含迴旋‧俯仰機構,其係用以將安裝之數位相機1藉由迴旋方向(水平方向)及俯仰方向之兩方向運動。
藉由雲台10之迴旋‧俯仰機構所給予之數位相機1之迴旋方向、俯仰方向分別之運動方式係例如圖2(a)、(b)所示。圖2(a)、(b)係擷取安裝於雲台10之數位相機1,並分別從俯視方向、側面方向觀看。
首先,關於迴旋方向,以數位相機1之主體橫向與圖2(a)所示之直線X1為相同方向之位置狀態為基準,例如將旋轉軸Ct1作為旋轉中心,進行沿著旋轉方向+α之旋轉,藉此給予往右方迴旋之運動。而且,藉由進行沿著旋轉方向-α之旋轉,來給予往左方迴旋之運動。
而且,關於俯仰方向,以數位相機1之主體縱向與垂直方向之直線Y1一致之一狀態作為基準,藉由例如以旋轉軸Ct2為旋轉中心進行往旋轉方向+β之旋轉,來給予往下方之迴旋之運動。而且,藉由進行往旋轉方向-β之旋轉,來給予往上方之迴旋之運動。
此外,雖未提及關於圖2(a)、(b)所示之±α方向及±β方向分別之最大可動旋轉角度,但若考慮應儘可能增多被照體之捕捉機會,則宜儘可能較大地取定最大可動旋轉角度。
圖3之區塊圖係表示本實施型態之數位相機1之內部架構例。
於該圖中,首先,光學系統部21係包含例如亦包含變焦鏡頭、聚焦鏡頭等特定片數之攝像用鏡頭群、光圈等而成,將射入之光作為攝像光並使其於影像感測器22之受光面成像。
而且,於光學系統部21亦包含用以驅動上述變焦鏡頭、聚焦鏡頭、光圈等之驅動機構部。該等驅動機構部係藉由例如控制部27所執行之變焦(圖角)控制、自動焦點調整控制、自動曝光控制等所謂相機控制,來控制其動作。
影像感測器22係進行所謂光電轉換,其係將上述光學系統部21所獲得之攝像光轉換為電性信號。因此,影像感測器22係於光電轉換元件之受光面接受來自光學系統部21之攝像光,藉由特定時序依序輸出因應接受之光之強度所累積之信號電荷。藉此,輸出對應於攝像光之電性信號(攝像信號)。此外,作為影像感測器22所採用之光電轉換元件(攝像元件)並未特別限定,但現狀下可舉出例如CMOS感測器或CCD(Charge Coupled Device:電荷耦合元件)等。而且,於採用CMOS感測器之情況下,作為相當於影像感測器22之器件(零件),可為亦包含相當於接著所述之A/D轉換器23之類比/數位轉換器之構造。
從上述影像感測器22輸出之攝像信號係輸入於A/D轉換器23,藉此轉換為數位信號,並輸入於信號處理部24。
於信號處理部24,針對從A/D轉換器23輸出之數位之攝像信號,以例如相當於1個靜止圖(圖框圖像)單位來進行取入,並針對如此所取入之靜止圖單位之攝像信號施以所要之信號處理,藉此可產生相當於1張靜止圖之圖像信號資料即攝像圖像資料(攝像靜止圖像資料)。
使如上述在信號處理部24所產生之攝像圖像資料作為圖像資訊,記錄於作為記憶媒體(記憶媒體裝置)之記憶卡40之情況時,將例如對應於1個靜止圖之攝像圖像資料從信號處理部24對於編碼/解碼部25輸出。
編碼/解碼部25係針對從信號處理部24輸出之靜止圖單位之攝像圖像資料,藉由特定靜止圖像壓縮符號化方式執行壓縮符號化後,因應例如控制部27之控制附加標頭等,轉換為已壓縮成特定形式之攝像圖像資料之形式。然後,將如此產生之攝像圖像資料傳輸至媒體控制器26。媒體控制器26係按照控制部27之控制,對於記憶卡40寫入傳輸而來之攝像圖像資料以使其記錄。該情況下之記憶卡40係採用例如具有按照特定規格之卡片形式之外形形狀,於內部包含快閃記憶體等非揮發性半導體記憶元件之架構之記憶媒體。此外,關於記憶圖像資料之記憶媒體,上述記憶卡以外之種類別、形式等亦可。
而且,作為本實施型態之信號處理部24亦可利用如先前說明而取得之攝像圖像資料,執行作為被照體檢出之圖像處理。關於本實施型態之被照體檢出處理為何係於後面敘述。
而且,數位相機1係利用在信號處理部24所獲得之攝像圖像資料,藉由顯示部33執行圖像顯示,藉此可顯示現在攝像中之圖像即預覽圖。例如於信號處理部24,如先前所說明,取入從A/D轉換器23所輸出之攝像信號,產生相當於1張靜止圖之攝像圖像資料,藉由繼續該動作以依序產生相當於動畫之圖框圖像之攝像圖像資料。然後,按照控制部27之控制,將如此依序產生之攝像圖像資料對於顯示驅動器32傳輸。藉此進行預覽圖之顯示。
顯示驅動器32係根據如上述從信號處理部24輸入之攝像圖像資料,產生用以驅動顯示部33之驅動信號,並對於顯示部33輸出。藉此,於顯示部33,依序顯示根據靜止圖單位之攝像圖像資料之圖像。使用者若觀看此,當時所攝像之圖像係於顯示部33呈動畫式地顯示。總言之,顯示監視器圖像。此外,先前圖1所說明之顯示畫面部5相當於在此之顯示部33之畫面部分。
而且,數位相機1亦可再生記錄於記憶卡40之攝像圖像資料,使該圖像對於顯示部33顯示。
因此,控制部27係指定攝像圖像資料,對於媒體控制器26命令從記憶體40讀出資料。回應該命令,媒體控制器26係於記錄有指定之攝像圖像資料之記憶卡40上之位址進行存取,執行資料讀出,將讀出之資料對於編碼/解碼部25傳輸。
編碼/解碼部25係按照例如控制部27之控制,從傳輸自媒體控制器26之攝像圖像資料取出作為壓縮靜止圖資料之實體資料,針對該壓縮靜止圖資料執行對於壓縮符號化之譯碼處理,獲得對應於1個靜止圖之攝像圖像資料。然後,將該攝像圖像資料對於顯示驅動器32傳輸。藉此,於顯示部33再生顯示記錄於記憶卡40之攝像圖像資料之圖像。
而且,對於顯示部33,使用者介面圖像亦可與上述監視器圖像或攝像圖像資料之再生圖像等一同顯示。於該情況下,例如因應當時之動作狀態等,控制部27產生作為必要之使用者介面圖像之顯示用圖像資料,將其對於顯示驅動器32輸出。藉此,於顯示部33會顯示使用者介面圖像。此外,該使用者介面圖像亦可如同例如特定選單畫面等,與監視器圖像或攝像圖像資料之再生圖像個別地顯示於顯示部33之顯示畫面,或於監視器圖像或攝像圖像資料之再生圖像上之一部分重疊‧合成而顯示。
控制部27係例如實際上包含CPU(Central Processing Unit:中央處理單元)而成,與ROM28、RAM29等一同構成微電腦。於ROM28,除了記憶有例如作為控制部27之CPU所應執行之程式以外,還記憶有與數位相機1之動作相關之各種設定資訊等。RAM29為CPU用之主記憶裝置。
而且,該情況下之快閃記憶體30係作為為了預先記憶例如因應使用者操作或動作履歷等而有必要變更(重寫)之各種設定資訊等所使用之非揮發性之記憶區域而設置。此外,關於ROM28,例如於採用以快閃記憶體等為首之非揮發性記憶體之情況時,使用該ROM28之一部分記憶區域來取代快閃記憶體30亦可。
操作部31係總括表示有:數位相機1所包含之各種操作器,及產生因應對於該等操作器所進行之操作之操作資訊信號,並輸出至CPU之操作資訊信號輸出部位。控制部27係因應從操作部31所輸入之操作資訊信號來執行特定處理。藉此,執行因應使用者操作之數位相機1之動作。
雲台對應通信部34係執行按照雲台10側與數位相機1側之間之特定通信方式之通信之部位,其具有例如於數位相機1對於雲台10安裝之狀態下,可進行與雲台10側之通信部間之藉由有線或無線之通信信號之收發之物理層架構,及藉其用以實現對應於高位之特定層之通信處理之架構而成。
圖4係藉由區塊圖來表示雲台10之架構例。
如先前所述,雲台10包含迴旋‧俯仰機構,作為對應於其之部位而包含迴旋機構部53、迴旋用馬達54、俯仰機構部56及俯仰用馬達57。
迴旋機構部53係具有針對安裝於雲台10之數位相機1,用以給予圖2(a)所示之迴旋(橫)方向之運動之機構而構成,該機構之運動係藉由迴旋用馬達54正逆向地旋轉而獲得。同樣地,俯仰機構部56係具有針對安裝於雲台10之數位相機1,用以給予圖2(b)所示之俯仰(縱)方向之運動之機構而構成,該機構之運動係藉由俯仰用馬達57正逆向地旋轉而獲得。
控制部51係具有例如組合CPU、ROM、RAM等所形成之微電腦而成,其控制上述迴旋機構部53、俯仰機構部56之運動。例如控制部51控制迴旋機構部53之運動時,將對應於迴旋機構部53所必要之移動量及移動方向之控制信號對於迴旋用驅動部55輸出。迴旋用驅動部55係產生對應於輸入之控制信號之馬達驅動信號,並輸出至迴旋用馬達54。藉由該馬達驅動信號,迴旋用馬達54係以例如所要之旋轉方向及旋轉角度旋轉,其結果,迴旋機構部53亦被驅動為藉由對應於其之移動量及移動方向而運動。
同樣地,控制俯仰機構部56之運動時,控制部51將對應於俯仰機構部56所必要之移動量及移動方向之控制信號對於俯仰用驅動部58輸出。俯仰用驅動部58係產生對應於輸入之控制信號之馬達驅動信號,並輸出至俯仰用馬達57。藉由該馬達驅動信號,俯仰用馬達57係以例如所要之旋轉方向及旋轉角度旋轉,其結果,俯仰機構部56亦被驅動為藉由對應於其之移動量及移動方向而運動。
通信部52係與安裝於雲台10之數位相機1內之雲台對應通信部34間,執行按照特定通信方式之通信之部位,與雲台對應通信部34相同,其具有與對象側通信部可進行藉由有線或無線之通信信號之收發之物理層架構,及藉其用以實現對應於高位之特定層之通信處理之架構而成。
包含上述架構之數位相機1及雲台10之攝像系統係例如將人物作為主體之被照體(以後僅稱為被照體)處理後,搜索該被照體,並且若檢出被照體之存在,則驅動雲台10之迴旋‧俯仰機構,以獲得(進行定框)作為照出該被照體之圖像最佳之構圖(最佳構圖)。然後,於獲得最佳構圖之時序,進行將當時之攝像圖像資料記錄於記憶媒體(記憶卡40)。
總言之,於本實施型態之攝像系統,當藉由數位相機進行照片拍攝時,針對搜索之被照體,會自動執行決定(判定)最佳構圖並進行拍攝記錄之動作。藉此,即使使用者本身不判斷構圖並進行拍攝,仍可獲得品質適度良好之照片之圖像。而且,於該類系統,由於不須由某人拿持相機來拍攝,因此進行該拍攝之場所之在場所有人均可成為被照體。而且,作為被照體之使用者即使未特別意識要進入相機之視角範圍內,仍可獲得涵蓋被照體之照片。總言之,拍攝該拍攝場所在場人物之自然狀態之機會增加,可獲得許多迄今未有之氣氛之照片。
而且,雖可採最佳之構圖會依被照體所面向之方向而不同之想法,但若根據本實施型態,可因應存在複數被照體之情況下之該等被照體所面向之方向之關聯性,來決定不同之最佳構圖而構成。藉此,利用對應於本實施型態之架構之裝置之使用者無須花費人力時間,即可獲得最佳構圖之圖像。
以下進行關於本實施型態之構圖控制之說明。
圖5係表示關於數位相機1側所包含之對應於本實施型態之構圖控制之功能部位之架構例。
於該圖中,被照體檢出處理區塊61係根據於影像感測器22所獲得之攝像信號,利用在信號處理部24所獲得之攝像圖像資料,執行包含被照體之搜索控制之被照體檢出處理之部位。於此之被照體檢出處理係首先從攝像圖像資料之畫面之圖內容,辨別作為人物之被照體並檢出之處理;於此作為檢出結果所獲得之資訊(檢出資訊)係作為人物之被照體之數目、關於每各個被照體(個別被照體)在畫面內之位置資訊、及關於每個別被照體在圖像內之尺寸(佔有面積)等。而且,於本實施型態,作為檢出資訊亦獲得每個別被照體之臉部方向(被照體方向資訊)。於此之臉部方向係藉由臉部所面向之方向,來表示攝像圖像資料之畫面內,作為人物之個別被照體所面向之方向。
此外,為了使說明簡單且容易理解,關於臉部方向係以獲得根據左、右2階段之檢出結果作為以下說明之前提。例如即使為可視為被照體大致面向正面之情況時,於該情況下,按照特定運算法,分類為左或右之某一檢出結果。
而且,若藉由構圖判定之運算法等之架構,僅可獲得被照體之數目及被照體方向資訊以作為檢出資訊,即可實現作為本實施型態之構圖控制。
作為上述被照體檢出處理之具體手法,可利用臉部檢出之技術。該臉部檢出之方式、手法據知有數種,關於本實施型態採用何種方式不應特別限定,考慮檢出精度或設計難易度等而採用適當方式即可。
而且,應用臉部檢出之技術可檢出上述之臉部方向。例如若藉由利用眼、鼻等特徵點之類型辨識來進行臉部檢出處理,即可藉由檢出之臉部全體之該等特徵點之位置、距離關係,來辨識臉部方向。
此外,當檢出作為人物之個別被照體所面向之方向時,例如驅體部分之方向檢出或視線檢出等上述臉部檢出技術之應用以外,若為有用之手法,關於採用該類手法並未特別構成問題。總言之,包含臉部方向檢出在內,檢出個別被照體所面向之方向(被照體方向)之手法、運算法等係包含迄今已知者在內,選擇並採用適當者即可。
而且,該被照體檢出處理區塊61所執行之被照體檢出處理可作為信號處理部24之圖像信號處理而實現。如先前之說明,藉由DSP構成信號處理部24之情況下,該被照體檢出處理係藉由作為給予信號處理部24之DSP之程式、指令而實現。
而且,於被照體搜索控制時,為了控制雲台10之迴旋‧俯仰機構,經由通信控制處理區塊63來輸出用以驅動上述迴旋‧俯仰機構之控制信號。
被照體檢出處理區塊61之被照體檢出處理結果即檢出資訊係對於構圖控制處理區塊62輸入。
構圖控制處理區塊62係利用輸入之關於被照體之檢出資訊,決定視為最佳之構圖(最佳構圖)。然後,執行用以獲得所決定之最佳構圖之控制(構圖控制)。作為該情況下之構圖控制係包含圖角(本實施型態係指例如可因應變焦控制來變更之視角)之變更控制、沿著迴旋(左右)方向之攝像方向之控制(迴旋控制)及沿著俯仰(上下)方向之攝像方向之控制(俯仰控制)。為了變更圖角,進行移動數位相機1之光學系統部21之變焦鏡頭之控制、或對於攝像圖像資料之圖像切出等圖像信號處理之任一方。而且,迴旋控制、俯仰控制係藉由控制移動雲台10之迴旋‧俯仰機構來進行。進行迴旋‧俯仰機構之控制時,構圖控制處理區塊62係將用以使迴旋‧俯仰機構成為所應有之位置狀態之控制信號,經由通信控制處理區塊63傳送至雲台10側。
此外,上述構圖控制處理區塊62所執行之構圖決定及構圖控制之處理可構成為例如控制部27(CPU)根據程式來執行。或者,亦可思慮對其併用信號處理部24根據程式所執行之處理之架構。而且,通信控制處理區塊63係按照特定語法執行與雲台10側之通信部52之通信處理而構成之部位,其為對應於雲台對應通信部34之功能部位。
接著,參考圖6,預先舉出被照體檢出處理區塊61所執行之被照體檢出處理之事例。
於此,被照體檢出處理區塊61取入圖6(a)所示之圖內容之攝像圖像資料。作為該攝像圖像資料之圖內容係拍攝存在1個作為人物之被照體之圖而獲得。而且,圖6(a)(及圖6(b))係表示矩陣狀地切割1畫面之狀態,此係模式性地表示,作為攝像圖像資料之畫面包含特定數之水平‧垂直像素之集合。
藉由將圖6(a)所示之圖內容之攝像圖像資料作為對象進行被照體檢出(臉部檢出),檢出圖中所示之1個個別被照體SBJ之臉部。亦即,藉由利用臉部檢出處理檢出1個臉部,於此檢出1個個別被照體。然後,作為如此檢出個別被照體之結果,亦如先前所述,獲得個別被照體之數目、方向、位置、尺寸之資訊。
而且,關於個別被照體數,例如求出藉由臉部檢出所檢出之臉部數目即可。於圖6(a)之情況下,由於檢出之臉部為1個,因此亦獲得作為個別被照體數為1個之結果。
而且,關於每個別被照體之位置資訊,至少求出作為攝像圖像資料之圖像內之個別被照體SBJ之重心G(X,Y)。此外,該情況下作為重心G(X,Y)之基準之攝像圖像資料之畫面上之X,Y原點座標P(0,0)係例如圖7所示而為對應於畫面尺寸之X軸方向(水平方向)之寬度(水平圖尺寸)Cx之中間點、與Y軸方向(垂直方向)之寬度(垂直圖尺寸)Cy之中間點之交點。
而且,關於該重心G之個別被照體之圖像內之位置定義或如何設定重心G,可採用例如迄今已知之被照體重心檢出方式。
而且,關於每個別被照體之尺寸,例如若求出藉由臉部檢出處理作為臉部部分所特定、檢出之區域之像素數即可。
而且,關於每個別被照體之臉部方向,亦如先前所述,根據臉部檢出處理檢出例如左、右之任一者。
而且,若取入圖6(b)所示之攝像圖像資料,被照體檢出處理區塊61執行被照體檢出處理,由於首先藉由臉部檢出特定出2個臉部之存在,因此關於個別被照體數獲得2的結果。於此,2個個別被照體中,左側設為個別被照體SBJ0,右側設為個別被照體SBJ1,使其具有識別性。而且,關於對每個別被照體SBJ0,SBJ1所求出之重心座標,分別表示作為G0(X0,Y0)、G1(X1,Y1)。
而且,如此,於檢出2以上之個別被照體之情況時,求出將該等複數個別被照體視為匯總為一之被照體(總合被照體)之情況下之重心即總合被照體重心Gt(Xg,Yg)。
關於如何設定該總合被照體重心Gt可思慮數種方法,於此作為最簡易之例,表示將連結檢出之複數個別被照體中位於畫面左端及右端兩端之個別被照體之重心之線段上之中間點,設定作為總合被照體重心Gt之情況。該總合被照體重心Gt係例如後述可利用於構圖控制之資訊,其係若取得個別被照體之重心資訊,即可藉由運算求出之資訊。因此,關於總合被照體重心Gt,藉由被照體檢出處理區塊61求出,將其作為檢出資訊輸出,或構圖控制處理區塊62從表示取得作為檢出資訊之個別被照體之重心位置之資訊中,利用關於位於左右兩端之個別被照體之重心之資訊來求出均可。
此外,其他亦可思慮例如因應複數個別被照體之尺寸來給予權重係數,利用該權重係數,顧全例如使總合被照體重心Gt之位置接近尺寸大之個別被照體之設定手法。
而且,關於個別被照體之尺寸,例如對每個別被照體SBJ0,SBJ1求出其檢出之臉部所佔有之像素數即可。
接下來,參考圖8~圖10,進行關於藉由作為本實施型態之第一例之構圖控制所獲得之構圖之說明。
於圖8表示作為藉由被照體搜索之結果檢出被照體時之攝像圖像資料,獲得拍攝到1個個別被照體SBJ0之圖內容之情況。
此外,於本實施型態,於通常地設置安裝有數位相機1之雲台10之情況下,設定數位相機1之方向以將橫長圖像予以攝像。因此,第一例或後述第二例係以藉由攝像獲得橫長圖像為前提。
如上述圖8所示,於檢出1個個別被照體之情況時,首先變更個別被照體之尺寸,以使該個別被照體SBJ0之攝像圖像資料之畫面內之佔有率成為被視為最佳之特定值。例如於檢出個別被照體之階段,該個別被照體之畫面內之佔有率小於上述特定值之情況時,執行縮窄圖角之變焦控制,以使個別被照體之佔有率變大至特定值。而且,於個別被照體之畫面內之佔有率大於特定值之情況時,執行增廣圖角之變焦控制,以使個別被照體之佔有率變小至特定值。藉由該類變焦控制,作為構圖首先使檢出之個別被照體為1個之情況下之被照體尺寸變得適當。
接著,如下調整檢出之個別被照體為1個之情況下之畫面上之被照體之位置(被照體位置)。
關於該被照體位置,利用檢出之臉部方向之資訊。該圖8之情況下之個別被照體SBJ係臉部方向檢出為左。此時,實際觀看該圖8所示之圖內容之畫面之情況時,從觀看其者而言,畫面中,個別被照體SBJ之臉部看似面向左側。亦即,作為該個別被照體SBJ之實際之人物本身在現實上,係以進行攝像之攝像裝置相對之方向為正面,從其面向右側。
而且,該被照體位置調整時,假想地設定通過圖像中之原點座標P(0,0)之垂直線,亦即與Y軸線一致之直線,且作為被照體位置調整之基準線之圖像區域分割線Ld。
然後,如該情況下檢出臉部方向為左之情況時,使個別被照體SBJ0之重心G配置於從對應於上述圖像區域分割線Ld之位置(X=0),按照以水平偏移量θx所表示之往右方之移動量移動後之位置(水平偏移位置)。為此執行驅動雲台10之迴旋機構之控制,以使重心G來到上述水平偏移位置。
一般而言,使被照體位於畫面中央之構圖為不佳構圖之典型。因此,例如以三分割法或黃金率法等為代表,從畫面中央按照某規則使被照體之位置偏離,可獲得較佳構圖。作為本實施型態,按照如此之構圖決定手法,首先針對畫面水平方向之個別被照體SBJ之位置(重心G),使其對於畫面中央僅移動一定量(水平偏移量θx)。
並且,進一步於本實施型態,如圖8所例示,若檢出之個別被照體之臉部方向為左,則針對該重心G之水平方向之位置,使其位於藉由沿著Y軸線之圖像區域分割線Ld所分割為2之左右之圖像區域(分割區域)中與臉部方向所示之「左」相反側之「右」側之圖像區域,以於畫面中,在檢出被照體SBJ之臉部所面向之方向即左側獲得空間。藉由如此構圖,相較於例如使臉部方向為左之個別被照體SBJ之重心G對應(一致)於左右方向之畫面中央之被照體位置之情況、或對於圖像區域分割線Ld為左方之圖像區域之情況,可獲得更良好之構圖。
可思慮多種關於作為決定本實施型態之水平偏移量θx之實際值之運算法,於此根據三分割法來進行。三分割法為最基本之構圖設定手法之一,藉由使被照體位於沿著垂直方向及水平方向分別三等分方形畫面之假想線上,以獲得良好構圖。
例如圖8係重心G位於三等分水平圖尺寸Cx之沿著畫面縱向之2條假想線中之右側假想線上而設定水平偏移量θx。藉此,獲得作為因應個別被照體之臉部方向之水平方向之被照體位置為最佳之1個構圖。
而且,省略藉由圖示來說明,關於檢出之1個個別被照體SBJ,針對臉部方向檢出為右之情況時,對於圖8所示之位置,使個別被照體SBJ之重心G位於以圖像區域分割線Ld為基準呈現對稱之水平位置。總言之,作為該情況下之水平偏移量θx,設定有圖8之情況下之實際值之正/負經反轉之值,進行根據該水平偏移量θx之迴旋控制。
而且,如圖9(a)所示,於檢出2個個別被照體SBJ0,SBJ1之情況時,作為構圖控制,首先針對包含個別被照體SBJ0,SBJ1之圖像部分之集合之總合被照體圖像部分之尺寸(例如亦可掌握作為對於畫面全體之被照體圖像部分之佔有率),進行調整(變焦控制)以成為例如對應於個別被照體數為2之情況設定作為最佳之值。
此外,關於如何定義上述總合被照體圖像部分並求出其尺寸,可思慮數種方法,例如可加總檢出之複數之每個別被照體之圖像部分之尺寸來求出。或者,亦可思慮作為藉由假想地描畫之線,包圍包含全部檢出之複數個別被照體之圖像部分之尺寸來求出。
而且,關於該等2個個別被照體SBJ0,SBJ1之水平方向之被照體位置,係利用該等2個個別被照體SBJ0,SBJ1各個臉部方向之資訊。
該圖9(a)所示之2個個別被照體SBJ0,SBJ1之臉部方向係兩者均檢出左。總言之,2個個別被照體之全部之臉部方向為相同,在該情況下,該等臉部方向為左。
於該情況下,依據圖8所示之1個個別被照體SBJ之臉部方向為左之情況,為了於畫面左側形成空間,使包含個別被照體SBJ0,SBJ1之總合被照體圖像部分,靠近位於與臉部方向所示之「左」相反之圖像區域分割線Ld之右側。因此,例如圖示,設定往右側偏離特定量之水平偏移量θx後,針對包含2個個別被照體SBJ0,SBJ1之總合被照體圖像部分之重心即總合被照體重心Gt,進行迴旋控制,以來到從通過圖像區域分割線Ld之原點座標P(0,0)之垂直線(Y軸線)僅移動水平偏移量θx後之位置。
而且,雖未圖示,於2個個別被照體SBJ0,SBJ1之臉部方向兩者均相同而為右之情況時,對於圖9(a)之位置進行迴旋控制,以使總合被照體重心Gt位於以圖像區域分割線Ld為基準呈現對稱之位置(對於Y軸線於左側之畫面區域,移動相同之水平偏移量θx之絕對值份後之位置)。
然而,如此於個別被照體為複數之情況下,若給予個別被照體數為1之情況時最佳之水平偏移量θx,則容易成為印象上過於靠右(或左)之構圖。因此,於圖9(a)所示,個別被照體數為2之情況下,關於水平偏移量θx,藉由特定規則設定比圖8所示之個別被照體數為1之情況小之值(絕對值)。
而且,於圖9(b)係表示針對2個個別被照體SBJ0,SBJ1所檢出之臉部方向分別為左、右之情況下之例。此外,此係表示個別被照體數為2之情況下,分別之臉部方向非相同之情況之一例。
關於該情況下之水平方向之總合被照體圖像部分之位置,如圖示進行調整(迴旋控制),以使2個個別被照體SBJ0,SBJ1之總合被照體重心Gt位於圖像區域分割線Ld上。
於藉此所獲得之構圖,包含2個個別被照體SBJ0,SBJ1之總合被照體圖像部分係於水平方向位於畫面之大致中央。然而,被照體為複數且該等被照體不面向同一方向之圖之情況下,即使總合被照體圖像部分來到中央,其構圖仍適度地良好。
而且,於圖10表示檢出3個個別被照體SBJ0,SBJ1,SBJ2之情況。
作為該情況下之構圖控制,首先亦針對包含個別被照體SBJ0,SBJ1,SBJ2之總合被照體圖像部分之尺寸進行調整(變焦控制),以成為對應於個別被照體數為3之情況設定最佳之值。
並且,關於總合被照體圖像部分之水平方向之位置,於該情況下亦利用對每各個別被照體所檢出之臉部方向之資訊。於圖10,3個個別被照體SBJ0,SBJ1,SBJ2之臉部方向全部相同而為左。
於該情況下,依據圖9(a)之情況,進行水平偏移量θx之設定及總合被照體重心Gt用以往藉其所決定之所要位置移動之迴旋控制,以使包含個別被照體SBJ0,SBJ1之圖像區域部分位於較圖像區域分割線Ld靠近右側之圖像區域。而且,假設於3個個別被照體SBJ0,SBJ1,SBJ2之臉部方向全部相同而為右之情況時,進行迴旋控制,以使總合被照體重心Gt位在對於圖10之位置,以圖像區域分割線Ld為基準呈現對稱之水平位置。
而且,此時所設定之水平偏移量θx係設定較圖9(a)之檢出之個別被照體為2個之情況小之絕對值。藉此,因應例如個別被照體數為3之情況,水平方向之被照體位置更為最佳,獲得良好構圖。
而且,該第一例之構圖控制時,3個個別被照體SBJ0,SBJ1,SBJ2之臉部方向並非全部相同之情況時,依據圖9(b),獲得總合被照體重心Gt位於圖像區域分割線Ld(Y軸線)上之構圖。
若根據迄今之說明可知,第一例之構圖控制之水平方向之位置調整首先對應於每個別被照體所檢出之臉部方向。總言之,作為最基本之控制,於個別被照體數為1之情況下,對應於該個別被照體檢出之臉部方向為左、右之任一者,針對其重心G(總合被照體重心Gt),使其位在對於圖像區域分割線Ld(Y軸線)之右側區域或左側區域僅偏離特定量(進行重心G之水平偏移),以便於畫面內被照體所面向那方形成空間。
然後,於個別被照體數為複數(2以上)之情況時,若個別被照體之臉部方向全部相同,則仿效上述位置調整,進行總合被照體重心Gt之水平偏移,若非完全相同,不進行水平偏移,對總合被照體重心Gt給予對應於圖像區域分割線Ld之X座標,以使總合被照體圖像部分位於畫面內之大致中央。
然後,進行總合被照體重心Gt(重心G係視為個別被照體數為1之情況下之總合被照體重心Gt)之水平偏移時,如藉由圖8~圖10所述,因應個別被照體數來變更水平偏移量θx。藉此,關於畫面之總合被照體圖像部分之沿著水平方向之位置,顧全獲得因應個別被照體數之最佳位置。
圖11係對應於藉由上述圖8~圖10所說明之作為第一例之構圖控制,表示圖5所示之被照體檢出處理區塊61、構圖控制處理區塊62及通信控制處理區塊63所執行之程序例。而且,該圖所示之處理可視為藉由作為DSP之信號處理部24、控制部27之CPU執行程式所實現者。該類程式除了例如對於ROM等在製造時等寫入以記憶以外,還可思慮預先使可抹除之記憶媒體記憶後,從該記憶媒體安裝(亦包含更新),以使其記憶於對應DSP之非揮發性記憶區域或快閃記憶體30等。而且,亦可思慮藉經由USB或IEEE1394等資料介面,藉由來自其他主控機器之控制而可進行程式安裝。進一步亦可思慮構成為預先使網路上之伺服器等之記憶裝置記憶後,使數位相機1具有網路功能,可從伺服器下載以取得。
而且,於以後之流程圖之說明中,迄今所使用之「總合被照體重心(Gt)」及「總合被照體圖像部分」之語句不僅適用於檢出之個別被照體數為2以上之情況,亦適用於1之情況。總言之,例如圖8所示之重心G成為檢出之個別被照體數為1之情況下之個別被照體重心Gt,而且僅包含圖8之個別被照體SBJ之圖像部分成為檢出之個別被照體數為1之情況下之總合被照體圖像部分。
首先,至步驟S101~步驟S106係用以搜索並檢出被照體之程序,主要由被照體檢出處理區塊61執行。
於步驟S101,取入根據來自影像感測器22之攝像信號之攝像圖像資料以取得。於步驟S102,利用藉由上述步驟S101所取得之攝像圖像資料來執行被照體檢出處理。作為於此之被照體檢出處理,例如首先藉由先前所述之臉部檢出等手法,於作為攝像圖像資料之畫面內容,進行關於是否存在有個別被照體之檢出。然後,於存在有個別被照體之情況下,獲得個別被照體數、每個別被照體之位置(重心)、尺寸及每個別被照體之臉部方向作為檢出資訊。
於步驟S103,作為根據上述步驟S102之被照體檢出處理之結果,進行關於是否檢出個別被照體之存在之判別。於此,於未檢出個別被照體之存在(檢出之個別被照體數為0)而獲得否定之判別結果之情況時,前進至步驟S104,執行用以增廣圖角之變焦鏡頭之移動控制(拉遠控制)。藉由如此增廣圖角,會攝像到更廣範圍,因其而更容易補足個別被照體。而且,與其同時,藉由步驟S105,為了被照體搜索而執行移動雲台10之迴旋‧俯仰機構之控制(迴旋‧俯仰控制)。此時,被照體檢出處理區塊61將迴旋‧俯仰控制用之控制信號交付給通信控制處理區塊63,進行控制以對於雲台10之通信部52傳送。
此外,作為上述被照體搜索用之迴旋‧俯仰控制,關於雲台10之迴旋‧俯仰機構以何種類型(pattern)移動,例如顧全有效率地進行搜索來決定即可。
而且,於步驟S106,關於模式旗標f設定0(f=0),並返回步驟S101。
如此,重複步驟S101~步驟S106之程序,直到於攝像圖像資料之圖內容至少檢出1個個別被照體為止。此時,包含數位相機1及雲台10之系統係為了被照體搜索,成為數位相機1往迴旋方向及俯仰方向運動之狀態。
然後,於步驟S103,若檢出個別被照體之存在而獲得肯定之判別結果,則前進至步驟S107以後之程序。步驟S107以後之程序主要由構圖控制處理區塊62執行。
於步驟S107,判別設定於現在之模式旗標f之值為何。
判別f=0之情況時,作為構圖控制表示應執行最初粗略之被照體捕捉模式之情況,如圖執行從步驟S108開始之程序。
於步驟S108,進行關於總合被照體重心Gt是否位於攝像圖像資料之畫面(表示攝像圖像資料之圖內容時所獲得之畫面)之原點座標P(0,0)(參考圖7)之判別。於此,總合被照體重心Gt尚未位於原點座標而獲得否定之判別結果之情況時,藉由步驟S109執行用以移動雲台10之迴旋‧俯仰機構之控制,以使總合被照體重心Gt位於原點座標,並返回步驟S101。如此,於檢出個別被照體之存在之狀態下之最初之構圖控制程序即捕捉模式,係藉由控制雲台10之迴旋‧俯仰機構,以使總合被照體重心Gt首先對於初始之基準位置即原點座標到位,以使照出檢出之個別被照體之圖像區域位於畫面內之中央。
此外,於此預先表示實際進行作為上述步驟S109之迴旋‧俯仰控制時之運算法之一例。
於模式旗標f=0之狀態檢出個別被照體之狀態下,被照體檢出處理區塊61係進行藉由下述(數1)所示之運算,求出迴旋方向之必要移動量Span及俯仰方向之必要移動量Stilt。於下述(數1),n表示檢出之個別被照體數,P(Xi,Yi)表示被給予從0號至n-1號之號碼之個別被照體中之第i個個別被照體之重心之X、Y座標。為了確認,如圖7所示,該情況下之原點座標(0,0)為畫面之水平方向之中點與垂直方向之中點之交點。
例如於步驟S108,經過判別如上述所求出之必要移動量Span,Stilt之絕對值是否為特定值(嚴密而言為0,大於0之值亦可)以內,可進行與總合被照體重心Gt是否在原點座標P同等之判別。然後,於步驟S109執行迴旋‧俯仰控制,以使必要移動量Span,Stilt之絕對值為特定值以內。此外,此時之迴旋‧俯仰控制時之迴旋機構部53、俯仰機構部56之速度亦可為一定,但可思慮例如因應必要移動量Span,Stilt變大而提高速度等,使其可變。若如此,即使為迴旋或俯仰所造成之必要移動量變大,仍能以較短時間來使總合被照體重心Gt接近原點座標。
然後,於步驟S108,若獲得總合被照體重心Gt位於原點座標之肯定之判別結果,則藉由步驟S110,關於模式旗標f設定1(f=1),並返回步驟S101。藉由該步驟S110,關於模式旗標f設定有1之狀態係表示構圖控制之最初程序即捕捉模式完成,應執行接著之第一構圖之調整控制(構圖調整模式)之狀態。
然後,於模式旗標f=1,應執行第一構圖調整模式之情況時,從步驟S107前進至步驟S111。第一構圖調整模式係為了獲得因應檢出之個別被照體數與每個別被照體之臉部方向之組合之最佳構圖,而進行變焦(圖角)調整及迴旋控制。此外,藉由圖角調整及迴旋控制,產生畫面內之個別被照體之尺寸或個別被照體之位置變化之結果。
於步驟S111,判別現在檢出之個別被照體數為多少,若為1,則執行從步驟S112開始之程序。
於步驟S112,設定對應於檢出之個別被照體數為1之目標被照體尺寸。於此之目標被照體尺寸係指作為畫面之總合被照體圖像部分之尺寸在構圖上被視為最佳,例如與圖8之對應上,相當於「(1個)個別被照體SBJ0之攝像圖像資料之畫面內之佔有率被視為最佳之特定範圍值」。
於步驟S113,判別關於個別被照體之尺寸是否可(OK)。個別被照體之尺寸可之狀態係當時檢出之個別被照體之尺寸,成為藉由上述步驟S112所設定之目標被照體尺寸之狀態。於步驟S113獲得否定之判別結果之情況時,前進至步驟S114,執行變焦鏡頭之驅動控制(變焦控制),以使個別被照體之尺寸成為目標被照體尺寸,並返回步驟S101。
此外,此時關於總合被照體重心Gt之水平方向(左右方向)之位置係進行變焦控制,以維持對應於在步驟S109所設定之X座標(X=0)之位置。藉此,可維持使個別被照體在左右方向大致位於中央之狀態。而且,於被照體搜索動作之執行時,由於藉由步驟S104進行拉遠控制,因此於作為步驟S114之變焦控制時,據判大多成為拉近控制之情況。然而,因應由於某些原因,當時檢出之個別被照體之尺寸大於目標被照體尺寸之狀態,於步驟S113獲得否定之判別結果之情況時,於步驟S114執行拉遠,控制為實際之個別被照體之尺寸成為目標被照體尺寸。
然後,若於步驟S113獲得肯定之判別結果,則前進至步驟S115以後之程序。
於步驟S115,設定水平偏移量θx。
於此,本實施型態之第一構圖控制係針對水平偏移量θx,藉由下述(式1)來求出。
θx=D×(Cx/6)/n...(式1)
於上述(式1),D係根據臉部方向或複數臉部方向之組合(關聯性)來設定有+1、-1、0之任一者之係數。Cx表示水平圖尺寸。Cx/6項係對應於根據三分割法所獲得之沿著縱向之假想線之X座標。n表示檢出之個別被照體數。
到步驟S115之情況時,由於檢出之個別被照體數為1,因此n=1。而且,臉部方向為左或右之任一方。係數D係於臉部方向為左之情況下成為+1,於右之情況下成為-1。
如此一來,於檢出之1個個別被照體之臉部方向為左之情況下,θx=-Cx/6。該水平偏移量θx係表示從通過原點座標P(0,0)之垂直線(圖像區域分割線Ld:Y軸線),僅往右移動Cx/6後之垂直線之位置,該垂直線之位置正好與按照三分割法之2條假想線中位於右側之假想線相同。
另一方面,檢出之1個個別被照體之臉部方向為右之情況下,水平偏移量θx=Cx/6,表示從通過原點座標P(0,0)之垂直線(圖像區域分割線Ld:Y軸線),僅往左移動Cx/6後之垂直線之位置。然後,該垂直線之位置正好與按照三分割法之2條假想線中位於左側之假想線相同。
於步驟S116,進行總合被照體重心Gt(於該情況下,由於個別被照體數為1,因此圖8之重心G與總合被照體重心Gt相同)是否位於對應於藉由上述步驟S115所設定之水平偏移量θx之X座標上之判別處理。於此獲得否定之判別結果之情況時,前進至步驟S117。
於步驟S117,執行迴旋控制,以成為總合被照體重心Gt位於對應於水平偏移量θx之X座標上之狀態,並返回步驟S101。
然後,藉由上述步驟S117之控制,若達到總合被照體重心Gt位於對應於水平偏移量θx之X座標上之狀態,則於步驟S116獲得肯定之判別結果。如此,於步驟S116獲得肯定之判別結果時,個別被照體(SBJ)之重心係如藉由圖8所示,因應其臉部方向,位於從圖像區域分割線Ld僅往左或右移動水平偏移量θx之位置。
於步驟S116獲得肯定之判別結果之情況時,前進至步驟S118,關於模式旗標f設定2,並返回步驟S101。成為該模式旗標f=2之狀態係如從後續說明亦得以理解,其表示第一構圖調整完成,執行接著之第二構圖調整模式後,應執行釋放動作。
而且,於步驟S111,於判別檢出之個別被照體數為2以上之情況時,執行從步驟S119開始之程序。
於步驟S119,進行設定目標被照體尺寸之處理。個別被照體數為2以上之情況時,用以獲得最佳構圖之目標被照體尺寸係因應例如個別被照體數而不同。因此,於步驟S119,設定因應在步驟S102所檢出之個別被照體數之特定目標被照體尺寸。而且,為了確認而預先敘述,個別被照體數為2以上之情況下之目標被照體尺寸係以包含檢出之全部個別被照體之總合被照體圖像部分為對象。
於步驟S120,判別關於個別被照體之尺寸是否可(OK)。總言之,針對從關於此時之個別被照體之檢出資訊所求出之總合被照體圖像部分之尺寸,是否成為藉由上述步驟S120所設定之目標被照體尺寸予以判別。
於步驟S120獲得否定之判別結果之情況時,前進至步驟S121。於步驟S121,依據步驟S114執行變焦鏡頭之驅動控制(變焦控制),以使此時檢出之個別被照體之總合被照體圖像部分之尺寸成為藉由步驟S119所設定之目標被照體尺寸,並返回步驟S101。
對於此,於步驟S120獲得肯定之判別結果之情況時,前進至步驟S122。
於步驟S122,針對複數之每個別被照體所檢出之臉部方向,進行該等是否全部相同之判別處理。
首先,於步驟S122獲得肯定之判別結果之情況時,執行步驟S123以後之程序。於步驟S123,藉由先前所述之(式1)設定水平偏移量θx。
於該情況下,於(式1)之係數D,因應檢出之同一臉部方向表示左、右之何者來代入+1及-1之某一者。而且,於n代入因應檢出之個別被照體數之2以上之數。由此亦可理解,根據(式1),因應個別被照體數變多,求出之θx之絕對值變小。總言之,如藉由圖8、圖9(a)、圖10所說明,因應個別被照體數變多,使總合被照體圖像部分之左右從圖像區域分割線Ld之偏移量變少。
對於此,於步驟S122獲得否定之判別結果之情況時,藉由步驟S124來設定水平偏移量θx=0。
此外,該步驟S124之處理時,藉由利用(式1)之運算,可設定θx=0。總言之,於步驟S122獲得否定之判別結果之情況時(亦即複數臉部方向不同之情況時),於步驟S124,針對係數D進行代入0(式1)之運算以構成運算法。
執行步驟S123或步驟S124之程序後,前進至步驟S125之程序。
於步驟S125、126及S127,與先前所說明之步驟S116、S117及S118相同,執行迴旋控制至達到總合被照體重心Gt位在對應於藉由步驟S123或步驟S124所設定之水平偏移量θx之X座標上之狀態。藉由該控制,於複數個別被照體之臉部方向相同之情況下,獲得總合被照體圖像部分(總合被照體重心Gt)僅往左或右方移動因應該數之水平偏移量θx份後之狀態。若達到該狀態,於步驟S125獲得肯定之判別結果,藉由步驟S127,關於模式旗標f設定2,並返回步驟S101。
如此,於關於模式旗標f設定有2之狀態係作為構圖控制,成為如藉由圖8~圖10所說明,因應個別被照體數之尺寸調整、及到因應該等每個別被照體之臉部方向或其組合之水平方向之位置調整為止之程序已完成之狀態。因此,於步驟S107判別模式旗標f為2之情況時,藉由步驟S128以後之程序來執行第二構圖調整模式。
例如於圖8~圖10之構圖控制之說明時,為了簡化其說明,未提及關於如何設定畫面上下方向之個別被照體之重心位置,但實際上有從畫面中央僅以例如某必要量往上方移動(偏移),會成為較佳構圖之情況。因此,作為本實施型態之構圖控制之實際係為了作為最佳構圖獲得更良好者,亦設定總合被照體重心Gt之縱(垂直)向之偏移量。為此之程序為第二構圖調整模式,其作為步驟S128及接著說明之步驟S129來執行。
於步驟S128,針對總合被照體重心Gt(個別被照體為1個之情況係該個別被照體之重心G)之位置,判別是否處於從通過畫面上之原點座標P之水平直線(X軸)僅偏移特定垂直偏移量θy之狀態(重心偏移是否可)。
於步驟S128獲得否定之判別結果之情況時,藉由步驟S129執行俯仰控制,使雲台10之俯仰機構運動,以使重心僅偏移設定之垂直偏移量θy,並返回步驟S101。然後,於步驟S128獲得肯定之判別結果之階段,關於總合被照體圖像部分之水平方向之位置及垂直方向之位置雙方,獲得對應於最佳構圖者,進一步總合被照體圖像部分之尺寸亦獲得對應於最佳構圖者。亦即,成為獲得最佳構圖之狀態。
此外,關於如何設定對應於該步驟S128、S129之垂直偏移量θy之實際值,可思慮數種手法,因此於此不應特別限定。作為最簡單之設定之一,可思慮例如根據三分割法,從縱向之中心位置給予相當於垂直圖尺寸Cy之1/6之長度值。當然,亦可思慮構成為按照特定規則,來設定例如因應個別被照體數或臉部方向及其組合之不同值。
然後,於藉由步驟S128獲得肯定之判別結果之情況時,執行從步驟S130開始之對應於釋放動作之處理程序。於此之釋放動作係指用以使當時所獲得之攝像圖像資料,作為靜止圖像資料記憶於記憶媒體(記憶卡40)之動作。總言之,於藉由手動進行快門操作之情況時,相當於回應該快門操作,將當時所獲得之攝像圖像資料作為靜止圖像資料,對於記憶媒體記錄之動作。
於步驟S130,判別現在是否符合可執行釋放動作之條件。作為條件可舉出例如處於聚焦狀態(自動對焦控制設定為有效之情況)、雲台10之迴旋‧俯仰機構處於停止狀態等。
於上述步驟S130獲得否定之判別結果之情況時,使處理返回步驟S101。藉此,可待機成為符合可執行釋放動作之條件之狀態。然後,若於步驟S130獲得肯定之判別結果,藉由步驟S131執行釋放動作。如此,於本實施型態可記錄最佳構圖之攝像圖像資料。
若釋放動作結束,藉由步驟S132,針對所要之參數進行初始設定。藉由該處理,關於模式旗標f設定有初始值0。而且,變焦鏡頭之位置亦返回事先設定之初始位置。
然後,執行步驟S132之處理後,使處理返回步驟S101。藉由如此使處理從步驟S132返回步驟S101,以自動重複執行搜索被照體,獲得因應藉由該搜索所檢出之個別被照體所面向之方向及個別被照體數之最佳構圖,並進行攝像記錄(釋放動作)之動作。
此外,上述圖11之情況下之釋放動作係從攝像圖像,將靜止圖像記錄於記錄媒體之動作,但本實施型態之釋放動作更廣義上包含將上述靜止圖像記錄於記錄媒體,其指例如從攝像圖像取得必要之靜止圖像資料。因此,為了例如藉由本實施型態之數位相機1,經由資料介面等傳送至其他記錄裝置等,如從攝像圖像取得靜止圖像資料之動作亦為釋放動作。
於至今所述之圖11之程序,首先藉由步驟S108、S109進行捕捉用之迴旋‧俯仰控制,其係根據以先前之(數1)所求出之必要移動量Span,Stilt,使檢出之1以上之個別被照體之總合被照體重心Gt位於畫面之原點座標P。然後,作為下一階段,根據個別被照體數及對每個別被照體檢出之臉部方向之關聯性(是否相同),求出水平偏移量θx,針對總合被照體重心Gt,進行以通過原點座標P之垂直線(圖像區域分割線Ld:Y軸線)為基準,用以使其往左或右方僅移動對應於水平偏移量θx之距離之迴旋控制。進一步根據設定垂直偏移量θy所示之移動量,針對總合被照體重心Gt,進行以通過原點座標P之水平直線(X軸)為基準,用以使其往上方(或下方)僅移動對應於垂直偏移量θy之距離之俯仰控制。
若根據此,圖11之程序之迴旋‧俯仰控制可謂藉由下式求出必要移動量Span,Stilt後,進行用以獲得對應於必要移動量Span之畫面內之移動量之迴旋機構之控制、及用以獲得對應於必要移動量Stilt之畫面內之移動量之俯仰機構之控制。
接下來,說明關於本實施型態之第二構圖控制。
作為第二構圖控制之例,於圖12係表示檢出3個個別被照體SBJ0,SBJ1,SBJ2之狀態。對於該等個別被照體中針對個別被照體SBJ0,SBJ2所檢出之臉部方向為左,相對地針對個別被照體SBJ1所檢出之臉部方向為右。該情況下,由於全部個別被照體之臉部方向並非相同,因此若為第一構圖控制之情況時,如於圖9(b)等所說明,設定構圖如總合被照體重心Gt位於通過原點座標P之垂直線(圖像區域分割線Ld:Y軸線)上。
然而,於3個個別被照體中,例如佔過半數之2個個別被照體SBJ0,SBJ2面向相同方向(臉部方向相同),係可謂相較於對應於剩餘1個個別被照體SBJ1之臉部方向所面向之相反方向,該等2個個別被照體SBJ0,SBJ2所面向之前方存在有某種重要性高之物件之可能性甚高。若根據該類想法,可謂於該等2個個別被照體SBJ0,SBJ2之臉部方向所示之前方之畫面區域設置空間,成為較良好構圖之可能性甚高。若為該情況,由於2個個別被照體SBJ0,SBJ2之臉部方向檢出作為左,因此於畫面中,使包含3個個別被照體SBJ0,SBJ1,SBJ2之總合被照體圖像部分,較圖像區域分割線Ld靠近右側之圖像區域,以獲得良好構圖。
因此,第二構圖控制係作為對複數之每個別被照體所檢出之臉部方向之關聯性,於相同之臉部方向之數目佔個別被照體之全體數之特定比率以上時,將該相同之臉部方向作為基準臉部方向。該基準臉部方向係可謂於例如將複數個別被照體群之總體視作為1個個別被照體之情況下,指出於畫面內所面向之方向。然後,根據該基準臉部方向,求出並設定水平偏移量θx。藉由如此之構圖控制,於圖12之情況下,使總合被照體重心Gt較通過原點座標P之垂直線位於右側而設定構圖。
而且,於此雖未圖示,於無法獲得僅佔上述特定比率以上之相同臉部方向數之狀態,亦即無法決定上述基準臉部方向之情況時,作為本實施型態係採取宜設定總合被照體圖像部分在左右方向大致位於中央之構圖之想法。因此,於該情況下,關於水平偏移量θx設定0。
圖13係對應於上述第二構圖控制,表示圖5所示之被照體檢出處理區塊61、構圖控制處理區塊62及通信控制處理區塊63所執行之程序例。
該圖13所示之程序中,步驟S221-1、S222-2除外之到步驟S201~S232為止之程序係分別與到圖11之步驟S101~S132為止之程序相同。
然後,步驟S221-1及接續於其之步驟S222-2係在步驟S222獲得否定之判別結果之情況下,作為應執行之程序而插入。總言之,步驟S222-1、S222-2係於檢出之個別被照體數為複數之情況下,首先於總合被照體圖像部分之尺寸調整已完成之階段,在作為該等個別被照體之臉部方向之關聯性並非全部臉部方向相同之情況時所執行者。
於步驟S222-1執行用以決定基準臉部方向之處理。
為此例如亦於先前所述,作為檢出之複數之每個別被照體之臉部方向之關聯性,判斷具有相同臉部方向之個別被照體組中,是否有構成該組之個別被照體數顯示全部檢出之個別被照體數之特定比率以上者,若有該類個別被照體組,則將該組之個別被照體之臉部方向決定作為有效基準臉部方向。而且,若無該類個別被照體組,則進行亦無基準臉部方向之決定。
此外,關於上述特定比率實際上設定為何種值,係以實際上個別被照體數及每個別被照體之臉部方向之關聯性之對應,來考慮何種構圖適當後,再適宜地決定即可。而且,作為該特定比率之值基本上設定固定之1個值即可,但例如因應決定之個別被照體數等來設定不同特定值亦可。
進一步而言,作為基準臉部方向決定處理之運算法,亦可思慮除了上述以外者。亦可思慮例如不考慮全部個別被照體數中之比率,僅將具有相同臉部方向之個別被照體組中之個別被照體數最多之組之臉部方向,決定作為有效基準臉部方向之處理。於該情況下,於例如構成具有相同臉部方向之各組之個別被照體數相同時,進行無基準臉部方向之決定。
於步驟S222-2,作為上述步驟S222-1之臉部方向決定處理之結果,進行關於是否已決定有效基準臉部方向之判別。
於此,於獲得肯定之判別結果之情況時,前進至步驟S223。於該情況下之步驟S223,根據於步驟S222-1所決定之基準臉部方向決定係數D,求出並設定水平偏移量θx。
另一方面,於步驟S222-2獲得否定之判別結果之情況時,於先前之步驟S222-1無法決定表示左或右之有效基準臉部方向。因此,於該情況下,前進至步驟S224,藉此關於水平偏移量θx設定0。如此,藉由插入步驟S222-1、S222-2,實現如藉由圖12所說明之第二構圖控制。
此外,先前之圖11及上述圖13所示之各構圖控制之程序若從其全體流程來看,可看作因應檢出之個別被照體之數目來判定、決定被視為最佳之構圖,並適宜地執行變焦控制及迴旋‧俯仰控制,以實際獲得(反映)該判定之構圖之攝像圖像資料。
而且,迄今之構圖控制時,臉部方向之檢出係以藉由左、右2階段之檢出為前提,但實際上據判亦有例如除了左、右以外亦有正面而構成臉部方向檢出處理之情況。於該情況下,根據本申請發明之構圖控制可有效適用。
例如圖8檢出1個個別被照體之情況下,進一步針對臉部方向檢出正面之情況,其一可思慮使水平方向之被照體位置位於畫面之大致中央(重心G大致位於圖像區域分割線Ld(Y軸線)上)。然而,該類構圖大多為不佳構圖之代表。因此,於檢出之個別被照體為1個之情況下,於臉部方向為正面之情況時,亦可思慮對於與圖8同樣之構圖,或使其成為對於圖8之構圖以圖像區域分割線Ld為基準呈現對稱之構圖來決定水平偏移量θx。如此,可獲得依循三分割法之良好構圖。
而且,於檢出2以上之個別被照體之情況下,可思慮例如於全部個別被照體之臉部方向表示正面或基準臉部方向為正面之情況時,將(式1)之係數D設定為0後,求出水平偏移量θx而構成。
而且,作為臉部方向,關於上下方向亦可檢出之情況下,亦可因應該上下方向之臉部方向之檢出結果,來進行根據本申請發明之構圖控制。於該情況下,以沿著水平方向之圖像區域分割線Ld(可為例如通過原點座標之水平方向之線(X軸線))為基準,進行上下方向之總合被照體重心Gt之移動。
進一步關於臉部方向,亦可檢出合成有左右方向及上下方向之斜向方向時,亦可進行因應檢出該斜向方向之臉部方向之構圖控制。於該情況下,可思慮與檢出之斜向之臉部方向呈正交並橫跨畫面之線((例如通過原點座標之線)設定作為圖像區域分割線Ld,使總合被照體重心Gt移動往藉由該圖像區域分割線Ld所分割之圖像區域之某一側。
進一步例如關於臉部方向,於左右方向(或上下方向),藉由比例如2階段或3階段多之階段,進行方向檢出之情況時,可思慮採用因應如此檢出之方向之階段(程度)來使水平偏移量θx(或垂直偏移量θy)可變之運算法。
而且,通過基準線之基準點係於該情況下如圖7所示為畫面之原點座標,但關於該基準點之位置,例如以獲得更良好構圖等為目的,設定原點座標以外之位置亦可。
圖14係表示作為本實施型態之攝像系統之變形例之架構例。
於該圖,首先從數位相機1經由通信控制處理區塊63,將根據攝像並於信號處理部24所產生攝像圖像資料對於雲台10傳送。
於該圖,作為雲台10之架構係表示有通信控制處理區塊71、迴旋.俯仰控制處理區塊72、被照體檢出處理區塊73及構圖控制處理區塊74。
通信控制處理區塊71係對應於圖4之通信部52之功能部位,其係按照特定語法來執行與數位相機1側之通信控制處理區塊部63(雲台對應通信部34)之通信處理而構成之部位。
藉由通信控制處理區塊71所接收之攝像圖像資料係交付給被照體檢出處理區塊73。該被照體檢出處理區塊73係包含至少可僅進行例如與圖5所示之被照體檢出處理區塊61同等之被照體檢出處理之信號處理部而構成,以取入之攝像圖像資料作為對象來執行被照體檢出處理,並將其檢出資訊輸出至構圖控制處理區塊74。
構圖控制處理區塊74可執行與圖5之構圖控制處理區塊62同等之構圖控制,作為該構圖控制處理之結果,於進行迴旋控制、俯仰控制時,將為其之控制信號對於迴旋‧俯仰控制處理區塊72輸出。
迴旋‧俯仰控制處理區塊72係對應於例如圖4之控制部51所執行之控制處理中之關於迴旋‧俯仰控制之處理之執行功能,其因應輸入之控制信號,將用以控制迴旋機構部53、俯仰機構部56之運動之信號對於迴旋用驅動部55、俯仰用驅動部58輸出。藉此,進行迴旋、俯仰以獲得於構圖控制處理區塊62所判定之構圖。
如此,圖14所示之攝像系統係從數位相機1向雲台10傳送攝像圖像資料,藉由雲台10側執行根據取入之攝像圖像資料之被照體檢出處理及構圖控制而構成。
圖15係表示作為關於本實施型態之攝像系統之其他變形例之架構例。此外,於該圖,對於與圖14同一部分係附上同一符號,並省略說明。
於該系統,雲台10側包含攝像部75。該攝像部75包含例如攝像用之光學系統及攝像元件(影像器),由獲得根據攝像光之信號(攝像信號),並且用以從該攝像信號產生攝像圖像資料之信號處理部所組成。此係對應於例如圖3所示之光學系統部21、影像感測器22、A/D轉換器23及信號處理部24中,包含到獲得攝像圖像資料為止之信號處理層之部位之架構。藉由攝像部75所產生之攝像圖像資料係輸出至被照體檢出處理區塊73。此外,攝像部75取入攝像光之方向(攝像方向)係設定儘可能與例如載置於雲台10之數位相機1之光學系統部21(鏡頭部3)之攝像方向一致
該情況下之被照體檢出處理區塊73及構圖控制處理區塊74係與上述圖14同樣地執行被照體檢出處理、構圖控制處理。但該情況下之構圖控制處理區塊74係除了迴旋.俯仰控制以外,還對應於執行釋放動作之時序,將釋放指示信號從通信控制處理區塊71對於數位相機1傳送。於數位相機1,因應接收釋放指示信號而執行釋放動作。
如此,於其他變形例,關於被照體檢出處理及構圖控制,可於雲台10側完結進行關於釋放動作本身以外之全部控制‧處理。
而且,於圖11、圖13所示之構圖控制中所執行之迴旋控制、俯仰控制係藉由控制雲台10之迴旋.俯仰機構之運動來進行,但取代雲台10,亦可思慮採用例如對於數位相機1之鏡頭部3,射入藉由反射鏡所反射之攝像光後,移動上述反射光,以針對根據攝像光所獲得之圖像,獲得經迴旋.俯仰之結果之架構。
而且,藉由進行使用以從數位相機1之影像感測器22,取入作為圖像有效之攝像信號之像素區域,往水平方向及垂直方向位移之控制,亦可獲得與進行迴旋‧俯仰同等之結果。於該情況下,無須準備雲台10或依據其之數位相機1以外之迴旋‧俯仰用之裝置部,藉由數位相機1單機及可使作為本實施型態之構圖控制完結。
而且,包含可將光學系統部21之鏡頭之光軸往水平‧垂直方向變更之機構,控制該機構之運動而構成,亦可進行迴旋‧俯仰。
而且,根據本申請發明之構圖判定用之架構亦可適用於到此作為實施型態所說明之攝像系統以外。因此,以下說明關於根據本申請發明之構圖判定之適用例。
首先,圖16係將根據本申請發明之構圖判定對於數位相機等攝像裝置單機所適用者,例如於攝像模式時,在藉由攝像裝置所攝像之圖像為適當構圖時,藉由顯示向使用者通知該事項。
因此,作為攝像裝置所應包含之架構,於此表示被照體檢出‧構圖判定處理區塊81、通知控制處理區塊82及顯示部83。
被照體檢出‧構圖判定處理區塊81係取入攝像圖像資料,進行例如與圖5之被照體檢出處理區塊61同等之被照體檢出處理,及利用作為該被照體檢出處理之結果之檢出資訊,進行例如與圖5同等之構圖判定用之處理之部位。
例如使用者將攝像裝置設定為攝像模式後,將攝像裝置拿持於手中,若隨時可進行釋放操作(快門按鈕操作),則處於可進行攝像圖像記錄之狀況。
於該類狀態下,於被照體檢出‧構圖判定處理區塊81係取入當時攝像所獲得之攝像圖像資料,進行被照體檢出。如此一來,藉由構圖控制處理,首先特定出因應檢出之個別被照體之數目等,其最佳構圖為何,作為該情況下之構圖判定處理係求出當時所獲得之攝像圖像資料之圖內容之構圖與最佳構圖之一致性、類似度。然後,例如類似度成為一定以上時,判定實際拍攝所獲得之攝像圖像資料之圖內容為最佳構圖。此外,可思慮例如若實際上獲得攝像圖像資料之圖內容之構圖與最佳構圖被視為一致之程度之特定以上之類似度,則判斷為最佳構圖而構成運算法。而且,關於在此之一致性、類似度如何求出,可思慮多種運算法,因此於此未特別提及關於其具體例。
如此,攝像圖像資料之畫面內容為最佳構圖之判定結果之資訊係對於通知控制處理區塊82輸出。通知控制處理區塊82係因應上述資訊之輸入,執行顯示控制,以於顯示部83進行用以向使用者通知現在攝像之圖像為最佳構圖之藉由特定態樣之顯示。此外,通知控制處理區塊82係藉由攝像裝置所包含之微電腦(CPU)等所進行之顯示控制功能、及用以實現對於顯示部83之圖像顯示之顯示用圖像處理功能等來實現。此外,於此向使用者通知最佳構圖構成為藉由以電子聲響或合成聲音等為首之聲響來進行亦可。
而且,顯示部83係對應於例如本實施型態之數位相機1之顯示部33,例如對於攝像裝置之特定位置展示出其顯示器面板而設置,一般於拍攝模式時,顯示被稱為所謂預覽圖之當時攝像之圖像。因此,該攝像裝置實際上係於顯示部83,以對於預覽圖重疊之態樣,來顯示通知最佳構圖之內容之圖像。使用者係於出現通知該最佳構圖之顯示時,進行釋放操作。藉此,即使不擅長照片拍攝知識或技術之使用者,仍可簡單地進行良好構圖之照片攝影。
而且,圖17亦與上述圖16同樣對於數位相機等攝像裝置單機,適用根據本申請發明之構圖判定。
首先,於該圖所示之架構,與圖16同樣藉由被照體檢出.構圖判定處理區塊81,取入當時藉由攝像所獲得之攝像圖像資料,進行被照體檢出處理,並且根據被照體檢出資訊來判定上述攝像圖像資料之圖內容是否為最佳構圖。然後,若判定已成為最佳構圖,則對於釋放控制處理區塊84通知該事項。
釋放控制處理區塊84係執行用以記錄攝像圖像資料之控制之部位,例如藉由攝像裝置所包含之微電腦所執行之控制等來實現。接受上述通知之釋放控制處理區塊84係將當時所獲得之攝像圖像資料,例如記憶於記憶媒體,執行圖像信號處理、記錄控制處理。
若如此地構成,可獲得例如於最佳構圖之圖像被攝像時,會自動進行其攝像圖像之記錄之攝像裝置。
此外,上述圖16及圖17之架構若為例如靜物攝影機之範疇,則可適用於例如藉由圖1所示之架構之數位相機以外,對於在銀鹽底片等記錄攝像圖像之被稱為所謂銀鹽相機者,亦可藉由設置例如將藉由光學系統所獲得之攝像光予以分光取入之影像感測器、及輸入來自該影像感測器之信號並予以處理之數位圖像信號處理部等而可適用。
而且,圖18係於對於既已存在之圖像資料進行圖像編輯之編輯裝置,適用本申請發明之例。
於該圖表示有編輯裝置90。於此之編輯裝置90係作為既已存在之圖像資料,獲得再生例如記憶於記憶媒體者所獲得之圖像資料(再生圖像資料)。此外,除了從記憶媒體再生者以外,例如取入經由網路下載者亦可。亦即,關於以何種路徑取得編輯裝置90應取入之攝像圖像資料,不應特別限定。
編輯裝置90取入之再生攝像圖像資料係分別對於修整處理區塊91及被照體檢出‧構圖判定處理區塊92輸入。
首先,被照體檢出‧構圖判定處理區塊92係例如首先執行與圖16、圖17同樣之被照體檢出處理,並輸出檢出資訊。然後,作為利用該檢出資訊之構圖判定處理,於該情況下,特定出作為輸入之再生攝像圖像資料之全畫面可獲得最佳構圖之根據特定長寬比之圖像部分(最佳構圖之圖像部分)為何處。然後,若特定出最佳構圖之圖像部分,例如將表示該圖像部分之位置之資訊(修整指示資訊)對於修整處理區塊91輸出。
修整處理區塊91係回應如上述輸入有修整指示資訊,從輸入之再生攝像圖像資料,執行用以擷取修整指示資訊所示之圖像部分之圖像處理,並將擷取之圖像部分作為1個獨立之圖像資料輸出。此係編輯攝像圖像資料。
若為該類架構,例如作為圖像資料之編輯處理會自動進行修整,其係新獲得從原本即有之圖像資料之圖內容擷取最佳構造之部分之內容之圖像資料。該類編輯功能可思慮在例如個人電腦等所安裝之圖像資料編輯用之應用軟體、或管理圖像資料之應用軟體之圖像編輯功能等採用。
圖19係將本申請發明之構圖判定適用於數位相機等攝像裝置之架構之一例。
於此藉由未圖示之攝像部攝像所獲得之攝像圖像資料係對於攝像裝置100內之被照體檢出‧構圖判定處理區塊101、檔製作處理區塊103輸入。此外,於該情況下,輸入於攝像裝置100內之攝像圖像資料係例如因應釋放操作等而應記憶於記憶媒體之攝像圖像資料,於此根據未圖示之攝像部之攝像所獲得之攝像信號來產生。
首先,被照體檢出‧構圖判定處理區塊101係以輸入之攝像圖像資料為對象,進行被照體檢出,根據其檢出資訊來判定最佳構圖為何。具體而言,例如與圖18之情況相同,獲得於輸入之攝像圖像資料之全畫面特定出最佳構圖之圖像部分之資訊即可。然後,將表示如此獲得之關於最佳構圖之判定結果之資訊,對於元資料製作處理區塊102輸出。
於元資料製作處理區塊102,根據輸入之資訊,製作包含用以從對應之攝像圖像資料獲得最佳構圖所必要之資訊之元資料(構圖編輯元資料),並對於檔製作處理區塊103輸出。作為該構圖編輯元資料之內容為例如於作為對應之攝像圖像資料之畫面,可表示修整之圖像區域部分為何處之位置資訊等。
於該圖所示之攝像裝置100,關於攝像圖像資料係作為根據特定形式之靜止圖像檔管理,並記錄於記憶媒體。對應於此,檔製作處理區塊103係將攝像圖像資料轉換(製作)為靜止圖像檔形式。
檔製作處理區塊103係首先針對輸入之攝像圖像資料,進行對應於圖像檔形式之圖像壓縮符號化,製作包含攝像圖像資料之檔主體部分。於此同時,將輸入自元資料製作處理區塊102之構圖編輯元資料對於特定儲存位置儲存,製作標頭及附加資訊區塊等資料部分。然後,從該等檔主體部分、標頭、附加資訊區塊等製作靜止圖像檔,並將其輸出。藉此,如圖示,作為應記錄於記憶媒體之靜止圖像檔,係獲得具有包含攝像圖像資料及元資料(構圖編輯元資料)之構造者。
圖20係表示針對藉由上述圖19之裝置製作之靜止圖像檔進行編輯之編輯裝置之架構例。
圖所示之編輯裝置110係取入靜止圖像檔之資料,首先輸入於元資料分離處理區塊111。元資料分離處理區塊111係從靜止圖像檔之資料,分離相當於檔主體部分之攝像圖像資料與元資料。關於分離所獲得之元資料係對於元資料解析處理區塊112輸出,關於攝像圖像資料係對於修整處理區塊113輸出。
元資料解析處理區塊112係執行解析取入之元資料之處理之部位。然後,作為解析處理,關於構圖編輯元資料係從用以獲得其內容之最佳構圖之資訊,至少特定出以對應之攝像圖像資料作為對象進行修整之圖像區域。然後,將指示該特定之圖像區域之修整之修整指示資訊,對於修整處理區塊113輸出。
修整處理區塊113係與先前圖18之修整處理區塊91相同,從輸入自元資料分離處理區塊111側之攝像圖像資料,執行用以擷取從上述元資料分離處理區塊112輸入之修整指示資訊所示之圖像部分之圖像處理,將擷取之圖像部分作為1個獨立之圖像資料即編輯攝像圖像資料輸出。
若根據包含上述圖19、圖20所示之攝像裝置及編輯裝置之系統,例如藉由拍攝等所獲得之原始之靜止圖像資料(攝像圖像資料)係直接無加工而預先保存後,從該原始靜止圖像資料,可利用元資料進行擷取最佳構圖之圖像之編輯。而且,該類對應於最佳構圖之擷取圖像部分之決定係自動進行。
圖21係於作為攝影機等可進行動態圖像之拍攝記錄之攝像裝置,適用本申請發明之例。
於該圖所示之攝像裝置120輸入有動態圖像資料。該動態圖像資料係根據例如藉由相同之攝像裝置120所具有之攝像部進行攝像所獲得之攝像信號而產生。該動態圖像資料係對於攝像裝置120之被照體檢出‧構圖判定處理區塊122及檔製作‧記錄處理區塊124輸入。
該情況下之被照體檢出‧構圖判定處理區塊122係進行關於輸入之動態圖像資料之構圖之良莠判定。例如於被照體檢出˙構圖判定處理區塊122,事先保持關於何為良好構圖之參數(良好構圖對應參數)。作為該參數係因應檢出之個別被照體數、及對每個別被照體所檢出獲得之臉部方向之資訊為適當而設定之目標被照體尺寸或水平偏移量θx等。然後,被照體檢出˙構圖判定處理區塊122係針對輸入之動態圖像資料,例如繼續地進行關於成為何種構圖之構圖判定(例如求出動態圖像資料之實際之個別被照體之佔有率、被照體間距離K等構圖參數),並且比較作為其判定結果所獲得之動態圖像資料之構圖參數及上述良好構圖參數。然後,若動態圖像資料之構圖參數對於良好構圖對應參數具有一定以上之類似度,則判定為良好構圖,若上述類似度為一定以下,則判定非良好構圖。
被照體檢出.構圖判定處理區塊122係如上述針對動態圖像資料,判定獲得良好構圖時,對於元資料製作處理區塊123,輸出表示於動態圖像資料,本次判定獲得上述良好構圖之圖像區間(良好構圖圖像區間)為何處之資訊(良好構圖圖像區間指示資訊)。良好構圖圖像區間指示資訊)係例如表示作為動態圖像資料之良好構圖圖像區間之開始位置及結束位置之資訊等。
該情況下之元資料製作處理區塊123係針對藉由接著所說明之動態圖像記錄處理區塊124,於記憶媒體作為檔予以記錄之動態圖像資料,產生各種所要之元資料。並且,如上述從被照體檢出‧構圖判定處理區塊122輸入良好構圖圖像區間指示資訊之情況時,產生表示輸入之良好構圖圖像區間指示資訊所示之圖像區間為良好構圖之參數,並對於動態圖像記錄處理區塊124輸出。
動態圖像記錄處理區塊124係針對輸入之動態圖像資料,作為按照特定形式之動態圖像檔管理,執行用以記錄於記憶媒體之控制。然後,從元資料製作處理區塊123輸出有元資料之情況時,執行用以使該元資料包含於附隨在動態圖像檔之元資料並予以記錄之控制。
藉此,如圖示,記錄於記憶媒體之動態圖像檔係具有於藉由攝像所獲得之動態圖像資料,附隨有表示獲得良好構圖之圖像區間之元資料之內容。
此外,如上述藉由元資料所示之獲得良好構圖之圖像區間係來自具有某程度之時間寬之動態圖像之圖像區間,或來自從動態圖像資料擷取之靜止圖像均可。而且,取代上述元資料,亦可思慮產生獲得良好構圖之圖像區間之動態圖像資料或靜止圖像資料,將其作為附隨於動態圖像檔之次要性圖像資料靜止圖像資料(或動態圖像檔及獨立之檔)來記錄之架構。
而且,如圖21所示,對於攝像裝置120包含被照體檢出‧構圖判定處理區塊122之架構中,亦可思慮僅將藉由被照體檢出‧構圖判定處理區塊122判定為良好構圖圖像區間之動態圖像之區間,作為動態圖像檔記錄而構成。進一步而言,亦可思慮將對應於藉由被照體檢出‧構圖判定處理區塊122判定為良好構圖之圖像區間之圖像資料,經由資料介面等輸出至外部機器之架構。
圖22係於進行印刷之印刷裝置適用本申請發明之例。
於該情況下,印刷裝置130係取入具有應印刷之圖像內容之圖像資料(靜止圖),如此取入之資料係對於修整處理區塊131及被照體檢出.構圖判定處理區塊132輸入。
首先,被照體檢出.構圖判定處理區塊132係藉由執行與圖18之被照體檢出.構圖判定處理區塊92同樣之被照體檢出處理‧構圖判定處理,來執行特定出輸入之圖像資料之全畫面之最佳構圖之圖像部分之處理,產生因應該處理結果之內容之修整指示資訊,並對於修整處理區塊131輸出。
修整處理區塊131係與圖18之修整處理區塊91相同,執行用以從輸入之圖像資料擷取修整指示資訊所示之圖像部分之圖像處理。然後,將該擷取之圖像部分之資料作為印刷用圖像資料,對於印刷控制處理區塊133輸出。
印刷控制處理區塊133係利用輸入之印刷用圖像資料,執行用以使於此未圖示之印刷機構動作之控制。
藉由該類動作,依印刷裝置130而言,從輸入之圖像資料之圖內容,自動擷取獲得最佳構圖之圖像部分,並作為1張圖印刷。
於圖23所示之例係適宜適用於例如記憶許多靜止圖像檔,用以提供利用該等靜止圖像檔之服務之裝置、系統。
於記憶部141記憶有許多靜止圖像檔。
被照體檢出‧構圖判定處理區塊142係於特定時序,取入記憶於記憶部141之靜止圖檔,取出儲存於該檔主體部之靜止圖像資料。然後,以該靜止圖像資料作為對象,執行與例如圖19所示之被照體檢出‧構圖判定處理區塊101同樣之處理,獲得表示關於最佳構圖之判定結果之資訊,將該資訊對於元資料製作處理區塊143輸出。
元資料製作處理區塊143係根據輸入之資訊,與先前圖19之元資料製作處理區塊102同樣製作元資料(構圖編輯元資料)。並且,於該情況下,將製作之元資料登錄於記憶在記憶部141之元資料表。該元資料表係表示與記憶於相同記憶部141之靜止圖像資料之對應關係,並儲存元資料而成之資訊單位。總言之,依元資料表而言,會表示有元資料(構圖編輯元資料)、與為了製作該元資料而藉由被照體檢出‧構圖判定處理區塊101成為被照體檢出處理及構圖判定處理之對象之靜止圖像檔之對應。
然後,例如因應來自外部之靜止圖像檔之要求,輸出記憶於記憶部141之靜止圖像檔(例如若為伺服器,則為因應來自附屬端之下載要求下載靜止圖像檔之情況等)時,靜止圖像檔輸出處理區塊144係檢索從記憶部141所要求之靜止圖像檔並取入,並且亦從元資料表,檢索對應於該檢索之靜止圖像檔之元資料(構圖編輯元資料)並取入。
然後,該靜止圖像檔輸出處理區塊144至少具有例如圖20所示之元資料解析處理區塊112、及相當於修整處理區塊113之功能區塊而成。
於靜止圖像檔輸出處理區塊144,藉由內部之元資料製作處理區塊,解析取入之元資料以獲得修整指示資訊。然後,藉由同樣內部之修整處理區塊,以儲存於取入之靜止圖像檔之靜止圖像資料作為對象,執行因應上述修整指示資訊之修整。然後,將藉由修整所獲得之圖像部分重新作為1個靜止圖像資料產生,並將其輸出。
上述圖23之系統架構可思慮對於多種服務之適用。
例如其一可適用於經由網路之照片列印服務。總言之,使用者係對列印服務之伺服器,經由網路上傳想列印(印刷)之圖像資料(靜止圖像檔)。於伺服器,將如此上傳之靜止圖像檔預先記憶於記憶部141,亦製作對應於該檔之元資料,並預先登錄於元資料表。然後,實際印刷輸出時,藉由靜止圖像檔輸出處理區塊144,將擷取作為最佳構圖之靜止圖像資料輸出作為印刷用之圖像資料。總言之,依該服務而言,若請求照片印刷,則送來修正為最佳構圖而列印者。
而且其一亦可適用於例如部落格等之伺服器。於記憶部141,記憶部落格之文本資料及上傳之圖像資料。藉此,例如於部落格之頁面,可貼上使用者從上傳之圖像資料擷取最佳構圖後之圖像。
此外,藉由上述圖14~圖23所說明之例為一部分,亦可思慮其他可適用根據本申請發明之構圖判定之裝置、系統、應用軟體等。
而且,至此之實施型態之說明時,被照體(個別被照體)係以人物為前提,但例如以人物以外之動物作為被照體之情況時,可思慮適用本申請發明。
而且,作為被照體檢出之對象之圖像資料不應僅限定於由來自攝像者(攝像圖像資料),例如亦可思慮以具有圖畫或設計圖等圖內容之圖像資料為對象。
而且,本申請發明下所判定之構圖(最佳構圖)未必限定於藉由對於三分割法等構圖設定手法,加進檢出之個別被照體之數目之要素之手法所決定之構圖。可思慮例如即使是一般被當作不佳之構圖,端視構圖設定亦有使用者感到有趣或反而感覺良好之情況。因此,作為本申請發明下所判定之構圖(最佳構圖),若考慮實用性、娛樂性等而任意設定即可,實際上並未特別限制。
1...數位相機
2...快門按鈕
3...鏡頭部
10...雲台
21...光學系統
22...影像感測器
23...A/D轉換器
24...信號處理部
25...編碼/解碼部
26...媒體控制器
27...控制部
28...ROM
29...RAM
30...快閃記憶體
31...操作部
32...顯示驅動器
33...顯示部
34...雲台對應通信部
40...記憶卡
51...控制部
52...通信部
53...迴旋機構部
54...迴旋用馬達
55...迴旋用驅動部
56...俯仰機構部
57...俯仰用馬達
58...俯仰用驅動部
61...被照體檢出處理區塊
62...構圖控制處理區塊
63...通信控制處理區塊
SBJ(SBJ0~n)...個別被照體
71...通信控制處理區塊
72...迴旋‧俯仰控制處理區塊
73...被照體檢出處理區塊
74...構圖控制處理區塊
75...攝像部
81,92,101,122,132,142...被照體檢出‧構圖判定處理區塊
82...通知控制處理區塊
83...顯示部
84...釋放控制處理區塊
91,131...修整處理區塊
102,123,143...元資料製作處理區塊
103...檔製作處理區塊
111...元資料分離處理區塊
112...元資料解析處理區塊
113...修整處理區塊
124...檔製作‧記錄處理區塊
133...印刷控制處理區塊
141...記憶部
144...靜止圖像檔輸出處理區塊
圖1係表示作為本發明之實施型態之攝像系統(數位相機、雲台)之外觀架構例之圖。
圖2(a)、2(b)係作為實施型態之攝像系統之動作而模式性地表示安裝於雲台之數位相機沿著迴旋方向及俯仰方向之運動之例之圖。
圖3係表示實施型態之數位相機之架構例之圖。
圖4係表示實施型態之雲台之架構例之圖。
圖5係藉由區塊單位之架構表示實施型態之數位相機對應於構圖控制所包含之功能之圖。
圖6(a)、6(b)係說明個別被照體之重心及關於複數個別被照體之總合被照體重心之圖。
圖7係說明設定於攝像圖像資料之畫面之原點座標之圖。
圖8係模式性地表示第一構圖控制之檢出之個別被照體數為1之情況下之構圖控制例之圖。
圖9(a)、9(b)係模式性地表示第一構圖控制之檢出之個別被照體數為2之情況下之構圖控制例之圖。
圖10係模式性地表示第一構圖控制之檢出之個別被照體數為3之情況下之構圖控制例之圖。
圖11係表示第一構圖控制用之處理程序例之流程圖。
圖12係模式性地表示第二構圖控制之檢出之個別被照體數為3之情況下之構圖控制例之圖。
圖13係表示第二構圖控制用之處理程序例之流程圖。
圖14係表示作為實施型態之攝像系統之變形例之架構例之圖。
圖15係表示作為實施型態之攝像系統之其他變形例之架構例之圖。
圖16係表示根據本申請發明之構圖判定之適用例之圖。
圖17係表示根據本申請發明之構圖判定之適用例之圖。
圖18係表示根據本申請發明之構圖判定之適用例之圖。
圖19係表示根據本申請發明之構圖判定之適用例之圖。
圖20係表示根據本申請發明之構圖判定之適用例之圖。
圖21係表示根據本申請發明之構圖判定之適用例之圖。
圖22係表示根據本申請發明之構圖判定之適用例之圖。
圖23係表示根據本申請發明之構圖判定之適用例之圖。
(無元件符號說明)

Claims (9)

  1. 一種構圖判定裝置,其特徵為包含:被照體檢出機構,其係檢出根據圖像資料之圖像中之特定被照體;被照體方向檢出機構,其係對藉由上述被照體檢出機構所檢出之被照體即檢出被照體,逐一檢出表示上述檢出被照體在上述圖像中所面向之方向之被照體方向資訊;及構圖判定機構,其係根據上述被照體方向資訊來判定構圖;上述構圖判定機構係於藉由上述被照體檢出機構檢出複數被照體時,根據對應於上述複數被照體之複數上述被照體方向資訊之關係來判定構圖。
  2. 如請求項1之構圖判定裝置,其中上述構圖判定機構係於被照體方向資訊所示之方向為全部相同之關係之情況下,獲得如下構圖,以作為判定結果:設定於包含上述圖像中之區域之全部檢出被照體之圖像部分之重心係位於藉由設定於上述圖像中之圖像區域分割線所分割之圖像中之分割區域中與上述複數被照體方向資訊所示之方向相反側之分割區域者。
  3. 如請求項2之構圖判定裝置,其中上述構圖判定機構於作為上述判定結果所獲得之構圖中,關於從上述圖像區域分割線至上述重心之距離,係根據上述檢出被照體之數目,來進行設定。
  4. 如請求項1之構圖判定裝置,其中上述構圖判定機構係於被照體方向資訊所示之方向為非全部相同之關係之情況下,有以如下構圖作為判定結果之情況:根據所示方向不同之被照體方向資訊之關係,至少設定於包含複數檢出被照體之圖像部分之重心之位置係對應於設定在上述圖像中之圖像區域分割線者。
  5. 如請求項4之構圖判定裝置,其中上述構圖判定機構係於作為上述所示方向不同之被照體方向資訊間之關係,關於表示相同方向之最多被照體檢出資訊群,不存在佔全被照體方向資訊之一定比率以上者之情況下,判定如下構圖作為上述最佳構圖:設定於包含上述圖像中之全部檢出被照體之圖像部分之重心之位置係對應於設定在上述圖像中之圖像區域分割線者。
  6. 如請求項4之構圖判定裝置,其中上述構圖判定機構係於作為上述所示方向不同之被照體方向資訊間之關係,關於表示相同方向之最多被照體檢出資訊群,存在有佔全被照體方向資訊之一定比率以上者之情況下,獲得如下構圖以作為判定結果:設定於包含上述圖像中之全部檢出被照體之圖像部分之重心係位於藉由設定於上述圖像中之圖像區域分割線所分割之圖像中之分割區域中與上述最多被照體檢出資訊群所示之方向相反側之分割區域者。
  7. 如請求項6之構圖判定裝置,其中上述構圖判定機構於作為上述判定結果所獲得之構圖中,關於從上述圖像區域分割線至上述重心之距離,係根據上述檢出被照體之數目來進行設定。
  8. 一種構圖判定方法,其特徵為包含以下程序:被照體檢出程序,其係檢出根據圖像資料之圖像中之特定被照體;被照體方向檢出程序,其係對藉由上述被照體檢出程序所檢出之被照體即檢出被照體,逐一檢出表示上述檢出被照體在上述圖像中所面向之方向之被照體方向資訊;及構圖判定程序,其係根據上述被照體方向資訊來判定構圖之程序,於藉由上述被照體檢出程序檢出複數被照體時,根據對應於上述複數被照體之複數上述被照體方向資訊之關係來判定構圖。
  9. 一種構圖判定用程式,其係使構圖判定裝置執行以下程序:被照體檢出程序,其係檢出根據圖像資料之圖像中之特定被照體;被照體方向檢出程序,其係對藉由上述被照體檢出程序所檢出之被照體即檢出被照體,逐一檢出表示上述檢出被照體在上述圖像中所面向之方向之被照體方向資訊;及構圖判定程序,其係根據上述被照體方向資訊來判定 構圖之程序,於藉由上述被照體檢出程序檢出複數被照體時,根據對應於上述複數被照體之複數上述被照體方向資訊之關係來判定構圖。
TW097134573A 2007-10-17 2008-09-16 A composition determination means, a composition determination method, and a composition determination program TWI386056B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US12/370,708 US8477117B2 (en) 2008-09-16 2009-02-13 Embedded optical induction input device and method of implementing the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007270391A JP5115139B2 (ja) 2007-10-17 2007-10-17 構図判定装置、構図判定方法、プログラム

Publications (2)

Publication Number Publication Date
TW200930091A TW200930091A (en) 2009-07-01
TWI386056B true TWI386056B (zh) 2013-02-11

Family

ID=40325758

Family Applications (1)

Application Number Title Priority Date Filing Date
TW097134573A TWI386056B (zh) 2007-10-17 2008-09-16 A composition determination means, a composition determination method, and a composition determination program

Country Status (6)

Country Link
US (1) US8275171B2 (zh)
EP (1) EP2059029B1 (zh)
JP (1) JP5115139B2 (zh)
KR (1) KR101481830B1 (zh)
CN (2) CN101415077B (zh)
TW (1) TWI386056B (zh)

Families Citing this family (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5206095B2 (ja) 2008-04-25 2013-06-12 ソニー株式会社 構図判定装置、構図判定方法、プログラム
JP5359645B2 (ja) * 2009-07-23 2013-12-04 ソニー株式会社 構図判定装置、撮像システム、構図判定方法、プログラム
JP5347802B2 (ja) 2009-07-27 2013-11-20 ソニー株式会社 構図制御装置、撮像システム、構図制御方法、プログラム
JP5126176B2 (ja) 2009-07-28 2013-01-23 ソニー株式会社 撮像部駆動装置、回転角度制御方法、撮像装置、プログラム、撮像システム
JP5434338B2 (ja) 2009-07-29 2014-03-05 ソニー株式会社 撮像制御装置、撮像方法、プログラム
JP5434339B2 (ja) * 2009-07-29 2014-03-05 ソニー株式会社 撮像制御装置、撮像システム、撮像方法、プログラム
JP5407640B2 (ja) * 2009-07-29 2014-02-05 ソニー株式会社 画像対応装置、動作設定方法、プログラム
JP5251779B2 (ja) 2009-08-04 2013-07-31 ソニー株式会社 携帯型電子機器、制御方法、プログラム、撮像システム
JP5413119B2 (ja) * 2009-10-09 2014-02-12 ソニー株式会社 撮像装置、撮像方法及び撮像プログラム
JP5359762B2 (ja) * 2009-10-15 2013-12-04 ソニー株式会社 情報処理装置、表示制御方法及び表示制御プログラム
WO2011062586A1 (en) * 2009-11-20 2011-05-26 Hewlett-Packard Development Company, L.P. Determining a visual balance of an image
JP2011139231A (ja) 2009-12-28 2011-07-14 Sony Corp 画像処理装置、画像処理方法、プログラム
US8605158B2 (en) 2009-12-28 2013-12-10 Sony Corporation Image pickup control apparatus, image pickup control method and computer readable medium for changing an image pickup mode
JP2011155361A (ja) 2010-01-26 2011-08-11 Sony Corp 撮像装置、撮像制御方法、プログラム
JP5504915B2 (ja) 2010-01-26 2014-05-28 ソニー株式会社 撮像制御装置、撮像制御方法、プログラム
JP2011188065A (ja) * 2010-03-05 2011-09-22 Sony Corp 撮像制御装置、被写体検出方法、プログラム
JP5533048B2 (ja) * 2010-03-08 2014-06-25 ソニー株式会社 撮像制御装置、撮像制御方法
JP5577900B2 (ja) 2010-07-05 2014-08-27 ソニー株式会社 撮像制御装置、撮像制御方法、プログラム
JP2012033999A (ja) * 2010-07-28 2012-02-16 Sony Corp 電子機器および接続検出方法、並びに接続検出システム
JP2012113460A (ja) * 2010-11-24 2012-06-14 Sony Corp 情報処理装置および方法、並びにプログラム
CN102063709B (zh) * 2011-01-12 2012-07-18 中山大学 一种数码相机构图效果提高方法
JP5874192B2 (ja) 2011-04-11 2016-03-02 ソニー株式会社 画像処理装置、画像処理方法、及びプログラム
US10791257B2 (en) * 2011-11-14 2020-09-29 Gopro, Inc. Positioning apparatus for photographic and video imaging and recording and system utilizing the same
KR101811717B1 (ko) 2011-11-14 2018-01-25 삼성전자주식회사 줌 제어 방법 및 장치와, 디지털 촬영 장치
JP5987306B2 (ja) 2011-12-06 2016-09-07 ソニー株式会社 画像処理装置、画像処理方法、プログラム
US9009123B2 (en) * 2012-08-14 2015-04-14 Shuttersong Incorporated Method of combining image files and other files
CN103870138B (zh) * 2012-12-11 2017-04-19 联想(北京)有限公司 一种信息处理方法及电子设备
JP2014127744A (ja) * 2012-12-25 2014-07-07 Casio Comput Co Ltd 撮像装置、撮像制御方法、及びプログラム
KR20140112774A (ko) * 2013-03-14 2014-09-24 삼성전자주식회사 이미지 편집 방법, 저장 매체 및 단말
JP6504899B2 (ja) * 2015-04-21 2019-04-24 キヤノン株式会社 制御装置、光学機器、撮像装置および制御方法
JP6702736B2 (ja) * 2016-01-26 2020-06-03 キヤノン株式会社 撮像制御装置および撮像装置の制御方法、プログラム
CN107924465B (zh) * 2016-03-18 2021-09-10 Jvc 建伍株式会社 物体识别装置、物体识别方法以及存储介质
CN107018322B (zh) * 2017-03-09 2020-02-11 Oppo广东移动通信有限公司 旋转摄像头辅助构图的控制方法、控制装置及电子装置
JP6631607B2 (ja) * 2017-09-20 2020-01-15 カシオ計算機株式会社 画像処理装置、画像処理方法及びプログラム
CN108366203B (zh) * 2018-03-01 2020-10-13 北京金山安全软件有限公司 一种构图方法、装置、电子设备及存储介质
TWI663879B (zh) * 2018-03-05 2019-06-21 黑快馬股份有限公司 自動攝錄影跟拍系統及自動攝錄影跟拍方法
CN111050100A (zh) * 2018-10-12 2020-04-21 黑快马股份有限公司 自动摄录像跟拍系统及自动摄录像跟拍方法
CN110519509A (zh) * 2019-08-01 2019-11-29 幻想动力(上海)文化传播有限公司 构图评价方法、摄影方法、装置、电子设备、存储介质
JP7383438B2 (ja) * 2019-09-27 2023-11-20 キヤノン株式会社 撮像制御装置、撮像装置、及び撮像制御方法
CN111432114B (zh) * 2019-12-31 2021-08-24 宁波星巡智能科技有限公司 基于拍摄构图评分方法、装置、设备及存储介质
CN113079311B (zh) * 2020-01-06 2023-06-27 北京小米移动软件有限公司 图像获取方法及装置、电子设备、存储介质
CN111327829B (zh) * 2020-03-09 2021-12-17 Oppo广东移动通信有限公司 构图指导方法、装置、电子设备及存储介质
CN113206956B (zh) * 2021-04-29 2023-04-07 维沃移动通信(杭州)有限公司 图像处理方法、装置、设备及存储介质
KR20220152019A (ko) * 2021-05-07 2022-11-15 에스케이하이닉스 주식회사 이미지 센싱 장치 및 그 동작 방법
GB2614053A (en) * 2021-12-17 2023-06-28 Oxti Corp Camera device

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003107335A (ja) * 2001-09-28 2003-04-09 Ricoh Co Ltd 撮像装置、自動合焦方法、およびその方法をコンピュータが実行するためのプログラム
US20050168779A1 (en) * 2003-12-25 2005-08-04 Fuji Photo Film Co., Ltd. Apparatus, method, and program for editing images
US20070110422A1 (en) * 2003-07-15 2007-05-17 Yoshihisa Minato Object determining device and imaging apparatus
JP2007251724A (ja) * 2006-03-17 2007-09-27 Seiko Epson Corp 撮影装置における構図の変更

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0614698B2 (ja) 1983-05-13 1994-02-23 株式会社日立製作所 自動追尾カメラ
JP3412238B2 (ja) * 1993-03-31 2003-06-03 株式会社ニコン 構図アドバイス機能を備えたカメラ
JP4029174B2 (ja) 1993-03-31 2008-01-09 株式会社ニコン 構図アドバイス機能を備えたカメラ
JP2001268425A (ja) 2000-03-16 2001-09-28 Fuji Photo Optical Co Ltd 自動追尾装置
US6661450B2 (en) 1999-12-03 2003-12-09 Fuji Photo Optical Co., Ltd. Automatic following device
JP2004007447A (ja) 2002-03-28 2004-01-08 Olympus Corp 電子カメラ及び電子カメラの撮影構図判定装置
JP4355853B2 (ja) * 2003-09-18 2009-11-04 カシオ計算機株式会社 画像撮影装置およびプログラム
JP2005110160A (ja) * 2003-10-02 2005-04-21 Konica Minolta Holdings Inc 撮像装置
JP4770178B2 (ja) * 2005-01-17 2011-09-14 ソニー株式会社 カメラ制御装置、カメラシステム、電子会議システムおよびカメラ制御方法
JP2006221355A (ja) * 2005-02-09 2006-08-24 Hitachi Ltd 監視装置及び監視システム
JP2006279252A (ja) * 2005-03-28 2006-10-12 Fuji Photo Film Co Ltd 画像トリミング装置および方法並びにプログラム
JP2007006165A (ja) * 2005-06-24 2007-01-11 Fujifilm Holdings Corp 撮像装置、撮像方法、及び撮像プログラム
JP4635742B2 (ja) * 2005-06-27 2011-02-23 株式会社ニコン 撮像装置および撮像プログラム
JP2007094619A (ja) * 2005-09-28 2007-04-12 Omron Corp 認識装置および方法、記録媒体、並びに、プログラム。
JP2009521134A (ja) * 2005-12-22 2009-05-28 オリンパス株式会社 シーン認識撮影システム及びシーン認識撮影方法
JP4650297B2 (ja) * 2006-02-23 2011-03-16 セイコーエプソン株式会社 カメラ、カメラの制御方法、プログラムおよび記録媒体
JP2007235399A (ja) * 2006-02-28 2007-09-13 Matsushita Electric Ind Co Ltd 自動撮影装置
JP2007267177A (ja) * 2006-03-29 2007-10-11 Matsushita Electric Ind Co Ltd 撮像装置
JP4765724B2 (ja) 2006-03-31 2011-09-07 東レ株式会社 脂肪族ポリエステルステープルファイバー
JP4656331B2 (ja) 2006-12-27 2011-03-23 富士フイルム株式会社 撮像装置および撮像方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003107335A (ja) * 2001-09-28 2003-04-09 Ricoh Co Ltd 撮像装置、自動合焦方法、およびその方法をコンピュータが実行するためのプログラム
US20070110422A1 (en) * 2003-07-15 2007-05-17 Yoshihisa Minato Object determining device and imaging apparatus
US20050168779A1 (en) * 2003-12-25 2005-08-04 Fuji Photo Film Co., Ltd. Apparatus, method, and program for editing images
JP2007251724A (ja) * 2006-03-17 2007-09-27 Seiko Epson Corp 撮影装置における構図の変更

Also Published As

Publication number Publication date
TW200930091A (en) 2009-07-01
EP2059029B1 (en) 2015-02-25
JP2009100300A (ja) 2009-05-07
CN101415077B (zh) 2011-06-08
CN102148935B (zh) 2014-05-07
US8275171B2 (en) 2012-09-25
EP2059029A3 (en) 2012-02-01
KR101481830B1 (ko) 2015-01-12
KR20090039631A (ko) 2009-04-22
CN102148935A (zh) 2011-08-10
CN101415077A (zh) 2009-04-22
EP2059029A2 (en) 2009-05-13
US20090103778A1 (en) 2009-04-23
JP5115139B2 (ja) 2013-01-09

Similar Documents

Publication Publication Date Title
TWI386056B (zh) A composition determination means, a composition determination method, and a composition determination program
JP4894712B2 (ja) 構図判定装置、構図判定方法、プログラム
JP4640456B2 (ja) 画像記録装置、画像記録方法、画像処理装置、画像処理方法、プログラム
JP5206095B2 (ja) 構図判定装置、構図判定方法、プログラム
JP5359645B2 (ja) 構図判定装置、撮像システム、構図判定方法、プログラム
JP4508257B2 (ja) 構図判定装置、構図判定方法、プログラム
JP2020053774A (ja) 撮像装置および画像記録方法
JP5440588B2 (ja) 構図判定装置、構図判定方法、プログラム
JP6257260B2 (ja) 撮像装置及びその制御方法
JP5098917B2 (ja) 構図判定装置、構図判定方法、プログラム
JP2005286379A (ja) 撮影補助システム及び撮影補助方法
JP2011061857A (ja) 画像処理装置、画像処理方法、プログラム、撮像装置

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees