TWI519155B - 影像連續拍攝方法與相關影像擷取系統 - Google Patents

影像連續拍攝方法與相關影像擷取系統 Download PDF

Info

Publication number
TWI519155B
TWI519155B TW102105307A TW102105307A TWI519155B TW I519155 B TWI519155 B TW I519155B TW 102105307 A TW102105307 A TW 102105307A TW 102105307 A TW102105307 A TW 102105307A TW I519155 B TWI519155 B TW I519155B
Authority
TW
Taiwan
Prior art keywords
image
sequence
image frames
frame
frames
Prior art date
Application number
TW102105307A
Other languages
English (en)
Other versions
TW201336301A (zh
Inventor
曾富昌
戴辰熹
林嵩皓
許麗君
葉震宇
武景龍
闕鑫地
Original Assignee
宏達國際電子股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 宏達國際電子股份有限公司 filed Critical 宏達國際電子股份有限公司
Publication of TW201336301A publication Critical patent/TW201336301A/zh
Application granted granted Critical
Publication of TWI519155B publication Critical patent/TWI519155B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/667Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes

Description

影像連續拍攝方法與相關影像擷取系統
本發明揭露一種影像擷取方法與相關之影像擷取系統,尤指一種用來在不同且分離之資料路徑上,提供並同時暫存影像畫格之影像連續拍攝方法與應用該影像連續拍攝方法之影像擷取系統。
由於可攜式電子裝置的廣泛使用,其配備之功能也越來越多樣化。其中使用者最常用之重要功能為影像擷取功能,例如攝影功能。然而,可攜式電子裝置在影像擷取功能上的發揮常受限其較慢的硬體性能。當使用者在可攜式電子裝置上開啟攝影應用程式時,攝影應用程式會處於預覽模式,並首先顯示一景像之預覽影像畫格於可攜式電子裝置配備之顯示螢幕上。當使用者想要拍攝特定景象之照片並啟動攝影應用程式之快門按鈕時(例如顯示於顯示螢幕之快門按鈕),攝影應用程式會從預覽模式切換至影像擷取模式並停止更新預覽影像畫格,且可攜式電子裝置會開始專注處理被擷取之影像畫格。如此一來,當使用者想要擷取複數個影像畫格時,擷取時間會明顯地拉長,此係因攝影應用程式必須在預覽模式與影像擷取模式之間不停地切換,且造成攝影應用程式無法在限定之短時間內執行影像連續快拍操作(Burst Camera Operation)以提供連續複數個快拍影像。上述現象的原始肇因是攝影應用程式在預覽模式下是以低解析度提供預覽影像畫格,然而在影像擷取模式下卻是以高解析度來擷取影像畫格,因此造成攝影應用程式需要花更多時間,來對應於模式之改變進行安裝設定的工作。
另一種一般在可攜式行動裝置上實施影像連續快拍功能的方式是使在預覽模式下顯示的預覽影像畫格與在影像擷取模式下所擷取之影像畫格 皆使用較低的解析度,並以此降低可攜式電子裝置在切換模式時的處理時間與延遲。然而,上述做法的缺點是犧牲了最後擷取的影像畫格之影像品質而無法令人滿意,且顯示螢幕在更新畫面時的畫面延遲仍然無法避免。上述之影像連續拍攝功能(亦即快拍功能)主要是用來連續拍攝預定數目之影像畫格,也就是說,當使用者觸發影像連續拍攝功能時,影像擷取應用程式會自動地擷取預定數目之影像畫格。當影像擷取應用程式開始擷取影像畫格時,在影像連續拍攝功能啟動前,顯示螢幕會暫停在之前已顯示之影像畫格。
因此,相關領域存在找出可連續擷取高解析度之影像畫格,且可免於在顯示螢幕上停止更新預覽影像畫格之影像擷取方法與影像擷取系統的需要。
本發明掲露一種影像連續拍攝(Burst Image Capture)方法,包含擷取第一複數個影像畫格序列(Sequence of Image Frames);根據第一複數個影像畫格序列,產生第二複數個影像畫格序列;顯示第二複數個影像畫格序列,以作為預覽之用;在顯示第二複數個影像畫格序列的同時,根據第一複數個影像畫格序列來產生並暫存第三複數個影像畫格序列;接收輸入指令;及對應於輸入指令,從暫存之第三複數個影像畫格序列中擷取第四複數個影像畫格序列;將第四複數個影像畫格序列編碼為第五複數個影像畫格序列;以及儲存第五複數個影像畫格序列。
本發明還掲露一種影像擷取方法,包含擷取複數個影像畫格序列;在第一資料路徑上提供複數個影像畫格序列以供預覽之用,並同時且分開地在第二資料路徑上暫存複數個影像畫格序列於暫存緩衝器(Buffer);經由輸入介面單元接收輸入指令;及對應於輸入指令,在第二資料路徑上從暫存緩衝器擷取一部分之複數個影像畫格,並將擷取之該部分影像畫格編碼;及將已編碼之該部分影像畫格儲存於記憶體單元。
本發明揭露一種影像擷取系統,其包含:影像感測模組、影像訊 號處理器、觸控螢幕、後端處理單元、及記憶體單元。影像感測模組用來擷取第一複數個影像畫格序列。影像訊號處理器用來根據第一複數個影像畫格序列,提供第二複數個影像畫格序列與第三複數個影像畫格序列。觸控螢幕用來顯示該第二複數個影像畫格序列,並用來接收輸入指令。後端處理單元用來暫存第三複數個影像畫格序列、用來對應於輸入指令從第三複數個影像畫格序列中擷取出第四複數個影像畫格序列、以及用來將第四複數個影像畫格序列編碼為第五複數個影像畫格序列。記憶體單元用來儲存第五複數個影像畫格序列。第二複數個影像畫格序列與第三複數個影像畫格序列具有不同的解析度,並提供在彼此分離之不同資料路徑上。
100‧‧‧影像擷取系統
110‧‧‧影像感測模組
120‧‧‧影像訊號處理器
130‧‧‧後端處理模組
132‧‧‧預覽模組
134‧‧‧影像應用程式模組
136‧‧‧暫存緩衝器
138‧‧‧影像編碼器
140‧‧‧觸控面板
150‧‧‧記憶體單元
302、306、308、310、312、402、404、406、407、408、410、412‧‧‧步驟
IS1、IS2、IS3、IS4‧‧‧影像畫格
PS‧‧‧人物
SB‧‧‧快門按鈕
IST1‧‧‧縮圖
第1圖為本發明一實施例之影像擷取系統。
第2圖為本發明之一實施例如第1圖所示之影像應用程式模組的詳細示意圖。
第3圖與第4圖為本發明實施例之影像連續拍攝方法的流程圖。
第5圖為本發明之影像擷取方法如第1圖之影像擷取系統的使用者如何使用影像連續拍攝功能之簡略示意圖。
為了克服先前技術中實施影像連續拍攝功能時所面臨的各種限制與缺點,本發明揭露了一種影像連續擷取方法以及應用該影像連續擷取方法之影像擷取系統。藉由本發明所揭露之影像連續擷取方法與影像擷取系統,切換多種模式之間的延遲可被降低到最小程度。除此以外,影像擷取系統之使用者可受益於僅使用簡單輸入指令便可啟動影像連續拍攝功能,且可得到的高解析度影像畫格帶來的影像品質。
請參閱第1圖,其為本發明一實施例之影像擷取系統100。如第1圖所示,影像擷取系統100包含影像感測模組110、影像訊號處理器120、後端處理模組130、觸控面板140、與記憶體單元150。影像擷取系統100可在 本發明之各實施例中實現於行動電子裝置。該行動電子裝置可為行動電話、平板電腦、個人數位助理、數位相機、數位攝影機、遊戲平台、及/或其他適合的電子裝置,且影像擷取系統100可執行具有連續快拍功能之攝影應用程式。
影像感測模組110用來根據影像感測模組110所採用之第一設定,擷取複數個序列原始影像畫格I1。第一設定之種類可包含解析度、畫格率、曝光度等。影像感測模組110可用來傳送複數個序列原始影像畫格I1至影像訊號處理器120。在本發明之一實施例中,影像感測模組110以第一解析度擷取一序列之複數個原始影像畫格I1,並以第一畫格率提供該序列之原始影像畫格I1至影像訊號處理器120,其中第一解析度為影像感測模組110在擷取影像時可使用之最高解析度,且第一畫格率為影像感測模組110在擷取影像時可使用之最高畫格率。
影像訊號處理器120用來產生一序列之複數個預覽影像畫格I2與第一序列之複數個中間影像畫格I3,並將上述二者傳輸至後端處理單元130。在本發明之一實施例中,影像訊號處理器120還用來將原始影像畫格I1調整大小(Scale),以產生具有第二解析度之一序列的複數個預覽影像畫格I2,其中第二解析度可低於第一解析度,使得預覽影像畫格I2可以縮圖(Thumbnail)方式顯示及/或儲存。影像訊號處理器120亦可用來對原始影像畫格I1以第三解析度做調整,第三解析度等於或小於第一解析度。一般來說,預覽影像畫格I2會被設定為等於或小於第三解析度,或是根據系統預設設定、使用者設定等方式設定。相較於一般的影像擷取系統,本發明之影像訊號處理器120可平行地提供預覽影像畫格I2與中間影像畫格I3至後端處理單元130,其中預覽影像畫格I2與中間影像畫格I3之解析度及/或畫格率不相等。在本發明之一實施例中,影像訊號處理器120可以第二畫格率提供預覽畫格I2至預覽模組132,並以第三畫格率提供中間影像畫格I3至影像應用程式模組134,其中第二畫格率高於第三畫格率,且第二解析度高於第三解析度。
後端處理單元130包含預覽模組132與影像應用程式模組134。預覽模組132用來提供預覽影像畫格I2至觸控螢幕140以作顯示之用。影像應用程式模組134用來暫存第一序列之中間影像畫格序列I3、從第一序列之中間影像畫格序列I3中擷取出第二序列之中間影像畫格I4、並用來編碼第二序列之中間影像畫格I4以產生一序列之複數個已編碼影像畫格I5至記憶體單元150。影像應用程式模組134可對應於觸控螢幕140上觸發之使用者輸入指令來擷取第二序列之中間影像畫格I4,並可以JPEG影像格式或MPEG影像格式等系統預設影像格式或使用者指定格式來將第二序列之中間影像畫格I4編碼為一序列之已編碼影像畫格I5。上述之影像畫格的編碼可使用軟體或硬體實施之適當編碼器來完成。影像應用程式模組134亦可經由影像擷取系統100上的其他使用者介面來接收使用者輸入指令,例如硬體快門按鈕。使用者輸入指令可為用來連續擷取複數個影像畫格的指令,也可為複數個連續發出之單一畫格擷取指令。
請參閱第2圖,其為本發明一實施例之影像應用程式模組134之詳細示意圖。如第2圖所示,影像應用程式模組134包含暫存緩衝器(Buffer)136與影像編碼器138。暫存緩衝器136用來在影像訊號處理器120連續地傳輸第一序列之中間影像畫格I3時暫存此第一序列之中間影像畫格I3。在本發明之一實施例中,暫存緩衝器136可以實現為環狀暫存緩衝器(Ring Buffer),以持續地暫存第一序列之中間影像畫格I3。在本發明之一實施例中,暫存緩衝器136用來儲存一預定數目之中間影像畫格I3,並用來持續地將最舊的中間影像畫格覆寫(Overwrite)為最新的中間影像畫格。第一序列之中間影像畫格I3之預定數目可涵蓋一預定時間長度或可為使用者所指定。在本發明之另一實施例中,當影像擷取系統100被致能時,暫存緩衝器136可被特別指定或被要求給影像擷取系統100。
暫存緩衝器136亦用來對應於使用者輸入指令IC,從第一序列之中間影像畫格I3中擷取第二序列之中間影像畫格I4,其中使用者輸入指令決 定擷取第二序列之中間影像畫格I4之起始中間影像畫格與結束中間影像畫格。使用者輸入指令IC可經由觸控螢幕140或其他之輸入介面來接收。影像編碼器138用來編碼第二序列之中間影像畫格I4,以產生一序列之已編碼影像畫格I5,並用來將所產生之已編碼影像畫格I5儲存於記憶體單元150。影像編碼器138可為軟體或硬體實施之編碼器。暫存緩衝器136之儲存容量大小與影像編碼器138之處理能力為後端處理單元130之效能的主要決定因素。在本發明之一實施例中,暫存緩衝器136持續地接收與暫存第一序列之新的中間影像畫格I3,並同時擷取第二序列之中間影像畫格I4至影像編碼器138。
在本發明之一實施例中,第一序列之中間影像畫格I3之解析度或編碼影像畫格I5之解析度是經由使用者發出之另一使用者輸入指令所指定,且該二解析度皆高於預覽影像畫格I2之解析度。然而,在本發明之另一實施例中,預覽影像畫格I2之解析度可設定為與第一序列之中間影像畫格I3之解析度相同。
觸控螢幕140用來顯示預覽影像畫格I2,並用來從影像擷取系統100之使用者接收使用者輸入指令IC。使用者輸入指令IC可為用來開啟影像擷取應用程式之指令,該影像擷取應用程式係使用本發明之影像連續拍攝方法或不同種類的影像擷取功能。
在本發明之一實施例中,觸控螢幕140可分離為一顯示單元與一觸控螢幕,顯示單元用來顯示預覽影像畫格I2,觸控螢幕用來接收使用者輸入指令。在本發明之另一實施例中,使用者輸入指令可藉由其他的輸入機制來接收,例如為了擷取影像所專屬設置之硬體快門按鈕。
記憶體單元150用來儲存已編碼影像畫格I5之序列。記憶體單元150可為可為內接或外接之嵌入式多媒體記憶卡(Embedded Multimedia Memory Card,eMMC)、安全數位記憶卡(Secure Digital Memory Card)、微安全數位記憶卡(Micro Secure Digital Memory Card)、通用序列匯流排(Universal Serial Bus,USB)儲存裝置、及/或其他適合的儲存裝置。在本發明之一實施例中,已編碼影像畫格I5會以JPEG檔案的形式儲存於記憶體單元150。
一般來說,本發明之影像擷取系統100,特別是其包含之影像訊號處理器120與後端處理單元130,可平行地在不同的資料路徑上處理預覽影像畫格與中間影像畫格(可被編碼並儲存為已編碼影像畫格)。本發明之影像訊號處理器120可將原始影像畫格調整為不同解析度下的預覽影像畫格與中間影像畫格,並平行地以不同的畫格率將預覽影像畫格傳輸至預覽模組132,並將中間影像畫格傳輸至影像應用程式模組134。如此一來,本發明之影像擷取系統100可提供預覽影像畫格於觸控螢幕140供使用者瀏覽,並同時接收使用者輸入指令IC以使影像應用程式模組134同時地根據使用者輸入指令執行影像擷取功能。使用者輸入指令IC可為用來擷取一序列之複數個影像畫格的指令,且暫存緩衝器136可對應於使用者輸入指令IC將一序列之中間影像畫格I4傳輸至影像編碼器138,以將中間影像畫格I4編碼至適當的影像格式。由於預覽影像畫格I2與中間影像畫格I3是以彼此平行的方式在分離之相異資料路徑上處理,觸控螢幕140可以接收新的影像畫格而持續地更新其顯示內容,且使用者可以在沒有延遲的情況下以高解析度連續快拍複數個影像畫格。
請參閱第3圖,其繪示本發明之一實施例之影像連續拍攝方法的流程圖。如第3圖所示,該影像連續拍攝方法包含步驟如下:
步驟302:擷取一序列之複數個影像畫格I。
步驟306:在第一資料路徑上提供複數個影像畫格序列I以作預覽之用,並同時在第二資料路徑上提供複數個影像畫格序列I以作暫存之用。
步驟308:使用者經由使用者介面單元接收使用者之使用者輸入指令IC。
步驟310:對應於使用者輸入指令IC,在第二路徑上從暫存緩衝器中擷取一部分之影像畫格I並加以編碼。
步驟312:儲存該部分已編碼之影像畫格I。
在步驟302中,影像感測模組110擷取了複數個影像畫格I,並在影像擷取應用程式被啟動之時,將影像畫格I持續傳輸至影像訊號處理器120。影像感測模組110可以預定之解析度與預定之畫格率來擷取影像畫格I。且影像訊號處理器120可在輸出影像畫格I至後端處理單元130之前,先行對影像畫格I實施各種處理或功能。
在步驟306中,影像訊號處理器120可沿著二個不同的資料路徑提供影像畫格I,其中第一資料路徑連接至預覽模組132,而第二路徑連接至影像應用程式模組134。藉由以彼此分開的兩個資料路徑提供影像畫格I,影像擷取模組100可同時執行預覽與擷取預覽影像畫格之功能。預覽模組132可處理影像畫格I並將已處理之影像畫格顯示於觸控螢幕140,在此同時,影像應用程式模組134可將影像畫格I暫存於暫存緩衝器136。
在步驟308與步驟310中,對應於從使用者介面單元接收之使用者輸入指令,例如觸控螢幕140所接收之使用者輸入指令IC,影像應用程式模組134用來將一部分之影像畫格從暫存緩衝器136取出,且影像編碼器138會將所取出之該部分影像畫格加以編碼。在步驟308中,影像訊號處理器120持續地在第一資料路徑上提供新擷取的影像畫格至預覽模組132,並持續地在第二資料路徑上提供該些新擷取的影像畫格至暫存緩衝器136,使得預覽模組132與暫存緩衝器136兩者皆可持續被新擷取的影像畫格所更新。另外,在使用者輸入指令IC的有效持續時間內,暫存於暫存緩衝器136的影像畫格接著會同時由影像編碼器138編碼,其中使用者輸入指令IC的有效持續時間可由使用者所決定(例如以按壓觸控螢幕與釋放該按壓的時間點來決定)或預先決定。
在步驟312中,已編碼影像畫格會儲存在影像擷取系統100之記憶體單元150內。記憶體單元150可為影像擷取系統100內接或外接之儲存裝置,例如嵌入式多媒體記憶卡(Embedded Multimedia Memory Card, eMMC)、安全數位記憶卡(Secure Digital Memory Card)、微安全數位記憶卡(Micro Secure Digital Memory Card)、通用序列匯流排(Universal Serial Bus,USB)儲存裝置等。
請參閱第4圖,其為本發明一實施例之影像擷取方法。如第4圖所示,該影像擷取方法包含步驟如下:
步驟402:擷取一序列之複數個原始影像畫格I1。
步驟404:從此序列之原始影像畫格I1產生一序列之複數個預覽影像畫格I2與第一序列之複數個中間影像畫格I3。預覽影像畫格I2與複中間影像畫格I3可具有與原始影像畫格I1不同之解析度。
步驟406:提供預覽影像畫格I2至預覽模組132。
步驟407:將中間影像畫格I3暫存於影像應用程式模組134。步驟406與步驟407是同時實施的,且預覽影像畫格I2與暫存之中間影像畫格I3是以不同的畫格率來處理。
步驟408:接收使用者輸入指令IC,以擷取一場景(Scene)之至少一影像。使用者輸入指令IC可從觸控螢幕或硬體按鈕所接收。
步驟410:從第一序列之中間影像畫格I3中取出第二序列之中間影像畫格I4,並將第二序列之中間影像畫格I4編碼為一序列之複數個已編碼影像畫格I5。第二序列之中間影像畫格I4為第一序列之中間影像畫格I3中的複數個連續影像畫格。
步驟412:將已編碼畫格I5儲存於記憶體單元150。
在本發明之各實施例中,只要影像擷取系統100被啟動或其安裝之影像擷取應用程式對應於使用者輸入指令IC而被觸發,步驟402至412就可以連續方式執行,使得可連續地擷取、預覽、暫存、編碼、並儲存多序列之複數個影像畫格。
在步驟402中,影像感測模組110擷取一序列之原始影像畫格I1,並持續在影像擷取應用程式啟動時,將原始影像畫格I1傳輸至影像訊號處理 器120。影像感測模組110可以預定解析度與預定畫格率來擷取原始影像畫格I1。
在步驟404中,影像訊號處理器120根據第一設定從原始影像畫格I1產生了一序列之預覽影像畫格I2與第一序列之中間影像畫格I3,第一設定指定了預覽影像畫格I2與第一序列之中間影像畫格I3各自使用的解析度。在本發明關於第4圖之一實施例中,預覽影像畫格I2的解析度較原始影像畫格I1來的低,其中預覽影像畫格I2可選擇性地縮小Scale-down)。第一序列之中間影像畫格I3之解析度高於預覽影像畫格I2之解析度,且等於或低於原始影像畫格I1之解析度。此外,藉由使用者透過觸控螢幕140所發出之輸入設定指令,例如上述之使用者輸入指令IC或其他輸入指令,可動態地更改第一設定。在本發明之部分實施例中,影像感測模組110所使用之原始影像畫格I1的畫格率亦可藉由上述之使用者輸入指令IC或其他輸入指令來設定,例如可設定為每秒4或5個畫格。提供預覽影像畫格I2之畫格率與暫存第一序列之中間影像畫格I3之畫格率亦可不同。舉例來說,提供預覽影像畫格I2之畫格率可設定為高於暫存第一序列之中間影像畫格I3之畫格率。
在步驟406中,預覽模組132將預覽影像畫格I2導引至觸控螢幕140來顯示,以供使用者瀏覽。在步驟407中,影像應用程式模組134用來暫存第一序列之中間影像畫格I3於暫存緩衝器136。提供預覽影像畫格I2之步驟與暫存第一序列之中間影像畫格I3之步驟可被後端處理單元130同時且平行地執行。
在步驟408中,當影像擷取系統100的使用者看見了在觸控螢幕140上顯示之預覽影像畫格I2時,使用者可觸發使用者輸入指令IC以擷取至少一個影像畫格,預覽影像畫格I2可以連續之預覽影像畫格流的方式來顯示,且使用者輸入指令IC可透過觸控螢幕140被接收。觸控螢幕140藉由偵測其上觸發之手指按壓動作而接收使用者輸入指令,並藉此對應地啟動影像擷取功能。
在步驟410中,當影像擷取功能對應於使用者輸入指令IC而被觸發,影像擷取模組134會開始執行從暫存緩衝器136暫存之第一序列之中間影像畫格I3中擷取複數個中間影像畫格I4的程序,且影像編碼器138會將複數個中間影像畫格I4編碼為複數個已編碼影像畫格I5,例如可以連續方式觸發影像擷取功能而產生以編碼畫格流形式表示之複數個已編碼影像畫格I5。
在步驟412中,複數個已編碼影像畫格I5會被儲存於記憶體單元150中,以供後續的瀏覽與處理。
步驟408至步驟412可對應於連續觸發之使用者輸入指令IC而連續地執行。在本發明之一實施例中,使用者輸入指令IC可為二個指令的組合,第一個指令用來啟動影像擷取功能,而第二個指令用來中止影像擷取功能,亦即中止第一個指令。甚者,在本發明之一實施例中,第一個指令可藉由觸控螢幕140上之長按壓動作來觸發,且第二個指令可藉由觸控螢幕140上之長按壓動作被釋放而觸發。在本發明之另一實施例中,第一個指令可藉由觸控螢幕140上之短按壓且立即釋放的動作來觸發,且第二個指令可藉由更之後觸控螢幕140上之另一短按壓且立即釋放的動作來觸發。在本發明之一實施例中,使用者輸入指令IC是藉由觸控螢幕140上之單一按壓動作來觸發並中止。
執行第4圖之步驟後,在影像擷取系統100之使用者透過觸控螢幕140觸發使用者輸入指令IC之前,亦即使用者按下影像擷取系統100的快門之前,影像感測模組110即持續地擷取原始影像畫格I1。預覽影像畫格I2會持續地顯示於觸控螢幕140之上,且第一序列之中間影像畫格I3會持續地暫存於暫存緩衝器136。在影像擷取系統100對應於影像擷取功能之使用者輸入指令IC被觸發直到使用者停止該影像擷取功能之執行時,暫存緩衝器136會從第一序列之中間影像畫格I3中擷取出且第二序列之中間影像畫格I4並傳輸至影像編碼器138。影像編碼器138會持續地對第二序列之中間影像畫格I4作編碼以產生一序列之已編碼影像畫格I5。請注意,暫存緩衝器136、 影像編碼器138、與記憶體單元150可平行地執行,使得影像畫格之處理不會被延遲。舉例來說,第一影像畫格被儲存於記憶體單元150、第二影像畫格被影像編碼器138所編碼、且第三影像畫格被暫存於暫存緩衝器136,上述三個動作可同時執行;其中第一影像畫格會先於第二影像畫格被擷取,且第二影像畫格會先於第三影像畫格被擷取。
以使用者經驗之觀點來說,由於影像感測模組110不需要在預覽模式與影像擷取模式之間切換解析度設定,影像擷取系統100的使用者可享受到快速連拍功能的好處。此外,影像訊號處理器120將用作預覽之影像畫格與用作影像擷取之影像畫格以分開的資料路徑處理,也會使得影像感測模組110可免於繁複地切換其設定,相較於先前技術之行動電子裝置中的影像擷取系統來說,可省去許多切換中產生的延遲。藉由本發明之影像擷取系統,一般行動電子裝置在擷取連續影像畫格時產生的延遲可成功的被消弭。
請參閱第5圖,其為根據本發明所揭露之影像擷取方法所圖示影像擷取系統100之使用者如何使用影像連續拍攝功能(亦即連續快拍功能)之簡略示意圖。如第5圖所示,拍攝一人物PS所得之複數個影像畫格會被顯示於觸控螢幕140上,其中人物PS所處之景像正被影像感測模組110所感測。
如上所述,在本發明之一實施例中,使用者可按壓觸控螢幕140上顯示之快門按鈕SB,以持續地拍攝影像畫格IS1、IS2、IS3、IS4、...等,直到使用者放開快門按鈕SB才會停止拍攝;換言之,使用者可以一長按壓動作來開啟上述之影像擷取功能。
如以上所述,在本發明之另一實施例中,使用者可先給予快門按鈕SB一第一短按壓動作並馬上釋放第一短按壓動作,以持續地進行影像畫格的拍攝,直至使用者PS再度給予一第二短按壓動作並立即釋放第二短按壓動作以中止影像畫格之拍攝為止。也就是說,使用者PS可藉由第一短按壓動作來啟動影像擷取系統100之影像連續快拍功能,且可藉由該第二短按壓動作來中止影像連續快拍功能。
除此以外,觸控螢幕140可顯示所擷取之影像畫格的縮圖,例如IST1、IST2等縮圖。該些縮圖可從原始影像畫格對應之預覽影像畫格所產生,且可與預覽影像畫格一起同時顯示於觸控螢幕140。當執行影像擷取操作時,觸控螢幕140可持續更新顯示影像畫格IS1、IS2、IS3、IS4、...中最新擷取的影像畫格之縮圖,且當中止影像擷取功能時,觸控螢幕140可顯示最後擷取的影像畫格之縮圖而不需要繼續更新縮圖。在本發明之一實施例中,在執行影像擷取操作時,觸控螢幕140可同時更新所顯示之預覽影像畫格以及所顯示之縮圖。在本發明之另一實施例中,觸控螢幕140可僅更新所顯示之預覽影像畫格以及所顯示之縮圖兩者其中之一。
本發明掲露一種影像連續擷取方法以及使用該影像連續擷取方法之影像擷取系統,以克服先前技術中無法兼顧影像擷取時間以及影像解析度的缺點。在本發明揭露之影像連續擷取方法以及影像擷取系統中,藉由將所擷取之影像畫格分為預覽用途及暫存/編碼用途之不同資料路徑來處理,可以實現快速連續拍攝之功能,且甚至可達成零快門延遲(Zero Shutter Lag)的功能。
100‧‧‧影像擷取系統
110‧‧‧影像感測模組
120‧‧‧影像訊號處理器
130‧‧‧後端處理模組
132‧‧‧預覽模組
134‧‧‧影像應用程式模組
140‧‧‧觸控面板
150‧‧‧記憶體單元

Claims (20)

  1. 一種影像連續拍攝(Burst Image Capture)方法,包含:擷取一第一序列之影像畫格(Sequence of Image Frames);根據該第一序列之影像畫格,同時產生一第二序列之影像畫格及一第三序列之影像畫格;顯示該第二序列之影像畫格以作為預覽之用;在顯示該第二序列之影像畫格的同時,暫存該第三序列之影像畫格;接收一輸入指令;及對應於該輸入指令,從暫存之該第三序列之影像畫格中擷取一第四序列之影像畫格、將該第四序列之影像畫格編碼為一第五序列之影像畫格序、以及儲存該第五序列之影像畫格。
  2. 如請求項1所述之影像連續拍攝方法,其中該輸入指令係藉由一觸控螢幕上之一長按壓動作而觸發,並藉由釋放該長按壓動作而被中止。
  3. 如請求項1所述之影像連續拍攝方法,其中該輸入指令係藉由在一觸控面板上按壓並立即釋放一第一短按壓動作所觸發,且該輸入指令係藉由在該觸控面板上按壓並立即釋放一第二短按壓動作所中止。
  4. 如請求項1所述之影像連續拍攝方法,其中該第一序列之影像畫格、該第二序列之影像畫格、與該第三序列之影像畫格各自具有相異之解析度。
  5. 如請求項4所述之影像連續拍攝方法,其中該第二序列之影像畫格具有較該第三序列之影像畫格為低的解析度。
  6. 如請求項4所述之影像連續拍攝方法,其中該第二序列之影像畫格與該第三序列之影像畫格係以相異之畫格率顯示與暫存。
  7. 如請求項1所述之影像連續拍攝方法,其中該第五序列之影像畫格係以JPEG影像格式儲存。
  8. 一種影像擷取方法,包含: 擷取一序列之複數個影像畫格;在一第一資料路徑上提供該序列之複數個影像畫格以供預覽之用,並同時且分開地在一第二資料路徑上暫存該序列之複數個影像畫格於一暫存緩衝器(Buffer);經由一輸入介面單元接收一輸入指令;及對應於該輸入指令,在該第二資料路徑上從該暫存緩衝器擷取一部分之該序列之複數個影像畫格,並將擷取之該部分影像畫格編碼;及將已編碼之該部分影像畫格儲存於一記憶體單元。
  9. 如請求項8所述之影像擷取方法,其中該序列之複數個影像畫格係以一第一解析度擷取、以一第二解析度提供於該第一資料路徑上、並以一第三解析度提供於該第二資料路徑上。
  10. 如請求項9所述之影像擷取方法,其中該第一解析度高於該第三解析度,且該第三解析度高於該第二解析度。
  11. 如請求項8所述之影像擷取方法,其中在該第二資料路徑上擷取並編碼該部分影像畫格的步驟與在該第一資料路徑上提供該序列之複數個影像畫格以供預覽之用的步驟係為同時執行。
  12. 如請求項8所述之影像擷取方法,其中經由該輸入介面單元接收該輸入指令包含:偵測在該輸入介面單元上之一按壓動作;對應於該按壓動作,開始擷取並編碼該部分之影像畫格;偵測該輸入介面單元上對應該按壓動作之一釋放動作;及對應於該釋放動作,中止擷取並編碼該部分影像畫格的步驟。
  13. 如請求項8所述之影像擷取方法,其中該序列之複數個影像畫格係在該第一資料路徑上以一第一畫格率擷取,並在該第二資料路徑上以一第二畫格率暫存,該第一畫格率高於該第二畫格率。
  14. 一種影像擷取系統,包含: 一影像感測模組,用來擷取一第一序列之複數個影像畫格;一影像訊號處理器,用來根據該第一序列之複數個影像畫格,提供一第二序列之複數個影像畫格與一第三序列之複數個影像畫格,及用以在顯示該第二序列之複數個影像畫格的同時,暫存該第三序列之複數個影像畫格;一觸控螢幕,用來顯示該第二序列之複數個影像畫格,並用來接收一輸入指令;一後端處理單元,用來暫存該第三序列之複數個影像畫格,用來對應於該輸入指令從該第三序列之複數個影像畫格中擷取出一第四序列之複數個影像畫格,以及用來將該第四序列之複數個影像畫格編碼為一第五序列之複數個影像畫格;及一記憶體單元,用來儲存該第五序列之複數個影像畫格;其中該第二序列之複數個影像畫格與該第三序列之複數個影像畫格具有不同的解析度,並提供在彼此分離之不同資料路徑上。
  15. 如請求項14所述之影像擷取系統,其中該後端處理單元還包含:一預覽模組,用來在一第一資料路徑上接收並提供該第二序列之複數個影像畫格至該觸控螢幕;一暫存緩衝器,用來同時暫存該第三序列之複數個影像畫格與在一第二資料路徑上顯示該第二序列之複數個影像畫格於該觸控螢幕;及一影像編碼器,用來對應於該輸入指令,將該第四序列之複數個影像畫格編碼為該第五序列之複數個影像畫格;其中該第四序列之複數個影像畫格為該第三序列之複數個影像畫格中複數個連續之影像畫格。
  16. 如請求項15所述之影像擷取系統,其中該影像訊號處理器還用來以一第一畫格率提供該第二序列之複數個影像畫格至該預覽模組,並用來以一第二畫格率提供該第三序列之複數個影像畫格至該暫存緩衝器;及 其中該第一畫格率高於該第二畫格率。
  17. 如請求項14所述之影像擷取系統,其中該輸入指令係藉由該觸控螢幕上之一長按壓動作而觸發,且係藉由對應於該長按壓動作之一釋放動作而中止。
  18. 如請求項17所述之影像擷取系統,其中該第一序列之複數個影像畫格之解析度高於該第二序列之複數個影像畫格之解析度,且該第三序列之複數個影像畫格之解析度高於該第二序列之複數個影像畫格之解析度。
  19. 如請求項14所述之影像擷取系統,其中該觸控螢幕還用來在執行該輸入指令時,同時提供該第五序列之複數個影像畫格對應之縮圖(Thumbnail)與顯示該第二序列之複數個影像畫格。
  20. 如請求項19所述之影像擷取系統,其中該預覽模組還用來從該第二序列之複數個影像畫格之一對應部分產生該些縮圖。
TW102105307A 2012-02-24 2013-02-08 影像連續拍攝方法與相關影像擷取系統 TWI519155B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US201261602616P 2012-02-24 2012-02-24

Publications (2)

Publication Number Publication Date
TW201336301A TW201336301A (zh) 2013-09-01
TWI519155B true TWI519155B (zh) 2016-01-21

Family

ID=48985218

Family Applications (1)

Application Number Title Priority Date Filing Date
TW102105307A TWI519155B (zh) 2012-02-24 2013-02-08 影像連續拍攝方法與相關影像擷取系統

Country Status (4)

Country Link
US (1) US9247141B2 (zh)
CN (1) CN103297676B (zh)
DE (1) DE102013203008A1 (zh)
TW (1) TWI519155B (zh)

Families Citing this family (62)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120198386A1 (en) * 2011-01-31 2012-08-02 Nokia Corporation Causing display of thumbnail images
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
WO2013169877A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting user interface objects
CN108052264B (zh) 2012-05-09 2021-04-27 苹果公司 用于移动和放置用户界面对象的设备、方法和图形用户界面
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
EP3185116B1 (en) 2012-05-09 2019-09-11 Apple Inc. Device, method and graphical user interface for providing tactile feedback for operations performed in a user interface
WO2013169854A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for providing feedback for changing activation states of a user interface object
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
KR101823288B1 (ko) 2012-05-09 2018-01-29 애플 인크. 제스처에 응답하여 디스플레이 상태들 사이를 전이하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스
DE112013002409T5 (de) 2012-05-09 2015-02-26 Apple Inc. Vorrichtung, Verfahren und grafische Benutzeroberfläche für die Anzeige zusätzlicher Informationen in Reaktion auf einen Benutzerkontakt
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
WO2013169845A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for scrolling nested regions
US9077896B2 (en) * 2012-06-11 2015-07-07 Lg Electronics Inc. Mobile terminal for capturing image and controlling method thereof
KR101917650B1 (ko) * 2012-08-03 2019-01-29 삼성전자 주식회사 이미지 처리 방법 및 장치
JP6021594B2 (ja) * 2012-11-08 2016-11-09 オリンパス株式会社 撮像装置及びプログラム
US9443484B2 (en) * 2012-11-20 2016-09-13 Sharp Kabushiki Kaisha Liquid crystal display device and method for driving same
EP3467634B1 (en) 2012-12-29 2020-09-23 Apple Inc. Device, method, and graphical user interface for navigating user interface hierarchies
EP2939098B1 (en) 2012-12-29 2018-10-10 Apple Inc. Device, method, and graphical user interface for transitioning between touch input to display output relationships
KR102001332B1 (ko) 2012-12-29 2019-07-17 애플 인크. 콘텐츠를 스크롤할지 선택할지 결정하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
WO2014105279A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for switching between user interfaces
WO2014105277A2 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for moving a cursor according to a change in an appearance of a control icon with simulated three-dimensional characteristics
CN104903835B (zh) 2012-12-29 2018-05-04 苹果公司 用于针对多接触手势而放弃生成触觉输出的设备、方法和图形用户界面
KR20140089672A (ko) * 2013-01-04 2014-07-16 삼성전자주식회사 디지털 촬영 장치, 그 제어 방법, 및 컴퓨터 판독가능 기록매체
KR102047704B1 (ko) * 2013-08-16 2019-12-02 엘지전자 주식회사 이동 단말기 및 이의 제어 방법
KR102146854B1 (ko) * 2013-12-30 2020-08-21 삼성전자주식회사 촬영 장치 및 이의 제어 방법
US9578239B2 (en) * 2014-01-17 2017-02-21 Htc Corporation Controlling method for electronic apparatus with one switch button
CN105981366B (zh) * 2014-02-12 2020-03-06 索尼公司 用于显示图像的方法
CN106464781B (zh) 2014-05-08 2020-11-03 索尼公司 信息处理装置和信息处理方法
US9678649B2 (en) * 2014-05-14 2017-06-13 Htc Corporation Method for displaying photos and electronic device for using the same
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US9990107B2 (en) 2015-03-08 2018-06-05 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9645732B2 (en) 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US9785305B2 (en) 2015-03-19 2017-10-10 Apple Inc. Touch input cursor manipulation
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US10067653B2 (en) 2015-04-01 2018-09-04 Apple Inc. Devices and methods for processing touch inputs based on their intensities
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
US10346030B2 (en) 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
US9674426B2 (en) 2015-06-07 2017-06-06 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US10248308B2 (en) 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
US10416800B2 (en) 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
KR102399764B1 (ko) * 2015-09-22 2022-05-19 삼성전자 주식회사 전자 장치 및 촬영 방법
JP6570411B2 (ja) * 2015-10-09 2019-09-04 キヤノン株式会社 電子機器及びその制御方法、プログラム、並びに記憶媒体
US10721473B2 (en) * 2016-07-25 2020-07-21 Honeywell International Inc. Systems and methods for adjusting the frame rate of transmitted video based on the level of motion in the video
CN107592450B (zh) * 2017-08-30 2021-07-20 珠海豹趣科技有限公司 一种媒体数据处理方法及装置
US10362233B2 (en) * 2017-09-12 2019-07-23 Ebay Inc. Digital image capture session and metadata association
CN107509038B (zh) * 2017-10-16 2019-10-15 维沃移动通信有限公司 一种拍摄方法及移动终端
JP2019086701A (ja) * 2017-11-08 2019-06-06 キヤノン株式会社 撮像制御装置およびその制御方法
JP2020136932A (ja) * 2019-02-20 2020-08-31 オリンパス株式会社 撮像装置、撮像方法およびプログラム
CN110231885B (zh) * 2019-06-10 2022-09-23 杭州奈克瑟斯科技有限公司 触控模拟装置、控制方法以及用于控制智能设备的方法
CN114500821B (zh) * 2020-10-26 2024-02-27 北京小米移动软件有限公司 拍照方法及装置、终端及存储介质
TWI800983B (zh) * 2021-11-16 2023-05-01 華碩電腦股份有限公司 影像處理方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2163057C2 (ru) 1994-08-22 2001-02-10 Конинклийке Филипс Электроникс Н.В. Система для записи и воспроизведения изображений на носителе записи по меньшей мере в первом и втором потоке данных
JP4126640B2 (ja) * 2000-03-08 2008-07-30 富士フイルム株式会社 電子カメラ
US6992707B2 (en) * 2002-03-06 2006-01-31 Hewlett-Packard Development Company, L.P. Delayed encoding based joint video and still image pipeline with still burst mode
US7388605B2 (en) * 2002-11-12 2008-06-17 Hewlett-Packard Development Company, L.P. Still image capturing of user-selected portions of image frames
US7787026B1 (en) * 2004-04-28 2010-08-31 Media Tek Singapore Pte Ltd. Continuous burst mode digital camera
KR20100101390A (ko) * 2009-03-09 2010-09-17 삼성전자주식회사 디지털 촬영 장치, 그 제어 방법 및 컴퓨터 판독가능 저장매체
US8897602B2 (en) * 2009-07-22 2014-11-25 Aptina Imaging Corporation Imaging system with multiframe scaler
JP5517219B2 (ja) * 2009-10-27 2014-06-11 Necカシオモバイルコミュニケーションズ株式会社 画像撮影装置及び画像撮影方法

Also Published As

Publication number Publication date
US20130222671A1 (en) 2013-08-29
DE102013203008A1 (de) 2013-09-05
CN103297676A (zh) 2013-09-11
TW201336301A (zh) 2013-09-01
US9247141B2 (en) 2016-01-26
CN103297676B (zh) 2016-12-28

Similar Documents

Publication Publication Date Title
TWI519155B (zh) 影像連續拍攝方法與相關影像擷取系統
KR102090624B1 (ko) 이미지 촬영장치 및 방법
EP2728853B1 (en) Method and device for controlling a camera
US20140111670A1 (en) System and method for enhanced image capture
TW201334522A (zh) 影像擷取方法與相關影像擷取系統
TWI595783B (zh) 攝像機裝置、操作方法及非暫態電腦可 讀取儲存媒體
TWI508557B (zh) 電子裝置及其影像處理方法
WO2014154003A1 (zh) 一种自拍图像的展现方法及装置
CN102546933A (zh) 一种快速设置手机壁纸的方法
US20140320698A1 (en) Systems and methods for capturing photo sequences with a camera
US9565350B2 (en) Storyboards for capturing images
CN105827942A (zh) 一种快速拍照方法及电子设备
CN111491097B (zh) 一种拍摄方法和移动设备
KR20180026216A (ko) 디스플레이 장치 및 이의 제어 방법
WO2013185712A1 (zh) 一种拍摄方法及设备
US20180035170A1 (en) Method and device for controlling playing state
US20120299812A1 (en) Apparatus and method for controlling data of external device in portable terminal
US9106820B1 (en) Multi-stage trigger for capturing video images
WO2016015539A1 (zh) 物体运动轨迹拍摄方法、终端及系统
WO2022222002A1 (zh) 拍摄设备及其控制方法、存储介质
CN113596329A (zh) 拍摄方法和拍摄装置
TWM519367U (zh) 可快速切換錄影模式的攝影系統
CN111381668B (zh) 一种基于手指轻扫动作捕捉的拍摄方法
CN103379284A (zh) 用于在突发模式中对静态图像进行高质量处理的方法和设备
WO2016127530A1 (zh) 拍摄的方法及装置、计算机存储介质