TW201433160A - 電子裝置及其影像合成方法 - Google Patents
電子裝置及其影像合成方法 Download PDFInfo
- Publication number
- TW201433160A TW201433160A TW103103215A TW103103215A TW201433160A TW 201433160 A TW201433160 A TW 201433160A TW 103103215 A TW103103215 A TW 103103215A TW 103103215 A TW103103215 A TW 103103215A TW 201433160 A TW201433160 A TW 201433160A
- Authority
- TW
- Taiwan
- Prior art keywords
- image
- images
- key
- electronic device
- partial
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 44
- 239000000203 mixture Substances 0.000 title claims abstract description 10
- 239000002131 composite material Substances 0.000 claims abstract description 60
- 238000012545 processing Methods 0.000 claims description 49
- 230000002194 synthesizing effect Effects 0.000 claims description 35
- 238000010191 image analysis Methods 0.000 claims description 22
- 230000015572 biosynthetic process Effects 0.000 claims description 13
- 238000003786 synthesis reaction Methods 0.000 claims description 13
- 230000004044 response Effects 0.000 claims description 6
- 238000003064 k means clustering Methods 0.000 claims description 3
- 238000001308 synthesis method Methods 0.000 claims description 3
- 230000006870 function Effects 0.000 description 16
- 238000010586 diagram Methods 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 235000019646 color tone Nutrition 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
- G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
- G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/34—Indicating arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/62—Control of parameters via user interfaces
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Image Processing (AREA)
- Studio Devices (AREA)
- Image Analysis (AREA)
- Processing Or Creating Images (AREA)
- Editing Of Facsimile Originals (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本發明提供一種電子裝置及其影像合成方法。該電子裝置根據第一影像特徵,自對應於一場景之複數個影像選擇複數個關鍵影像,並根據第二影像特徵,自該等關鍵影像選擇至少二個部分影像。此至少二個部分影像的每一者對應於場景之不同區域。然後,電子裝置藉由組合此至少二個部分影像,產生對應於該場景之合成影像,並提供合成影像及關鍵影像其中至少二者予使用者,該至少二個部分影像選自於關鍵影像之該至少二者。
Description
本發明係關於電子裝置及其影像合成方法。更具體而言,本發明之電子裝置將一系列影像合成為一影像。
隨著技術之快速發展,隨處可見人們使用具有影像拍攝功能之電子裝置來記錄其日常生活。影像拍攝功能可使人們以高速連拍模式(burst mode)拍攝一系列照片,或拍攝視訊來記錄一或多個移動物體之連續動作。然而,其缺乏一種先進特徵來以各種方式呈現該系列照片或視訊。
因此,亟需一種能夠輕易地產生合成影像,以便呈現以高速連拍模式拍攝或自視訊中擷取之複數影像之技術。
本發明之一目的係將一系列影像合成為一影像,以滿足同時呈現系列影像之需要,特別是呈現與一場景中之一或多個移動物體之連續動作相對應之系列影像。
為此,本發明揭露一種電子裝置,該電子裝置包含影像輸入單元、影像處理單元以及使用者介面單元。該影像輸入單元用以擷取對應於一場景之複數個影像。影像處理單元用以接收該等影像,根據第一影像特徵自該等影像選擇複數個關鍵影像,並根據第二影像特徵,自該等關鍵影像選擇至少二個部分影像。該至少二個部分影像的每一者對應於場景之不同區域。影像處理單元更用以藉由組合該至少二個部分影像,產生對應於場景之合成影像。使用者介面單元用以提供合成影像及該等關鍵影像之至少二者予使用者,該至少二個部分影像選自於該等關鍵影像之至少二者。
此外,本發明更揭露一種用於電子裝置之影像合成方法。該影像合成方法包含以下步驟:接收對應於一場景之複數個影像;根據第一影像特徵,自該等影像選擇複數個關鍵影像;根據第二影像特徵,自該等關鍵影像選擇至少二個部分影像,該至少二個部分影像的每一者對應於場景之不同區域;藉由組合該至少二個部分影像,產生對應於場景之合成影像;以及提供合成影像及該等關鍵影像之至少二者於電子裝置之使用者介面上,該至少二個部分影像選自於該等關鍵影像之至少二者。
此外,本發明更揭露一種用於電子裝置之影像合成方法。該影像合成方法包含以下步驟:擷取對應於一場景之複數個影像;根據第一影像特徵,自該等影像選擇複數個關鍵影像;藉由組合擷取自第一數目之關鍵影像中至少第一數目之部分影像以產生一合成影像;於使用者介面上提供合成影像及該等關鍵影像;接收使用者輸入,該使用者輸入用以指示第二數目之所選關鍵影像;以及根據使用者輸入,藉由組合擷取自第二數目之所選關鍵影像之至少第二數目之部分影像來更新合成影像。該等關鍵影像之各部分影像對應於場景之不同區域。
在參閱圖式及隨後描述的實施方式後,所屬技術領域具有通常知識者便可瞭解本發明之其它目的,以及本發明之技術手段及實施態樣。
1...電子裝置
2...使用者介面
11...影像輸入單元
13...影像處理單元
15...使用者介面單元
131...關鍵影像決定模組
133...影像分析模組
135...影像組合模組
137...影像補償模組
139...影像對齊模組
CI...合成影像
G1-Gn...群組
K1-Kn...關鍵影像
P1-Pm...連續影像
第1圖例示第一實施例之電子裝置1之示意圖;
第2圖例示第一實施例中之使用者介面2之示意圖;
第3圖例示第一實施例中之使用者介面2之另一示意圖;
第4圖例示第一實施例中之使用者介面2之另一示意圖;
第5圖例示第二實施例之電子裝置1之示意圖;
第6圖例示在第二實施例中,自各群組選擇關鍵影像之概念;
第7圖例示第三實施例之電子裝置1之示意圖;
第8圖例示第四實施例之影像合成方法之流程圖;
第9圖例示第五實施例之影像合成方法之流程圖;
第10圖例示第六實施例之影像合成方法之流程圖;
第11圖例示第七實施例之影像合成方法之流程圖;
第12圖例示第八實施例之影像合成方法之流程圖;以及
第13A圖及第13B圖例示第九實施例之影像合成方法之流程圖。
第2圖例示第一實施例中之使用者介面2之示意圖;
第3圖例示第一實施例中之使用者介面2之另一示意圖;
第4圖例示第一實施例中之使用者介面2之另一示意圖;
第5圖例示第二實施例之電子裝置1之示意圖;
第6圖例示在第二實施例中,自各群組選擇關鍵影像之概念;
第7圖例示第三實施例之電子裝置1之示意圖;
第8圖例示第四實施例之影像合成方法之流程圖;
第9圖例示第五實施例之影像合成方法之流程圖;
第10圖例示第六實施例之影像合成方法之流程圖;
第11圖例示第七實施例之影像合成方法之流程圖;
第12圖例示第八實施例之影像合成方法之流程圖;以及
第13A圖及第13B圖例示第九實施例之影像合成方法之流程圖。
以下將透過實施例來解釋本發明之內容。然而,該等實施例並非用以限制本發明須在如該等實施例所述之任何特定的環境、應用或特殊方式方能實施。因此,有關該等實施例之說明僅為闡釋本發明之目的,而非用以限制本發明。需說明者,於以下實施例及圖式中,與本發明非直接相關之元件已省略而未繪示。
本發明之第一實施例為一種電子裝置1,其示意圖繪示於第1圖中。電子裝置1可為智慧型手機、平板電腦、照相機、個人電腦、或具有影像處理功能之任意其他種類之裝置。電子裝置1包含影像輸入單元11、影像處理單元13及使用者介面單元15。影像處理單元13電性連接至影像輸入單元11及使用者介面單元15。
影像輸入單元11可具有傳輸介面,其可自內部/外部記憶體(例如記憶卡、電子裝置之隨機存取記憶體(randomaccess memory;RAM)、或USB快閃驅動器)擷取對應於一場景之複數個影像。此外,影像輸入單元11可具有影像拍攝模組,影像拍攝模組包含光感測器及透鏡,用於以高速連拍模式或視訊模式連續拍攝影像並將該等影像儲存於內部/外部記憶體中。此外,影像輸入單元11可具有無線傳輸模組(例如Wi-Fi模組、3G/4G模組或藍牙(bluetooth)模組),用於自另一電子裝置接收該等影像並將該等影像儲存於內部/外部記憶體中。
處理單元13可為各種處理器、中央處理單元(centralprocessing unit;CPU)、微處理器、或此項技術中具有通常知識者所習知之其他計算積體電路中之任意者。一旦自影像輸入單元11接收到該等影像,處理單元13便根據第一影像特徵自該等影像中選擇複數個關鍵影像。第一影像特徵可為影像差異,例如畫素差異、運動差異、亮度差異、物體差異或其任意組合。
舉例而言,可藉由以下方式決定關鍵影像:分析序列影像之畫素差異、分析序列影像中共有物體之運動差異、分析序列影像之亮度差異、或分析序列影像中相同場景中之物體差異。在本發明之另一實施例中,可藉由以下方式決定關鍵影像:選擇包含出現於場景中不同位置處之共有物體之影像、或選擇包含出現於相同場景中之不同物體之影像。此外,在本發明之另一實施例中,可藉由臉部偵測、物體辨識、影像區分、場景差異等來決定關鍵影像。
隨後,處理單元13根據第二影像特徵自關鍵影像中選擇至少二個部分影像。該至少二個部分影像的每一者對應於場景之不同區域。第二影像特徵為畫素差異或運動差異。舉例而言,可藉由找出這些關鍵影像中之畫素差異,以辨識在每一關鍵影像中所具有的顯著畫素值之區域來決定每一部分影像。該等顯著畫素值可暗示該區域含有未出現於其他影像中之物體。在本發明之另一實施例中,可藉由特徵提取、臉部偵測及/或可被用以辨識含有顯著物體之區域之演算法來決定每一部分影像。在擷取該至少二個部分影像之後,處理單元13藉由組合該至少二個部分影像來產生對應於場景之合成影像。
接著,使用者介面單元15提供合成影像及該等關鍵影像其中至少二者予使用者,該至少二個部分影像係選自於該等關鍵影像之上述至少二者。使用者介面單元15可連接至顯示單元(圖中未示出),以顯示合成影像及該關鍵影像之至少二者。舉例而言,如第2圖所示,其繪示顯示於電子裝置1之顯示單元(例如,一觸控螢幕)上之使用者介面2。使用者介面2包含合成影像CI、關鍵影像K1、K2、K3、K4、K5、以及操作選項(例如還原(Redo)、取消(Cancel)、及完成(Done))。在此種情形中,處理單元13自動選擇關鍵影像K1、K3、K5並組合關鍵影像K1、K3、K5之該等部分影像,以產生合成影像CI。
此外,藉由提供合成影像CI、關鍵影像K1-K5、以及具有例如還原、取消、及完成等選項之操作選單予使用者。使用者介面單元15可接收使用者輸入(例如,經由觸控螢幕),該使用者輸入係指示被選擇之關鍵影像之數目。舉例而言,使用者可選擇關鍵影像K2、K3。接著,影像處理單元13因應於第3圖所示之使用者輸入而基於被選擇之關鍵影像K2、K3產生合成影像CI。在此種情形中,經組合以產生合成影像CI之各部分影像係選自被選擇之關鍵影像K2、K3。此外,使用者可輕擊操作選單上之選項其中之一,以使影像處理單元13執行相應之操作。舉例而言,使用者可輕擊「完成」選項以保存合成影像,輕擊「取消」選項以離開影像合成應用程式,或輕擊「還原」選項以返回被選擇之關鍵影像及合成影像之先前狀態。
可想像地,使用者可選擇任何數目之關鍵影像,以使影像處理單元13基於被選擇之關鍵影像產生合成影像CI。基於以上解釋,所屬技術領域中具有通常知識者可直接瞭解影像處理單元13如何基於被選擇之關鍵影像產生合成影像CI,故不贅述。此外,如第4圖所示,使用者可移除對關鍵影像K1、K2、K3、K4、K5之所有選擇,以產生在正面場景中不存在物體之背景影像。須注意者,操作選單並非僅限於第2圖至第4圖所示。在其他實施例中,操作選單可具有更多選項,以應用其他效果。舉例而言,該等效果可為應用特殊光效、調整色調、重調影像尺寸、改變合成影像中任何指定物體之位置等。
在另一實施例中,影像輸入單元11可具有影像拍攝模組,該影像拍攝模組包含光感測器及透鏡,用於以高速連拍模式拍攝影像,且影像處理單元13可更對該等影像執行第一影像分析操作,並根據第一影像分析操作之結果,判斷是否產生合成影像。在第一影像分析操作中,影像處理單元13在該等影像中決定包含該場景之共有背景之複數個連續影像之數目,並判斷連續影像之數目是否等於或大於一臨界數目。若連續影像之數目小於臨界數目,則影像處理單元13於使用者介面單元15提供無法產生合成影像之通知,且可更於操作選單上提供選項,以讓使用者選擇是否以高速連拍模式重新拍攝影像。在另一實施例中,第一影像分析可基於該等連續影像中之運動差異、場景差異或背景穩定性而執行。
影像合成系統亦可因應於在該系列中至少多於一數目之影像符合差異標準而接受請求。一般而言,在使用者介面2僅可呈現有限之照片供使用者操作之情形中,可用(即符合標準)之影像之數目須大於或至少等於應在使用者介面2上呈現之影像之數目。若可用影像之數目大於可呈現於使用者介面2上之有限數目,則自可用影像中選擇該有限數目之影像(即關鍵影像)。如第2圖、第3圖及第4圖所示,在使用者介面2上僅可呈現五個關鍵影像。
本發明之第二實施例繪示於第5圖及第6圖中。第5圖例示電子裝置1之另一示意圖。在第二實施例中,影像處理單元13更包含關鍵影像決定模組131、影像分析模組133、及影像組合模組135。關鍵影像決定模組131用以在自內部/外部記憶體擷取之該等影像中決定複數個連續影像P1-Pm,根據第一影像特徵而將連續影像P1-Pm劃分成複數個群組G1-Gn,以及自各群組G1-Gn選擇一關鍵影像。此處,m及n為整數,且m大於或等於n。
如第6圖所示,連續影像P1-Pm被劃分成n個群組。依用於劃分群組之聚類標準(clustering criterion)而定,各群組可包含相同或不同數目之影像。聚類標準可為K均數聚類法(K-means clustering)、時間間隔、以及群組預定數目。舉例而言,聚類標準係指將m個連續影像P1-Pm均等地劃分為n個群組G1-Gn,各群組大致具有m/n個影像。在另一實例中,聚類標準係指根據特定影像特徵(例如運動差異)劃分該m個連續影像P1-Pm,且依連續影像P1-Pm中之影像差異而產生n個群組G1-Gn。應注意,在本發明中可使用任何聚類或群組演算法。
然後,自群組G1-Gn分別選擇關鍵影像K1-Kn。類似於第一實施例,可根據第一影像特徵或藉由各種標準來選擇各該關鍵影像K1-Kn:畫素值最靠近群組之中位數或平均值之影像、群組之預定第i個影像、與相鄰群組具有最大距離之影像等。在第6圖所示之實例中,所得到之關鍵影像K1-Kn為n個影像,各影像為畫素值最靠近群組之中位數或平均值之影像。
影像分析模組133用以藉由比較關鍵影像之第二影像特徵,決定場景內之至少二個種子區域。如以上在第一實施例中所述,第二影像特徵可為畫素差異或運動差異。接著,影像分析模組133 根據第二影像特徵,自關鍵影像中決定對應於該至少二個種子區域之至少二個源影像,並基於該至少二個種子區域,自該至少二個源影像選擇至少二個部分影像。該至少二個部分影像等於或大於該至少二個種子區域。影像組合模組135用以藉由組合選自該至少二個源影像之該至少二個部分影像而產生合成影像CI。
本發明之第三實施例繪示於第7圖中,其例示電子裝置1之另一示意圖。在第三實施例中,影像處理單元13可更包含影像補償模組137及影像對齊模組139。關鍵影像K1-Kn一旦被決定,在關鍵影像K1-Kn被傳送至影像分析模組133之前,關鍵影像K1-Kn首先被發送至影像補償模組137及影像對齊模組139,以提高合成影像CI之品質。
影像補償模組137用以在關鍵影像K1-Kn中調整畫素值之一致性,例如顏色值、亮度值、白平衡(white balance)、曝光量等。舉例而言,其可藉由顏色映射(colormapping)(利用查找表)實施。關鍵影像K1-Kn可被轉換至HSV域,且分別根據查找表得到調整,俾使關鍵影像K1-Kn中之畫素值為一致的。此外,影像對齊模組139用以對齊關鍵影像K1-Kn,使各關鍵影像之背景被調整至相同之對應位置。其可藉由特徵匹配或此項技術中之任何其他習知方法實施。在此種情形中,可藉由組合被對齊之關鍵影像K1-Kn之局部區域而產生合成影像CI。
此外,在另一實施例中,根據內部處理操作,可分這些階段更新關鍵影像K1-Kn。舉例而言,為提供使用者更佳之操作體驗,在完成群組聚類(groupclustering)之階段,關鍵影像決定模組131可首先自各群組選擇第一代表影像作為關鍵影像其中之一。然後,使用者介面單元15於使用者介面2上提供第一代表影像。具體而言,在第一階段,關鍵影像決定模組131可藉由預定及簡化之規則自每一群組選擇關鍵影像,並在關鍵影像決定之後便提供所選擇關鍵影像之結果,且影像分析模組133可以較低之解析度(例如該序列影像之縮圖(thumbnail))執行此等操作。以低解析度執行影像分析可快速提供結果,但可能缺乏精確性。
隨後,在第二階段,影像補償模組137及/或影像對齊模組139對群組執行第一處理操作,並在第一處理操作之後,以該等群組之複數個第二代表影像更新關鍵影像。第一處理操作可為影像補償及影像對齊。如此一來,若使用者尚未經由使用者介面單元15發送任何指令,則在第二階段,可以新的關鍵影像及新的合成影像更新使用者介面單元15。
此外,基於系統要求及實際需要,若關鍵影像之影像品質仍具有提升空間,則仍可具有一或多個階段來更新關鍵影像K1-Kn。舉例而言,影像補償模組137及/或影像對齊模組139可更對該等群組執行第二處理操作,並在第二處理操作之後,以群組之複數個第三代表影像更新第二代表影像。第二處理操作可為先進之影像補償。
在此種情形中,於使用者介面2上提供初始結果以供使用者查看,同時影像處理單元15可繼續以更詳細之分析來更新使用者介面2,直至獲得更佳之結果。在另一實施例中,初始關鍵影像可用於因應於使用者輸入直接合成影像,而無需更新。換言之,在每一階段中,依處理結果及所接收之使用者輸入而定,可更新或可不更新關鍵影像。
本發明之第四實施例為一種影像合成方法,其流程圖例示於第8圖中。該影像合成方法係用於電子裝置,例如第一實施例中之電子裝置1。
首先,執行步驟S801,接收對應於一場景之複數個影像。接著,執行步驟S803,根據第一影像特徵,自該等影像選擇複數個關鍵影像。接下來,執行步驟S805,根據第二影像特徵,自該等關鍵影像選擇至少二個部分影像。該至少二個部分影像的每一者對應於場景之不同區域。接著,執行步驟S807,藉由組合該至少二個部分影像,產生對應於場景之合成影像。最後,執行步驟S809,提供合成影像及該等關鍵影像其中至少二者於電子裝置之使用者介面上,該至少二個部分影像選自於關鍵影像之該至少二者。
在另一實施例中,本發明之影像合成方法可更執行以下其他步驟(圖中未示出):(i) 接收一使用者輸入,該使用者輸入係指示被選擇之關鍵影像之數目;以及(ii)因應於使用者輸入,基於被選擇之關鍵影像產生合成影像。該至少二個部分影像係選自被選擇之關鍵影像。具體而言,可執行步驟S807,藉由組合提取自第一數目之關鍵影像中至少第一數目之部分影像來產生合成影像。可執行上述步驟(i)以接收使用者輸入,使用者輸入係指示被選擇之第二數目的關鍵影像。一般而言,因使用者通常會重新選擇其所偏好之關鍵影像,故被選擇之關鍵影像之第二數目不同於關鍵影像之第一數目。隨後,執行上述步驟(ii) ,根據使用者輸入,藉由組合來自第二數目之所選關鍵影像之至少第二數目之部分影像而更新合成影像。關鍵影像之各部分影像對應於場景之不同區域。
除了上述步驟,第四實施例亦能執行第一實施例所描述之所有操作及功能。所屬技術領域具有通常知識者可直接瞭解第四實施例如何基於上述第一實施例以執行此等操作及功能,故不贅述。
本發明之第五實施例為一種影像合成方法,其流程圖例示於第9圖中。影像合成方法係用於具有拍攝功能之電子裝置,例如第一實施例中之電子裝置1。
首先,執行步驟S901,使電子裝置連續拍攝多個影像。接著,執行步驟S903,對該等影像執行第一影像分析操作。第一影像分析操作包含以下步驟:判斷該等影像中包含場景之共有背景的複數個連續影像之數目;判斷連續影像之數目是否等於或大於一臨界數目;以及因應於連續影像之數目小於臨界數目,提供無法產生合成影像之通知。
接下來,執行步驟S905,根據第一影像分析操作之結果,判斷是否產生合成影像。具體而言,若連續影像之數目等於或大於臨界數目,則本發明之合成方法更如第8圖所示執行步驟S801、S803、S805、S807及S809,以產生合成影像。此外,若連續影像之數目小於臨界數目,則除了向使用者提供無法產生合成影像之通知以外,本發明之合成方法可更執行一如下步驟:為使用者提供選項,以決定是否重新執行步驟S901。
除了上述步驟,第五實施例亦能執行第一實施例所描述之所有操作及功能。所屬技術領域具有通常知識者可直接瞭解第五實施例如何基於上述第一實施例以執行此等操作及功能,故不贅述。
本發明之第六實施例為一種影像合成方法,其流程圖例示於第10圖中。該影像合成方法適用於電子裝置,例如第二實施例中之電子裝置1。
首先,執行步驟S1001,接收對應於一場景之複數個影像。接著,執行步驟S1003,自該等影像決定複數個連續影像。隨後,執行步驟S1005,根據第一影像特徵,將連續影像劃分成複數個群組。連續影像係根據K均數聚類法、時間間隔、或群組預定數目劃分成群組。然後,執行步驟S1007,自各群組選擇一關鍵影像。
接下來,執行步驟S1009,根據第二影像特徵,自該等關鍵影像選擇至少二個部分影像。該至少二個部分影像之每一者對應於場景之不同區域。接著,執行步驟S1011,藉由組合至少二個部分影像,產生對應於場景之合成影像。最後,執行步驟S1013,提供合成影像及該等關鍵影像其中至少二者於電子裝置之使用者介面上,該至少二個部分影像選自於該等關鍵影像其中至少二者。
除了上述步驟,第六實施例亦能執行第二實施例所描述之所有操作及功能。所屬技術領域具有通常知識者可直接瞭解第六實施例如何基於上述第二實施例以執行此等操作及功能,故不贅述。
本發明之第七實施例為一種影像合成方法,其流程圖例示於第11圖中。該影像合成方法係用於電子裝置,例如第二實施例中之電子裝置1。
首先,執行步驟S1101,接收對應於一場景之複數個影像。接著,執行步驟S1103,根據第一影像特徵,自該等影像選擇複數個關鍵影像。隨後,執行步驟S1105,藉由比較該等關鍵影像之第二影像特徵,決定場景內至少二個種子區域。然後,執行步驟S1107,根據第二影像特徵,自該等關鍵影像中決定對應於該至少二個種子區域之至少二個源影像。
接下來,執行步驟S1109,基於該至少二個種子區域,自該至少二個源影像選擇至少二個部分影像。該至少二個部分影像等於或大於該至少二個種子區域。接著,執行步驟S1111,藉由組合該至少二個部分影像,產生對應於場景之合成影像。最後,執行步驟S1113,提供合成影像及該等關鍵影像其中至少二者於電子裝置之使用者介面上,該至少二個部分影像選自於該等關鍵影像其中至少二者。
除了上述步驟,第七實施例亦能執行第二實施例所描述之所有操作及功能。所屬技術領域具有通常知識者可直接瞭解第七實施例如何基於上述第二實施例以執行此等操作及功能,故不贅述。
本發明之第八實施例為一種影像合成方法,其流程圖例示於第12圖中。該影像合成方法係用於電子裝置,例如第三實施例中之電子裝置1。
首先,執行步驟S1201,接收對應於一場景之複數個影像。接著,執行步驟S1203,根據第一影像特徵,自該等影像選擇複數個關鍵影像。隨後,執行步驟S1205,調整該等關鍵影像之顏色值。接著,執行步驟S1207,調整該等關鍵影像之亮度值。然後,執行步驟S1209,使該等關鍵影像之背景對齊。
接下來,執行步驟S1211,根據第二影像特徵,自該等關鍵影像選擇至少二個部分影像。該至少二個部分影像的每一者對應於場景之不同區域。接著,執行步驟S1213,藉由組合該至少二個部分影像,產生對應於場景之合成影像。最後,執行步驟S1215,提供合成影像及該等關鍵影像其中至少二者於電子裝置之一使用者介面上,該至少二個部分影像選自於關鍵影像之該至少二者。
藉由對齊關鍵影像,關鍵影像之背景部分可被調整至實質上相同之位置,故可更容易地判斷不同關鍵影像中前景物體之不同位置。調整關鍵影像之影像特徵有助於消除相同物體在不同關鍵影像(背景及前景)中之微小差異,並提供更流暢之合成結果。依系統要求或實際需要而定,可改變或並列處理影像特徵調整及影像對齊(即步驟S1205、S1207及S1209)之次序。
除了上述步驟,第八實施例亦能執行第三實施例所描述之所有操作及功能。所屬技術領域具有通常知識者可直接瞭解第八實施例如何基於上述第三實施例以執行此等操作及功能,故不贅述。
本發明之第九實施例為一種影像合成方法,其流程圖例示於第13A圖及第13B圖中。該影像合成方法係用於電子裝置,例如第三實施例中之電子裝置1。
首先,執行步驟S1301,接收對應於一場景之複數個影像。接著,執行步驟S1303,自該等影像決定複數個連續影像。然後,執行步驟S1305,根據第一影像特徵,將該等連續影像劃分成複數個群組。第一影像特徵為影像差異,例如畫素差異、運動差異、或亮度差異。隨後,執行步驟S1307,自各群組選擇一第一代表影像作為複數個關鍵影像其中之一。
接下來,執行步驟S1309,根據第二影像特徵,自該等關鍵影像選擇至少二個部分影像。至少二個部分影像的每一者對應於該場景之不同區域。接著,執行步驟S1311,藉由組合該至少二個部分影像,產生對應於場景之合成影像。然後,執行步驟S1313,提供合成影像及關鍵影像其中至少二者於電子裝置之使用者介面上,該至少二個部分影像選自於關鍵影像之該至少二者。
隨後,執行步驟S1315,對該等群組執行第一處理操作。然後,執行步驟S1317,在第一處理操作之後,以該等群組之複數個第二代表影像更新該等關鍵影像。接下來,執行步驟S1319,根據第二影像特徵,自該等關鍵影像(即所更新之關鍵影像)選擇至少二個部分影像。接著,執行步驟S1321,藉由組合該至少二個部分影像產生對應於場景之合成影像。然後,執行步驟S1323,提供合成影像(即所更新之合成影像)及關鍵影像(即所更新之關鍵影像)其中至少二者於電子裝置之使用者介面上,該至少二個部分影像選自於關鍵影像之該至少二噁。
在另一實施例中,若關鍵影像之影像品質仍具有提升空間,則本發明之影像合成方法可更執行以下其他步驟(圖中未示出):(i) 對該等群組執行第二處理操作;(ii)以該等群組之複數個第三代表影像更新關鍵影像作為該等關鍵影像其中之一;(iii) 根據第二影像特徵,自該等關鍵影像(即所更新之關鍵影像)選擇至少二個部分影像;(iv)藉由組合該至少二個部分影像,產生對應於場景之合成影像;以及(v) 提供合成影像(即所更新之合成影像)及該等關鍵影像(所更新之關鍵影像)其中至少二者於電子裝置之使用者介面上,該至少二個部分影像選自於關鍵影像之該至少二者。
除了上述步驟,第九實施例亦能執行第三實施例所描述之所有操作及功能。所屬技術領域具有通常知識者可直接瞭解第九實施例如何基於上述第三實施例以執行此等操作及功能,故不贅述。
藉由本發明之概念,使用者能夠與使用者介面單元15互動,以合成在場景中特定物體位於特定位置之影像。當影像合成系統(舉例而言,影像合成系統實施於電子裝置1中並執行為影像合成應用程式)可獲取一系列影像時,使用者可選擇自系列影像創造合成影像。在一實例中,使用者可選擇對該系列影像執行影像合成操作。影像合成系統可首先評估該系列影像是否能夠或適於進行此合成。影像合成系統可分析系列影像之差異。當差異很小或低於臨界值時,影像合成系統可通知使用者無法經由使用者介面單元達成影像合成。當差異足夠大或高於臨界值時,影像合成系統可於使用者介面單元上提供影像(搭配清晰之背景照片),以供使用者操作。
如第4圖所示,使用者介面單元15亦可向使用者提供僅含有背景物體之背景影像。可觀察到,所顯示之關鍵影像包含相同之背景以及為在不同位置之共有物體。使用者可查看影像,並選擇其中共有物體位於欲選取位置處之一或多個影像。使用者可輕擊欲選取之影像(或若存在多於一個共有物體,則輕擊欲選取影像中欲選取之物體),影像合成系統便相應地以被選擇之物體更新清晰之背景影像。使用者亦可再次輕擊對應於與背景影像相組合之物體之影像,或直接輕擊顯示於合成影像中之物體,以將其自當前之合成影像中移除。因此,使用者介面2可根據使用者輸入(例如選擇嵌入新的物體)進行更新,或可在內部處理之這些階段進行更新。
綜上所述,本發明揭露電子裝置及影像合成方法,以藉由複數個關鍵影像之局部/區域合成一影像,該等關鍵影像可選自一系列影像。所合成之影像可呈現在同一場景中於多個影像之不同位置處出現的多個物體。使用者可與使用者介面單元互動,以指定其期望出現於合成影像中之物體。據此可根據對應於使用者選擇之影像而產生合成影像。
上述之實施例僅用來例舉本發明之實施態樣,以及闡釋本發明之技術特徵,並非用來限制本發明之保護範疇。任何熟悉此技術者可輕易完成之改變或均等性之安排均屬於本發明所主張之範圍,本發明之權利保護範圍應以申請專利範圍為準。
無
Claims (24)
- 一種影像合成方法,包含:
接收對應於一場景之複數個影像;
根據一第一影像特徵,自該等影像選擇複數個關鍵影像;
根據一第二影像特徵,自該等關鍵影像選擇至少二個部分影像,該至少二個部分影像的每一者對應於該場景之不同區域;
藉由組合該至少二個部分影像,產生對應於該場景之一合成影像;以及
提供該合成影像及該等關鍵影像其中至少二者於一電子裝置之一使用者介面上,該至少二個部分影像選自於該等關鍵影像之該至少二者。
- 如請求項1所述之影像合成方法,更包含:
使該電子裝置連續拍攝該等影像;
對該等影像執行一第一影像分析操作;以及
根據該第一影像分析操作之結果,判斷是否產生該合成影像。
- 如請求項2所述之影像合成方法,其中在該第一影像分析操作中包含:
判斷該等影像中包含該場景之一共有背景的一數目之複數個連續影像;
判斷該等連續影像之該數目是否等於或大於一臨界數目;以及
當該等連續影像之該數目小於該臨界數目,提供無法產生該合成影像之一通知。
- 如請求項1所述之影像合成方法,更包含:
接收一使用者輸入,該使用者輸入係指示被選擇之該等關鍵影像之一數目;以及
因應於該使用者輸入,基於被選擇之該等關鍵影像產生該合成影像;
其中該至少二個部分影像係選自被選擇之該等關鍵影像。
- 如請求項1所述之影像合成方法,其中選擇該等關鍵影像更包含:
自該等影像決定複數個連續影像;
根據該第一影像特徵,將該等連續影像劃分成複數個群組;以及
自各該群組選擇一關鍵影像;
其中該第一影像特徵係選自以下其中之一:畫素差異(pixel variance)、運動差異、及亮度差異。
- 如請求項5所述之影像合成方法,其中將該等連續影像劃分成該等群組係根據以下其中之一:K均數聚類法(K-means clustering)、時間間隔、以及群組預定數目。
- 如請求項1所述之影像合成方法,其中選擇該至少二個部分影像更包含:
藉由比較該等關鍵影像之該第二影像特徵,決定該場景內之至少二個種子區域;
根據該第二影像特徵,自該等關鍵影像中決定對應於該至少二個種子區域之至少二個源影像;以及
基於該至少二個種子區域,自該至少二個源影像選擇該至少二個部分影像;
其中該至少二個部分影像等於或大於該至少二個種子區域;以及
其中該第二影像特徵係選自以下其中之一:畫素差異及運動差異。
- 如請求項1所述之影像合成方法,其中選擇該至少二個部分影像更包含:
調整該等關鍵影像之顏色值;
調整該等關鍵影像之亮度值;以及
使該等關鍵影像之背景對齊。
- 如請求項1所述之影像合成方法,更包含以下步驟:
自該等影像決定複數個連續影像;
根據該第一影像特徵,將該等連續影像劃分成複數個群組;
自各該群組選擇一第一代表影像作為該等關鍵影像其中之一;
對該等群組執行一第一處理操作;以及
在該第一處理操作之後,以該等群組之複數個第二代表影像更新該等關鍵影像;
其中該第一影像特徵係選自以下其中之一:畫素差異、運動差異、及亮度差異。
- 如請求項9所述之影像合成方法,更包含以下步驟:
對該等群組執行一第二處理操作;以及
在該第二處理操作之後,以該等群組之複數個第三代表影像更新該等關鍵影像。
- 一種電子裝置,包含:
一影像輸入單元,用以擷取對應於一場景之複數個影像;
一影像處理單元,用以接收該等影像,根據一第一影像特徵自該等影像選擇複數個關鍵影像,根據一第二影像特徵,自該等關鍵影像選擇至少二個部分影像,以及藉由組合該至少二個部分影像,產生對應於該場景之一合成影像,該至少二個部分影像的每一者對應於該場景之不同區域;以及
一使用者介面單元,用以提供該合成影像及該等關鍵影像其中至少二者予一使用者,該至少二個部分影像選自於該等關鍵影像之該至少二者。
- 如請求項11所述之電子裝置,其中該影像輸入單元更用以連續拍攝該等影像,且該影像處理單元更用以對該等影像執行一第一影像分析操作以及根據該第一影像分析操作之結果而判斷是否產生該合成影像。
- 如請求項12所述之電子裝置,其中該第一影像分析操作包含:
在該等影像中決定包含該場景之一共有背景的一數目之複數個連續影像;
判斷該等連續影像之該數目是否等於或大於一臨界數目;以及
當該等連續影像之該數目小於該臨界數目,提供無法產生該合成影像之一通知。
- 如請求項11所述之電子裝置,其中該使用者介面單元更用以接收一使用者輸入,該使用者輸入係指示被選擇之該等關鍵影像之一數目,且該影像處理單元更用以因應於該使用者輸入而基於被選擇之該等關鍵影像產生該合成影像,其中該至少二個部分影像係選自被選擇之該等關鍵影像。
- 如請求項11所述之電子裝置,其中該影像處理單元更包含:
一關鍵影像決定模組,用以自該等影像決定複數個連續影像,根據該第一影像特徵,將該等連續影像劃分成複數個群組,以及自該群組之每一者選擇一關鍵影像,其中該第一影像特徵係選自以下其中之一:畫素差異(pixel variance)、運動差異、及亮度差異;以及
一影像分析模組,用以藉由比較該等關鍵影像之該第二影像特徵而決定該場景內之至少二個種子區域,根據該第二影像特徵而自該等關鍵影像中決定對應於該至少二個種子區域之至少二個源影像,以及基於該至少二個種子區域,自該至少二個源影像選擇該至少二個部分影像,其中該至少二個部分影像等於或大於該至少二個種子區域,且該第二影像特徵係選自畫素差異及運動差異其中之一。
- 如請求項15所述之電子裝置,其中該影像處理單元更包含:
一影像合成模組,用以藉由組合選自該至少二個源影像之該至少二個部分影像而產生該合成影像。
- 如請求項11所述之電子裝置,其中該影像處理單元更包含:
一關鍵影像決定模組,用以自該等影像確定複數個連續影像,根據該第一影像特徵將該等連續影像劃分成複數個群組,以及自該群組的每一者選擇一第一代表影像作為該等關鍵影像其中之一;
一影像補償模組;以及
一影像對齊模組;
其中該影像補償模組或該影像對齊模組用以對該等群組執行一第一處理操作;以及在該第一處理操作之後,以該等群組之複數個第二代表影像更新該等關鍵影像;
其中該第一影像特徵係選自以下其中之一:畫素差異、運動差異、及亮度差異。
- 如請求項17所述之電子裝置,其中該影像補償模組或該影像對齊模組更用以對該等群組執行一第二處理操作,以及在該第二處理操作之後,以該等群組之複數個第三代表影像更新該等關鍵影像。
- 如請求項11所述之電子裝置,其中該使用者介面單元為一觸控螢幕,且該影像輸入單元具有一影像拍攝模組,該影像拍攝模組至少包含一光感測器及一透鏡。
- 一種用於一電子裝置中之影像合成方法,包含:
擷取對應於一場景之複數個影像;
根據一第一影像特徵,自該等影像選擇複數個關鍵影像;
藉由組合提取自該等關鍵影像中一第一數目之關鍵影像之至少一第一數目之部分影像以產生一合成影像;
於一使用者介面上提供該合成影像及該等關鍵影像;
接收一使用者輸入,該使用者輸入係指示一第二數目之該等所選關鍵影像;以及
根據該使用者輸入,藉由組合來自該第二數目之所選關鍵影像之至少該第二數目之部分影像而更新該合成影像;
其中該等關鍵影像之各該部分影像對應於該場景之不同區域。
- 如請求項20所述之影像合成方法,更包含以下步驟:由該電子裝置之一影像拍攝模組以一高速連拍模式拍攝該等影像。
- 如請求項20所述之影像合成方法,更包含:
對該等影像執行一第一影像分析;
根據該第一影像分析之一結果,判斷是否產生該合成影像;以及
因應於判斷不產生該合成影像,於一使用者介面上提供一通知;
其中該第一影像分析係基於該等影像中之運動差異、場景差異及背景穩定性而執行。
- 如請求項20所述之影像合成方法,其中該組合自該第一數目之關鍵影像提取之至少該第一數目之部分影像之步驟更包含:
根據該等關鍵影像之影像差異,確定該第一數目之部分影像;以及
根據影像差異,選擇一關鍵影像,該第一數目之部分影像其中之一係自該關鍵影像中提取出。
- 如請求項20所述之影像合成方法,其中該第一影像特徵係選自畫素差異及運動差異。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201361759448P | 2013-02-01 | 2013-02-01 | |
US201361759444P | 2013-02-01 | 2013-02-01 | |
US201361759440P | 2013-02-01 | 2013-02-01 |
Publications (2)
Publication Number | Publication Date |
---|---|
TW201433160A true TW201433160A (zh) | 2014-08-16 |
TWI573454B TWI573454B (zh) | 2017-03-01 |
Family
ID=50071417
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW103103218A TWI543610B (zh) | 2013-02-01 | 2014-01-28 | 電子裝置及其影像選擇方法 |
TW103103215A TWI573454B (zh) | 2013-02-01 | 2014-01-28 | 電子裝置及其影像合成方法 |
TW103103470A TWI539813B (zh) | 2013-02-01 | 2014-01-29 | 影像合成裝置及方法 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW103103218A TWI543610B (zh) | 2013-02-01 | 2014-01-28 | 電子裝置及其影像選擇方法 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW103103470A TWI539813B (zh) | 2013-02-01 | 2014-01-29 | 影像合成裝置及方法 |
Country Status (4)
Country | Link |
---|---|
US (3) | US9491366B2 (zh) |
EP (2) | EP2894634B1 (zh) |
CN (3) | CN103973968B (zh) |
TW (3) | TWI543610B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI564841B (zh) * | 2014-10-20 | 2017-01-01 | 陳金仁 | 即時影像合成裝置、方法與電腦程式產品 |
TWI620147B (zh) * | 2016-11-17 | 2018-04-01 | National Chunghsing University | 用於合成人物的影像合成方法 |
Families Citing this family (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20150024098A (ko) * | 2013-08-26 | 2015-03-06 | 삼성전자주식회사 | 디지털 카메라에서 사진 합성 방법 및 장치 |
US10944917B2 (en) * | 2013-09-16 | 2021-03-09 | Kyle L. Baltz | Camera and image processing method |
US9986155B2 (en) * | 2014-09-05 | 2018-05-29 | Htc Corporation | Image capturing method, panorama image generating method and electronic apparatus |
US9727949B1 (en) * | 2014-11-19 | 2017-08-08 | Google Inc. | Providing secure digital images |
CN104539842B (zh) * | 2014-12-17 | 2018-02-13 | 宇龙计算机通信科技(深圳)有限公司 | 智能拍照方法及拍照装置 |
CN106157235A (zh) * | 2015-04-03 | 2016-11-23 | 阿里巴巴集团控股有限公司 | 图片合成方法、装置及即时通信方法、图片合成服务器 |
TWI562635B (en) * | 2015-12-11 | 2016-12-11 | Wistron Corp | Method and Related Camera Device for Generating Pictures with Object Moving Trace |
TWI620440B (zh) * | 2015-12-24 | 2018-04-01 | 緯創資通股份有限公司 | 產生包含旋轉軌跡的相片的方法及相關攝影裝置 |
EP3913591A1 (en) * | 2016-01-29 | 2021-11-24 | KiwiSecurity Software GmbH | Methods and apparatus for using video analytics to detect regions for privacy protection within images from moving cameras |
CN106101578B (zh) * | 2016-06-27 | 2019-08-16 | 上海小蚁科技有限公司 | 图像合成方法和设备 |
CN106815481B (zh) * | 2017-01-19 | 2020-07-17 | 中国科学院深圳先进技术研究院 | 一种基于影像组学的生存期预测方法及装置 |
CN110809779B (zh) * | 2017-06-28 | 2023-07-28 | 富士胶片株式会社 | 图像合成方法、图像合成装置及记录介质 |
CN107395982A (zh) * | 2017-08-22 | 2017-11-24 | 北京小米移动软件有限公司 | 拍照方法和装置 |
TWI637352B (zh) * | 2017-08-23 | 2018-10-01 | 緯創資通股份有限公司 | 影像處理裝置和方法 |
US10832808B2 (en) * | 2017-12-13 | 2020-11-10 | International Business Machines Corporation | Automated selection, arrangement, and processing of key images |
US11055859B2 (en) * | 2018-08-22 | 2021-07-06 | Ford Global Technologies, Llc | Eccentricity maps |
US11783707B2 (en) | 2018-10-09 | 2023-10-10 | Ford Global Technologies, Llc | Vehicle path planning |
CN109495683B (zh) * | 2018-11-30 | 2021-08-03 | 努比亚技术有限公司 | 一种间隔拍摄方法、设备及计算机可读存储介质 |
CN109767401B (zh) * | 2019-01-15 | 2021-02-12 | 深圳看到科技有限公司 | 画面优化方法、装置、终端及对应的存储介质 |
US11460851B2 (en) | 2019-05-24 | 2022-10-04 | Ford Global Technologies, Llc | Eccentricity image fusion |
US11521494B2 (en) * | 2019-06-11 | 2022-12-06 | Ford Global Technologies, Llc | Vehicle eccentricity mapping |
US11662741B2 (en) | 2019-06-28 | 2023-05-30 | Ford Global Technologies, Llc | Vehicle visual odometry |
Family Cites Families (50)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5398309A (en) * | 1993-05-17 | 1995-03-14 | Intel Corporation | Method and apparatus for generating composite images using multiple local masks |
US5606655A (en) | 1994-03-31 | 1997-02-25 | Siemens Corporate Research, Inc. | Method for representing contents of a single video shot using frames |
US5649032A (en) * | 1994-11-14 | 1997-07-15 | David Sarnoff Research Center, Inc. | System for automatically aligning images to form a mosaic image |
KR100235344B1 (ko) * | 1994-12-29 | 1999-12-15 | 전주범 | 영역 분할 부호화 방식의 전경/배경 화상 선택 장치 |
JP3432348B2 (ja) * | 1996-01-30 | 2003-08-04 | 三菱電機株式会社 | 代表画像表示方法、代表画像表示装置およびこの装置を用いた動画検索装置 |
US6075905A (en) * | 1996-07-17 | 2000-06-13 | Sarnoff Corporation | Method and apparatus for mosaic image construction |
US6137498A (en) * | 1997-01-02 | 2000-10-24 | Runaway Technology, Inc. | Digital composition of a mosaic image |
US6128108A (en) * | 1997-09-03 | 2000-10-03 | Mgi Software Corporation | Method and system for compositing images |
DE69833302T2 (de) * | 1997-10-06 | 2006-11-02 | Canon K.K. | Verfahren und Vorrichtung zur Bildsynthese |
WO2000017778A1 (fr) | 1998-09-17 | 2000-03-30 | Sony Corporation | Dispositif et procede de generation d'images |
JP2000215317A (ja) * | 1998-11-16 | 2000-08-04 | Sony Corp | 画像処理方法及び画像処理装置 |
US6535639B1 (en) | 1999-03-12 | 2003-03-18 | Fuji Xerox Co., Ltd. | Automatic video summarization using a measure of shot importance and a frame-packing method |
US6895127B1 (en) * | 1999-09-10 | 2005-05-17 | Arcsoft, Inc. | Photomontage using multiple layer placement and color variation |
US7827488B2 (en) * | 2000-11-27 | 2010-11-02 | Sitrick David H | Image tracking and substitution system and methodology for audio-visual presentations |
JP2003233809A (ja) * | 2002-02-07 | 2003-08-22 | Matsushita Electric Ind Co Ltd | 画像合成装置および画像合成方法 |
JP4196216B2 (ja) | 2003-09-08 | 2008-12-17 | 日本電気株式会社 | 画像合成システム、画像合成方法及びプログラム |
CA2442603C (en) * | 2003-10-01 | 2016-11-22 | Aryan Saed | Digital composition of a mosaic image |
JP4140591B2 (ja) * | 2004-09-13 | 2008-08-27 | ソニー株式会社 | 撮像システム及び撮像方法 |
US7469074B2 (en) * | 2004-11-17 | 2008-12-23 | Lexmark International, Inc. | Method for producing a composite image by processing source images to align reference points |
EP1846890A2 (en) * | 2005-01-26 | 2007-10-24 | Vu Medisch Centrum | Imaging apparatus and method of forming composite image from a plurality of source images |
CN100458846C (zh) * | 2005-07-14 | 2009-02-04 | 北京航空航天大学 | 一种图像修复方法 |
CN101366027B (zh) | 2005-11-15 | 2013-03-20 | 耶路撒冷希伯来大学伊森姆研究发展公司 | 用于产生视频概要的方法和系统 |
US7860343B2 (en) | 2006-04-10 | 2010-12-28 | Nokia Corporation | Constructing image panorama using frame selection |
CN100433060C (zh) * | 2006-10-25 | 2008-11-12 | 麦克奥迪实业集团有限公司 | 一种全自动显微图像的拼接、存储和浏览方法 |
EP2541902B1 (en) * | 2007-03-06 | 2014-06-25 | Panasonic Corporation | Imaging processing device and image processing method |
JP2008234518A (ja) * | 2007-03-23 | 2008-10-02 | Oki Electric Ind Co Ltd | 画像合成装置および画像合成プログラム |
JP4321626B2 (ja) * | 2007-05-23 | 2009-08-26 | ソニー株式会社 | 画像処理方法および画像処理装置 |
JP2009077362A (ja) | 2007-08-24 | 2009-04-09 | Sony Corp | 画像処理装置、動画再生装置、これらにおける処理方法およびプログラム |
JP2009071689A (ja) * | 2007-09-14 | 2009-04-02 | Sony Corp | 画像処理装置、画像処理方法および撮像装置 |
JP4783461B2 (ja) * | 2007-09-25 | 2011-09-28 | 富士通株式会社 | 画像合成装置及び方法 |
CN100578563C (zh) * | 2007-12-21 | 2010-01-06 | 北京中星微电子有限公司 | 基于视频图像的车辆计数方法 |
JP2009232275A (ja) * | 2008-03-24 | 2009-10-08 | Olympus Imaging Corp | 撮像装置 |
CN101276476A (zh) * | 2008-05-14 | 2008-10-01 | 清华大学 | 对2d卡通动画的前景背景分离方法 |
US8736751B2 (en) * | 2008-08-26 | 2014-05-27 | Empire Technology Development Llc | Digital presenter for displaying image captured by camera with illumination system |
US8081821B1 (en) * | 2008-09-16 | 2011-12-20 | Adobe Systems Incorporated | Chroma keying |
JP2010141653A (ja) * | 2008-12-12 | 2010-06-24 | Sanyo Electric Co Ltd | 画像処理装置及び撮像装置 |
CN101867717B (zh) * | 2009-04-16 | 2012-05-30 | 华晶科技股份有限公司 | 数字影像的拍摄参数的调整方法及数字摄像装置 |
JP2011029905A (ja) * | 2009-07-24 | 2011-02-10 | Fujifilm Corp | 撮像装置、方法およびプログラム |
CN101646022B (zh) * | 2009-09-04 | 2011-11-16 | 华为终端有限公司 | 一种图像拼接的方法、系统 |
CN102118556B (zh) * | 2009-12-31 | 2012-12-19 | 敦南科技股份有限公司 | 图像感测装置即时调整图像撷取频率的方法 |
JP4973756B2 (ja) * | 2010-03-30 | 2012-07-11 | カシオ計算機株式会社 | 画像処理装置およびプログラム |
JP2011210188A (ja) * | 2010-03-30 | 2011-10-20 | Sony Corp | 画像処理装置、画像表示方法、画像表示プログラム、および画像表示プログラムを記録した記録媒体 |
JP4858625B2 (ja) * | 2010-03-31 | 2012-01-18 | カシオ計算機株式会社 | 情報表示装置及びプログラム |
US8885978B2 (en) * | 2010-07-05 | 2014-11-11 | Apple Inc. | Operating a device to capture high dynamic range images |
JP5012967B2 (ja) * | 2010-07-05 | 2012-08-29 | カシオ計算機株式会社 | 画像処理装置及び方法、並びにプログラム |
JP2012231389A (ja) * | 2011-04-27 | 2012-11-22 | Sony Corp | 画像処理装置、画像処理方法、及びプログラム |
JP2012234258A (ja) * | 2011-04-28 | 2012-11-29 | Sony Corp | 画像処理装置と画像処理方法およびプログラム |
US8498448B2 (en) * | 2011-07-15 | 2013-07-30 | International Business Machines Corporation | Multi-view object detection using appearance model transfer from similar scenes |
CN102254325B (zh) * | 2011-07-21 | 2012-12-05 | 清华大学 | 一种运动模糊场景的分割及前景提取方法和系统 |
CN103390275B (zh) * | 2013-07-19 | 2016-03-30 | 香港应用科技研究院有限公司 | 动态图像拼接的方法 |
-
2014
- 2014-01-28 CN CN201410041735.9A patent/CN103973968B/zh active Active
- 2014-01-28 US US14/165,800 patent/US9491366B2/en active Active
- 2014-01-28 CN CN201410042131.6A patent/CN103973969B/zh not_active Expired - Fee Related
- 2014-01-28 TW TW103103218A patent/TWI543610B/zh not_active IP Right Cessation
- 2014-01-28 TW TW103103215A patent/TWI573454B/zh active
- 2014-01-28 US US14/165,832 patent/US9179071B2/en not_active Expired - Fee Related
- 2014-01-29 US US14/166,899 patent/US9380213B2/en active Active
- 2014-01-29 CN CN201410043705.1A patent/CN103973993B/zh active Active
- 2014-01-29 TW TW103103470A patent/TWI539813B/zh active
- 2014-01-30 EP EP15154465.7A patent/EP2894634B1/en active Active
- 2014-01-30 EP EP20140153153 patent/EP2763139A1/en not_active Ceased
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI564841B (zh) * | 2014-10-20 | 2017-01-01 | 陳金仁 | 即時影像合成裝置、方法與電腦程式產品 |
TWI620147B (zh) * | 2016-11-17 | 2018-04-01 | National Chunghsing University | 用於合成人物的影像合成方法 |
Also Published As
Publication number | Publication date |
---|---|
CN103973993A (zh) | 2014-08-06 |
TW201433162A (zh) | 2014-08-16 |
CN103973969B (zh) | 2017-09-15 |
US9179071B2 (en) | 2015-11-03 |
CN103973968A (zh) | 2014-08-06 |
US9380213B2 (en) | 2016-06-28 |
EP2763139A1 (en) | 2014-08-06 |
US9491366B2 (en) | 2016-11-08 |
EP2894634A1 (en) | 2015-07-15 |
TW201433163A (zh) | 2014-08-16 |
US20140218555A1 (en) | 2014-08-07 |
US20140219582A1 (en) | 2014-08-07 |
CN103973969A (zh) | 2014-08-06 |
CN103973993B (zh) | 2017-07-28 |
TWI543610B (zh) | 2016-07-21 |
US20140218552A1 (en) | 2014-08-07 |
TWI573454B (zh) | 2017-03-01 |
CN103973968B (zh) | 2017-06-13 |
TWI539813B (zh) | 2016-06-21 |
EP2894634B1 (en) | 2020-06-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI573454B (zh) | 電子裝置及其影像合成方法 | |
US11756223B2 (en) | Depth-aware photo editing | |
CN111052727B (zh) | 电子装置及其控制方法 | |
US10580140B2 (en) | Method and system of real-time image segmentation for image processing | |
US10284789B2 (en) | Dynamic generation of image of a scene based on removal of undesired object present in the scene | |
US10681287B2 (en) | Apparatus and method for displaying AR object | |
CN109565551B (zh) | 对齐于参考帧合成图像 | |
JP6371553B2 (ja) | 映像表示装置および映像表示システム | |
JP2010510573A (ja) | 3次元画像を合成するシステム及び方法 | |
JP6456031B2 (ja) | 画像認識装置、画像認識方法およびプログラム | |
KR20130120175A (ko) | 캐리커처 자동 생성 장치, 방법 및 컴퓨터 판독 가능한 기록 매체 | |
KR20190075654A (ko) | 복수 개의 카메라를 포함하는 전자 장치 및 그 동작 방법 | |
US20190246048A1 (en) | Image processing apparatus, image processing method, and storage medium | |
JP2018535572A (ja) | カメラプレビュー | |
JP2024504270A (ja) | 複数の深度のオブジェクトがあるシーンの画像融合 | |
KR20210101087A (ko) | 전자 장치 및 그 전자 장치에서 영상을 표시하는 방법 | |
KR101826463B1 (ko) | 동영상의 시간 축을 동기화하기 위한 방법 및 장치 | |
JP2017228873A (ja) | 画像処理装置、撮像装置、制御方法およびプログラム | |
CN113805824B (zh) | 电子装置以及在显示设备上显示图像的方法 | |
CN116091572B (zh) | 获取图像深度信息的方法、电子设备及存储介质 | |
JP2022080309A (ja) | 撮影装置、画像の生産方法、およびプログラム | |
JP2016103807A (ja) | 画像処理装置、画像処理方法、およびプログラム | |
JP5761386B2 (ja) | 画像処理装置、画像処理方法、及び画像処理プログラム | |
JP2021069004A (ja) | 画像処理装置、画像処理方法、及びプログラム |