TWI708211B - 行動裝置及影像處理方法 - Google Patents

行動裝置及影像處理方法 Download PDF

Info

Publication number
TWI708211B
TWI708211B TW107113249A TW107113249A TWI708211B TW I708211 B TWI708211 B TW I708211B TW 107113249 A TW107113249 A TW 107113249A TW 107113249 A TW107113249 A TW 107113249A TW I708211 B TWI708211 B TW I708211B
Authority
TW
Taiwan
Prior art keywords
image
foreground
size
processing method
effect
Prior art date
Application number
TW107113249A
Other languages
English (en)
Other versions
TW201931305A (zh
Inventor
蔡佩錞
李冠慰
傅敬文
Original Assignee
宏達國際電子股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 宏達國際電子股份有限公司 filed Critical 宏達國際電子股份有限公司
Publication of TW201931305A publication Critical patent/TW201931305A/zh
Application granted granted Critical
Publication of TWI708211B publication Critical patent/TWI708211B/zh

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/90Dynamic range modification of images or parts thereof
    • G06T5/94Dynamic range modification of images or parts thereof based on local image properties, e.g. for local contrast enhancement
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/70Denoising; Smoothing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/194Segmentation; Edge detection involving foreground-background segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • G06T7/62Analysis of geometric attributes of area, perimeter, diameter or volume
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387Composing, repositioning or otherwise geometrically modifying originals
    • H04N1/3872Repositioning or masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/64Circuits for processing colour signals
    • H04N9/646Circuits for processing colour signals for image enhancement, e.g. vertical detail restoration, cross-colour elimination, contour correction, chrominance trapping filters
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10141Special mode during image acquisition
    • G06T2207/10152Varying illumination
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W88/00Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/02Terminal devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Geometry (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)

Abstract

一種適用於包含相機單元和顯示單元之行動裝置的影像處理方法,所述影像處理方法包含:將藉由相機單元感測之第一影像分為前景部分和背景部分;計算所述前景部分之尺寸;產生與所述尺寸呈正相關之調整程度;將所述調整程度之影像效果應用在所述第一影像之所述前景部分或所述背景部分,以產生第二影像;以及藉由該顯示單元顯示所述第二影像。

Description

行動裝置及影像處理方法
本揭示內容是關於一種行動裝置及一種影像處理方法,且特別是有關於具有相機之行動裝置和適用於行動裝置之影像處理方法。
如今,隨時隨地拍照已成為許多人日常生活中不可或缺的事情。行動裝置的攝像功能也隨著越來越多的人使用行動裝置拍照而受到了更多的關注。
因此,例如相機效果的很多功能被開發出來,而相機效果例如亮度、飽和度和散景效果被應用在照片上以加強相片的品質。
然而,如何讓這些相機功能更容易使用並且以簡單的方式提升相片的品質以更接近單眼相機拍出來的照片仍舊是個挑戰。
為了解決上述問題,本揭示內容提供之一種適用於包含相機單元和顯示單元之行動裝置的影像處理方法,所述 影像處理方法包含:將藉由相機單元感測之第一影像分為前景部分和背景部分;計算所述前景部分之尺寸;產生與所述尺寸呈正相關之調整程度;將所述調整程度之影像效果應用在所述第一影像之所述前景部分或所述背景部分,以產生第二影像;以及藉由該顯示單元顯示所述第二影像。
本揭示內容之另一實施方式關於一種行動裝置,包含相機單元、顯示單元和處理單元。相機單元用以感測第一影像。處理單元耦接至所述相機單元和所述顯示單元,所述處理單元用以:將所述第一影像分為前景部分和背景部分;計算所述前景部分之尺寸;產生與所述尺寸呈正相關之調整程度;將所述調整程度之影像效果應用在所述第一影像之所述前景部分或所述背景部分,以產生第二影像;以及傳送所述第二影像至所述顯示單元以顯示所述第二影像。
綜上所述,行動裝置可以依據目標物體的動態尺寸產生具有適合影像效果的處理影像。此外,擷取到的影像中的應用的部分(即前景部分或背景部分)和影像效果的調整程度可以快速且直覺的依據目標物體和行動裝置間的距離來調整,使得使用者可以在無需使用任何其他使用者介面的前提下,藉由移動行動裝置以調整應用在擷取到的影像上的影像效果的調整程度。
100‧‧‧行動裝置
120‧‧‧相機單元
140‧‧‧記憶體單元
160‧‧‧處理單元
180‧‧‧顯示單元
200‧‧‧影像處理方法
S210、S220、S230、S240、S250、S260、S270、S231、S232a、S233a、S231b、S232b、S231c、S232c、S231d、S232d、S233d、S234d、S235d、S236d、S237d、S238d、S239d‧‧‧操作
300a、300c、700a、700c、800a‧‧‧擷取影像
300b、300d、500a、500b、500c、500d、700b、700d、800b‧‧‧處理影像
310a、310b、330a、330b、510a、510b、510c、510d、710a、710b、730a、730b、810a‧‧‧前景部分
320a、320b、340a、340b、520a、520b、520c、520d、720a、720b、740a、740b、810b‧‧‧背景部分
a1、b1、a2、b2‧‧‧眼睛
c1、c2‧‧‧鼻子
為讓本揭示內容之上述和其他目的、特徵、優點與實施例能更明顯易懂,所附圖式之說明如下: 第1圖為根據本揭示內容之一實施例所繪示的一種行動裝置的方塊示意圖;第2圖為根據本揭示內容之一實施例所繪示第1圖中行動裝置的影像處理方法流程圖;第3a圖為根據本揭示內容之一實施例所繪示原始擷取影像的示意圖;第3b圖為根據本揭示內容之一實施例所繪示處理影像的示意圖;第3c圖為根據本揭示內容之一實施例所繪示原始擷取影像的示意圖;第3d圖為根據本揭示內容之一實施例所繪示處理影像的示意圖;第4a圖為根據本揭示內容之一實施例所繪示的一種調整程度和前景部分的尺寸之間的關係圖;第4b圖為根據本揭示內容之一實施例所繪示的一種調整程度和前景部分的尺寸之間的關係圖;第5a-5d圖為根據本揭示內容之一實施例所繪示的一種第2圖中影像處理方法的說明示例;第6a圖為根據本揭示內容之一實施例所繪示一種影像處理方法的部分流程圖;第6b圖為根據本揭示內容之一實施例所繪示一種影像處理方法的部分流程圖;第6c圖為根據本揭示內容之一實施例所繪示一種影像處理方法的部分流程圖; 第6d圖為根據本揭示內容之一實施例所繪示一種影像處理方法的部分流程圖;第7a圖為根據本揭示內容之一實施例所繪示一種擷取到的影像的示意圖;第7b圖為根據本揭示內容之一實施例所繪示一種處理影像的示意圖;第7c圖為根據本揭示內容之一實施例所繪示一種擷取到的影像的示意圖;第7d圖為根據本揭示內容之一實施例所繪示一種處理影像的示意圖;以及第8a-8b圖為根據本揭示內容之一實施例所繪示一種第2圖中影像處理方法的說明示例。
為了使本揭示內容之敘述更加詳盡與完備,可參照所附之圖式及以下所述各種實施例。另一方面,眾所週知的元件與步驟並未描述於實施例中,以避免對本揭示內容造成不必要的限制。
本揭示內容之一實施例是關聯於包含相機之行動裝置。在下述的段落中,將以智慧型手機為例來描述相機裝置的細節。然而,其他相機裝置,例如平板電腦或相機,皆在本揭示內容所保護的範圍內。
第1圖為根據本揭示內容之一實施例所繪示的一種行動裝置100的方塊示意圖。如第1圖所示,行動裝置 100包含一相機單元120、一記憶體單元140、一處理單元160和一顯示單元180。於此實施例中,處理單元160電性連接至相機單元120、記憶體單元140和處理單元160。
於一實施例中,相機單元120用以擷取覆蓋相機單元120前方視野的影像。
於一實施例中,所述影像可以為一預覽影像,其中所述預覽影像可以依據相機單元120前方的當前視圖動態改變。於一實施例中,相機單元120包含但不限於,例如設置在行動裝置100前面的前鏡頭、設置在行動裝置100背面的後鏡頭或設置在行動裝置100一側的雙鏡頭。
於一實施例中,記憶體單元140用以儲存相機單元120擷取的影像以及提供此影像至處理單元160。於一實施例中,記憶體單元140可以被實現為,舉例來說,唯讀記憶體、快閃記憶體、軟碟、硬碟、光碟、隨身碟、磁帶、可由網路存取之資料庫、或熟悉此技藝者可輕易思及具有相同功能之電腦可讀取紀錄媒體皆在本揭示內容所保護的範圍內。
於一實施例中,處理單元160用以運行或執行各種軟體程式及/或指令集,以執行行動裝置100的各種功能以及處理資料。於一實施例中,處理單元160用以擷取儲存於記憶體單元140中的影像(或直接從相機單元120提取影像),並基於相機單元120擷取的這個原始影像產生一處理影像。於一實施例中,處理單元160可以被實現為諸如一或多個處理器,例如多個中央處理器和/或多個微處理器,但不以此為限。
於一實施例中,顯示單元180用以顯示相機單元120擷取的影像和/或處理單元160產生的處理影像。於一實施例中,顯示單元180可以被實現為,舉例來說,一個顯示器,諸如液晶顯示器(liquid crystal display,LCD)、主動矩陣有機發光二極體顯示器(active matrix organic light emitting diode,AMOLED)、或其他具顯示能力之顯示元件實現,但不以此為限。
本揭示內容的詳細實施方法參照第2圖中的影像處理方法於下述段落中描述,其中第2圖為根據本揭示內容之一實施例所繪示第1圖中行動裝置100的影像處理方法200流程圖。然而,本揭示內容並不限於下述的實施例。
需要注意的是,影像處理方法200可應用於相同或相似於第1圖中所示結構之行動裝置100。而為使敘述簡單,以下將根據本發明一實施例,以第1圖中的行動裝置100為例進行對操作方法的敘述,然本發明不以此應用為限。
需要注意的是,於一實施例中,影像處理方法200可實作為一電腦程式。當此電腦程式被一個電腦、一個電子裝置或第1圖中的處理單元160所執行時,此執行裝置執行影像處理方法200。
此外,需要注意的是,在本實施方式中所提及的操作方法的操作,除特別敘明其順序者外,均可依實際需要調整其前後順序,甚至可同時或部分同時執行。
再者,在不同實施例中,此些操作亦可適應性 地增加、置換、及/或省略。
參照第1圖、第2圖,影像處理方法200包括以下操作。
當相機單元120擷取影像時,行動裝置100執行影像處理方法200,使得原始的擷取影像依據原始的擷取影像中的前景部分和背景部分的分布處理唯一處理影像。參照第3a圖,第3a圖為根據本揭示內容之一實施例所繪示原始擷取影像300a的示意圖。
於操作S210中,處理單元160判斷在相機單元120擷取的擷取影像300a中是否偵測到前景部分。於一實施例中,處理單元160藉由一人臉偵測辨識系統偵測擷取影像300a中的前景部分310a。
於第3a圖所示的一些實施例中,人臉會被偵測為前景部分310a,且接續執行影像處理方法200中的操作S220。另一方面,若擷取影像中沒有前景部分被識別(即擷取影像中沒有目標、相似的物體或主題),執行操作S270以於顯示單元180上顯示擷取影像。
於一實施例中,處理單元160用多種方法判斷擷取影像300a中是否包含前景部分310a。於一方法中,處理單元160利用行動裝置100的雙鏡頭檢測擷取影像300a中多個物體的深度圖,並且處理單元160依據得到的深度圖分辨擷取影像300a中的前景部分310。於另一方法中,處理單元160選擇擷取影像300a中較大的物體作為前景部分310。
於操作S220中,處理單元160將擷取影像300a分為前景部分310a和背景部分320a。於此操作中,處理單元160依據偵測到的前景部分310a和擷取影像300a中剩下的部分將擷取影像300a分為前景部分310a和背景部分320a。背景部分320a的深度值大於前景部分310a的深度值。
於操作S230中,處理單元160計算前景部分310a的尺寸。於此操作中,處理單元160利用很多方法計算前景部分310a的尺寸,其中多個方法將在下述的第6a圖至第6d圖中討論。於一實施例中,前景部分310a的尺寸可以由兩個眼睛a1和b1之間的距離來表示。於其他實施例中前景部分310a的尺寸可以由兩個眼睛a1和b1和一個鼻子c1所形成的三角面積的大小來表示。於又一實施例中,前景部分310a的尺寸可以由前景部分310a的大小來表示。於又一實施例中,前景部分310a的尺寸可以由前景部分310a的大小和整個擷取影像300a的大小的百分比來表示。
參照第3c圖,為以另一個原始擷取影像300c為示例的示意圖。如第3c圖所示,於擷取影像300c中偵測到前景部分330a。第3c圖所示的擷取影像300c離前景部分330a較遠被擷取(相較於第3a圖中所示的前景部分330a)。在這個例子中,擷取影像300c中前景部分330a的尺寸比擷取影像300a中前景部分310a的尺寸小。
於操作S240中,處理單元160產生與擷取影像300a/300c的尺寸呈正相關之調整程度。於一實施例中,調 整程度關聯於一影像效果,其中影像效果包含,舉例來說,亮度、飽和度、筆觸、散景,但不以此為限。於一實施例中,擷取影像300a中的前景部分310a的尺寸大於擷取影像300c中的前景部分330a的尺寸,以使得對應於擷取影像300a產生的調整程度比對應於擷取影像300c產生的調整程度大。
於操作S250中,處理單元160將調整程度之影像效果應用在擷取影像300a/300c之前景部分310a/330a或背景部分320a/340a,以產生具有相同前景部分310b/330b和模糊的背景部分320b/340b的處理影像。於此實施例中,應用在第3a圖和第3c圖中的影像效果為散景效果,且調整程度為散景程度。由於對應於擷取影像300a產生的調整程度大於對應於擷取影像300c產生的調整程度(如操作S240),對應於擷取影像300a產生的散景程度大於對應於擷取影像300c產生的散景程度。於此實施例中,處理單元160將此散景程度的散景效果應用在擷取影像300a/300c中的背景部分320a/340a以產生處理影像300b/300d。
於操作S260中,顯示單元180顯示處理影像300b/300d。於此實施例中,由於應用在擷取影像300a上的散景程度大於應用在擷取影像上的散景程度,處理影像300b中的背景部分320b比處理影像300d中的背景部分340b模糊(如第3b圖和第3d圖所示)。於一實施例中,顯示 單元180於行動裝置100的螢幕(未繪示)上同時顯示處理影像和原始的擷取影像。
如上述操作S240的多個實施例,調整程度和第3a圖和第3c圖中的前景部分310a/330a的尺寸成正比。調整程度和前景部分的尺寸之間的關係進一步於第4a圖和第4b圖中示例。於一實施例中,調整程度和前景部分的尺寸之間的關係進一步於第4a圖中示例,其中第4a圖為根據本揭示內容之一實施例所繪示的一種調整程度和前景部分的尺寸之間的關係圖。調整程度隨著前景部分的尺寸線性增加,其中調整程度,舉例來說,從1到100。調整程度隨著前景部分的尺寸逐漸增加。當前景部分的尺寸為整個擷取影像的5%時,調整程度被配置為5。當前景部分的尺寸為整個擷取影像的40%時,調整程度被配置為40。
於一實施例中,調整程度和前景部分的尺寸之間的關係進一步於第4b圖中示例,其中第4b圖為根據本揭示內容之一實施例所繪示的一種調整程度和前景部分的尺寸之間的關係圖。調整程度隨著前景部分的尺寸指數性增加,其中調整程度,舉例來說,從1到100。當前景部分的尺寸相對較小時,調整程度緩慢增加,而當前景部分的尺寸相對較大時,調整程度急遽增加。當前景部分的尺寸為整個擷取影像的5%時,調整程度被配置為2。當前景部分的尺寸為整個擷取影像的10%時,調整程度被配置為3。當前景部分的尺寸為整個擷取影像的80%時,調整程度被配置為 50。當前景部分的尺寸為整個擷取影像的90%時,調整程度被配置為80。
於前述實施例中,操作S250中的影像效果是應用在前景部分310b/330b(例如第3b圖和第3d圖)。然而,本揭示內容並不限於此。參照第5a圖至第5d圖,其中第5a-5d圖為根據本揭示內容之一實施例所繪示的一種第2圖中影像處理方法200的說明示例。於此示例中,操作S250中的影像效果是依據前景部分的尺寸替換地應用在前景部分和背景部分。如第5a圖至第5d圖所示,顯示在顯示單元180上的處理影像500a、500b、500c和500d分別包含前景部分510a、510b、510c和510d以及背景部分520a、520b、520c和520d。
於此示例中,如第5a圖、第5b圖所示,當前景部分510的尺寸低於一特定的臨界值時,影像效果應用在前景部分510a和510b,當前景部分510的尺寸高於所述特定的臨界值時,影像效果應用在背景部分520和520d。於一實施例中,所述特定的臨界值可以是整個處理影像500a、500b、500c和500d的50%。
於上述實施例中,前景部分310/330的尺寸是由前景部分310/330佔整個擷取影像300a/300c的百分比來量測。然而,前景部分310/330的尺寸並不限於由百分比來量測。前景部分310/330的尺寸亦可以由長度、寬度、面積、畫素數量和/或其他等校的單位。參照第6a圖至第6d 圖,第6a圖至第6d圖分別為根據本揭示內容之一實施例所繪示一種影像處理方法200的部分流程圖。
第6a圖為根據本揭示內容之一實施例所繪示一種影像處理方法200的部分流程圖。
於操作S231a中,處理單元160識別前景部分310a/330a中之兩個眼睛。
於操作S232a中,處理單元160計算擷取影像300a/300c的前景部分310a/330a中兩個眼睛之間的距離。
於操作S233a中,處理單元160基於計算得到的距離計算前景部分310a/330a的尺寸。於此實施例中,前景部分310a/330a的尺寸由操作S232a中得到的距離來表示。
於不同的實施例中,第2圖中的操作S230更包含如第6b圖所示的操作S231b和操作S232b。第6b圖為根據本揭示內容之一實施例所繪示一種影像處理方法200的部分流程圖。
於操作S231b中,處理單元160計算前景部分310a/330a的面積。舉例來說,所述面積可以為由人臉上的兩個眼睛a1/a2和b1/b2以及一個鼻子c1/c2所形成的三角面積(如第3a圖及第3c圖所示)。於另一實施例中,前景部分的面積可以依據人臉的面積來量測(即第3a圖所示的前景部分310a)。於另一實施例中,前景部分的面積可以依據擷取影像的前景部分中的人的面積來量測(即第3c圖所示的前景部分330a)。
於操作S232b中,處理單元160基於操作S231b計算得到的面積計算前景部分310a/330a的尺寸。於此實施例中,前景部分310a/330a的尺寸由操作S231b得到的面積來表示。
於不同實施例中,第2圖中的操作S230更包含如第6c圖所示的操作S231c和操作S232c。第6c圖為根據本揭示內容之一實施例所繪示一種影像處理方法200的部分流程圖。
於操作S231c中,處理單元160計算前景部分310a/330a的面積占整個影像300a/300c的百分比。
於操作S232c中,處理單元160基於操作S231c得到的百分比計算前景部分310a/330a的尺寸。於此實施例中,前景部分310a/330a的尺寸由操作S231c得到的百分比來表示。
於不同實施例中,第2圖中的操作S230更包含如第6d圖所示的操作S231d-S239d。第6d圖為根據本揭示內容之一實施例所繪示一種影像處理方法200的部分流程圖。
於操作S231d中,處理單元160識別擷取影像300a/300c的前景部分310a/330a。於此操作中,處理單元160判斷擷取影像300a/300c是否包含一人臉。若包含人臉,接續執行操作S233d。若未包含人臉,執行操作S232d。
於操作233d中,處理單元160識別擷取影像300a/300c的前景部分310a/330a中人臉上的兩個眼睛a1/a2和b1/b2。
於操作S234d中,處理單元160計算兩個眼睛a1/a2和b1/b2之間的距離。於操作S234d的其他實施例中,處理單元160計算人臉上兩個眼睛a1/a2和b1/b2和一個鼻子c1/c2所形成的三角形的面積,如前述第6b圖中的操作S231b。
於操作S235d中,處理單元160基於操作S234d計算得到的距離計算前景部分的尺寸。於此實施例中,前景部分310a/330a的尺寸由操作S234a中得到的距離來表示。
於操作S231d中,處理單元160判斷擷取影像300a/300c中是否包含任何的人臉。參照第7a圖和第7c圖,其中第7a圖和第7c圖為根據本揭示內容之一實施例所繪示一種擷取影像700a和700c的示意圖。如第7a圖和第7c圖所示,擷取影像700a/700c不包含任何人臉,且擷取影像700a/700c包含設置在前景部分710a/730a的一個圓形物體。處理單元160執行操作S232d以判斷前景部分710a/730a是否可以被識別。
於操作S232d中,處理單元160判斷前景部分710a/730a是否可以被識別。於此操作中,處理單元160利用一辨識系統以判斷前景部分710a或730a包含的物體。在這個例子中,前景部分710a或730a包含的物體可以被識別為籃球,影像處理方法200執行操作S236d。另一方面,若 前景部分無法被識別,影像處理方法200執行操作S238d以利用前景部分的面積佔整體擷取影像面積的百分比來表示前景部分的尺寸。
於操作S236d中,處理單元160計算前景部分710a或730a的面積。
於操作S237d中,處理單元160基於操作S236d計算得到的面積計算前景部分710a或730a的尺寸。於此實施例中,前景部分710a或730a的尺寸由操作S236d得到的面積來表示。在這個例子中,前景部分710a或730a的尺寸亦考慮前景部分710a或730a的識別資訊(即前景部分710a或730a被識別為籃球)。舉例來說,識別資訊包含一個標準籃球的真實大小。
於一實施例中,前景部分的尺寸依據識別的前景部分的真實大小微調,舉例來說,當識別的前景部分的真實大小相對較大時,將前景部分的尺寸調小,當識別的前景部分的真實大小相對較小時,將前景部分的尺寸調大。
若前景部分無法識別,處理單元160執行操作S238d,計算前景部分的面積佔擷取影像的百分比。
於操作S239d中,處理單元160基於操作S238d得到的百分比計算前景部分的尺寸。於此實施例中,前景部分的尺寸由操作S238d得到的百分比來表示。
上述的多個實施例都著重在將影像效果應用在擷取影像包含人臉的前景部分,但是將影像效果應用在節舉影像中包含其他形狀物體的前景部分亦在本揭示內容所保 護的範圍內。下述的實施例將以一圓形為示例,如第7a圖至第7d圖所示。
參照第7a圖至第7d圖,其中第7a圖至第7d圖為根據本揭示內容之一實施例所繪示一種擷取影像700a/700c的示意圖。在這個例子中,顯示單元180顯示的擷取影像700a/700c包含前景部分710a/730和背景部分720a/740a,其中前景部分710a/730a為一目標物體(即一籃球)。目標物體可以為一顆球、一支手機、一只手錶或任何物體皆在本揭示內容所保護的範圍內。於此示例中,應用在第7a圖和第7c圖的影像效果為散景效果,且調整程度為散景程度。
藉由第2圖中的操作S210-S260,處理單元160處理擷取影像700a/700c以得到具有模糊的背景部分720b/740b的處理影像700b/700d。
於此實施例中,由於前景部分710a的尺寸大於前景部分730a的尺寸,處理影像700b中的背景部分720b比處理影像700d中的背景部分740b模糊(如第7b圖和第7d圖所示)。
於前述實施例中所提及的影像效果為散景效果僅為示例,各種影像效果,舉例來說,亮度、飽和度、筆觸皆在本揭示內容所保護的範圍內。
第8a-8b圖為根據本揭示內容之一實施例所繪示一種第2圖中影像處理方法200的說明示例。於此示例 中,顯示在螢幕(未繪示)上的擷取影像800a包含前景部分810a和背景部分820a,其中前景部分810a為目標物體。
於一實施例中,應用在第8a圖的影像效果為明亮效果,且調整程度為明亮程度。藉由第2圖中的操作S210-S260,處理單元160處理擷取影像800a以得到具有較黑的背景部分820b的處理影像800b。
於一實施例中,應用在第8a圖的影像效果為飽和效果,且調整程度為飽和程度。藉由第2圖中的操作S210-S260,處理單元160處理擷取影像800a以得到具有較飽和的背景部分820b的處理影像800b。
綜上所述,行動裝置100可以依據目標物體的動態尺寸產生具有適合影像效果的處理影像。如此一來,擷取到的影像中的應用的部分(即前景部分或背景部分)和影像效果的調整程度可以快速且直覺的依據目標物體和行動裝置100間的距離來調整,使得使用者可以在無需使用任何其他使用者介面的前提下,藉由移動行動裝置100以調整應用在擷取影像上的影像效果的調整程度。
雖然本揭示內容已以實施方式揭露如上,然其並非用以限定本揭示內容,任何熟習此技藝者,於不脫離本揭示內容之精神和範圍內,當可作各種之更動與潤飾,因此本揭示內容之保護範圍當視後附之申請專利範圍所界定者為準。
200‧‧‧影像處理方法
S210、S220、S230、S240、S250、S260、S270‧‧‧操作

Claims (11)

  1. 一種影像處理方法,適用於包含一相機單元和一顯示單元之一行動裝置,該影像處理方法包含:將藉由該相機單元感測之一第一影像分為一前景部分和一背景部分;計算該前景部分之一尺寸;產生與該前景部分之該尺寸呈正相關之一調整程度;將該調整程度之一影像效果應用在該第一影像之該前景部分或該背景部分,以產生一第二影像;以及藉由該顯示單元顯示該第二影像;其中該前景部分之該尺寸可為以下其中一者:兩個眼睛之間的距離、兩個眼睛和一個鼻子所形成的三角面積的大小、該前景部分之一第二面積、該前景部分之該第二面積佔該第一影像之一第一面積的一百分比。
  2. 如請求項1所述之影像處理方法,其中該影像效果為一散景效果,該調整程度為一散景程度,該前景部分之該尺寸該散景程度呈正相關以調整該前景部分和該背景部分之一模糊差異。
  3. 如請求項2所述之影像處理方法,其中該散景效果應用於該背景部分。
  4. 如請求項2所述之影像處理方法,其中該散景效果應用於該前景部分。
  5. 如請求項2所述之影像處理方法,其中當該前景部分之該尺寸小於一臨界值時,該散景效果應用於該前景部分,當該背景部分之該尺寸大於一臨界值時,該散景效果應用於該背景部分。
  6. 如請求項1所述之影像處理方法,其中計算該前景部分之該尺寸之操作包含:識別該前景部分中之一人臉;定位該人臉上之兩眼;以及計算該兩眼間之一距離,其中該距離被視為該前景部分之該尺寸。
  7. 如請求項1所述之影像處理方法,其中計算該前景部分之該尺寸之操作包含:取得該第一影像之一第一面積;量測該前景部分之一第二面積;以及計算該第二面積佔該第一面積之一百分比,其中該百分比被視為該前景部分之該尺寸。
  8. 如請求項1所述之影像處理方法,其中該調整程度隨著計算出來的該尺寸變大而呈線性或指數性增加。
  9. 如請求項1所述之影像處理方法,其中該影像效果為一明亮效果,該調整程度為一明亮程度,該前景部 分之該尺寸與該明亮程度呈正相關以調整該前景部分和該背景部分之一明亮差異。
  10. 如請求項1所述之影像處理方法,其中該影像效果為一飽和效果,該調整程度為一飽和程度,該前景部分之該尺寸與該飽和程度呈正相關以調整該前景部分和該背景部分之一飽和差異。
  11. 一種行動裝置,包含:一相機單元,用以感測一第一影像;一顯示單元;以及一處理單元,耦接至該相機單元和該顯示單元,該處理單元用以:將該第一影像分為一前景部分和一背景部分;計算該前景部分之一尺寸;產生與該前景部分之該尺寸呈正相關之一調整程度;將該調整程度之一影像效果應用在該第一影像之該前景部分或該背景部分,以產生一第二影像;以及傳送該第二影像至該顯示單元以顯示該第二影像;其中該前景部分之該尺寸可為以下其中一者:兩個眼睛之間的距離、兩個眼睛和一個鼻子所形成的三角面積的大小、該前景部分之一第二面積、該前景部分之該第二面積佔該第一影像之一第一面積的一百分比。
TW107113249A 2018-01-07 2018-04-18 行動裝置及影像處理方法 TWI708211B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/863,972 US10733706B2 (en) 2018-01-07 2018-01-07 Mobile device, and image processing method for mobile device
US15/863,972 2018-01-07

Publications (2)

Publication Number Publication Date
TW201931305A TW201931305A (zh) 2019-08-01
TWI708211B true TWI708211B (zh) 2020-10-21

Family

ID=67139144

Family Applications (1)

Application Number Title Priority Date Filing Date
TW107113249A TWI708211B (zh) 2018-01-07 2018-04-18 行動裝置及影像處理方法

Country Status (3)

Country Link
US (1) US10733706B2 (zh)
CN (1) CN110020991B (zh)
TW (1) TWI708211B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20210144297A1 (en) * 2019-11-12 2021-05-13 Shawn Glidden Methods System and Device for Safe-Selfie
CN113315924A (zh) * 2020-02-27 2021-08-27 北京字节跳动网络技术有限公司 图像特效处理方法及装置
CN112261257A (zh) * 2020-10-20 2021-01-22 杭州励见网络科技有限公司 一种可分级调节的全面屏笔记本用外接摄像头

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1251148C (zh) * 2001-06-05 2006-04-12 索尼公司 图像处理设备
CN101297545A (zh) * 2005-10-28 2008-10-29 株式会社尼康 摄影装置、图像处理装置和程序
US8346005B2 (en) * 2009-09-24 2013-01-01 Sony Corporation System and method for “Bokeh-Aji” shot detection and region of interest isolation
CN102918861A (zh) * 2011-04-28 2013-02-06 松下电器产业株式会社 立体视觉强度调整装置、立体视觉强度调整方法、程序、集成电路、记录介质
TWI554936B (zh) * 2013-10-30 2016-10-21 摩如富股份有限公司 圖像處理裝置、圖像處理方法以及電腦程式產品
CN106664374A (zh) * 2014-06-26 2017-05-10 高通股份有限公司 基于背景像素的曝光计量

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8134613B2 (en) * 2001-04-10 2012-03-13 Sony Corporation Image processing apparatus and method, and image pickup apparatus
US7783075B2 (en) * 2006-06-07 2010-08-24 Microsoft Corp. Background blurring for video conferencing
CN101751686A (zh) * 2008-12-22 2010-06-23 鸿富锦精密工业(深圳)有限公司 对图片进行调整的显示装置及方法
CN102014248B (zh) * 2009-09-04 2012-07-04 华晶科技股份有限公司 自动聚焦方法及模块和应用该方法的影像撷取装置
CN102377984A (zh) * 2010-08-09 2012-03-14 纬创资通股份有限公司 监视影像录制方法和监视系统以及计算机程序产品
CN103426143B (zh) * 2012-05-24 2016-07-27 晨星软件研发(深圳)有限公司 影像编辑方法以及相关的模糊参数建立方法
US20140184586A1 (en) * 2013-01-02 2014-07-03 International Business Machines Corporation Depth of field visualization
CN107613199B (zh) * 2016-06-02 2020-03-13 Oppo广东移动通信有限公司 虚化照片生成方法、装置和移动终端
US10482583B1 (en) * 2018-05-10 2019-11-19 Google Llc Generating and displaying blur in images

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1251148C (zh) * 2001-06-05 2006-04-12 索尼公司 图像处理设备
CN101297545A (zh) * 2005-10-28 2008-10-29 株式会社尼康 摄影装置、图像处理装置和程序
US8346005B2 (en) * 2009-09-24 2013-01-01 Sony Corporation System and method for “Bokeh-Aji” shot detection and region of interest isolation
CN102918861A (zh) * 2011-04-28 2013-02-06 松下电器产业株式会社 立体视觉强度调整装置、立体视觉强度调整方法、程序、集成电路、记录介质
TWI554936B (zh) * 2013-10-30 2016-10-21 摩如富股份有限公司 圖像處理裝置、圖像處理方法以及電腦程式產品
CN106664374A (zh) * 2014-06-26 2017-05-10 高通股份有限公司 基于背景像素的曝光计量

Also Published As

Publication number Publication date
US20190213713A1 (en) 2019-07-11
TW201931305A (zh) 2019-08-01
CN110020991B (zh) 2023-02-28
CN110020991A (zh) 2019-07-16
US10733706B2 (en) 2020-08-04

Similar Documents

Publication Publication Date Title
JP6522708B2 (ja) プレビュー画像表示方法及び装置、並びに端末
EP3079010B1 (en) Photographing method for dual-camera device and dual-camera device
EP3195595B1 (en) Technologies for adjusting a perspective of a captured image for display
KR101754750B1 (ko) 상호작용 스크린 보기를 위한 장치, 매체 및 방법
US10805543B2 (en) Display method, system and computer-readable recording medium thereof
TWI708211B (zh) 行動裝置及影像處理方法
JP2019212275A (ja) 画像処理方法、画像処理装置および電子機器
CN107111863B (zh) 角膜成像的设备和方法
US9100563B2 (en) Apparatus, method and computer-readable medium imaging through at least one aperture of each pixel of display panel
CN107277375B (zh) 一种自拍方法和移动终端
JP5538573B2 (ja) 画像自動補正のための構図に基づく露出測定方法及び装置
WO2017032035A1 (zh) 调节方法、调节装置和终端
WO2015149611A1 (en) Image presentation control methods and image presentation control apparatuses
CN111163265A (zh) 图像处理方法、装置、移动终端及计算机存储介质
TWI637288B (zh) 用於眼球視線校正的影像處理方法及其系統
US11585724B2 (en) Fixtureless lensmeter system
JP5994301B2 (ja) 画像処理装置、情報処理装置、方法、プログラムおよび記録媒体
WO2019080061A1 (zh) 基于摄像设备的遮挡检测修复装置及其遮挡检测修复方法
US20150010206A1 (en) Gaze position estimation system, control method for gaze position estimation system, gaze position estimation device, control method for gaze position estimation device, program, and information storage medium
CN107155000B (zh) 一种拍照行为分析方法、装置及移动终端
EP3139586B1 (en) Image shooting processing method and device
CN105812678A (zh) 一种能够改善反光现象的电子设备及其方法
CN105446717A (zh) 信息处理方法及电子设备
TW201345238A (zh) 影像處理裝置及其方法