TWI419076B - 影像處理裝置及記憶影像處理程式之記憶媒體 - Google Patents

影像處理裝置及記憶影像處理程式之記憶媒體 Download PDF

Info

Publication number
TWI419076B
TWI419076B TW100105560A TW100105560A TWI419076B TW I419076 B TWI419076 B TW I419076B TW 100105560 A TW100105560 A TW 100105560A TW 100105560 A TW100105560 A TW 100105560A TW I419076 B TWI419076 B TW I419076B
Authority
TW
Taiwan
Prior art keywords
image
processing
data
pixel
function
Prior art date
Application number
TW100105560A
Other languages
English (en)
Other versions
TW201203171A (en
Inventor
Naoya Matsumoto
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Publication of TW201203171A publication Critical patent/TW201203171A/zh
Application granted granted Critical
Publication of TWI419076B publication Critical patent/TWI419076B/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/73Deblurring; Sharpening
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/40Picture signal circuits
    • H04N1/409Edge or detail enhancement; Noise or error suppression
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20172Image enhancement details
    • G06T2207/20192Edge enhancement; Edge preservation

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Processing Or Creating Images (AREA)
  • Facsimile Image Signal Circuits (AREA)

Description

影像處理裝置及記憶影像處理程式之記憶媒體
本發明係有關於影像處理裝置及記憶影像處理程式之記憶媒體,尤其係有關於可實現以下影像處理的技術:作為從原始影像得到高藝術性之影像的影像處理,在考量到整個原始影像下生成更加提高藝術性之表現效果之影像的資料。
近年來,為了將在鑑賞藉攝像等所取得之影像時之表現效果提高之目的,執行對原始影像的資料實施提高藝術性之加工的影像處理。
例如,在特開平8-44867號公報,為達成上述的目的,揭示一種描繪技術,該描繪技術係以像素為單位取得關於原始影像的亮度、色度、色調的資訊,並使用這些資訊模擬變換成例如提高藝術性之影像(例如水彩畫或油畫)的資料時之運筆或色彩後進行描繪。
可是,記載於特開平8-44867號公報的技術存在以像素為單位進行模擬使得在考量到整個影像下提高藝術性方面不足的問題。
本發明係鑑於這種狀況而開發者,其目的在於:使得在考量到整個原始影像下生成更加提高藝術性之表現效果之影像的資料之影像處理可實現,作為用以從原始影像得到高藝術性之影像的影像處理。
為了達成該目的,申請專利範圍第1項的發明係具備:輸入手段,係輸入影像的資料;變換手段,係將藉該輸入手段所輸入之該影像的資料變換成包含亮度成分之色空間之形態的資料;選擇手段,係對藉該變換手段所變換之該影像的資料,按該色空間的成分選擇複數個像素的資料;紋理處理手段,係對藉該選擇手段所選擇之該複數個像素的資料,以相同運筆圖案實施使用該像素之顏色的紋理處理;影線處理手段,係對藉該變換手段所變換之該影像的資料中亮度低之像素區域的資料,使用其像素的顏色,實施附加與該運筆圖案之方向大致垂直之方向之斜線表達的影線處理;合成手段,係將藉該紋理處理手段實施該紋理處理之該影像的資料、與藉該影線處理手段實施該影線處理之該影像的資料合成;輪廓加強處理手段,係根據藉該變換手段所變換之該影像之資料的亮度成分,實施加強藉該合成手段所合成的資料之該影像之輪廓部分的輪廓加強處理;及記憶控制手段,係控制藉該輪廓加強處理手段實施該輪廓加強處理之該影像之資料的記憶。
又,申請專利範圍第2項之發明係在該申請專利範圍第1項的發明,該選擇手段係包含像素選擇手段,該像素選擇手段係對藉該變換手段所變換之該影像的資料,選擇該影像中之任一列的像素列;生成亂數,根據所生成之亂數從藉該像素選擇手段所選擇之該像素列選擇該複數個像素。
又,申請專利範圍第3項之發明係在該申請專利範圍第1或2項的發明,該運筆圖案係線狀的圖案。
又,申請專利範圍第4項之發明係在該申請專利範圍第1至3項的發明,該輸入手段係包含攝像手段。
又,為了達成該目的,申請專利範圍第5項的發明係使對所輸入之影像的資料實施影像處理的電腦實現以下之功能:變換功能,係將所輸入之該影像的資料變換成包含亮度成分之色空間之形態的資料;選擇功能,係對藉該變換功能的實現所變換之該影像的資料,按該色空間的成分選擇複數個像素的資料;紋理處理功能,係對藉該選擇功能的實現所選擇之該複數個像素的資料,以相同運筆圖案實施使用該像素之顏色的紋理處理;影線處理功能,係對藉該變換功能的實現所變換之該影像的資料中亮度低之像素區域的資料,使用其像素的顏色,實施附加與該運筆圖案之方向大致垂直之方向之斜線表達的影線處理;合成功能,係將藉該紋理處理功能的實現實施該紋理處理之該影像的資料、與藉該影線處理功能的實現實施該影線處理之該影像的資料合成;輪廓加強處理功能,係根據藉該變換功能的實現所變換之該影像之資料的亮度成分,實施加強藉該合成功能之實現所合成的資料之該影像之輪廓部分的輪廓加強處理;及記憶控制功能,係控制藉該輪廓加強處理功能的實現實施該輪廓加強處理之該影像之資料的記憶。
以下,根據圖式說明本發明之一實施形態。
第1圖係表示作為本發明之影像處理裝置之一實施形態的攝像裝置1之硬體構成的方塊圖。攝像裝置1例如可由數位相機所構成。
攝像裝置1具備CPU(Central Processing Unit)11、ROM(Read Only Memory)12、RAM(Random Access Memory)13、匯流排14、輸出入介面15、攝像部16、操作部17、顯示部18、記憶部19、通信部20及驅動器21。
CPU11根據記錄於ROM12的程式執行各種處理。又,CPU11根據從記憶部19下載於RAM13的程式執行各種處理。
在RAM13,又亦適當地記憶CPU11在執行各種處理上所需的資料等。
例如在本實施形態,實現後述之第2圖的影像變換部52至記憶控制部59之各功能的程式係記憶於ROM12或記憶部19。因此,CPU11藉由執行根據這些程式的處理,而可實現後述之第2圖之影像變換部52至記憶控制部59的各功能。
CPU11、ROM12及RAM13經由匯流排14相連接。在此匯流排14又亦連接有輸出入介面15。在輸出入介面15,連接有攝像部16、操作部17、顯示部18、記憶部19及通信部20。
攝像部16具備光學透鏡部及影像感測器,但未圖示。
光學透鏡部例如由聚焦透鏡或變焦透鏡等將光聚光的透鏡所構成,用以拍攝被攝體。
聚焦透鏡是使被攝體影像成像於影像感測器之受光面的透鏡。變焦透鏡是焦距在固定之範圍內改變自如的透鏡。
光學透鏡部根據所需設有調整焦點、曝光、白平衡等之設定參數的周邊電路。
影像感測器由光電變換元件或AFE(Analog Front End)等所構成。
光電變換元件例如由CMOS(Complementary Metal Oxide Semiconductor)型光電變換元件等所構成。於光電變換元件,被攝體影像從光學透鏡部被射入。因此,光電變換元件每隔固定時間對被攝體影像進行光電變換(攝像),並儲存影像信號,再將所儲存之影像信號以類比信號的形式提供給AFE。
AFE對此類比的影像信號執行A/D(Analog/Digital)變換處理等之各種信號處理。利用各種信號處理,數位信號被生成,並被當作攝像部16的輸出信號輸出。
此外,以下將攝像部16的輸出信號稱為「拍攝影像的資料」。因此,從攝像部16是被輸出拍攝影像的資料,並被適當的提供給CPU11等。
操作部17由各種按鈕等所構成,受理使用者的指示操作。
顯示部18顯示各種影像。
記憶部19由DRAM(Dynamic Random Access Memory)等所構成,暫時記憶從攝像部16所輸出之拍攝影像的資料。又,記憶部19亦記憶各種影像處理所需的各種資料,例如影像資料、各種旗標值、臨限值等。
通信部20對經由包含網際網路的網路與其他的裝置(未圖示)之間所進行的通信進行控制。
輸出入介面15根據所需另連接有驅動器21,並適當地安裝有由磁碟、光碟、光磁碟、或半導體記憶體等所構成之可卸式媒體31。此外,從那些媒體所讀出之程式根據所需被安裝於記憶部19。又,可卸式媒體31可與記憶部19一樣地記憶有記憶部19所記憶之影像資料等的各種資料。
第2圖係表示用以執行粉蠟筆式色調影像生成處理之攝像裝置1之功能構成的功能方塊圖。
在此,粉蠟筆式色調影像生成處理意指一連串從被當作影像處理對象而輸入之原來的影像(以下稱為「原始影像」)的資料至生成屬高藝術性之影像的一種之以蠟筆或筆等所畫之影像(以下稱為「粉蠟筆式色調影像」)的資料為止的處理。
如第2圖所示,攝像裝置1具備影像輸入部51、影像變換部52、處理對象選擇部53、紋理處理部54、影線處理部55、合成部56、輪廓加強處理部57、邊緣抽出影像生成部58、記憶控制部59及影像記憶部60,以實現粉蠟筆式色調影像生成處理。
影像輸入部51係輸入原始影像的資料,在本實施形態由第1圖所示的構成中之攝像部16、通信部20及驅動器21等所構成。
即,在本實施形態,不僅是從攝像部16所輸出之拍攝影像的資料,另外從其他的裝置所發送並由通信部20所接收之影像的資料、或利用驅動器21從可卸式媒體31所讀出之影像的資料等亦被當作原始影像的資料而被輸入影像輸入部51。
在本實施形態,影像變換部52至記憶控制部59每一者係被當作第1圖所示的構成中之屬於硬體之CPU11與屬於軟體之記憶於ROM12等之程式的組合而構成。
又,影像記憶部60係被當作第1圖所示的構成中之攝像裝置1的RAM13或記憶部19、或可卸式媒體31中的一區域而構成。
影像變換部52係執行將被輸入影像輸入部51之原始影像的資料從輸入時的形態變換成包含亮度成分之色空間之形態的處理。以下將這種處理稱為「影像變換處理」。
本實施形態之影像變換處理後的色空間,如第2圖所示,採用所謂的YUV空間。即,在本實施形態,藉影像變換部52的影像變換處理,可得到由亮度成分(以下稱為「Y成分」)、亮度成分與藍色成分的色差量成分(以下稱為「U成分」)、及亮度成分與紅色成分的色差量成分(以下稱為「V成分」)所構成之資料。
此外,以下將綜合Y成分、U成分及V成分的資料稱為「YUV成分」。
處理對象選擇部53係對影像變換部52之影像變換處理後之原始影像的資料,按色空間的成分,在本實施形態對各YUV成分,選擇成為後述之紋理處理的對象之複數個像素的資料。
紋理處理部54係以相同運筆圖案對藉處理對象選擇部53所選擇之複數個像素的資料實施使用該像素之顏色的紋理處理。
在此,「紋理處理」意指於影像貼上模擬蠟筆或筆等之筆跡的紋理的影像處理。在本專利說明書中,將此「模擬蠟筆或筆等之筆跡的紋理」的圖案稱為「運筆圖案」。
運筆圖案所採用之紋理的形狀或大小等無特別限定。其中,在本實施形態,運筆圖案採用後述之第6圖所示之線狀的圖案,如上述所示,該運筆圖案(相同運筆圖案)當作用於對各像素之各個資料進行紋理處理者。
藉由對就各YUV成分所選擇之複數個像素之各像素的各個資料重複執行這種紋理處理,而得到粉蠟筆式色調影像的資料。
在此,上述之「使用像素之顏色的紋理處理」不僅包含貼上像素之顏色本身之紋理的處理,而且亦包含貼上使用像素的顏色資訊進行計算所得之顏色之紋理的處理。
即,在本實施形態,紋理的顏色係根據紋理的亮度與貼有紋理之像素位置之像素的顏色資訊(YUV成分中處理對象之成分的值)而進行計算後作決定。具體而言,本實施形態係採取使紋理的密度稍低並殘留空白以得到如在白紙上以蠟筆或畫筆等進行描繪之粉蠟筆式色調影像的資料。因此,為了減少空白與紋理之顏色的間隙,紋理的顏色係採用使原始影像之亮度稍高的顏色。
此外,關於運筆圖案或紋理處理之進一步的細節,將於後使用第4圖至第7圖說明第3圖之步驟S3至S8的處理。
依此方式,從紋理處理部54所輸出之粉蠟筆式色調影像的資料尚有影像之資料明暗部的差異不明顯之情況。
於是,影線處理部55係對於在由YUV成分所構成之影像的資料中亮度低(暗)之像素區域的資料,實施使用該像素的顏色,附加與運筆圖案之方向大致垂直的方向之運筆斜線表達的處理(以下稱為「影線處理」)。
此外,雖然影線處理部55的處理對象在第2圖係以紋理處理部54之輸出資料的方式表達,但是未特別限定為第2圖所示的例子,其他亦可例如是影像變換部52的輸出資料。
合成部56執行將從影線處理部55所輸出之影像的資料與從紋理處理部54所輸出之影像的資料合成的處理(以下稱為「合成處理」)。
因為藉合成部56之輸出資料所表達的影像係(以下稱為「合成影像」)在亮度低的像素區域於紋理上加有大致反方向(與運筆圖案之方向大致垂直的方向)的斜線,所以會成為明顯地表達明暗部之差異的影像。
此外,關於影線處理及合成影像之進一步的細節將於後說明第3圖之步驟S9及S10的處理。
輪廓加強處理部57係根據從影像變換部52所輸出之Y成分,對從合成部56所輸出之合成影像的資料實施加強輪廓的影像處理(以下稱為「輪廓加強處理」)。
具體而言,邊緣抽出影像生成部58係根據從影像變換部52所輸出之Y成分生成以邊緣強度作為像素值之影像的資料。以下,將依此方式所生成之影像的資料稱為「邊緣抽出影像的資料」。
輪廓加強處理部57將依此方式藉邊緣抽出影像生成部58所生成之邊緣抽出影像的資料中具有邊緣強度高之像素值的區域作為邊緣(輪廓)區域,再對從合成部56所輸出之合成影像之Y成分的邊緣區域實施輪廓加強處理。
此外,關於亦包含邊緣抽出影像之資料的生成手法之輪廓加強處理之進一步的細節,將於後使用第11圖說明第3圖之步驟S11的處理。
記憶控制部59系執行將藉輪廓加強處理部57實施輪廓加強處理之影像的資料記憶於影像記憶部60的控制處理(以下稱為「影像記憶處理」)。
其次,說明具有這種功能性構成之攝像裝置1所執行之粉蠟筆式色調影像生成處理。
第3圖係表示粉蠟筆式色調影像生成處理之流程例的流程圖。
步驟S1,影像輸入部51判定是否已輸入原始影像的資料。
在未輸入原始影像之資料的情況,步驟S1判定為NO,再執行步驟S1的判定處理。即,重複步驟S1的判定處理至已輸入原始影像的資料為止,而粉蠟筆式色調影像生成處理係呈待機狀態。
然後,原始影像的資料已輸入影像輸入部51時,步驟S1判定為YES,處理移至步驟S2。
步驟S2,影像變換部52對被輸入影像輸入部51之原始影像的資料執行影像變換處理。
因此,在本實施形態,如上述所示,得到原始影像的YUV成分,並提供給處理對象選擇部53。
步驟S3,處理對象選擇部53選擇原始影像之YUV之種類的成分中之既定的一種成分,以作為處理對象的成分。
步驟S4,處理對象選擇部53從構成處理對象的成分的影像之複數列之中選擇任意列,以作為處理對象列。
步驟S5,處理對象選擇部53從處理對象的列選擇複數個處理對象的像素。
具體而言,雖未圖示,處理對象選擇部53係包含有對處理對象的成分選擇該成分的影像中之任一列之像素列的像素選擇部。利用該像素選擇部執行步驟S4的處理。
接著,作為步驟S5的處理,處理對象選擇部53例如生成亂數,並使用該亂數從利用像素選擇部所選擇之像素列選擇複數個像素,以作為處理對象的像素。
若處理對象選擇部53的選擇結果被通知給紋理處理部54,則處理移至步驟S6。
步驟S6,紋理處理部54根據被選為處理對象的複數個像素,執行上述的紋理處理。
以下參照第4圖至第7圖進一步具體說明步驟S4至S6的處理。
第4圖係表示步驟S4之處理結果例的圖。
第5圖係表示步驟S5之處理結果例的圖。
第6圖係表示在步驟S6的處理所使用之運筆圖案例的圖。
第7圖係表示步驟S6之處理結果例的圖。
在第4圖、第5圖及第7圖中係表示在步驟S3的處理所選擇之成分的影像中之一區域(相同區域)。
在第4圖至第7圖中,一個正方形表示一個像素。
在本例,如第4圖之空白箭號所示,在步驟S4的處理,選擇第4圖之描繪範圍中從上面第4列的列,作為處理對象的列。
如第5圖所示,步驟S5的處理係從構成該處理對象的列之像素列中選擇4個像素P1至P4作為處理對象的像素。
如第7圖所示,步驟S6的處理係在4個像素P1至P4的各像素位置分別貼上第6圖所示的運筆圖案,並具有各個根據4個像素P1至P4的各像素值(在步驟S3的處理所選擇之處理對象之成分的各值)所計算之4種顏色的紋理T1至T4。
回到第3圖,針對從處理對象的成分任意選擇的列執行步驟S4至S6的處理後,處理移至步驟S7。
在步驟S7,紋理處理部54判定處理對象之成分的紋理處理是否已結束。
步驟S7的判定處理無特別限定,例如,作為步驟S7的判定處理,亦可紋理處理部54進行對處理對象之成分整體所有的列執行步驟S4至S6之處理的判定。
其中,在本實施形態,如上述所示,使紋理的密度稍低,並殘留空白,藉此,作成生成如以蠟筆或筆等畫在白紙之粉蠟筆式色調影像的資料。為了生成這種資料,對處理對象之成分整體所有的列執行步驟S4至S6之處理後,亦具有成為紋理的密度過高之結果的可能性。因此,為了使紋理的密度變成適當,只要對某程度之列數的列執行步驟S4至S6之處理即可。
因此,作為本實施形態之步驟S7的判定條件,作成預先將此「某程度之列數」定義為臨限值,並採用步驟S4至S6之處理的重複次數超過臨限值的判定條件。
因此,在對處理對象的成分,步驟S4至S6之處理的重複次數未超過臨限值的情況,在步驟S7判定是NO,而處理回到步驟S4,重複以後的處理。
即,至對處理對象的成分,步驟S4至S6之處理的重複次數超過臨限值之間,重複步驟S4至S7:NO之迴路處理,每次將任恴列選為處理對象的列,並選擇處理對象之複數個像素,分別執行根據各個該複數個像素的紋理處理。
然後,對處理對象的成分,步驟S4至S6之處理的重複次數超過臨限值時,在步驟S7判定是YES,而處理移至步驟S8。
在步驟S8,紋理處理部54判定YUV成分之全部的紋理處理是否已結束。
在YUV成分中尚未被選為處理對象之種類的成分存在的情況,在步驟S8判定是NO,而處理回到步驟S3,並重複以後的處理。
即,在步驟S3的處理,YUV之種類的成分中未成為處理對象的一種成分被選為下一處理對象的成分。然後,對下一處理對象之種類的成分,重複步驟S4至S7:NO之迴路處理,每次將任恴列選為處理對象的列,並選擇處理對象之複數個像素,分別執行根據各個該複數個像素的紋理處理。
對YUV成分之全部的成分執行以上的處理後,在步驟S8判定是YES,而處理移至步驟S9。
依此方式,在本實施形態,對各YUV成分,設定處理對象的列,使用不同的亂數選擇處理對象的複數個像素,分別執行根據各個該複數個像素的紋理處理。
因此,在步驟S8判定是YES之時間點所得之粉蠟筆式色調影像的資料,有例如僅被施加根據U成分之著色的紋理存在的區域,或反之,未被施加根據U成分之著色的紋理存在之區域的情況。一樣地,有例如僅被施加根據V成分之著色的紋理存在的區域,或反之,未被施加根據V成分之著色的紋理存在之區域的情況。
這種粉蠟筆式色調影像係以一面隨機地改變紋理的顏色一面黏貼的狀況映至使用者之眼的方式表達。
其中,在步驟S8判定是YES之時間點所得之粉蠟筆式色調影像的資料,如上述所示,有成為明暗部的差不明顯之影像之資料的情況。
因此,在步驟S8判定是YES的情況,在步驟S9,影線處理部55對由YUV成分所構成之影像的資料中亮度低之像素區域的資料,使用該像素的顏色,實施由與運筆圖案的方向大致垂直之方向的斜線表達所構成之影線處理。
然後,在步驟S10,合成部56執行將在步驟S9的處理已實施影線處理之影像(亮度低之像素區域成為與紋理大致垂直之方向的斜線的影像)的資料與對在步驟S8判定是YES之時間點所得之粉蠟筆式色調影像的資料合成的合成處理。
依此方式,可掌握步驟S9及步驟S10的處理是為了明顯地表達粉蠟筆式色調影像之明暗部的差異,而對可判斷為暗部分的部分(亮度低的部分)朝向與紋理大致垂直之方向施加斜線的處理。
藉由執行這種步驟S9及步驟S10的處理,可得到接近是圖畫的技法之一「影線」的效果。
具體而言,作為步驟S9及步驟S10的處理,對亮度值成為臨限值以下之區域的資料實施斜線之層與α混合的影像處理。
在此,斜線部不是黑,而構成斜線部之各像素的顏色使用原始影像中相同像素位置之像素的顏色本身。因而,亮度值成為臨限值以下之區域比被黏貼其他的紋理的區域更相對地變暗,而且表達成自然地映至使用者的眼。
依此方式,執行步驟S9及步驟S10的處理,而得到如上述所示之合成影像的資料後,處理移至步驟S11。
在步驟S11,輪廓加強處理部57根據步驟S2之影像變換處理後之原始影像的Y成分,對合成影像的資料實施輪廓加強處理。
在此,更詳細說明輪廓加強處理。
如上述所示,在本實施形態,為了執行輪廓加強處理,利用邊緣抽出影像生成部58生成邊緣抽出影像的資料。
邊緣抽出影像之資料的生成手法無特別限定,在本實施形態採用使用如第8(A)、(B)圖所示的佐貝爾濾波器,生成邊緣抽出影像之資料的手法。
以下,更詳細說明本實施形態之邊緣抽出影像的生成手法。
第8(A)、(B)圖係表示水平方向像素數×垂直方向像素數=3×3之佐貝爾濾波器之一例的圖。具體而言,第8(A)圖係表示垂直成分抽出用佐貝爾濾波器之一例的圖。第8(B)圖係表示水平成分抽出用佐貝爾濾波器之一例的圖。
邊緣抽出影像生成部58從構成與從影像變換部52所輸出之Y成分對應的原始影像之各像素中,設定應注目的注意像素,作為處理對象。
邊緣抽出影像生成部58對注意像素的資料(Y成分值),分別施加第8(A)圖所示之垂直成分抽出用佐貝爾濾波器及第8(B)圖所示之水平成分抽出用佐貝爾濾波器。
此外,以下將對注意像素的資料(Y成分值)施加第8(A)圖所示之垂直成分抽出用佐貝爾濾波器之結果所得的值稱為「垂直佐貝爾值」。此垂直佐貝爾值愈大,表示注意像素之垂直方向的邊緣強度愈強。
又,以下將對注意像素的資料(Y成分值)施加第8(B)圖所示之水平成分抽出用佐貝爾濾波器之結果所得的值稱為「水平佐貝爾值」。此水平佐貝爾值愈大,表示注意像素之水平方向的邊緣強度愈強。
依此方式,求得注意像素之垂直佐貝爾值及水平佐貝爾值後,依以下的方式,求得邊緣抽出影像中之注意像素的像素值(表示注意像素之邊緣強度的值)。
即,邊緣抽出影像生成部58藉由計算如下的第(1)式,而求得邊緣抽出影像中之注意像素的像素值。
邊緣抽出影像之注意像素的像素值=(垂直佐貝爾值的絕對值+水平佐貝爾值的絕對值)/2…(1)
以第(1)式所示的像素值愈大,表示注意像素的邊緣強度愈強,即注意像素是邊緣部分的可能性愈高。
邊緣抽出影像生成部58依序將構成原始影像之Y成分之各像素的資料設定成注意像素的資料,並藉由重複上述的處理,而生成邊緣抽出影像的資料。
輪廓加強處理部57將依此方式藉邊緣抽出影像生成部58所生成之邊緣抽出影像的資料中具有大的像素值之區域(邊緣強度較高的區域)作為邊緣(輪廓)區域,再對從合成部56所輸出之合成影像的Y成分中之邊緣抽出影像實施輪廓加強處理。
因而,第3圖之步驟S11的處理結束,處理移至步驟S12。
在步驟S12,記憶控制部59執行將在步驟S11的處理已實施輪廓加強處理之粉蠟筆式色調影像的資料記憶於影像記憶部60的影像記憶處理。
因而,粉蠟筆式色調影像生成處理結束。
第9圖係表示作為粉蠟筆式色調影像生成處理的結果所得之粉蠟筆式色調影像例的圖。
第10圖係將第9圖之粉蠟筆式色調影像之一部分之區域放大的圖。
第11圖係第9圖之粉蠟筆式色調影像的一部分,係將與第10圖不同之區域放大的圖。
對將汽車作為被攝體包含之原始影像(未圖示)的資料,實施第3圖之粉蠟筆式色調影像生成處理後,生成第9圖所示之粉蠟筆式色調影像81的資料,並記憶於影像記憶部60(第2圖)。
得知粉蠟筆式色調影像81中亮度高的區域,例如汽車之引擎蓋中直射陽光所照到之亮的區域91如第10圖之放大圖中特別表示於橢圓形之範圍內所示,以朝向左下之斜線狀的紋理表達,與該紋理大致垂直之方向的斜線不存在。
另一方面,得知粉蠟筆式色調影像81中亮度暗的區域,例如是汽車之門之下側的陰影之暗的區域92如第11圖之放大圖中特別表示於橢圓形之範圍內所示,與朝向左下之斜線狀的紋理同時表達朝向與該紋理大致垂直之方向的右下之暗的斜線。
依此方式,藉由執行本實施形態的粉蠟筆式色調影像生成處理,而可在考量到整個原始影像的明暗下,生成藝術性之表現效果更高之粉蠟筆式色調影像81等的資料。
此外,本發明未限定為該實施形態,在可達成本發明之目的之範圍內的變形、改良等係包含於本發明。
例如,作為第2圖之處理對象選擇部53、紋理處理部54、影線處理部55及合成部56的處理對象,雖然在該實施形態,採用尺寸與原始影像相同的資料,但是未特別限定如此。
具體而言,例如攝像裝置1之RAM13等的記憶體容量受限,而難處理大尺寸的紋理,另一方面,為了表達以蠟筆或筆所畫的狀況,存在需要處理定值以上之尺寸之紋理的情況。
在這種情況,亦可作成對從影像變換部52所輸出之YUV成分實施縮小處理,並向處理對象選擇部53供給其結果所得之縮小影像的資料。其中,在此情況,需要藉由對合成部56的輸出資料實施放大處理,而使影像尺寸恢復原始影像的尺寸。
又,例如藉邊緣抽出影像生成部58之邊緣抽出影像之資料的生成手法,雖然在該實施形態,為了提高精度,而採用對從影像變換部52所輸出之Y成分施加佐貝爾濾波器的手法,但是未特別限定如此。
具體而言,例如亦可採用對從影像變換部52所輸出之Y成分施加LPF(Low Pass Filter:低通濾波器),再對已被施加該LPF的資料施加佐貝爾濾波器,藉此,生成邊緣抽出影像之資料的手法。
又,例如在需要高速化的情況,亦可採用對從影像變換部52所輸出之Y成分或已被施加LPF的資料,施加拉普拉斯濾波器等佐貝爾濾波器以外之任意的濾波器,藉此,生成邊緣抽出影像之資料的手法。
又,例如在上述的實施形態,說明以數位相機等之攝像裝置構成應用本發明的影像處理裝置的例子。可是,本發明未特別限定為攝像裝置,不管有無攝像功能,可應用於可執行上述之影像處理的電子機器整體。具體而言,例如本發明可應用於個人電腦、攝影機、攜帶式導航裝置、攜帶式遊戲機等。
上述之一連串的處理亦可利用硬體執行,亦可利用軟體執行。
在利用軟體執行一連串之處理的情況,將構成該軟體的程式從網路或記錄媒體安裝於電腦等。電腦亦可是被裝入專用硬體的電腦。又,電腦亦可是藉由安裝各種程式,而可執行各種功能的電腦,例如是泛用的個人電腦。
這種包含程式的記錄媒體不僅由為了向使用者提供程式而與裝置本體另外分發之第1圖的可卸式媒體31所構成,而且由在預先被裝入裝置本體之狀態向使用者提供的記錄媒體等所構成。可卸式媒體例如由磁碟(包含軟碟)、光碟、或光磁碟等所構成。光碟例如由CD-ROM(Compact Disk-Read Only Memory)、DVD(Digital Versatile Disk)等所構成。光磁碟由MD(Mini-Disk)等所構成。又,在預先被裝入裝置本體之狀態向使用者提供的記錄媒體例如由記錄程式之第1圖的ROM12、或第1圖之記憶部19所包含之硬碟等所構成。
此外,在本專利說明書,記述記錄媒體所記錄之程式的步驟,按照其順序以時間序列所進行的處理係當然,亦包含即使未必以時間序列處理,亦被並列或個別地執行的處理。
1...攝像裝置
11...CPU
12...ROM
13...RAM
14...匯流排
15...輸出入介面
16...攝像部
17...操作部
18...顯示部
19...記憶部
20...通信部
21...驅動器
31...可卸式媒體
51...影像輸入部
52...影像變換部
53...處理對象選擇部
54...紋理處理部
55...影線處理部
56...合成部
57...輪廓加強處理部
58...邊緣抽出影像生成部
59...記憶控制部
60...影像記憶部
第1圖係表示本發明之一實施形態的攝像裝置之硬體構成的方塊圖。
第2圖係表示第1圖之攝像裝置之功能構成的功能方塊圖。
第3圖係表示第2圖之攝像裝置所執行之粉蠟筆式色調影像生成處理之流程例的流程圖。
第4圓係表示第3圖之粉蠟筆式色調影像生成處理的步驟S4之處理結果例的圖。
第5圖係表示第3圖之粉蠟筆式色調影像生成處理的步驟S5之處理結果例的圖。
第6圖係表示在第3圖之粉蠟筆式色調影像生成處理之步驟S6的處理所使用之運筆圖案例的圖。
第7圖係表示第3圖之粉蠟筆式色調影像生成處理的步驟S6之處理結果例的圖。
第8(A)、(B)圖係表示在第3圖之粉蠟筆式色調影像生成處理之步驟S11的處理為了生成邊緣抽出影像所使用之佐貝爾(Sobel)濾波器之一例的圖。
第9圖係表示作為第3圖之粉蠟筆式色調影像生成處理的結果所得之粉蠟筆式色調影像例的圖。
第10圖係將第9圖之粉蠟筆式色調影像之一部分之區域放大的圖。
第11圖係第9圖之粉蠟筆式色調影像的一部分,係將與第10圖不同之區域放大的圖。
1...攝像裝置
51...影像輸入部
52...影像變換部
53...處理對象選擇部
54...紋理處理部
55...影線處理部
56...合成部
57...輪廓加強處理部
58...邊緣抽出影像生成部
59...記憶控制部
60...影像記憶部

Claims (5)

  1. 一種影像處理裝置,其特徵為具備:輸入手段,係輸入影像的資料;變換手段,係將藉該輸入手段所輸入之該影像的資料變換成包含亮度成分之色空間之形態的資料;選擇手段,係對藉該變換手段所變換之該影像的資料,按該色空間的成分選擇複數個像素的資料;紋理處理手段,係對藉該選擇手段所選擇之該複數個像素的資料,以相同運筆圖案實施使用該像素之顏色的紋理處理;影線處理手段,係對藉該變換手段所變換之該影像的資料中亮度低之像素區域的資料,使用其像素的顏色,實施附加與該運筆圖案之方向大致垂直之方向之斜線表達的影線處理;合成手段,係將藉該紋理處理手段實施該紋理處理之該影像的資料、與藉該影線處理手段實施該影線處理之該影像的資料合成;輪廓加強處理手段,係根據藉該變換手段所變換之該影像之資料的亮度成分,實施加強藉該合成手段所合成的資料之該影像之輪廓部分的輪廓加強處理;及記憶控制手段,係控制藉該輪廓加強處理手段實施該輪廓加強處理之該影像之資料的記憶。
  2. 如申請專利範圍第1項之影像處理裝置,其中該選擇手段係包含像素選擇手段,該像素選擇手段係對藉該變換手段所變換之該影像的資料,選擇該影像中之任一列的像素列;生成亂數,根據所生成之亂數從藉該像素選擇手段所選擇之該像素列選擇該複數個像素。
  3. 如申請專利範圍第1項之影像處理裝置,其中該運筆圖案係線狀的圖案。
  4. 如申請專利範圍第1項之影像處理裝置,其中該輸入手段係包含攝像手段。
  5. 一種記憶媒體,係記憶用以使對所輸入之影像的資料實施影像處理的電腦實現以下之功能的程式:變換功能,係將所輸入之該影像的資料變換成包含亮度成分之色空間之形態的資料;選擇功能,係對藉該變換功能的實現所變換之該影像的資料,按該色空間的成分選擇複數個像素的資料;紋理處理功能,係對藉該選擇功能的實現所選擇之該複數個像素的資料,以相同運筆圖案實施使用該像素之顏色的紋理處理;影線處理功能,係對藉該變換功能的實現所變換之該影像的資料中亮度低之像素區域的資料,使用其像素的顏色,實施附加與該運筆圖案之方向大致垂直之方向之斜線表達的影線處理;合成功能,係將藉該紋理處理功能的實現實施該紋理處理之該影像的資料、與藉該影線處理功能的實現實施該影線處理之該影像的資料合成;輪廓加強處理功能,係根據藉該變換功能的實現所變換之該影像之資料的亮度成分,實施加強藉該合成功能之實現所合成的資料之該影像之輪廓部分的輪廓加強處理;及記憶控制功能,係控制藉該輪廓加強處理功能的實現實施該輪廓加強處理之該影像之資料的記憶。
TW100105560A 2010-02-22 2011-02-21 影像處理裝置及記憶影像處理程式之記憶媒體 TWI419076B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010036639A JP4803304B2 (ja) 2010-02-22 2010-02-22 画像処理装置及びプログラム

Publications (2)

Publication Number Publication Date
TW201203171A TW201203171A (en) 2012-01-16
TWI419076B true TWI419076B (zh) 2013-12-11

Family

ID=44476125

Family Applications (1)

Application Number Title Priority Date Filing Date
TW100105560A TWI419076B (zh) 2010-02-22 2011-02-21 影像處理裝置及記憶影像處理程式之記憶媒體

Country Status (5)

Country Link
US (1) US8289342B2 (zh)
JP (1) JP4803304B2 (zh)
KR (1) KR101202134B1 (zh)
CN (1) CN102169586B (zh)
TW (1) TWI419076B (zh)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9424584B2 (en) * 2011-06-28 2016-08-23 Rovi Guides, Inc. Systems and methods for generating and displaying user preference tag clouds
CN102572219B (zh) * 2012-01-19 2014-12-24 西安联客信息技术有限公司 移动终端及其图像处理方法
RU2533053C2 (ru) * 2012-09-07 2014-11-20 Армине Хачиковна Хачатрян Способ опосредованного неразрушающего исследования художественных полотен, монументального или других произведений искусства для выявления их скрытых индивидуальных особенностей (варианты), способ определения подлинности и/или авторства художественного полотна, монументального или других произведений искусства
RU2012157043A (ru) * 2012-12-26 2014-07-10 Армине Хачиковна Хачатрян Способ бесконтактного неразрушающего анализа художественных полотен и других произведений искусства по их цифровым копиям для определения индивидуального рисунка рельефа и углублений поверхностных и внутренних слоев
US9975801B2 (en) 2014-07-31 2018-05-22 Corning Incorporated High strength glass having improved mechanical characteristics
CN103971368B (zh) * 2014-05-12 2017-03-15 内蒙古科技大学 一种基于色差的运动目标前景提取方法
CN104077792A (zh) * 2014-07-04 2014-10-01 厦门美图网科技有限公司 一种漫画效果的图像处理方法
US10611664B2 (en) 2014-07-31 2020-04-07 Corning Incorporated Thermally strengthened architectural glass and related systems and methods
US11097974B2 (en) 2014-07-31 2021-08-24 Corning Incorporated Thermally strengthened consumer electronic glass and related systems and methods
EP3123260B1 (en) * 2014-12-31 2021-04-14 SZ DJI Technology Co., Ltd. Selective processing of sensor data
CN105303598A (zh) * 2015-10-23 2016-02-03 浙江工业大学 基于纹理传输的多风格视频艺术化处理方法
CN108698922B (zh) 2016-01-12 2020-02-28 康宁股份有限公司 薄的热强化和化学强化的玻璃基制品
US11795102B2 (en) 2016-01-26 2023-10-24 Corning Incorporated Non-contact coated glass and related coating system and method
US11485673B2 (en) 2017-08-24 2022-11-01 Corning Incorporated Glasses with improved tempering capabilities
TWI785156B (zh) 2017-11-30 2022-12-01 美商康寧公司 具有高熱膨脹係數及對於熱回火之優先破裂行為的非離子交換玻璃
WO2020219290A1 (en) 2019-04-23 2020-10-29 Corning Incorporated Glass laminates having determined stress profiles and methods of making the same
CN116811379A (zh) 2019-08-06 2023-09-29 康宁股份有限公司 具有用于阻止裂纹的埋入式应力尖峰的玻璃层压体及其制造方法
CN115953331B (zh) * 2023-03-14 2023-12-29 极限人工智能有限公司 一种图像边缘增强方法及系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5307452A (en) * 1990-09-21 1994-04-26 Pixar Method and apparatus for creating, manipulating and displaying images
JPH0744867A (ja) * 1993-05-26 1995-02-14 Olympus Optical Co Ltd 光ディスク記録装置
US5432896A (en) * 1991-01-31 1995-07-11 Axa Corporation Watercolor simulation in computer graphics
TW200740250A (en) * 2006-04-12 2007-10-16 Arcadyan Technology Corp Method for transforming color space of image
CN100470588C (zh) * 2005-08-22 2009-03-18 上海广电(集团)有限公司中央研究院 增强图像颜色的方法
TW201002084A (en) * 2008-06-18 2010-01-01 Novatek Microelectronics Corp Method for adjusting color saturation and image displaying system using the method

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5621868A (en) * 1994-04-15 1997-04-15 Sony Corporation Generating imitation custom artwork by simulating brush strokes and enhancing edges
DE19619090A1 (de) * 1996-04-30 1997-11-13 Cfb Gmbh Vorrichtung und Verfahren zur Erzeugung eines Kompositbildes
JP2862080B1 (ja) * 1997-11-27 1999-02-24 日本電気株式会社 画像処理装置と画像処理方法
JP2004213598A (ja) 2003-01-07 2004-07-29 Hidenori Ito 絵画風画像変換方法、及び、コンピュータ読み取り可能な記憶媒体
JP2009093609A (ja) 2007-09-20 2009-04-30 Sega Corp 画像処理用プログラム、当該プログラムを記録したコンピュータ読み取り可能な記録媒体、画像処理装置、画像処理方法
CN101587593B (zh) * 2009-06-19 2011-07-27 西安交通大学 一种基于真实图像素描风格化的方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5307452A (en) * 1990-09-21 1994-04-26 Pixar Method and apparatus for creating, manipulating and displaying images
US5432896A (en) * 1991-01-31 1995-07-11 Axa Corporation Watercolor simulation in computer graphics
JPH0744867A (ja) * 1993-05-26 1995-02-14 Olympus Optical Co Ltd 光ディスク記録装置
CN100470588C (zh) * 2005-08-22 2009-03-18 上海广电(集团)有限公司中央研究院 增强图像颜色的方法
TW200740250A (en) * 2006-04-12 2007-10-16 Arcadyan Technology Corp Method for transforming color space of image
TW201002084A (en) * 2008-06-18 2010-01-01 Novatek Microelectronics Corp Method for adjusting color saturation and image displaying system using the method

Also Published As

Publication number Publication date
CN102169586A (zh) 2011-08-31
TW201203171A (en) 2012-01-16
KR20110096496A (ko) 2011-08-30
CN102169586B (zh) 2013-10-09
KR101202134B1 (ko) 2012-11-15
JP4803304B2 (ja) 2011-10-26
US8289342B2 (en) 2012-10-16
US20110205236A1 (en) 2011-08-25
JP2011170816A (ja) 2011-09-01

Similar Documents

Publication Publication Date Title
TWI419076B (zh) 影像處理裝置及記憶影像處理程式之記憶媒體
JP5463866B2 (ja) 画像処理装置および画像処理方法、並びにプログラム
CN103685968B (zh) 图像处理装置及图像处理方法
US7983511B1 (en) Methods and apparatus for noise reduction in digital images
TW201735619A (zh) 高動態範圍圖像的產生方法、拍照裝置和終端、成像方法
CN102737365B (zh) 图像处理装置、摄像装置以及图像处理方法
Kao High dynamic range imaging by fusing multiple raw images and tone reproduction
JP4985660B2 (ja) 擬似濃淡画像生成装置及びプログラム
JP4941482B2 (ja) 擬似カラー画像生成装置、及びプログラム
JP2007241424A (ja) 画像処理装置および画像処理方法
JP4941568B2 (ja) 画像処理装置及びプログラム
JP4541397B2 (ja) 擬似的3次元画像生成装置、擬似的3次元画像生成方法及び擬似的3次元画像生成プログラム
JP2011076302A (ja) 輪郭抽出装置、輪郭抽出方法、および輪郭抽出プログラム
EP2421239A2 (en) Image processing apparatus and method for applying film grain effects
JP5218634B2 (ja) 擬似濃淡画像生成装置及びプログラム
JP2010081350A (ja) 油彩画調画像の生成方法および生成プログラム
JP2006209795A (ja) 画像処理方法、画像処理プログラムおよび画像処理装置
JP4075778B2 (ja) 擬似的3次元画像生成装置、擬似的3次元画像生成方法及び擬似的3次元画像生成プログラム
JP6028485B2 (ja) 画像生成装置、画像生成方法及びプログラム
KR100539940B1 (ko) 휴대용 단말기에서 촬영된 영상을 스케치효과로 표시하는방법
JP2004328137A (ja) 画像撮像装置、画像処理装置及び画像処理プログラム
JP5932374B2 (ja) 画像処理装置及び画像処理方法
JP2011193487A (ja) 擬似カラー画像生成装置、及びプログラム
JP6423612B2 (ja) 情報機器、画像処理方法およびプログラム
JP2010103934A (ja) 画像処理装置,デジタルカメラ,および画像処理プログラム

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees