TW200830219A - Image processor, image processing method, and program - Google Patents

Image processor, image processing method, and program Download PDF

Info

Publication number
TW200830219A
TW200830219A TW096130769A TW96130769A TW200830219A TW 200830219 A TW200830219 A TW 200830219A TW 096130769 A TW096130769 A TW 096130769A TW 96130769 A TW96130769 A TW 96130769A TW 200830219 A TW200830219 A TW 200830219A
Authority
TW
Taiwan
Prior art keywords
image
reduced
area
reference point
image data
Prior art date
Application number
TW096130769A
Other languages
English (en)
Other versions
TWI344115B (zh
Inventor
Kouji Yamamoto
Takafumi Hosoi
Mitsuyasu Amano
Eiichiro Morinaga
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of TW200830219A publication Critical patent/TW200830219A/zh
Application granted granted Critical
Publication of TWI344115B publication Critical patent/TWI344115B/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/20Image enhancement or restoration using local operators
    • G06T5/30Erosion or dilatation, e.g. thinning
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387Composing, repositioning or otherwise geometrically modifying originals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • H04N23/951Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2621Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computing Systems (AREA)
  • Image Processing (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Studio Devices (AREA)

Description

200830219 九、發明說明: 【發明所屬之技術領域】 本發明係關於在畫面内以任意設定之基準點為中心而使 原圖像變形之圖像處理裝置、圖像處理方法及程式。 【先前技術】 以往,有人使用安裝於攝像機之透鏡,以限制入射於透 楗内之光之光學濾光片。光學濾光片一般使用於限制穿透 光之波長區域之用途。在此種用途以外,在光學濾光片 中,也有使用作為提供隨著遠離設定於畫面内之基準點而 使被照體變形之效果(以下稱為特殊效果)之機構之光學濾 光片。在此種特殊效果中,有隨著遠離基準點而使被照體 像放射狀流動般變形之效果(以下稱為變焦變形效果卜及 隨著遠離基準點而使被照體像螺旋狀流動般變形之效果 (以下稱為旋風變形效果)。賦予此種特殊效果之光學濾光 片(以下稱為特殊效果用光學濾光片)一般係將上述基準點 設計為畫面内之中心點,故不能以畫面内之任意位置為基 準點而賦予如上述之特殊效果。χ,特殊效果用光學滅光 片有必要僅在賦予特殊效果之情形,才安裝於攝像機之透 鏡。又,將特殊效果用光學渡光片安裝於攝像機之透鏡所 攝像之圖像在畫面全體上解像度會劣化。 又,在電腦中,即使是執行圖像處理軟體而不將上述特 用光學據光片安裝於攝像機之透鏡所攝像之圖像, 理軟體Τ:之圖像賦予同樣之特殊效果。在此種圖像處 軟體中,對處理對象之圖像,可設定畫面内之任意為製 121752.doc 200830219 作為基準點而賦予特殊效果。具體上,此種圖像處理軟體 係以基準點為中心將圖像資料變換成放大率相異之複數放 大圖像。而,在圖像處理軟體中,將複數放大圖像疊合未 處理之圖像資料而對原圖像賦予變焦變形效果。 . 包合變焦變形效果在内,在以基準點為中心賦予使被照 ' 冑變:之特殊效果之圖像處理中,由於數位攝像機所具有 - 《運算處理器之處理能力之提冑,不僅個人電腦,連數位 =像機也可執行圖像處理。即,在圖像處理中,由於其運 ^處理杰之處理能力之提高,不僅記錄及顯示攝像之圖像 之處理,施行對攝像之圖像賦予特殊效果之處理也比較容 易。另一方面,數位攝像機隨著對應於高畫質化之要求之 攝像圖像之像素數之增加,對圖像資料賦予圖像效果所需 之運算量也逐漸增加。因此,數位攝像機之處理能力低於 個人電月餐故有Ρ現著上述運算量之增加,運算速度也變得 較慢之問題。又,在數位攝像機中,主要以電池電源驅 I, 自,故也有對應於此種運算量之增加,耗電力也會增加, 驅動時間也變短之問題。 在日本特公平7_1 13961號公報所載之圖像處理方法中, 在畫面内-面檢測高亮度部份而對該部份之信號施以特定 之加權,-面向特定方向挪移而加算亮度信號成分,藉以 對圖像賦予使用作為特殊效果用光學遽光片之交又遽光片 果利用此種曰本特公平7-113961號公報所載之圖像處 理,向以基車^1;炎+ , 、 + J為中心而放大之方向使各像素之像素值挪 移複數個而相加時,可仿真地對攝像圖像賦予變焦變形效 121752.doc 200830219 果。但,利用此種圖像處 免至万法對攝像圖像賦予變隹 效果之情形,抽出上述高意# 丁爻“、、k形 <呵冗度點之處理及加算處理 量會隨著攝像圖像之像素數而增加处 理方法中,未被抽出作為古古 圖像處 為呵冗度之像素不能成為處理對 象。因此,在此種圖像處理 云〒 對於未被抽出之像专 所構成之區域,不能賦予變焦變形效果。 ’、 【發明内容】 [發明所欲解決之問題]
本發⑽㈣&種情“提案者’其技術課題在於提供 可以車乂’之運算I將隨著離開設定於畫面内之原圖像之美 準點而使被照體大幅變形之特殊效果料攝像圖像之圖像 處理裝置、圖像處理方法及圖像處理程式。 為解決如上述之技術課題而提案之本發明之_實施型態 之圖像處理裝置係包含··第!設定機構其係對原圖像,設 定含有在其畫面内任意選擇之基準點之第1圖像區域與除 此第1圖像區域以外之晝面内之第2圖像區域;縮小機構, 其係對上述原圖像細化其圖像資料之像素而將其縮小,·第 2設定機構,其係對由上述縮小機構縮小後之縮小圖像設 定對應於上述原圖像之基準點之縮小圖像之基準點、對應 於上述第1圖像區域之第丨縮小圖像區域及對應於上述第2 圖像區域之第2縮小圖像區域;變形機構,其係在由上述 縮小機構縮小後之縮小圖像中,使由上述第2設定機構所 设疋之上述第2縮小圖像區域之圖像隨著離開上述縮小圖 像之基準點而大幅變形;延伸機構,其係將圖像被上述變 121752.doc 200830219 形機構變形後之上述第2縮小圖像區域之圖像資料,内插 構成該圖像資料之各像素間之像素值而延伸成上述第 像區域;及合成機構,其係將由上述延伸機構延伸成第2 圖像區域後之圖像資料與構成上述第丨圖像區域之上述原 圖像之圖像資料合成,而輸出隨著離開上述原圖像之基準 點而大幅變形之圖像之圖像資料。 又,本發明之另一實施型態之圖像處理方法係對原圖像 設定含有在其畫面内任意選擇之基準點之第丨圖像區域與 除此第1圖像區域以外之第2圖像區域;對上述原圖像細化 其圖像貢料之像素而將其縮小;對上述縮小後之縮小圖像 設定對應於上述原圖像之基準點之縮小圖像之基準點、對 應於上述第1圖像區域之第丨縮小圖像區域及對應於上述第 2圖像區域之第2縮小圖像區域;在上述縮小後之縮小圖像 中,使上述設定之第2縮小圖像區域隨著離開上述縮小圖 像之基準點而大幅變形;將上述變形後之上述第2縮小圖 像區域之圖像資料,内插構成該圖像資料之各像素間之像 素值而延伸成上述第2圖像區域;將構成上述延伸後之第2 圖像區域之圖像資料與構成上述第1圖像區域之上述原圖 像之圖像資料合成,而輸出隨著離開上述原圖像之基準點 而大幅變形之圖像之圖像資料。 又,本發明之另一實施型態之程式係使電腦執行包含下 列各步驟之圖像處理:第丨設定步驟,其係對原圖像設定 含有在其晝面内任意選擇之基準點之第1圖像區域與除此 第1圖像區域以外之第2圖像區域;縮小步驟,其係對上述 121752.doc 200830219 Ο
原圖像細化其圖像資料之像素而將其縮小;第2設定步 驟’其係對於上述縮小步驟縮小後之縮小圖像設定對應於 上述原圖像之基準點之縮小圖像之基準點、對應於上述第 1圖像區域之第1縮小圖像區域及對應於上述第2圖像區域 之第2縮小圖像輯;變形步驟,其係在於上述縮小步驟 縮小後之縮小圖像中,使上述第2設定步驟所設定之上述 第2縮小圖像區域隨著離開上述縮小圖像之基準點而大幅 ’欠形,延伸步驟,其係將於上述變形步驟變形後之上述第 2縮小圖像區域之圖像資料,内插構成該圖像資料之各像 素間之像素值而延伸成上述第2圖像區域;及合成步驟, 其係將構成於上述延伸步驟延伸後之上述第2圖像區域之 圖像資料與構成上述第1圖像區域之上述原圖像之圖像資 料合成,而輸出隨著離開上述原圖像之基準點而大幅變形 之圖像之圖像資料。 本發明係對原圖像設定由第丨圖像區域與第2圖像區域所 構成之2個圖像區域,僅對對應於第2圖像區域之第2縮小 圖像區域施以變形處理而延伸成第2圖像區域,將延伸後 之第2圖像區域之圖像資料與構成第丨圖像區域之原圖像之 圖像資料合成,而輸出隨著離開原圖像之基準點而大幅變 形之圖像之圖像資料。 如此,本發明由於對於變形處理之變化較小之第1圖像 區域不施行變形處理,故可減少使原圖像變形所需之處理 量。又,本發明可一面將第1圖像區域之解像度保持與原 圖像同樣之解像度,一面輸出僅對第2圖像區域施以變形 121752.doc -10 - 200830219 處理之圖像之資料。 本發明之另外其他之技術課題、由本發明所獲得之具體 傖點由以下參照圖式所說明之實施型態當可更進一步瞭 解。 【實施方式】 以下 面參照圖式,一面說明實施本發明之最佳型 態。 數位攝像機ι〇0如圖1所示,係由光學透鏡no、攝像元 件120、A/D變換部13〇、信號處理部丨4〇、緩衝記憶體 150、記錄媒體160、顯示部17〇、運算處理部18()、及輸入 部190所構成。 光學透鏡110係經由未圖示之開口部使來自被照體之光 匯聚於攝像元件120。 攝像元件120係接受光學透鏡no所匯聚之光而將其變換 成電氣信號。而,攝像元件120係將變換後之電氣信號供 應至A/D變換部no。又,攝像元件12〇既可採用ccd構 造’也可採用C-MOS構造,並不限定於採用哪種構造。 A/D變換部130係將攝像元件12〇所供應之電氣信號由類 比型式變換成數位型式而供應至信號處理部14〇。 信號處理部140係對A/D變換部130所供應之數位型式之 電氣信號施以特定之信號處理而變換成圖像資料。具體 上’信號處理部140係對數位型式之電氣信號施以白平 衡、7補正、亮度色差變換等之信號處理而變換成圖像資 料。信號處理部140係將信號處理所變換之圖像資料供應 121752.doc 200830219 至緩衝記憶體150。 緩衝圯憶體150係一時地記憶信號處理部14〇所供應之圖 像 > 料,將所記憶之圖像資料供應至記錄媒體丨6Q、顯示 部170、及運算處理部180。 5己錄媒體160係3己錄緩衝記憶體15〇所供應之圖像資料。 ’ · 又,記錄媒體160也施行將所記錄之圖像資料讀出至緩衝 記憶體150之處理。 顯示部170係顯示記錄緩衝記憶體15〇所供應之圖像資 f 料。又’顯示部170除了顯示數位攝像機ι〇〇所攝像之圖像 資料以外,操作數位攝像機1〇〇用之GUI (Graphic User Interface :圖解用戶介面)畫面之顯示。 運算處理部1 80係控制數位攝像機1 〇〇所具備之各處理部 之動作。具體上,運算處理部18〇係控制包含被照體之攝 像、圖像資料之記錄、及圖像資料之顯示等數位攝像機 100全體之動作。 輸入部190係被使用作為可供用戶對數位攝像機1〇〇施行 操作輸入之用戶介面。例如,輸入部190係接受用戶之操 作而依照顯示於顯示部l7〇2GUI畫面,將對應於此操作輸 入之動作命令供應至運算處理部180。 ,又’數位攝像機100之運算處理部180係施行對攝像被照 體之圖像資料賦予特定之圖像效果之處理。施行此種處理 之情形’運算處理部180係由記錄媒體16〇將處理對象之圖 像資料讀出至緩衝記憶體150。而,運算處理部180係對被 項出至緩衝記憶體1 5 0之圖像資料施行賦予特定之圖像效 121752.doc -12- 200830219 果之處理。其後,運算處理部180係完成對圖像資料之處 理時,冑處理完畢之圖I資料經由緩衝記憶體15〇供應至 記錄媒體160及顯示部17〇。如此,數位攝像機ι〇〇除了圖 像資料之記錄處理及圖像資料之顯示處理以外,也施行對 • 圖像資料賦予特定之圖像效果之圖像處理。又,在數位攝 • 像機100中,不僅記憶於記錄媒體160之圖像資料,也可在 , 剛攝像後對記憶於緩衝記憶體150之圖像資料,在施行對 記錄媒體⑽之記憶處理之前,由運算處理部18G賦予特定 ( 之圖像效果。 在本實施型態中,在上述數位攝像機1〇〇所執行之圖像 處理中,著眼於記錄於記錄媒體16〇之圖像資料,如以下 所述,說明對所攝像之攝像圖像賦予隨著遠離設定於其畫 面内之基準點而使被照體大幅變形之特殊效果。 圖2表示賦予此種特殊效果之1#J。具體上,說明有關對 所示之處理對象之圖像(以下稱為原圖像),說明有關 〇 丨著6離如圖2Β所示之基準點Α而變形成放射狀流動之圖 像效果(以下稱為變焦變形效果)之處理。 在數㈣像機100中,A對原圖像賦予±述之特殊效 果,運算處理部180具備有如下之處理部。如圖3所示,運 算處理部18〇具備有圖像區域設定部181、縮小處理部 182特殊效果處理部丨83、及圖像大小變換部丨。 圖像區域設定部181如圖4A所示,對原圖像P1,以其晝 、内之基準點A為中心’設定半徑r之圓内作為第i圖像區 或除了此第1圖像區域以外之晝面内之區域作為第2圖像 121752.doc -13 - 200830219 區域。在此,基準點A係原圖像?1在畫面内之任意位置, 例如,係對顯示於顯示部17〇之原圖像卩丨,用戶操作輸入 部19 0所设定之點。同樣地,半徑r也可由用戶任意設定其 大小。又,基準點A及半徑R如上所述,並不限定於被用 戶之輸入操作所設定之情形,例如,也可分別固定基準點 A及半徑R。而,圖像區域設定部181係將原圖像ρι之圖像 資料與有關圖像區域之資訊分別供應至縮小處理部182及 圖像大小變換部184。 縮小處理部1 82係將圖像區域設定部丨8丨所供應之原圖像 P1之圖像資料,均等地細化構成其圖像資料之像素之像素 值而變換成如圖4B所示之縮小圖像P2。其後,縮小處理部 182將縮小圖像P2之圖像資料供應至特殊效果處理部丨83。 在此,圖4B所示之基準點A,係使原圖像"之基準點a變成 縮小圖像P2之畫面上之對應點。同樣地,如圖扣所示之半
出基準點A·及半徑。
變換部184。
特殊效果處理部183係在圖5A所示 行之處理之圖。 之縮小圖像P2中,將 121752.doc -14- 200830219 第2縮小圖像區域變換成以如圖5Β所示之4種相異之放大率 αΐ、α2、α3、α4 (α1<α2<α3<α4)分別放大之放大圖像?2_ 1,Ρ2-2, Ρ2-3, Ρ2-4。在此,縮小圖像Ρ2之由畫面内被變址 之範圍係在放大圖像Ρ2-1,Ρ2-2, Ρ2-3, Ρ2-4中,被圖示之 虛線部份所包圍之範圍。又,在本實施型態中,為模式地 顯示放大處理之效果,權宜地顯示虛線部份所包圍之範圍 外0 Γ' ϋ 特殊效果處理部183係疊合放大圖像ρ2_ι,ρ2-2,Ρ2-3 Ρ2-4而如圖5C所示,變換成隨著遠離基準點Α,而放射狀流 動之細小圖像Ρ 3。 又,在特殊效果處理部1 83 _,對縮小圖像Ρ2疊合之放 大圖像之數並不限定於上述4種圖像,可依照希望之變焦 變形效果任意選擇疊合之放大圖像之數。 以上,揭示有關利用畫面單位之特殊效果處理部US之 處理内容,作為具體執行此種處理内容之處理,兹著眼於 畫面單位執行之處理内容而加以說明之。 特殊效果處理部183係分別算出對應於原圖像ρι之基準 點A及半徑R之縮小圖像?2之基準點A’及半徑特殊縣 處理部183為了由縮小圖像P2之圖像資料分成對應於第】圖 像區域之料輯區域(以下稱為第_小圖耗域)、盘對 應於第2圖像區域之縮小圖像區域(以下稱為第2縮小圖 區域),對構成縮小圖像P2之各像素施行如下所示 處理。特殊效果處理部183對構成縮小圖像以 判斷其晝面内之位置是否為以基準點A,為中心之半㈣ 121752.doc -15- 200830219 形成之圓之區域内(圖5所示之久始, V 口尸/T不之各縮小圖像中袼子花紋所示 之圖像區域)。在此判斷處理中,特殊效果處理部183係在 位於此圓内時,判斷判斷對象之像素為構成第1縮小圖像 區域之像素,X ’在位於此圓外時,判斷為構成第2縮小 . 圖像區域之像素。 特殊效果處理部183係將判斷為位於第1縮小圖像區域之 • 像素之亮度值設定為又,特殊效果處理部183係由判斷 、 為位於第2縮小圖像區域之像素之亮度值q (χ〇, γ〇),算出 構成縮小圖像P3之像素之像素值q (X,Y)。在此,(X0, Y0) 係表示縮小圖像Ρ2之被判斷為位於第2縮小圖像區域之處 理對象圖像之座標。又,(X,Υ)係表示縮小圖像Ρ3之座 標。以下揭示有關具體的處理内容。 首先,特殊效果處理部183利用以下之(1)式所示之函數 F ’分別輸入座標(Χ0,Υ0)、基準點Α,之座標(Xc,Yc)、放 大率ocl、及旋轉角度㊀,而輸出表示放大處理後之縮小圖 像P2之位置之座標(XI,γι)。 〇 (XI,Y1)=F (X0, Y0, XC,YC,αΐ,Θ) …⑴式 又,放大處理後之座標(XI,Υ1)之各成分分別由以下所示 之(2)式及(3)式提供:
Xl=Xc + (l/al)x{(XO-Xc)xcos6-(YO-Yc)xsin0}…(2)式
Yl=Yc + (l/al)x{(XO-Xc)xsin0-(YO-Yc)xcos0}…(3)式 在此,在賦予變焦變形效果之特殊效果處理中,由於係 以基準點為中心而使圖像變形成流向放射方向,故僅施行 放大處理。故特殊效果處理部1 83為了賦予變焦變形效 121752.doc -16- 200830219 果’將旋轉角度Θ值一直設定為0 [rad]。又,特殊效果處 理部183可藉由將旋轉角度Θ值設定為適當值,而對原圖像 賦予隨著遠離基準點而螺旋狀流動般之效果(以下稱為旋 風變形效果)。 特殊效果處理部183係對座標(XO, Y0),設定包含上述放 大率α 1在内合計4種放大率αΐ, α2, α3, α4 (α1<<α2<α3<α4)而利用上述函數F分別施以放大處理,算 出表示放大處理後之縮小圖像P2之位置之座標(X1,Y1), (Χ2, Υ2),(Χ3, Υ3),(Χ4, Υ4)。 特殊效果處理部183參照對應於算出之座標(Xi,Υ1), (Χ2,Υ2),(Χ3,Υ3),(Χ4,Υ4)之縮小圖像Ρ2之像素。在 此’特殊效果處理部183係參照對此等座標位於最附近之 縮小圖像Ρ2之像素。特殊效果處理部1 83分別讀出所參照 之像素之像素值而將此等像素之像素值設定為q (χι,γι), q (X2,Y2),q (Χ3, Υ3),q (Χ4, Υ4)。在此,在參照上述最 附近之位置之方法中,處理量雖少於其他之代替方法,但 解像度劣化程度較大。然而,在充分遠離基準點之圖像區 域’施以變焦變形效果枝結果,其圖像區域之解像度會大 幅降低。故特殊效果處理部183如上所述,在參照上述最 附近之位置時,不考慮晝質之劣化,與其他之代替方法相 比,可降低運算量。 接著,特殊效果處理部1 83利用以下所示之(4)式算出縮 小圖像Ρ3之像素之像素值q (X,γ)。 q (X,Y)={q (XO, YO)+q (XI,Yl)+q (X2, Y2)+q (X3, Y3)+q 121752.doc -17- 200830219 (X4? Y4)}/5 特殊效果處理部183對判斷為第2縮小圖像區域之所有像 素轭订(1)式至(4)式所示之處理,對圖像大小變換部供 應將構成第1縮小圖像區域之像素之亮度值設定為〇之第工 縮小圖像區域與施以變焦變形效果之第2縮小圖像區域所 構成之縮小圖像P3之縮小圖像資料。 如以上所述,在特殊效果處理部183中,縮小圖像p2
中,對第1縮小圖像區域不施以如圖5所示之變焦變形效 果。此係由於即使對第丨縮小圖像區域施以賦予變焦變形 效果之圖像處理,如以下所示,對處理前之圖像之變化也 小於第2縮小圖像區域之故。 由構成第1縮小圖像區域之各像素至基準點之距離短於 由構成第2縮小圖像區域之各像素至基準點之距離。因 此,擴大處理前後之座標位置之變化,第丨縮小圖像區域 小於第2縮小圖像區域。因此,即使比較賦予變焦變形效 果之處理卩前之像素值與(4)式所算出 < 料值之間之變 化,第1縮小圖像區域也小於第2縮小圖像區域。 特殊效果處理部183中,不施行變焦變形效果較小之第i 縮小圖像區域之處理’故與對構成縮小圖像之全部像素施 =賦予變焦變形效果之處理之情形相比,可減少運算處理 量。因此,特殊效果處理部丨83與以往相比,可減少使原 圖像變形所需之處理量。 係由特殊效果處理部 ,僅對第2縮小圖像區 圖像大小變換部184如圖6A所示, 1 83所供應之縮小圖像p3之圖像資料 121752.doc -18- 200830219 域施行後述之雙線性内插處理而將縮小圖像^延伸至原圖 象矛又之大i圖像大小變換部i 84係合成被雙線性内插 施行延伸處理之相當於第2圖像區域之圖像資料、與圖像 區域設定部181所供應之原圖像之圖像資料中構成第i圖像 區域(圖中格子花紋所示之圖像區域)之圖像資料,而變換 成如圖6B所示之原圖像大小之特殊效果圖像p4。 . "像大小變換部184係在特殊效果處理部183所供應 之縮小圖像P3中,利用僅篦?給 π 扪用僅弟2縮小圖像區域之像素施行内 插’至於其他之區域,則使用原圖像P1之圖像資料。因 此’圖像大小變換部184係施行下列所示之判斷處理。 圖像大小變換部184首先在特殊效果圖像附,算出對 應於成為内插對象之各像辛f 標之縮小圖像。3之座標=下:二内插對象像素)之座 曰T 人圖像大小變換部184判斷 疋否使用位於所算出之縮小圖 素作為參照像素。 之座…圍之4個像 υ二中如Γ所示’圖像大小變換部184判斷此等4個 7Α;,Γ— 個以上之亮度值是否為〇。在此,在圖 S7A中^參照像素為亮度值為〇以外之像素,在 判斷處理2之參照像素係亮度值為0之像素。藉由此 …上之值=部184係在參照像素Μ 該像:置 ==插對象像素之像素值設定為對應於 部⑻係對m 像f料值。又,圖像大小變換 係對應於判斷亮度值全部非為0之參照像素 121752.doc -19- 200830219 縮小圖像P3之像素之像素值,藉雙線性内插算出圖7a之斜 線所示之區域外之内插對象像素。圖像大小變換部184係 比縮小圖像P3之圖像資料更優先利用原圖像ρι之圖像資 料,設定構成特殊效果圖像P4之像素之像素值。因此,圖 • 像大小變換部184可在第1圖像區域與第2圖像區域之境界 . 附近之像素之亮度值成為〇之情況下,施行上述之合成處 . 理。 其次,參照圖78詳細說明有關圖像大小變換部184執行 之雙線性内插處理之處理内容。 圖像大小變換部184如圖7B所示,由位於周圍之4個參照 像素内插内插對象像素z。此等4個像素係對内插對象像素 z將位於左斜上方、左斜下方、右斜上方、右斜下方之像 素分別設定為a,b,c,d。 又,作為連結内插對象像素2之垂直延長線上、與連結 像素a,b之水平線相交之位置之像素zl,將像素&至像素η il 之距離與像素zl與像素b之距離之比設定為x ·· (1_χ)(0^χ ^ 1)。同樣地,作為連結内插對象像素Z之垂直延長線 上、與連結像素c5 d之水平線相交之位置之像素22時,將 像素C至像素Z2之距離與像素z2與像素d之距離之比設定為 X · (1-X)。另外,將像素21與像素z之距離與像素Z至像素 z2之距離之比設定為y ·· (1_力⑽工)。 圖像大小變換部184中,首先,由以下之⑺式算出像素 之像素值p (zl) ’由(6)式算出像素值p (a)。又,像素& 121752.doc -20- 200830219 …(5)式 …(6)式 利用(5)式及(6)式之算出 z之像素值p(z)。 …⑺式 結 p (zl)=(l-x)xp (a)+xxp (b) p (ζ2) = (1-χ)χρ (c) + xxp (d) 而,圖像大小變換部184係 果,由(7)式算出内插對象像素 P (z)=(l-y)xp (zl)+y+p (z2) 施=:處變理換部_構成特殊效果,之所有像素
利用如以上所不之方式,圖像大小變換部丨84係合成被 雙線性内插施行延伸處理之相當於第2圖像區域之圖像資 料、與圖像區域設定部181所供應之原圖像之圖像資料中 構成第1圖像區域之圖像資料,I變換成原圖像大小之特 殊效果圖像P4,供應至記錄媒體16〇及顯示部17〇。 其次,參照圖8所示之流程圖,說明有關上述運算處理 部180具有之各處理部中特殊效果處理部183及圖像大小變 換部184之處理步驟。又,本處理步驟係由運算處理部18〇 依照圖像處理程式控制各處理部所執行。 首先,作為本處理步驟之前提,圖像區域設定部丨8丨對 原圖像P1之圖像資料,設定以基準點A為中心之半徑R之 圓内之第1圖像區域、與此圓外之第2圖像區域。又,縮小 處理部182係將原圖像P1之圖像資料變換成縮小圖像?2之 圖像資料,將此縮小圖像P2之圖像資料供應至特殊效果處 理部1 83,而開始以下所示之處理步驟。 在步驟S 11,特殊效果處理部1 83係分別算出對應於原圖 像P1之基準點A及半徑r之縮小圖像P2之基準點a,及半徑 121752.doc -21 - 200830219 R,。 在步驟S12,特殊效果處理部i83係由縮小處理部182所 供應之縮小圖像P2之圖像資料設定位於其畫面内之左上端 之像素作為處理對象像素。 • 在步驟S13,特殊效果處理部183判斷處理對象像素之位 ' 置是否在以基準點A,為中心之半徑R,所形成之圓内。具體 - 上,特殊效果處理部丨83係利用處理對象像素之座標位置 與基準點A,之座標位置之距離之平方值是否在半徑R之平 方值以上加以判斷。在此,特殊效果處理部183係在判斷 此距離之平方值在半徑R之平方值以上時進入步驟S14,在 判斷此距離之平方值不足半徑R之平方值時進入步驟M3。 在步驟S14,特殊效果處理部183將現在之處理對象像素 之壳度值設定為〇。其後,特殊效果處理部183進入步驟 S16 〇 在步驟S15,特殊效果處理部183對現在之處理對象像 〇 * ’施订賦予⑴至⑷式所示之變焦變形效果而算出構成 ^ 縮小圖像P3之像辛之禮妾Μ ^ ^ ’、象素值。其後,特殊效果處理部183 進入步驟S 16。 付沐效果處理部丨83判斷現在 ,,一 ^ 1豕 素之位置是否在書面内 一円之右下编。特殊效果處理部183判 斷現在之處理對象像音> 丁豕像素之位置在晝面内之右下端時,進入 步驟S 1 7。特殊效果處理部 个心王口P i 83判斷現在之處理對象 位置非在晝面内之六下_ * 、 時,使其次之處理對象像素之位 置向直面㈣方向移動!像素份而返回步驟川。 121752.doc -22- 200830219 步驟S16結束時,本處理步驟由特殊效果處理部ι83執行 之處理轉移至圖像大小變換部184執行之處理。 在步驟S17,圖像大小變換部184將内插對象像素之位置 设定於原圖像大小之晝面上之左上端部。 在步驟S18,圖像大小變換部184係在對應於現在之内插 對象像素之4個參照像素中,判斷亮度值為〇之像素是否有 1個以上。圖像大小變換部184判斷亮度值為〇之像素有^固 以上時,進入步驟S19。圖像大小變換部184係在此等參照 像素中’判斷無亮度值為〇之像素時,進入步驟S20。 在步驟S19,圖像大小變換部184將内插對象像素之像素 值設定為對應於該内插對象像素之之原圖像ρι之像素之像 素值。其後,圖像大小變換部i 84進入步驟S2 1。 在步驟S20,圖像大小變換部184利用對應於内插對象像 素之内插對象畫參照像素之像素值,將此上述施行雙線性 内插處理。其後,圖像大小變換部1 84進入步驟S21。 在步驟S21,圖像大小變換部184判斷現在之處理對象像 素之位置是否位於畫面内之右下端部。圖像大小變換部 1 84判斷現在之處理對象區塊位於晝面内之右下端部時, 結束本處理步驟。圖像大小變換部1 84判斷現在之内插對 象像素非位於晝面内之右下端部時,使其次之處理對象像 素之位置向掃描晝面之方向移動1像素份而返回步驟S18。 如以上所述,運算處理部18〇係依照圖像處理程式,僅 對對應於第2圖像區域之第2縮小圖像區域施以變形處理而 延伸成第2圖像區域,合成延伸後之第2圖像區域之圖像資 121752.doc -23- 200830219 料、與構成第1圖像區域之原圖像之圖像資料而輸出隨著 遠離原圖像之基準點而大幅變形之圖像之圖像資料。 故運异處理部180可一面將特殊效果圖像P4之第1圖像區 域之解像度保持與原圖像P1同樣之解像度,一面輸出僅對 特殊效果圖像P4之第2圖像區域賦予變焦變形效果。 又,在本實施型態中,作為特殊效果之一例,著眼於對 原圖像賦予變焦變形效果之處理而加以說明,但不限定於 此,也可包含對原圖像賦予以基準點為中心隨著遠離此基 準點而呈螺旋狀流動之效果之特殊效果在内,對原圖像賦 予以基準點為中心而變化之特殊效果。 如以上所述,運算處理部18〇對變化少於第2圖像區域之 第1圖像區域,不施行特殊效果。因此,運算處理部丨可 面自然地使原圖像全體變形,一面減少全體之運算處理 量。另外,在具備此種運算處理部180之數位攝像機100 中,可藉此種運算處理量之減少而在電持區動之際延長動 作時間。 又,本發明並不僅限定於以上之實施型態,在不脫離本 發明之要旨之範圍内,當然可施行種種之變更。 【圖式簡單說明】 圖1係表示數位攝像機之構成之區塊圖。 圖2A係表示原圖像之圖,圖2B係表示對原圖像?1職予 變焦變形效果之圖像之圖。 圖3係為表示施行變焦變形效果而具備有運算處理部之 處理部之構成之區塊圖。 121752.doc -24- 200830219 圖4A係表示原圖像P1之圖,圖4B係表 、 丁對原圖像P1施 以細化處理而縮小之縮小圖像P2之圖。 圖5A係表示縮小圖像!>2之圖,圖5β係表示對縮小圖像 P2施以放大處理之放大圖像pn p2_2,p2_3,Μ]之圖, 圖5C係表示在縮小圖像P2疊合放大圖像p24,p2_2, P2-4之縮小圖像P3之圖。 圖6 A係表不縮小圖像p3之圖,圖6B係表示對縮小圖像 施以延伸處理之特殊效果圖像P4之圖。 圖7A係模式地表示判斷是否施行雙線性内插處理之判斷 處理之圖,圖7B係模式地表示雙線性内插處理之圖。 圖8係表示在運算處理部中,對原圖像pi賦予變焦變形 效果之處理步驟之流程圖。 【主要元件符號說明】 100 數位攝像機 110 光學透鏡 120 攝像元件 130 A/D變換部 140 信號處理部 150 缓衝記憶體 160 記錄媒體 170 顯示部 180 運算處理部 181 圖像區域設定部 182 縮小處理部 121752.doc -25- 200830219 183
184 190 PI Λ P2, P3 ’ A,A丨 R,R* e 特殊效果處理部 圖像大小變換部 及輸入部 原圖像 縮小圖像 基準點 半徑 -26- 121752.doc

Claims (1)

  1. 200830219 十、申請專利範圍·· 1 · 一種圖像處理裝置,其包含: 第1設定機構’其係對原圖像設定含有在其畫面内任 意選擇之基準點之第1圖像區域與除此第1圖像區域以外 之晝面内之第2圖像區域; 縮小機構’其係對上述原圖像細化其圖像資料之像素 而將其縮小; 第2設定機構,其係對由上述縮小機構縮小後之縮小
    Ο 圖像设定對應於上述原圖像之基準點之縮小圖像之基準 點、對應於上述第1圖像區域之第丨縮小圖像區域及對應 於上述第2圖像區域之第2縮小圖像區域; k形機構’其係在由上述縮小機構縮小後之縮小圖像 中,使由上述第2設定機構所設定之上述第2縮小圖像區 域之圖像隨著離開上述縮小圖像之基準點而大幅變形; 延伸機構,其係將圖像被上述變形機構變形後之上述 第2縮小圖像區域之圖像資料,内插構成該圖像資料之 各^素間之像素值而延伸成上述第2圖像區域;及 、口成機構,其係將由上述延伸機構延伸成第2圖像區 域後之圖像資料與構成上述第1圖像區域之上述原圖像 圖像貝料口成,而輸出隨著離開上述原圖像之基準點 而大幅變形之圖像之圖像資料。 2·:請求項^之圖像處理裝置,其中上述變形機構係疊合 成$第2縮小圖像區域之上述縮小圖像之圖像資料 ’、對此第2縮小圖像區域之圖像施以放大、或放大及旋 121752.doc 200830219 轉中任一方之處理後之圖像資料,而使上述第2縮小圖 像區域變形。 3 · 一種圖像處理方法,其係對原圖像設定含有在其畫面内 任意選擇之基準點之第1圖像區域與除此第1圖像區域以 外之第2圖像區域; 對上述原圖像’細化其圖像資料之像素而將其縮小; 對上述縮小後之縮小圖像設定對應於上述原圖像之基 準點之縮小圖像之基準點、對應於上述第丨圖像區域之 第1縮小圖像區域及對應於上述第2圖像區域之第2縮小 圖像區域; 在上述縮小後之縮小圖像中,使上述設定之第2縮小 圖像區域之圖像隨著離開上述縮小圖像之基準點而大幅 變形; 將上述變形後之上述第2縮小圖像區域之圖像資料, 内插構成該圖像資料之各像素間之像素值而延伸成上述 弟2圖像區域; 將構成上述延伸後之上述第2圖像區域之圖像資料與 構成上述第1圖像區域之上述原圖像之圖像資料合成, 而輸出隨著離開上述原圖像之基準點而大幅變形之圖像 之圖像資料。 4. 一種程式,其係使電腦執行包含下列各步驟之圖像處 理: 第1設定步驟’其係對原圖像設定含有在其畫面内任 思選擇之基準點之第i圖像區域與除此第丨圖像區域以外 121752.doc 200830219 之第2圖像區域; 縮小步驟’其係對上述原圖像,細化其圖像資料之像 素而將其縮小; 第2設定步驟,其係對於上述縮小步驟縮小後之縮小 圖像設定對應於上述原圖像之基準點之縮小圖像之基準 點、對應於上述第1圖像區域之第丨縮小圖像區域及對應 於上述第2圖像區域之第2縮小圖像區域; 變形步驟,其係在於上述縮小步驟縮小後之縮小圖像 中,使上述第2設定步驟所設定之第2縮小圖像區域之圖 像Ik著離開上述縮小圖像之基準點而大幅變形; 延伸步驟,其係將於上述變形步驟變形後之上述第2 縮小圖像區域之圖像資料,内插構成該圖像資料之各像 素間之像素值而延伸成上述第2圖像區域;及 合成步驟,其係將構成於上述延伸步驟延伸後之第2 圖像區域之圖像資料與構成上述第丨圖像區域之上述原 圖像之圖像資料合成,而輸出隨著離開上述原圖像之基 準點而大幅變形之圖像之圖像資料。 121752.doc
TW096130769A 2006-09-13 2007-08-20 Image processor, image processing method, and program TW200830219A (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006248617A JP4063306B1 (ja) 2006-09-13 2006-09-13 画像処理装置、画像処理方法、及びプログラム

Publications (2)

Publication Number Publication Date
TW200830219A true TW200830219A (en) 2008-07-16
TWI344115B TWI344115B (zh) 2011-06-21

Family

ID=39183609

Family Applications (1)

Application Number Title Priority Date Filing Date
TW096130769A TW200830219A (en) 2006-09-13 2007-08-20 Image processor, image processing method, and program

Country Status (10)

Country Link
US (1) US8094213B2 (zh)
EP (1) EP2063388A4 (zh)
JP (1) JP4063306B1 (zh)
KR (1) KR20090050080A (zh)
CN (1) CN101490708B (zh)
BR (1) BRPI0716393A2 (zh)
MY (1) MY148206A (zh)
RU (1) RU2432614C2 (zh)
TW (1) TW200830219A (zh)
WO (1) WO2008032545A1 (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4063306B1 (ja) * 2006-09-13 2008-03-19 ソニー株式会社 画像処理装置、画像処理方法、及びプログラム
JP5417920B2 (ja) * 2009-03-19 2014-02-19 株式会社ニコン 画像処理装置、画像処理方法、電子カメラおよび画像処理プログラム
JP5827466B2 (ja) * 2010-11-08 2015-12-02 オリンパス株式会社 撮像装置、撮像方法、およびプログラム
EP2800382B1 (en) * 2011-12-27 2016-06-29 Fujifilm Corporation Imaging device, method for controlling imaging device, and control program
CN104041021B (zh) 2011-12-28 2017-05-17 富士胶片株式会社 图像处理装置及方法以及摄像装置
CN103679632A (zh) * 2012-09-18 2014-03-26 英业达科技有限公司 以不同缩放比例缩放影像中不同区域的系统及方法
JP5667135B2 (ja) * 2012-09-24 2015-02-12 京セラドキュメントソリューションズ株式会社 画像形成装置
JP5962403B2 (ja) * 2012-10-01 2016-08-03 ソニー株式会社 情報処理装置、表示制御方法及びプログラム
CN110505435B (zh) * 2018-05-16 2021-01-29 京鹰科技股份有限公司 图像传输方法及其系统与图像传送端装置
CN112634124B (zh) * 2020-12-10 2024-04-12 深兰工业智能创新研究院(宁波)有限公司 图像变形方法、图像变形装置、电子设备和存储介质

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5125041A (en) * 1985-08-05 1992-06-23 Canon Kabushiki Kaisha Still image processing method for blurring an image background and producing a visual flowing effect
JPH07113961B2 (ja) 1985-08-05 1995-12-06 キヤノン株式会社 信号処理装置
JP2006248617A (ja) 1991-01-14 2006-09-21 Dainippon Printing Co Ltd 包装材料の殺菌方法
JPH07113961A (ja) 1993-10-14 1995-05-02 Tokyo Sukoopu:Kk 焦点.可変スコープ用赤色光交点
JPH08147493A (ja) * 1994-11-15 1996-06-07 Matsushita Electric Ind Co Ltd アニメーション画像生成方法
US6925210B2 (en) * 2001-07-09 2005-08-02 Michael Herf Method for blurring images in real-time
WO2004044843A2 (en) * 2002-11-06 2004-05-27 Digivision, Inc. Systems and methods for image enhancement in multiple dimensions
US7636489B2 (en) * 2004-04-16 2009-12-22 Apple Inc. Blur computation algorithm
JP4063306B1 (ja) * 2006-09-13 2008-03-19 ソニー株式会社 画像処理装置、画像処理方法、及びプログラム

Also Published As

Publication number Publication date
JP4063306B1 (ja) 2008-03-19
JP2008072390A (ja) 2008-03-27
MY148206A (en) 2013-03-15
TWI344115B (zh) 2011-06-21
RU2009109064A (ru) 2010-09-20
EP2063388A4 (en) 2011-10-05
RU2432614C2 (ru) 2011-10-27
BRPI0716393A2 (pt) 2013-10-15
US20100157101A1 (en) 2010-06-24
KR20090050080A (ko) 2009-05-19
CN101490708B (zh) 2012-06-06
CN101490708A (zh) 2009-07-22
US8094213B2 (en) 2012-01-10
EP2063388A1 (en) 2009-05-27
WO2008032545A1 (fr) 2008-03-20

Similar Documents

Publication Publication Date Title
TW200830219A (en) Image processor, image processing method, and program
JP2008123086A (ja) 画像処理装置及び画像処理方法
JP5451782B2 (ja) 画像処理装置および画像処理方法
JP5299488B2 (ja) 画像処理装置、画像処理方法及びプログラム
JP5434361B2 (ja) 画像処理装置及び画像処理方法
US20120050309A1 (en) Display control apparatus and display control method
JP2010268441A (ja) 画像処理装置、撮像装置及び画像再生装置
JP2009212899A (ja) 撮像装置
JP2011076274A (ja) 画像処理装置、画像処理方法及びプログラム
JP2010050502A (ja) 画像処理装置、画像処理方法および画像処理プログラム
JP4652210B2 (ja) 画像データ出力制御装置
JP2017011504A (ja) 撮像装置、画像処理方法及びプログラム
JP2024079753A (ja) 撮像素子、撮像素子の画像データ処理方法、及びプログラム
JP2008245093A (ja) デジタルカメラ、デジタルカメラの制御方法及び制御プログラム
JP2017143354A (ja) 画像処理装置及び画像処理方法
JP2008124830A (ja) 撮像装置
JP2010263269A (ja) 撮像装置
JP2010097449A (ja) 画像合成装置、及び画像合成方法、画像合成プログラム
JP2005202263A (ja) 撮像装置
JP5705027B2 (ja) 画像処理装置、画像処理装置の制御方法、およびプログラム、並びに記録媒体
JP2004072297A (ja) 撮像装置
JP2010251882A (ja) 撮像装置及び画像再生装置
JP5836109B2 (ja) 画像処理装置、それを備えた撮像装置、画像処理方法、及び画像処理プログラム
JP2017163261A (ja) 画像表示装置及び画像表示方法
JP2021189788A (ja) 画像処理装置、撮像装置、制御方法及びプログラム

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees