JP5848186B2 - 撮影装置、撮影方法およびプログラム - Google Patents

撮影装置、撮影方法およびプログラム Download PDF

Info

Publication number
JP5848186B2
JP5848186B2 JP2012096460A JP2012096460A JP5848186B2 JP 5848186 B2 JP5848186 B2 JP 5848186B2 JP 2012096460 A JP2012096460 A JP 2012096460A JP 2012096460 A JP2012096460 A JP 2012096460A JP 5848186 B2 JP5848186 B2 JP 5848186B2
Authority
JP
Japan
Prior art keywords
component
extracted
frequency
unit
frequency component
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2012096460A
Other languages
English (en)
Other versions
JP2013225193A (ja
Inventor
増田 健
健 増田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2012096460A priority Critical patent/JP5848186B2/ja
Priority to PCT/JP2013/061377 priority patent/WO2013157570A1/ja
Publication of JP2013225193A publication Critical patent/JP2013225193A/ja
Priority to IN8766DEN2014 priority patent/IN2014DN08766A/en
Priority to US14/518,417 priority patent/US9154691B2/en
Application granted granted Critical
Publication of JP5848186B2 publication Critical patent/JP5848186B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2621Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability
    • G06T5/70
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00249Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a photographic apparatus, e.g. a photographic printer or a projector
    • H04N1/00251Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a photographic apparatus, e.g. a photographic printer or a projector with an apparatus for taking photographic images, e.g. a camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20172Image enhancement details
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof

Description

本発明は、新たに撮影された写真の一部が過去に撮影された写真の一部に置換された写真を作成する撮影装置、撮影方法およびプログラムに関するものである。
近年、デジタルカメラや、カメラ機能を有する携帯電話やスマートフォン等の携帯端末の普及に伴って、写真を手軽に撮影することができる。例えば、自分自身ないし自分自身を含む友人にカメラを向けて写真の撮影を行う、いわゆる自分撮り(自撮り)を行って、数年にわたって自分自身の顔写真を撮影すると、年齢を重ねるに従って肌が衰え、小じわ、弛み、浮腫みなどが増えて若干顔つきが変わってくる。
これを改善するために、従来の撮影装置には、撮影された写真に美肌処理(特許文献1参照)やスムージング処理(特許文献2参照)を施して、肌の衰えを隠したり、しわを薄くする画像補正処理を行うものがある。その一方で、シールに印刷された写真を作成するプリントシール機などに代表されるように、年齢に関係なく、目を極端に大きく変形したり、ラメを入れるなどのデコレーション処理を行うものなどもある。
写真の被写体の人物には、上記のように、肌の衰えを隠したり、しわを薄くして、撮影された自分の顔写真を若々しく見せたいという願望があり、撮影装置には、このような被写体人物の願望を満足させる機能を搭載することが求められている。
特開2010−244239号公報 特開2004−246456号公報
本発明の目的は、前記従来技術の問題点を解消し、被写体が実際より若かりし頃に写る写真を撮影することができる撮影装置、撮影方法およびプログラムを提供することにある。
上記目的を達成するために、本発明は、写真を撮影して画像データを取得する写真撮影部と、
写真撮影部により過去に撮影された1枚以上の写真の所定の周波数成分が蓄積されたデータベースと、
写真撮影部により新たに撮影された写真の画像データから所定の周波数成分を抽出する周波数成分抽出部と、
新たに撮影された写真の周波数成分を2以上の分割領域に分割する領域分割部と、
新たに撮影された写真の各々の分割領域の周波数成分とデータベースの各々対応する分割領域の周波数成分とを照合して、それぞれの周波数成分に含まれる成分が一致する総数が最大となる最大近傍領域を求める最大近傍領域算出部と、
新たに撮影された写真の各々の分割領域の最大近傍領域外の周波数成分の中から抽出された一部の第1抽出成分を、データベースの各々対応する分割領域の最大近傍領域外の周波数成分の中から抽出された一部の第2抽出成分に、第2抽出成分の位置に対応する、新たに撮影された写真の周波数成分の位置に置換する成分置換部とを備えることを特徴とする撮影装置を提供するものである。
ここで、最大近傍領域算出部は、新たに撮影された写真の各々の分割領域の周波数成分から所定の抽出処理により抽出された第3抽出成分とデータベースの各々対応する分割領域の周波数成分から所定の抽出処理により抽出された第4抽出成分とを照合して、それぞれの抽出成分に含まれる成分が一致する総数が最大となる最大近傍領域を求めるものであることが好ましい。
また、成分置換部は、新たに撮影された写真の各々の分割領域の最大近傍領域外の周波数成分の中から所定の抽出処理により抽出された第1抽出成分を、データベースの各々対応する分割領域の最大近傍領域外の周波数成分の中から所定の抽出処理により抽出された第2抽出成分に置換するものであることが好ましい。
また、成分置換部は、新たに撮影された写真の各々の分割領域の最大近傍領域外の周波数成分の中から所定の抽出処理により抽出されたα(n−1)個(αは係数、nは撮影回数を表すn≧1の整数、n−1はデータベースに蓄積された写真の周波数成分が更新された回数)の第1抽出成分を、データベースの各々対応する分割領域の最大近傍領域外の周波数成分の中から所定の抽出処理により抽出されたα(n−1)個の第2抽出成分に置換するものであることが好ましい。
さらに、第2抽出成分を、第1抽出成分に、第1抽出成分の位置に対応する、データベースの周波数成分の位置に置換するデータベース更新部を備えることが好ましい。
また、データベース更新部は、データベースの各々の分割領域の最大近傍領域外の周波数成分の中から所定の抽出処理により抽出された第2抽出成分を、新たに撮影された写真の各々対応する分割領域の最大近傍領域外の周波数成分の中から所定の抽出処理により抽出された第1抽出成分に置換するものであることが好ましい。
また、データベース更新部は、データベースの各々の分割領域の最大近傍領域外の周波数成分の中から所定の抽出処理により抽出されたα(n−1)個(αは係数、nは撮影回数を表すn≧1の整数、n−1はデータベースに蓄積された写真の周波数成分が更新された回数)の第2抽出成分を、新たに撮影された写真の各々対応する分割領域の最大近傍領域外の周波数成分の中から所定の抽出処理により抽出されたα(n−1)個の第1抽出成分に置換するものであることが好ましい。
ここで、所定の抽出処理は、総当たり、もしくは、任意の箇所の成分と基準値との照合を行って成分を抽出するものであることが好ましい。
また、所定の抽出処理は、ランダム関数を用いて成分を抽出するものであることが好ましい。
また、周波数成分抽出部は、所定の周波数成分として、第1周波数成分および第1周波数成分よりも周波数が低い第2周波数成分を抽出するものであり、
領域分割部、最大近傍領域算出部、および、成分置換部は、第1および第2周波数成分のそれぞれについて処理を行うものであることが好ましい。
さらに、新たに撮影された写真の周波数成分に含まれる成分の数を規格化する成分規格化部を備え、
領域分割部は、規格化された周波数成分を分割領域に分割するものであることが好ましい。
また、周波数成分抽出部は、所定の周波数成分として、第1周波数成分および第1周波数成分の周波数よりも周波数が低い第2周波数成分を抽出するものであり、
領域分割部、最大近傍領域算出部、成分置換部、および、成分規格化部は、第1および第2周波数成分のそれぞれについて処理を行うものであることが好ましい。
さらに、新たに撮影された写真のフォーカス領域を検出するフォーカス領域検出部を備え、
周波数成分抽出部は、フォーカス領域内の画像データから周波数成分を抽出するものであることが好ましい。
さらに、第1抽出成分が第2抽出成分に置換された、新たに撮影された写真の周波数成分から、置換後の画像を生成する画像生成部を備えることが好ましい。
さらに、置換後の画像の画像データを保存する画像データ保存部を備えることが好ましい。
また、本発明は、写真を撮影して画像データを取得する写真撮影ステップと、
写真撮影ステップにより新たに撮影された写真の画像データから所定の周波数成分を抽出する周波数成分抽出ステップと、
新たに撮影された写真の周波数成分を2以上の分割領域に分割する領域分割ステップと、
新たに撮影された写真の各々の分割領域の周波数成分と過去に撮影された1枚以上の写真の周波数成分が蓄積されたデータベースの各々対応する分割領域の周波数成分とを照合して、それぞれの周波数成分に含まれる成分が一致する総数が最大となる最大近傍領域を求める最大近傍領域算出ステップと、
新たに撮影された写真の各々の分割領域の最大近傍領域外の周波数成分の中から抽出された一部の第1抽出成分を、データベースの各々対応する分割領域の最大近傍領域外の周波数成分の中から抽出された一部の第2抽出成分に、第2抽出成分の位置に対応する、新たに撮影された写真の周波数成分の位置に置換する成分置換ステップとを含むことを特徴とする撮影方法を提供する。
また、本発明は、上記に記載の撮影方法の各々のステップをコンピュータに実行させるためのプログラムを提供する。
また、本発明は、上記に記載の撮影方法の各々のステップをコンピュータに実行させるためのプログラムが記録されたコンピュータ読み取り可能な記録媒体を提供する。
本発明では、新たに撮影された写真の周波数成分の一部の抽出成分が、過去に撮影された写真の周波数成分の一部の抽出成分に、過去の写真の抽出成分の位置に対応する、新たな写真の位置に置換される。これにより、本発明によれば、肌が衰えて、小じわ、弛み、浮腫みなどが増加する前の状態に時間を巻き戻すことができ、被写体が実際より若かりし頃に写る写真を撮影することができる。
本発明の撮影装置の構成を表す一実施形態のブロック図である。 図1に示す撮影装置の動作を表すフローチャートである。 (A)および(B)は、新たに撮影された写真のフォーカス領域内の画像データから抽出された高周波成分および中周波成分の画像を表す概念図である。 (A)および(B)は、新たに撮影された写真のフォーカス領域内の規格化された周波数成分およびデータベースに蓄積された周波数成分が分割領域に分割された様子を表す概念図である。 (A)および(B)は、高周波成分および中周波成分それぞれの最大近傍領域を表す概念図である。 図5(A)に示す高周波成分について、新たに撮影された写真の規格化された高周波成分の第1抽出成分と、データベースの高周波成分の第2抽出成分とを置換する様子を表す概念図である。
以下に、添付の図面に示す好適実施形態に基づいて、本発明の撮影装置、撮影方法およびプログラムを詳細に説明する。
図1は、本発明の撮影装置の構成を表す一実施形態のブロック図である。同図に示す撮影装置10は、新たに撮影された写真の一部が過去に撮影された写真の一部に置換された写真を作成するものであり、写真撮影部12と、データベース14と、フォーカス領域検出部16と、周波数成分抽出部18と、成分規格化部20と、領域分割部22と、最大近傍領域算出部24と、成分置換部26と、データベース更新部28と、画像生成部30と、画像データ保存部32とによって構成されている。
写真撮影部12は、デジタルカメラ、カメラ機能を有する携帯電話やスマートフォンなどの携帯端末のように、写真を撮影してその画像データ(デジタルデータ)を取得するものである。
データベース(DB)14は、写真撮影部12により過去に撮影された1枚以上の写真の所定の周波数成分が蓄積されたものである。
本実施形態では、所定の周波数成分として、高周波成分(第1周波数成分)と、高周波成分の周波数よりも周波数が低い中周波成分(第2周波数成分)が抽出される。高周波成分の周波数は、写真撮影部12の性能により決定されるものであり、中周波成分の周波数は、例えば、高周波成分の周波数/2√2により定義されるものとする。
フォーカス領域検出部16は、写真撮影部12により新たに撮影された写真のフォーカス領域を検出するものである。
自分撮りの場合、被写体(撮影者)と写真撮影部12との距離(撮影距離)は、撮影者の腕の長さ(リーチ)であり、顔の中心部(通常、鼻の位置)にフォーカスが合わされていると考えられる。
なお、前述のように、鼻の位置にフォーカスが合わされている場合、フォーカス領域を検出することは必須ではない。
周波数成分抽出部18は、新たに撮影された写真のフォーカス領域内の画像データから所定の周波数成分、本実施形態の場合、前述のように、高周波成分および中周波成分を抽出するものである。
成分規格化部20は、新たに撮影された写真のフォーカス領域内の周波数成分に含まれる成分の数を規格化するものである。
自分撮りの場合、撮影距離が変われば、被写体の顔の大きさが変わり、撮影された写真の単位面積当たりの画素数が変化する。そのため、成分規格化部20は、単位面積当たりの周波数成分に含まれる成分の数を規格化する。
なお、自分撮りの場合で、撮影距離が変わらない場合、被写体の顔の大きさは変わらないため、周波数成分の規格化は必須ではない。
領域分割部22は、新たに撮影された写真の規格化されたフォーカス領域内の周波数成分を2以上の小領域(分割領域)に分割するものである。
各々の分割領域は矩形でなくても三角形やハニカム形状などのようにほぼ等面積の小領域に分割できればよく、必ずしも同形状・相似形状の領域でなくてもよい。
また、各々の分割領域の面積も適宜決定することができる。各々の分割領域の面積が異なる場合には、面積の差分を重み付けすることで各々の分割領域を同等に扱えるようにしてもよい。さらに、隣接する分割領域は重複部分があってもよい。
最大近傍領域算出部24は、新たに撮影された写真の各々の分割領域の周波数成分と、データベース14の各々対応する分割領域の周波数成分とを照合して、それぞれの周波数成分に含まれる成分が一致する総数が最大となる最大近傍領域を求めるものである。
最大近傍領域算出部24は、新たに撮影された写真の分割領域と1対1に対応するデータベース14の分割領域とを照合してもよいし、その周囲のデータベース14の複数の分割領域と各々照合して、最大近傍領域が最大となるものを求めてもよい。
成分置換部26は、新たに撮影された写真の各々の分割領域の最大近傍領域外の周波数成分の中から抽出された一部の抽出成分(第1抽出成分)を、データベース14の各々対応する分割領域の最大近傍領域外の周波数成分の中から抽出された一部の抽出成分(第2抽出成分)に、第2抽出成分の位置に対応する、新たに撮影された写真の周波数成分の位置に置換するものである。
データベース更新部28は、第2抽出成分を、第1抽出成分に、第1抽出成分の位置に対応する、データベース14の周波数成分の位置に置換するものである。
画像生成部30は、成分置換部26により第1抽出成分が第2抽出成分に置換された、新たに撮影された写真の周波数成分から、置換後の画像を生成するものである。
画像データ保存部32は、置換後の画像の画像データを保存するものである。
次に、本発明の撮影方法に従って、撮影装置10の概略動作を図2に示すフローチャートを参照しながら説明する。
まず、写真撮影部12により、被写体の写真が撮影され、その画像データが取得される(ステップS1)。
本実施形態では、撮影者が自分撮りを行って、数年にわたって自分自身の顔写真が撮影され、過去に撮影された1枚以上の写真の高周波数成分および中周波成分がデータベース14に蓄積されているものとする。
続いて、フォーカス領域検出部16により、写真撮影部12により新たに撮影された写真のフォーカス領域が検出される(ステップS2)。
例えば、図3、図4に円形の枠で示す領域がフォーカス領域である。
続いて、周波数成分抽出部18により、新たに撮影された写真のフォーカス領域内の画像データから高周波成分が抽出される(ステップS3A)。
同様に、中周波成分が抽出される(ステップS3B)。
図3(A)および(B)は、新たに撮影された写真のフォーカス領域内の画像データから抽出された高周波成分および中周波成分の画像を表す概念図である。
同図(A)に示す高周波成分の画像は、例えば、目、鼻、口などのように、形状が細かく変化している部分を表すため、画像がはっきりとしている。これに対し、同図(B)に示す中周波成分の画像は、形状がおおまかに変化している部分を表すため、画像がぼんやりとしている。また、高周波成分、中周波成分の中に含まれる成分は、被写体の各部の形状に応じて密な部分と、粗な部分がある。
続いて、成分規格化部20により、フォーカス領域内の高周波数成分に含まれる成分の数が規格化される(ステップS4A)。
同様に、中周波成分に含まれる成分の数が規格化される(ステップS4B)。
続いて、領域分割部22により、図4(A)に示すように、新たに撮影された写真のフォーカス領域内の規格化された高周波数成分が分割領域に分割される(ステップS5A)。
同様に、中周波成分が分割領域に分割される(ステップS5B)。
また、図2では簡略化しているが、同様に、図4(B)に示すように、データベース14に蓄積された高周波成分および中周波成分のそれぞれが分割領域に分割される(ステップS5C)。あるいは、データベース14の周波数成分は、あらかじめ分割領域に分割されていてもよい。
続いて、最大近傍領域算出部24により、新たに撮影された写真の各々の分割領域の高周波数成分の中から、例えば、ランダム関数を用いてランダムに抽出された抽出成分(第3抽出成分)と、データベース14の各々対応する分割領域の高周波数成分の中からランダムに抽出された抽出成分(第4抽出成分)との照合が行われ、それぞれの抽出成分に含まれる成分が一致する総数が最大となる最大近傍領域が求められる(ステップS6A)。
同様に、中周波成分についても最大近傍領域が求められる(ステップS6B)。
図5(A)および(B)は、高周波成分および中周波成分それぞれの最大近傍領域を表す概念図である。
同図(A)および(B)の四角の枠は、図4(A)および(B)において、新たに撮影された写真(規格化後)およびデータベース14の高周波成分および中周波成分のそれぞれに示された1つの分割領域を表し、円形の枠は、最大近傍領域を表している。また、高周波成分および中周波成分のそれぞれに含まれる成分は黒丸で示されている。
分割領域毎に最大近傍領域を決定するため、最大近傍領域は、各々の分割領域の領域内に含まれる大きさとなる。また、最大近傍領域は、新たに撮影された写真およびデータベース14の分割領域内において、同じ位置、同じ大きさとなる。
ここで、最大近傍領域が大きいということは、分割領域において、新たに撮影された写真と、過去に撮影された写真との一致度が大きい、つまり、新たに撮影された写真は、過去に撮影された写真からの変化が小さいということを意味する。
一方、最大近傍領域が小さいということは、分割領域において、両者の一致度が小さい、つまり、新たに撮影された写真は、過去に撮影された写真からの変化が大きいということを意味する。
続いて、成分置換部26により、新たに撮影された写真の各々の分割領域の最大近傍領域外の高周波数成分の中からランダムに抽出されたα(n−1)個(αは係数、nは撮影回数を表すn≧1の整数、n−1はデータベース14に蓄積された写真の周波数成分が更新された回数)の第1抽出成分が、データベース14の各々対応する分割領域の最大近傍領域外の周波数成分の中からランダムに抽出されたα(n−1)個の第2抽出成分に、第2抽出成分の位置に対応する、新たに撮影された写真の高周波成分の位置に置換される(ステップS7A)。
同様に、中周波成分についても置換される(ステップS7B)。
一方、データベース更新部28により、データベース14の各々の分割領域の最大近傍領域外の周波数成分の中からランダムに抽出されたα(n−1)個の第2抽出成分が、新たに撮影された写真の各々対応する分割領域の最大近傍領域外の周波数成分の中からランダムに抽出されたα(n−1)個の第1抽出成分に、第1抽出成分の位置に対応する、データベース14の高周波数成分の位置に置換され、データベース14に蓄積された高周波成分が更新される(ステップS7C)。
同様に、中周波成分についても置換される。
ここで、従来の美肌処理やスムージング処理等の画像補正処理では、処理の前後で画像の大きさ(情報量)が変化する。従来の画像補正処理では、一般的に、処理後の画像は処理前の画像よりも大きくなる。
これに対し、成分置換部26およびデータベース更新部28は、第1抽出成分と第2抽出成分とを置換する。そのため、置換後の写真、および、データベース14に蓄積される周波数成分の大きさ(情報量)は、置換の前後で全く変化しない。
なお、ステップS6A,S6B,S7A,S7B,S7Cにおいて、それぞれの周波数成分の中からランダムに成分を抽出することは必須ではない。成分の抽出処理として、例えば、総当たり、ないし、任意の箇所の成分と基準値との照合を行って成分を抽出してもよい。また、(n−1)個の成分を置換することも必須ではなく、係数αにより適宜変更することができる。
本実施形態では、成分置換部26により第1抽出成分を第2抽出成分に置換し、データベース更新部28により第2抽出成分を第1抽出成分に置換しているが、第1抽出成分と第2抽出成分とを置換することにより、両者を1度で置換することができる。
図6は、図5(A)に示す高周波成分について、新たに撮影された写真の規格化された高周波成分の第1抽出成分と、データベースの高周波成分の第2抽出成分とを置換する様子を表す概念図である。同図において、第1および第2抽出成分は白丸で示されている。
図6に示すように、新たに撮影された写真の分割領域では第1抽出成分が消去され、第2抽出成分が、第2抽出成分の位置に対応する、新たに撮影された写真の位置に配置される。一方、データベース14の分割領域では第2抽出成分が消去され、第1抽出成分が、第1抽出成分の位置に対応する、データベース14の位置に配置される。
続いて、画像生成部30により、第1抽出成分が第2抽出成分に置換された、新たに撮影された写真の高周波数成分および中周波成分から、置換後の画像(写真)が生成される(ステップS8)。
そして最後に、画像データ保存部32により、置換後の画像の画像データが保存される(ステップS9)。
以上のように、撮影装置10では、新たに撮影された写真の周波数成分の一部の抽出成分が、過去に撮影された写真の周波数成分の一部の抽出成分に、過去の写真の抽出成分の位置に対応する、新たな写真の位置に置換される。これにより、肌が衰えて、小じわ、弛み、浮腫みなどが増加する前の状態に時間を巻き戻すことができ、被写体が実際より若かりし頃に写る写真を撮影することができる。
なお、自分撮りを行って撮影された写真を例に挙げて説明したが、これに限定されず、本発明は、数年にわたって撮影された複数枚の写真に対して適用することができる。
また、上記実施形態では、写真から高周波成分と中周波成分の2つの周波数成分を抽出しているが、これに限定されず、1つの周波数成分だけを抽出してもよいし、3以上の周波数成分を抽出してもよい。
本発明は、基本的に以上のようなものである。
以上、本発明について詳細に説明したが、本発明は上記実施形態に限定されず、本発明の主旨を逸脱しない範囲において、種々の改良や変更をしてもよいのはもちろんである。
10 撮影装置
12 写真撮影部
14 データベース
16 フォーカス領域検出部
18 周波数成分抽出部
20 成分規格化部
22 領域分割部
24 最大近傍領域算出部
26 成分置換部
28 データベース更新部
30 画像生成部
32 画像データ保存部

Claims (18)

  1. 写真を撮影して画像データを取得する写真撮影部と、
    前記写真撮影部により過去に撮影された1枚以上の写真の所定の周波数成分が蓄積されたデータベースと、
    前記写真撮影部により新たに撮影された写真の画像データから前記所定の周波数成分を抽出する周波数成分抽出部と、
    前記新たに撮影された写真の周波数成分を2以上の分割領域に分割する領域分割部と、
    前記新たに撮影された写真の各々の分割領域の周波数成分と前記データベースの各々対応する分割領域の周波数成分とを照合して、それぞれの周波数成分に含まれる成分が一致する総数が最大となる最大近傍領域を求める最大近傍領域算出部と、
    前記新たに撮影された写真の各々の分割領域の最大近傍領域外の周波数成分の中から抽出された一部の第1抽出成分を、前記データベースの各々対応する分割領域の最大近傍領域外の周波数成分の中から抽出された一部の第2抽出成分に、該第2抽出成分の位置に対応する、前記新たに撮影された写真の周波数成分の位置に置換する成分置換部とを備えることを特徴とする撮影装置。
  2. 前記最大近傍領域算出部は、前記新たに撮影された写真の各々の分割領域の周波数成分の中から所定の抽出処理により抽出された第3抽出成分と前記データベースの各々対応する分割領域の周波数成分の中から所定の抽出処理により抽出された第4抽出成分とを照合して、それぞれの抽出成分に含まれる成分が一致する総数が最大となる最大近傍領域を求めるものである請求項1に記載の撮影装置。
  3. 前記成分置換部は、前記新たに撮影された写真の各々の分割領域の最大近傍領域外の周波数成分の中から所定の抽出処理により抽出された第1抽出成分を、前記データベースの各々対応する分割領域の最大近傍領域外の周波数成分の中から所定の抽出処理により抽出された第2抽出成分に置換するものである請求項1または2に記載の撮影装置。
  4. 前記成分置換部は、前記新たに撮影された写真の各々の分割領域の最大近傍領域外の周波数成分の中から所定の抽出処理により抽出されたα(n−1)個(αは係数、nは撮影回数を表すn≧1の整数、n−1は前記データベースに蓄積された写真の周波数成分が更新された回数)の第1抽出成分を、前記データベースの各々対応する分割領域の最大近傍領域外の周波数成分の中から所定の抽出処理により抽出されたα(n−1)個の第2抽出成分に置換するものである請求項3に記載の撮影装置。
  5. さらに、前記第2抽出成分を、前記第1抽出成分に、該第1抽出成分の位置に対応する、前記データベースの周波数成分の位置に置換するデータベース更新部を備える請求項1〜4のいずれかに記載の撮影装置。
  6. 前記データベース更新部は、前記データベースの各々の分割領域の最大近傍領域外の周波数成分の中から所定の抽出処理により抽出された第2抽出成分を、前記新たに撮影された写真の各々対応する分割領域の最大近傍領域外の周波数成分の中から所定の抽出処理により抽出された第1抽出成分に置換するものである請求項5に記載の撮影装置。
  7. 前記データベース更新部は、前記データベースの各々の分割領域の最大近傍領域外の周波数成分の中から所定の抽出処理により抽出されたα(n−1)個(αは係数、nは撮影回数を表すn≧1の整数、n−1は前記データベースに蓄積された写真の周波数成分が更新された回数)の第2抽出成分を、前記新たに撮影された写真の各々対応する分割領域の最大近傍領域外の周波数成分の中から所定の抽出処理により抽出されたα(n−1)個の第1抽出成分に置換するものである請求項6に記載の撮影装置。
  8. 前記所定の抽出処理は、総当たり、もしくは、任意の箇所の成分と基準値との照合を行って成分を抽出するものである請求項2〜4,6および7のいずれかに記載の撮影装置。
  9. 前記所定の抽出処理は、ランダム関数を用いて成分を抽出するものである請求項2〜4,6および7のいずれかに記載の撮影装置。
  10. 前記周波数成分抽出部は、前記所定の周波数成分として、第1周波数成分および該第1周波数成分よりも周波数が低い第2周波数成分を抽出するものであり、
    前記領域分割部、前記最大近傍領域算出部、および、前記成分置換部は、前記第1および第2周波数成分のそれぞれについて処理を行うものである請求項1〜9のいずれかに記載の撮影装置。
  11. さらに、前記新たに撮影された写真の周波数成分に含まれる成分の数を規格化する成分規格化部を備え、
    前記領域分割部は、前記規格化された周波数成分を分割領域に分割するものである請求項1〜10のいずれかに記載の撮影装置。
  12. 前記周波数成分抽出部は、前記所定の周波数成分として、第1周波数成分および該第1周波数成分の周波数よりも周波数が低い第2周波数成分を抽出するものであり、
    前記領域分割部、前記最大近傍領域算出部、前記成分置換部、および、前記成分規格化部は、前記第1および第2周波数成分のそれぞれについて処理を行うものである請求項11に記載の撮影装置。
  13. さらに、前記新たに撮影された写真のフォーカス領域を検出するフォーカス領域検出部を備え、
    前記周波数成分抽出部は、前記フォーカス領域内の画像データから周波数成分を抽出するものである請求項1〜12のいずれかに記載の撮影装置。
  14. さらに、前記第1抽出成分が第2抽出成分に置換された、前記新たに撮影された写真の周波数成分から、置換後の画像を生成する画像生成部を備える請求項1〜13のいずれかに記載の撮影装置。
  15. さらに、前記置換後の画像の画像データを保存する画像データ保存部を備える請求項14に記載の撮影装置。
  16. 写真を撮影して画像データを取得する写真撮影ステップと、
    前記写真撮影ステップにより新たに撮影された写真の画像データから所定の周波数成分を抽出する周波数成分抽出ステップと、
    前記新たに撮影された写真の周波数成分を2以上の分割領域に分割する領域分割ステップと、
    前記新たに撮影された写真の各々の分割領域の周波数成分と過去に撮影された1枚以上の写真の周波数成分が蓄積されたデータベースの各々対応する分割領域の周波数成分とを照合して、それぞれの周波数成分に含まれる成分が一致する総数が最大となる最大近傍領域を求める最大近傍領域算出ステップと、
    前記新たに撮影された写真の各々の分割領域の最大近傍領域外の周波数成分の中から抽出された一部の第1抽出成分を、前記データベースの各々対応する分割領域の最大近傍領域外の周波数成分の中から抽出された一部の第2抽出成分に、該第2抽出成分の位置に対応する、前記新たに撮影された写真の周波数成分の位置に置換する成分置換ステップとを含むことを特徴とする撮影方法。
  17. 請求項16に記載の撮影方法の各々のステップをコンピュータに実行させるためのプログラム。
  18. 請求項16に記載の撮影方法の各々のステップをコンピュータに実行させるためのプログラムが記録されたコンピュータ読み取り可能な記録媒体。
JP2012096460A 2012-04-20 2012-04-20 撮影装置、撮影方法およびプログラム Active JP5848186B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2012096460A JP5848186B2 (ja) 2012-04-20 2012-04-20 撮影装置、撮影方法およびプログラム
PCT/JP2013/061377 WO2013157570A1 (ja) 2012-04-20 2013-04-17 撮影装置、撮影方法およびプログラム
IN8766DEN2014 IN2014DN08766A (ja) 2012-04-20 2014-10-17
US14/518,417 US9154691B2 (en) 2012-04-20 2014-10-20 Image capturing apparatus, image capturing method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012096460A JP5848186B2 (ja) 2012-04-20 2012-04-20 撮影装置、撮影方法およびプログラム

Publications (2)

Publication Number Publication Date
JP2013225193A JP2013225193A (ja) 2013-10-31
JP5848186B2 true JP5848186B2 (ja) 2016-01-27

Family

ID=49383525

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012096460A Active JP5848186B2 (ja) 2012-04-20 2012-04-20 撮影装置、撮影方法およびプログラム

Country Status (4)

Country Link
US (1) US9154691B2 (ja)
JP (1) JP5848186B2 (ja)
IN (1) IN2014DN08766A (ja)
WO (1) WO2013157570A1 (ja)

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7154510B2 (en) * 2002-11-14 2006-12-26 Eastman Kodak Company System and method for modifying a portrait image in response to a stimulus
JP4277534B2 (ja) 2003-02-12 2009-06-10 オムロン株式会社 画像編集装置および画像編集方法
US8948468B2 (en) * 2003-06-26 2015-02-03 Fotonation Limited Modification of viewing parameters for digital images using face detection information
JP2006053859A (ja) * 2004-08-16 2006-02-23 Fuji Photo Film Co Ltd 画像処理装置および方法並びにプログラム
JP2006085678A (ja) 2004-08-16 2006-03-30 Fuji Photo Film Co Ltd 画像作成方法および装置並びにプログラム
US20070229498A1 (en) * 2006-03-29 2007-10-04 Wojciech Matusik Statistical modeling for synthesis of detailed facial geometry
JP2010244239A (ja) 2009-04-03 2010-10-28 Nikon Corp 画像処理装置、デジタルカメラ及びプログラム

Also Published As

Publication number Publication date
IN2014DN08766A (ja) 2015-05-22
JP2013225193A (ja) 2013-10-31
US20150036022A1 (en) 2015-02-05
US9154691B2 (en) 2015-10-06
WO2013157570A1 (ja) 2013-10-24

Similar Documents

Publication Publication Date Title
CN105472239B (zh) 照片处理方法及装置
US8340417B2 (en) Image processing method and apparatus for correcting skin color
CN103024271B (zh) 在电子设备上拍照的方法及采用该方法的电子设备
WO2019011091A1 (zh) 拍照提醒方法、装置、终端和计算机存储介质
WO2014155814A1 (ja) 撮像装置、キャリブレーション方法、プログラム及び記録媒体
US10348958B2 (en) Image processing apparatus for performing predetermined processing on a captured image
US20160189413A1 (en) Image creation method, computer-readable storage medium, and image creation apparatus
JP2018117288A (ja) 画像処理装置及び画像処理方法
WO2015156151A1 (ja) 画像処理装置、撮像装置、画像処理方法及びプログラム
JP6381892B2 (ja) 画像処理装置、画像処理方法及び画像処理プログラム
US20080240520A1 (en) Imaging apparatus, display control method and recording medium
CN103533212A (zh) 一种图像合成方法和装置
WO2015196681A1 (zh) 一种图片处理方法及电子设备
JP2017211982A (ja) 顔識別システム及び顔識別方法
CN108010009B (zh) 一种去除干扰图像的方法及装置
JP5848186B2 (ja) 撮影装置、撮影方法およびプログラム
CN108810326A (zh) 一种拍照方法、装置及移动终端
CN110992284A (zh) 图像处理方法、图像处理装置、电子设备和计算机可读存储介质
JP2018045366A (ja) 画像処理装置、画像処理方法及びプログラム
WO2017101570A1 (zh) 照片的处理方法及处理系统
JP2010041309A (ja) 撮像装置、携帯電話端末、撮像方法、プログラム及び記録媒体
JP6390247B2 (ja) 写真撮影装置、肌診断方法、プログラム、及び、肌診断システム
JP5477025B2 (ja) 画像表示装置、及びプログラム
WO2019205566A1 (zh) 一种显示图片的方法和设备
KR20160097844A (ko) 단체 인물 사진 보정 시스템

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20141020

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20151104

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20151126

R150 Certificate of patent or registration of utility model

Ref document number: 5848186

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250