JP2006295646A - 画像処理装置及び画像処理プログラム - Google Patents

画像処理装置及び画像処理プログラム Download PDF

Info

Publication number
JP2006295646A
JP2006295646A JP2005114988A JP2005114988A JP2006295646A JP 2006295646 A JP2006295646 A JP 2006295646A JP 2005114988 A JP2005114988 A JP 2005114988A JP 2005114988 A JP2005114988 A JP 2005114988A JP 2006295646 A JP2006295646 A JP 2006295646A
Authority
JP
Japan
Prior art keywords
image
face
area
file
face area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2005114988A
Other languages
English (en)
Other versions
JP4605458B2 (ja
Inventor
Yukihiro Kawada
幸博 河田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Holdings Corp
Original Assignee
Fuji Photo Film Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Photo Film Co Ltd filed Critical Fuji Photo Film Co Ltd
Priority to JP2005114988A priority Critical patent/JP4605458B2/ja
Priority to US11/401,386 priority patent/US20060227385A1/en
Publication of JP2006295646A publication Critical patent/JP2006295646A/ja
Application granted granted Critical
Publication of JP4605458B2 publication Critical patent/JP4605458B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5854Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using shape and object relationship
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5838Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using colour
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46Colour picture communication systems
    • H04N1/56Processing of colour picture signals
    • H04N1/60Colour correction or control
    • H04N1/62Retouching, i.e. modification of isolated colours only or in isolated picture areas only
    • H04N1/628Memory colours, e.g. skin or sky
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20112Image segmentation details
    • G06T2207/20132Image cropping
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Library & Information Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Processing (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Image Analysis (AREA)
  • Editing Of Facsimile Originals (AREA)

Abstract

【課題】人物の顔領域に注目した画像の管理や再生表示に適した画像の加工を容易に行うことができる画像処理装置及び画像処理プログラムを提供する。
【解決手段】元画像40が画像処理装置10に入力されると、リサイズ・回転処理部34でリサイズされて、全体画像ファイルが生成される。また、顔検出部30によって、元画像40から顔領域が検出される。そして、この顔領域の数が計数されて、顔領域の数(写っている人数)分の注文を行うためのプリント注文データ(DPOF)が生成される。次に、顔領域は、トリミング処理部32によってトリミングされて、ファイル処理部42によって個別顔ファイルが生成される。次に、個別顔HTMLファイルが作成される。また、検出された矩形の顔領域の座標の位置に、各個別顔HTMLファイルにアクセスするリンク先情報が記載された全体画像HTMLファイルが生成される。
【選択図】図3

Description

本発明は画像処理装置及び画像処理プログラムに係り、特に画像から顔領域を検出する画像処理装置及び画像処理プログラムに関する。
従来、画像に写っている人物の顔領域を検出する技術が開発されている。例えば、特許文献1には、映像信号中から、肌色領域または人の顔の領域を検出し、その検出領域のみ補正を行う映像信号処理装置について開示されている。また、特許文献2には、画像データに、人の顔の一部等の特徴部分があった場合は、それらを加工せず、或いはそれらは微少加工にとどめ、その周辺、その他の部分を違和感なく所望の描画パターンで編集した画像を提供する画像処理方法について開示されている。
特開平11−146405号公報 特開2004−282664号公報(段落[0040]等)
しかしながら、上記の特許文献1は、元の画像中において検出された顔領域のみを補正するものであり、顔領域に注目した画像の管理や再生表示を行うのに適したものではなかった。また、特許文献2は、元の画像から顔領域を抜き取って、周辺部分を編集して再合成するものであり、やはり顔領域に注目した画像の管理や再生表示を行うのに適したものではなかった。
本発明はこのような事情に鑑みてなされたもので、画像に写っている人物の顔領域に注目した画像の管理や再生表示に適した画像の加工を容易に行うことができる画像処理装置及び画像処理プログラムを提供することを目的とする。
上記目的を達成するために請求項1に係る画像処理装置は、画像を入力する画像入力手段と、前記画像を再生表示する画像表示手段と、前記画像を解析して、前記画像に写っている人物の顔領域を検出する顔領域検出手段と、前記検出された顔領域をトリミングして、前記トリミングされた顔領域を表示するための個別顔表示用ファイルを生成する個別顔表示用ファイル生成手段と、前記個別顔表示用ファイルの格納場所を示すリンク先情報を取得するリンク先情報取得手段と、前記画像中において前記検出された顔領域を含む選択領域に、前記選択領域内の顔領域に対応する個別顔表示用ファイルのリンク先情報を埋め込むリンク先情報埋め込み手段と、前記画像の所望の位置を指示する指示手段と、前記指示手段によって前記選択領域が指示された場合に、前記選択領域内の顔領域に対応する個別顔表示用ファイルを表示させる表示制御手段とを備えることを特徴とする。
請求項1に係る画像処理装置によれば、マウスや十字キー等の指示手段により顔領域を指示することにより、画像中の顔領域を個別に参照することができる。
請求項2に係る画像処理装置は、請求項1において、前記リンク先情報埋め込み手段は、前記選択領域内の顔領域に対応する個別顔表示用ファイルのリンク先情報が前記選択領域に埋め込まれたクリッカブルマップを作成することを特徴とする。
請求項2に係る画像処理装置によれば、顔領域を含む領域に個別顔表示用ファイルにリンクが張られたクリッカブルマップを自動的に作成できる。
請求項3に係る画像処理プログラムは、画像を入力する画像入力機能と、前記画像を再生表示する画像表示機能と、前記画像を解析して、前記画像に写っている人物の顔領域を検出する顔領域検出機能と、前記検出された顔領域をトリミングして、前記トリミングされた顔領域を表示するための個別顔表示用ファイルを生成する個別顔表示用ファイル生成機能と、前記個別顔表示用ファイルの格納場所を示すリンク先情報を取得するリンク先情報取得機能と、前記画像中において前記検出された顔領域を含む選択領域に、前記選択領域内の顔領域に対応する個別顔表示用ファイルのリンク先情報を埋め込むリンク先情報埋め込み機能と、前記画像の所望の位置を指示する指示機能と、前記指示機能によって前記選択領域が指示された場合に、前記選択領域内の顔領域に対応する個別顔表示用ファイルを表示させる表示制御機能とをコンピュータに実現させることを特徴とする。
請求項3に係る画像処理プログラムを含むソフトウェアやファームウェアをパーソナルコンピュータ(PC)やビデオ再生装置(ビデオデッキ、テレビ)やデジタルカメラ、携帯情報端末(PDA)、携帯電話等の画像再生機能を有する装置に適用することにより、本発明の画像処理装置を実現することができる。
本発明によれば、マウスや十字キー等の指示手段により顔領域を指示することにより、画像中の顔領域を個別に参照できるイメージマップ又はクリッカブルマップを自動的に作成できる。
以下、添付図面に従って本発明に係る画像処理装置及び画像処理プログラムの好ましい実施の形態について説明する。
図1は、本発明の一実施形態に係る画像処理装置の主要構成を示すブロック図である。なお、以下の説明では、本発明の画像処理装置10をパーソナルコンピュータ(PC)に適用した例について説明するが、本発明の画像処理装置10はPCのほか、例えば、ビデオ再生装置(ビデオデッキ、テレビ)やデジタルカメラ、携帯情報端末(PDA)、携帯電話等の画像再生機能を有する装置一般に適用することができる。
同図においてCPU(Central Processing Unit)12は、バス14を介して画像処理装置10内の各ブロックに接続されており、入力装置16等からの操作入力に基づいて各ブロックを統括制御する統括制御部である。入力装置16は、キーボードやマウス、その他の操作部材を含んでおり、これらの操作部材からの操作入力に応じてCPU12に信号を出力する。タイマー18は時間を計時する。
表示装置20は、画像や、各種のデータ、操作メニュー等を表示するためのディスプレイであり、例えば、CRT(Cathode Ray Tube)モニタやLCD(Liquid Crystal Display)モニタ、有機EL(electro-luminescence)である。
メモリ22は、CPU12が処理するプログラム及び制御に必要な各種データ等を格納するROM(Read Only Memory)や、CPU12が各種の演算処理等を行う際の作業用領域となるSDRAM(Synchronous Dynamic Random Access Memory)、表示装置20に表示される内容を記憶する記憶領域となるVRAM(Video Random Access Memory)等を備える。
メディア制御部24は、CPU12によって制御され、記録メディア26へのデータの書き込み、及び記録メディア26からのデータの読み出しを行う。記録メディア26としては、半導体メモリのほか、磁気ディスク、光ディスク、光磁気ディスク等、種々の媒体を用いることができる。
記録メディア26から読み出された画像は、再生処理部28によって再生用の画像に変換されて表示装置20に出力される。顔検出部30は、顔認識技術によってこの画像に写っている人物の顔領域の検出を行う。ここで、顔領域を検出する方法は公知技術なので、ここではその詳細な検出方法については省略する。なお、顔領域を検出する方法の例としては、原画像から肌色に指定した色と近い色を持つ画素を取り出し、取り出した領域を顔領域として検出する方法がある。この処理は、例えば、肌色を他の色と区別するための色空間上で、あらかじめサンプリングした肌色の情報から色空間上の肌色の範囲を定め、各画素の色が定めた範囲に入っているか否かを判定することにより行われる。また、顔パーツである目の抽出は、例えば、検出した顔領域内から顔領域よりも輝度値の低い領域を検出して抽出する。また、口の抽出は、例えば、抽出した両目の下側の範囲内で顔領域よりも輝度値の低い領域を検出して抽出する。また、鼻の抽出は、目と口の間で鼻の概略領域を特定し、この領域に対して横エッジを強調する処理を行う。そして、得られた画像に対して輝度値を横方向に射影する処理を行い、最も小さい輝度値を持つ位置を鼻の位置と決定する。
また、顔検出部30は、顔認識技術によって顔領域の傾き角度、及び横向き角度を算出する。ここで、顔領域の傾き角度とは、画像の天地方向に対する顔の傾きを表すパラメータであり、例えば、上記において検出された両目を結ぶ線分の天地方向に対する傾きに基づいて算出される。また、横向き角度とは、撮影時における撮像装置に対する人物の顔の向き(あるいは、撮像装置の光軸方向と顔の正面方向のなす角度)を表すパラメータであり、上記において検出された両目及び鼻の位置に基づいて算出される。例えば、右目と鼻の距離が左目と鼻の距離よりも短い場合には、撮影時に人物が右斜め方向に向いていたことが検出される。
トリミング処理部32は、上記において検出された顔領域等の画像の一部領域を切り出すトリミング処理を行う。そして、このトリミングされた画像は、表示装置20に出力されて表示される。リサイズ・回転処理部34は、トリミング処理部32によってトリミングされた画像の一部領域を拡大・縮小して表示装置20に出力する。また、リサイズ・回転処理部34は、上記において算出された顔領域の傾き角度に基づいて顔領域の回転処理を行う。
なお、上記のようにして算出された顔領域や、その傾き角度、横向き角度等の顔情報は、上記画像と関連付けられて記憶される。図2は、顔情報の例を示す図である。同図に示す顔情報は、画像から検出された各顔領域について生成され、例えば、画像データファイルのヘッダやEXIF(Exchangeable Image File Format)タグ等の領域に書き込まれる。なお、この顔情報は、画像データファイルと関連付けられた別のファイル等に保存されるようにしてもよい。
同図において顔領域は矩形領域であり、左上と右下の座標により記述されているが、顔領域の記述方法はこれに限定されるものではない。例えば、顔領域を円形又は楕円形とし、その位置は中心座標と半径、又は長軸、短軸の長さ等により記述されるようにしてもよい。また、顔領域を多角形として、その位置は頂点の座標により記述されるようにしてもよい。
また、顔の確からしさ度は、上記顔検出部30により検出された領域が顔領域であるかどうかを示すパラメータであり、例えば、肌色の度合等により算出される。顔検出部30は、画像中から検出された肌色領域ごとに、この顔の確からしさ度を算出して、この顔の確からしさ度が所定値以上の肌色領域を顔領域と判断する。
図3は画像処理装置10の機能ブロック図であり、図4は画像処理の対象となる画像の例を示す図である。図4に示すような画像(元画像40)が画像処理装置10に入力されると、リサイズ・回転処理部34によって所定のサイズにリサイズされて、全体画像ファイル(faces.jpg)41が生成される。また、顔検出部30によって、元画像40から顔領域A1〜A3が検出される。上述のように、この顔領域A1〜A3は、左上と右下の座標によって特定される矩形領域である。そして、CPU12によって、この顔領域A1〜A3の数が計数されてプリント注文データが生成される。
図5は、プリント注文データの一部を示す図である。同図に示すプリント注文データ50は、DPOF(Digital Print Order Format)ファイルであり、元画像40内の顔領域A1〜A3の数(すなわち、3枚)だけプリント注文を行う旨の記載を含んでいる。このプリント注文データ50は、全体画像ファイル41と関連付けられて記録メディア26等に記録される。このプリント注文データ50を利用することにより、全体画像ファイル(faces.jpg)41のプリント注文を行う際に、写っている人数分のプリントを自動的に注文することができる。
次に、図4に示す顔領域A1〜A3は、トリミング処理部32によってトリミングされて、リサイズ・回転処理部34によって所定のサイズにリサイズされる。また、この個別顔ファイルの作成時には、顔領域A1〜A3が傾いている場合には、各顔領域A1〜A3がその傾き角度に基づいて回転補正処理が行われる。そして、ファイル処理部42によって個別顔ファイル(face1.jpg、face2.jpg、face3.jpg)が生成される。この個別顔ファイルは、記録処理部44によって元画像40と関連付けられて(例えば、同一のフォルダ等)記録メディア26に記録される。これにより、全体画像ファイル(faces.jpg)41と個別顔ファイルが関連付けられて記憶されるため、画像に写っている人物の顔領域に注目した画像の管理や再生表示に適した画像の加工を容易に行うことができる
その次に、図3に示すHTML生成処理部46によって、上記個別顔ファイル(face1.jpg、face2.jpg、face3.jpg)から個別顔HTMLファイル(各々face1.html、face2.html、face3.html)が作成される。顔検出部30によって検出された矩形の顔領域A1〜A3の座標の位置に、各個別顔HTMLファイルにアクセスするためのリンク先情報(各個別顔HTMLファイルの格納先へのパス)が記載された全体画像HTMLファイル(クリッカブルマップfaces.html)が生成される。
図6は、全体画像HTMLファイル(クリッカブルマップ)のソースコードの一部を示す図である。同図に示すように、クリッカブルマップ52の各顔領域A1〜A3には、個別顔HTMLファイル(各々face1.html、face2.html、face3.html)へのリンクが張られている。この顔領域A1〜A3にマウスカーソルにより指示されてクリックされると、各個別顔HTMLファイルが表示装置20に表示される。
図7〜図9は、個別顔HTMLファイルの例を示す図である。図7(a)〜図9(a)は個別顔HTMLファイルの表示例を示す図であり、図7(b)〜図9(b)は個別顔HTMLファイルのソースコードの一部を示す図である。図7(a)〜図9(a)中のテキスト「Back」は、クリッカブルマップ52にリンクされており、テキスト「Back」がクリックされるとクリッカブルマップ52の表示画面に戻る。
なお、画像処理装置10が入力装置16としてマウスを有さない機器である場合には、方向キーや十字ボタン等のカーソルの移動に用いられる操作部材によりカーソルが移動されて顔領域が選択、確定されると、各個別顔HTMLファイルが表示装置20に表示される。
以下、本実施形態の画像処理装置10における画像処理の流れについて、図10を参照して説明する。図10は、画像処理の流れを示すフローチャートである。まず、画像が入力されると(ステップS10)、入力された画像がリサイズされて(ステップS12)、全体画像ファイル41が表示装置20に出力される(ステップS14)。ここで、全体画像ファイル41のサイズは、例えば、横640ピクセル×縦480ピクセル、横800ピクセル×縦600ピクセル、横1024ピクセル×縦768ピクセルである。
次に、顔検出部30によって顔領域A1〜A3が検出されて(ステップS16)、顔領域A1〜A3の数が計数される。そして、プリントサイズ等の入力を受け付ける画面が表示されて、全体画像ファイル41内の顔領域A1〜A3の数(すなわち、3枚)だけプリント注文を行うためのプリント注文データ(DPOFファイル)が出力され、全体画像ファイル41と関連付けられて記録メディア26に保存される(ステップS18)。また、パラメータnに顔領域の数が代入される(ステップS20)。
その次に、トリミング処理部32によって、全体画像ファイル41から顔領域A1がトリミングされる(ステップS24)。そして、この顔領域A1は、リサイズ・回転処理部34によって、例えば、横320ピクセル×縦240ピクセルでリサイズされ(ステップS26)、個別顔ファイル(face1.jpg)として出力される(ステップS28)。この個別顔ファイル(face1.jpg)は、全体画像ファイル41と関連付けられて、例えば、同一のフォルダ内に記録メディア26に保存される(ステップS28)。そして、全体画像ファイル41内の個別顔ファイルが出力されていない顔領域の数を示すパラメータnが1減ぜられて(ステップS30)、ステップS22に戻る。
上記のステップS22からステップS30が繰り返されて、パラメータnがゼロになる、すなわち、すべての顔領域が個別顔ファイルとして出力されると(ステップS22のNo)、次いでステップS32に進む。そして、全体画像HTMLファイル(クリッカブルマップfaces.html)52、及び個別顔HTMLファイル(face1.html、face2.html、face3.html)が生成されて(ステップS32)、記録メディア26に出力される(ステップS34)。
本実施形態によれば、全体画像ファイル41について自動的に顔領域の検出処理が行われて、検出された顔領域の数の分のプリントを注文するためのプリント注文データ(DPOFファイル)が自動的に生成される。これにより、全体画像ファイル41に写っている人物の人数分のプリント注文を容易に行うことができる。
また、本実施形態によれば、全体画像ファイル41と、顔領域A1〜A3がトリミングされた個別顔ファイルが関連付けられて保存される。これにより、全体画像ファイル41に写っている人物の顔領域に注目した画像の管理や再生表示に適した画像の加工を容易に行うことができる。
さらに、本実施形態によれば、個別顔ファイルを参照するためのクリッカブルマップ52が自動的に作成されるため、全体画像ファイル41から個別の顔を容易に参照することができる。
次に、本発明の画像処理装置10が実装された撮像装置の例について説明する。図11は、本発明の一実施形態に係る撮像装置の主要構成を示すブロック図である。同図に示す撮像装置60は、例えば、デジタルカメラやカメラ付き携帯電話である。なお、同図において、図1の画像処理装置10と同様の構成については、同一の符号を付して説明を省略する。
同図においてCPU12は、バス14を介して撮像装置10内の各ブロックに接続されており、入力装置16等からの操作入力に基づいて撮像装置60の動作を制御する統括制御部である。入力装置16は、例えば、電源スイッチやレリーズスイッチ、十字キー等の操作スイッチを含んでいる。表示装置20は、撮影時の画角確認用の電子ファインダとして用いられるとともに、撮影された画像データの表示に用いられるものであり、例えば、LCDモニタである。
撮像素子64は、光学系(撮影レンズ)62から入ってきた光を受け止めて電気信号に変換する素子であり、例えばCCD(Charge Coupled Devices)である。この電気信号は、図示せぬプリアンプによって増幅され、図示せぬA/D変換器によってデジタル信号に変換されて、撮像処理部66に入力される。
本実施形態の撮像装置60は、画像を撮影するための撮影モードと、画像を表示、再生するための再生モードを含む複数の動作モードを備えており、ユーザは入力装置16からの操作入力により動作モードの設定を行うことができる。
撮影モード時には、撮像処理部66によってCCD64から出力された電気信号が処理されて画角確認用の画像(スルー画)が作成され、表示装置20に表示される。そして、レリーズスイッチが操作されて画像が撮影されると、撮像処理部66によってCCD64から出力された電気信号が処理されて保存用の画像が作成される。この保存用の画像は、メディア制御部24を介して記録メディア26に所定のファイル形式(例えば、JPEG(Joint Photographic Experts Group)形式)で保存される。
また、撮影モード時には、スイッチ68が端子T1に接続される。そして、撮像処理部66によって処理された保存用の画像について、顔検出部30によって顔領域の検出が行われる。このとき、顔検出部30によって取得された顔情報(図2参照)は、保存用の画像と関連付けられて記録メディア26に保存されるとともに、この保存用の画像に対して上記の図10のフローチャートに示すような処理が行われる。
すなわち、CPU12によって検出された顔領域の個数が計数されて、顔領域の個数分のプリント注文を行うためのプリント注文データ(DPOFファイル)が生成される。
また、上述のように、トリミング処理部32によって顔領域がトリミングされて、個別顔ファイルやHTMLファイル(クリッカブルマップ)が生成されて、それぞれ画像と関連付けられて記録メディア26に保存される。
また、トリミングされた顔領域をサムネイル画像にリサイズし、元の画像ファイル(例えば、画像ファイルのヘッダ領域)に付加する処理を行うこともできる。
一方、再生モード時には、撮像処理部66によって記録メディア26に保存された画像が読み出されて表示用の画像が作成され、表示装置20に表示される。この再生モード時には、スイッチ68は端子T2に接続されて、上記の図10のフローチャートに示すような処理が行われる。
また、検出された顔領域をトリミングして、顔領域にモザイクをかけるモザイク処理や、顔の目、鼻、口等のエッジ強調フィルター処理、エフェクト(テンプレート画像)との合成処理等の各種処理を画像処理部70によって行うことができる。また、顔領域のサムネイル画像を元の画像ファイルに付加する処理を行うこともできる。
なお、上述のような処理を行うプログラムを含むソフトウェアやファームウェアをパーソナルコンピュータ(PC)やビデオ再生装置(ビデオデッキ、テレビ)やデジタルカメラ、携帯情報端末(PDA)、携帯電話等の画像再生機能を有する装置に適用することにより、本発明の画像処理装置及び撮像装置を実現することができる。
本発明の一実施形態に係る画像処理装置の主要構成を示すブロック図 顔情報の例を示す図 画像処理装置10の機能ブロック図 画像処理の対象となる画像の例を示す図 プリント注文データの一部を示す図 全体画像HTMLファイル(クリッカブルマップ)のソースコードの一部を示す図 個別顔HTMLファイルの例を示す図 個別顔HTMLファイルの例を示す図 個別顔HTMLファイルの例を示す図 画像処理の流れを示すフローチャート 本発明の一実施形態に係る撮像装置の主要構成を示すブロック図
符号の説明
10…画像処理装置、12…CPU(Central Processing Unit)、14…バス、16…入力装置、18…タイマー、20…表示装置、22…メモリ、24…メディア制御部、26…記録メディア、28…再生処理部、30…顔検出部、32…トリミング処理部、34…リサイズ・回転処理部、40…元画像、41…全体画像ファイル(faces.jpg)、42…ファイル処理部、44…記録処理部、46…HTML生成処理部、48…、50…プリント注文データ(DPOFファイル)、52…全体画像HTMLファイル(クリッカブルマップ)、A1〜A3…顔領域、60…撮像装置、62…光学系(撮影レンズ)、64…撮像素子(CCD)、66…撮像処理部、68…スイッチ、70…画像処理部

Claims (3)

  1. 画像を入力する画像入力手段と、
    前記画像を再生表示する画像表示手段と、
    前記画像を解析して、前記画像に写っている人物の顔領域を検出する顔領域検出手段と、
    前記検出された顔領域をトリミングして、前記トリミングされた顔領域を表示するための個別顔表示用ファイルを生成する個別顔表示用ファイル生成手段と、
    前記個別顔表示用ファイルの格納場所を示すリンク先情報を取得するリンク先情報取得手段と、
    前記画像中において前記検出された顔領域を含む選択領域に、前記選択領域内の顔領域に対応する個別顔表示用ファイルのリンク先情報を埋め込むリンク先情報埋め込み手段と、
    前記画像の所望の位置を指示する指示手段と、
    前記指示手段によって前記選択領域が指示された場合に、前記選択領域内の顔領域に対応する個別顔表示用ファイルを表示させる表示制御手段と、
    を備えることを特徴とする画像処理装置。
  2. 前記リンク先情報埋め込み手段は、前記選択領域内の顔領域に対応する個別顔表示用ファイルのリンク先情報が前記選択領域に埋め込まれたクリッカブルマップを作成することを特徴とする請求項1記載の画像処理装置。
  3. 画像を入力する画像入力機能と、
    前記画像を再生表示する画像表示機能と、
    前記画像を解析して、前記画像に写っている人物の顔領域を検出する顔領域検出機能と、
    前記検出された顔領域をトリミングして、前記トリミングされた顔領域を表示するための個別顔表示用ファイルを生成する個別顔表示用ファイル生成機能と、
    前記個別顔表示用ファイルの格納場所を示すリンク先情報を取得するリンク先情報取得機能と、
    前記画像中において前記検出された顔領域を含む選択領域に、前記選択領域内の顔領域に対応する個別顔表示用ファイルのリンク先情報を埋め込むリンク先情報埋め込み機能と、
    前記画像の所望の位置を指示する指示機能と、
    前記指示機能によって前記選択領域が指示された場合に、前記選択領域内の顔領域に対応する個別顔表示用ファイルを表示させる表示制御機能と、
    をコンピュータに実現させることを特徴とする画像処理プログラム。
JP2005114988A 2005-04-12 2005-04-12 画像処理装置及び画像処理プログラム Expired - Fee Related JP4605458B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2005114988A JP4605458B2 (ja) 2005-04-12 2005-04-12 画像処理装置及び画像処理プログラム
US11/401,386 US20060227385A1 (en) 2005-04-12 2006-04-11 Image processing apparatus and image processing program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005114988A JP4605458B2 (ja) 2005-04-12 2005-04-12 画像処理装置及び画像処理プログラム

Publications (2)

Publication Number Publication Date
JP2006295646A true JP2006295646A (ja) 2006-10-26
JP4605458B2 JP4605458B2 (ja) 2011-01-05

Family

ID=37082876

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005114988A Expired - Fee Related JP4605458B2 (ja) 2005-04-12 2005-04-12 画像処理装置及び画像処理プログラム

Country Status (2)

Country Link
US (1) US20060227385A1 (ja)
JP (1) JP4605458B2 (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008311920A (ja) * 2007-06-14 2008-12-25 Fujifilm Corp 撮像装置
JP2011014953A (ja) * 2009-06-30 2011-01-20 Nippon Hoso Kyokai <Nhk> 2次元コード表示用電子文書生成装置およびそのプログラム、ならびに、デジタル放送送信装置
JP2011510533A (ja) * 2008-01-07 2011-03-31 ソニー エリクソン モバイル コミュニケーションズ, エービー Exifにおける被写体の座標
US9065998B2 (en) 2007-06-14 2015-06-23 Fujifilm Corporation Photographing apparatus provided with an object detection function
KR101549599B1 (ko) * 2014-06-02 2015-09-02 고권태 안면인식과 태그인식을 이용하여 접근자의 신분확인 및 동선추적이 가능한 제한구역 출입 경고시스템

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006064938A1 (ja) * 2004-12-13 2006-06-22 Canon Kabushiki Kaisha 画像処理方法、画像処理装置、および画像処理装置の制御プログラム
JP2008250712A (ja) * 2007-03-30 2008-10-16 Fujifilm Corp 注文促進システム
JP4942189B2 (ja) * 2007-05-11 2012-05-30 キヤノン株式会社 画像処理装置、画像処理方法、プログラムおよび記憶媒体
US9131140B2 (en) * 2007-08-10 2015-09-08 Canon Kabushiki Kaisha Image pickup apparatus and image pickup method
JP4891270B2 (ja) * 2008-01-22 2012-03-07 キヤノン株式会社 画像編集装置、画像編集方法及びプログラム
US8194952B2 (en) * 2008-06-04 2012-06-05 Raytheon Company Image processing system and methods for aligning skin features for early skin cancer detection systems
US20090327890A1 (en) * 2008-06-26 2009-12-31 Raytheon Company Graphical user interface (gui), display module and methods for displaying and comparing skin features
US8554016B2 (en) 2010-11-10 2013-10-08 Raytheon Company Image registration system and method for registering images for deformable surfaces
US8711210B2 (en) 2010-12-14 2014-04-29 Raytheon Company Facial recognition using a sphericity metric
JP2014021782A (ja) * 2012-07-19 2014-02-03 Canon Inc 画像処理装置、その制御方法及びプログラム
US9092697B2 (en) 2013-02-07 2015-07-28 Raytheon Company Image recognition system and method for identifying similarities in different images

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000217022A (ja) * 1999-01-21 2000-08-04 Fuji Photo Film Co Ltd 電子スチルカメラおよびその画像デ―タ記録再生方法
JP2003150932A (ja) * 2001-11-12 2003-05-23 Olympus Optical Co Ltd 画像処理装置およびプログラム
JP2005027233A (ja) * 2003-07-03 2005-01-27 Fuji Photo Film Co Ltd デジタルカメラ、注文情報記録プログラム、及び表示プログラム

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5638136A (en) * 1992-01-13 1997-06-10 Mitsubishi Denki Kabushiki Kaisha Method and apparatus for detecting flesh tones in an image
US5488429A (en) * 1992-01-13 1996-01-30 Mitsubishi Denki Kabushiki Kaisha Video signal processor for detecting flesh tones in am image
EP1158786A3 (en) * 2000-05-24 2005-03-09 Sony Corporation Transmission of the region of interest of an image
JP3870036B2 (ja) * 2001-05-24 2007-01-17 キヤノン株式会社 プリントオーダー作成方法
US7493559B1 (en) * 2002-01-09 2009-02-17 Ricoh Co., Ltd. System and method for direct multi-modal annotation of objects
JP2004062565A (ja) * 2002-07-30 2004-02-26 Canon Inc 画像処理装置及び方法並びにプログラム記憶媒体
JP3855939B2 (ja) * 2003-01-31 2006-12-13 ソニー株式会社 画像処理装置、画像処理方法及び撮影装置
US7587068B1 (en) * 2004-01-22 2009-09-08 Fotonation Vision Limited Classification database for consumer digital images
US7920725B2 (en) * 2003-09-09 2011-04-05 Fujifilm Corporation Apparatus, method, and program for discriminating subjects
US7822233B2 (en) * 2003-11-14 2010-10-26 Fujifilm Corporation Method and apparatus for organizing digital media based on face recognition
US7865480B2 (en) * 2003-12-08 2011-01-04 Oracle International Corporation Systems and methods for validating objects models

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000217022A (ja) * 1999-01-21 2000-08-04 Fuji Photo Film Co Ltd 電子スチルカメラおよびその画像デ―タ記録再生方法
JP2003150932A (ja) * 2001-11-12 2003-05-23 Olympus Optical Co Ltd 画像処理装置およびプログラム
JP2005027233A (ja) * 2003-07-03 2005-01-27 Fuji Photo Film Co Ltd デジタルカメラ、注文情報記録プログラム、及び表示プログラム

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008311920A (ja) * 2007-06-14 2008-12-25 Fujifilm Corp 撮像装置
US9065998B2 (en) 2007-06-14 2015-06-23 Fujifilm Corporation Photographing apparatus provided with an object detection function
US9131138B2 (en) 2007-06-14 2015-09-08 Fujifilm Corporation Photographing apparatus
JP2011510533A (ja) * 2008-01-07 2011-03-31 ソニー エリクソン モバイル コミュニケーションズ, エービー Exifにおける被写体の座標
JP2011014953A (ja) * 2009-06-30 2011-01-20 Nippon Hoso Kyokai <Nhk> 2次元コード表示用電子文書生成装置およびそのプログラム、ならびに、デジタル放送送信装置
KR101549599B1 (ko) * 2014-06-02 2015-09-02 고권태 안면인식과 태그인식을 이용하여 접근자의 신분확인 및 동선추적이 가능한 제한구역 출입 경고시스템

Also Published As

Publication number Publication date
JP4605458B2 (ja) 2011-01-05
US20060227385A1 (en) 2006-10-12

Similar Documents

Publication Publication Date Title
JP4605458B2 (ja) 画像処理装置及び画像処理プログラム
JP2006293783A (ja) 画像処理装置及び画像処理プログラム
JP2006293782A (ja) 画像処理装置及び画像処理プログラム
JP4388367B2 (ja) 電子画像の傾きを修正する方法及び画像処理システム、画像取り込みシステム、並びに、カメラ
KR100857815B1 (ko) 화상 재생 장치 및 그 제어방법
US7893963B2 (en) Digital camera which estimates and corrects small camera rotations
US7734098B2 (en) Face detecting apparatus and method
JP4218712B2 (ja) 顔検出装置、撮像装置および顔検出方法
JP2009100301A (ja) 構図判定装置、構図判定方法、プログラム
JP2007074578A (ja) 画像処理装置、撮影装置、及びプログラム
JP2009194644A (ja) 画像処理装置,画像処理方法及び撮像装置
JP2007148691A (ja) 画像処理装置
JP4894708B2 (ja) 撮像装置
JP2008035125A (ja) 撮像装置、画像処理方法およびプログラム
JP5504990B2 (ja) 撮像装置、画像処理装置及びプログラム
KR20080021519A (ko) 화상 처리 장치 및 방법, 프로그램 및 촬상 장치
JPH08331495A (ja) 撮影機能付き電子アルバムシステム
JP2016019249A (ja) 表示制御装置
JP5213506B2 (ja) 画像処理装置、画像処理装置の制御方法及びプログラム
JP4807582B2 (ja) 画像処理装置、撮像装置及びそのプログラム
US8781302B2 (en) Moving image reproducing apparatus and control method therefor, and storage medium
JP4632417B2 (ja) 撮像装置、及びその制御方法
JP2006293784A (ja) 画像処理装置及び画像処理プログラム
JP2009042989A (ja) 画像処理装置
JPWO2006016461A1 (ja) 撮像装置

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20070115

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080122

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100305

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100317

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100513

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100623

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100823

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100909

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

R150 Certificate of patent or registration of utility model

Ref document number: 4605458

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100922

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131015

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees