JP2001103304A

JP2001103304A - 特定被写体抽出方法および装置

Info

Publication number: JP2001103304A
Application number: JP2000228729A
Authority: JP
Inventors: Naoto Kaneshiro; 金城　　直人
Original assignee: Fuji Photo Film Co Ltd
Current assignee: Fujifilm Holdings Corp
Priority date: 1999-07-29
Filing date: 2000-07-28
Publication date: 2001-04-13

Abstract

(57)【要約】【課題】デジタルおよびアナログのフォトプリンタ等に
おいて、様々な状態の画像に対応して、高精度な特定被
写体の抽出を、良好な効率で行うことを可能にする特定
被写体抽出方法およびこれを用いる特定被写体抽出装置
を提供する。【解決手段】複数の特定被写体抽出アルゴリズムを逐次
的に実行するに際し、後段の抽出アルゴリズムの抽出条
件を、前段の抽出アルゴリズムによる抽出結果に適応さ
せて変更することにより、上記課題を解決する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、特定被写体抽出方
法および装置に関し、より具体的には、通常シーンでの
特定被写体、例えば人物の顔抽出性能を維持し、かつ、
近接ストロボ撮影シーンや、逆光撮影シーンでの特定被
写体、例えば人物の顔抽出性能を向上させることが可能
な特定被写体抽出方法および装置に関するものである。

【０００２】

【従来の技術】従来、ネガフィルム、リバーサルフィル
ム等の写真フィルム（以下、単にフィルムという）に撮
影された画像の感光材料（印画紙）への焼き付けは、フ
ィルムの画像を感光材料に投影して感光材料を面露光す
る、いわゆる直接露光（アナログ露光）が主流であっ
た。

【０００３】これに対し、近年では、デジタル露光を利
用する焼付装置、すなわち、フィルムに記録された画像
を光電的に読み取って、読み取った画像をデジタル信号
とした後、種々の画像処理を施して記録用の画像データ
とし、この画像データに応じて変調した記録光によって
感光材料を走査露光して画像（潜像）を記録し、仕上り
プリント（以下、単にプリントという）とするデジタル
フォトプリンタが実用化されている。

【０００４】デジタルフォトプリンタでは、画像をデジ
タルの画像データとして、画像データ処理によって焼付
時の露光条件を決定することができるので、逆光やスト
ロボ撮影等に起因する画像の飛びやツブレの補正、シャ
ープネス（鮮鋭化）処理、カラーあるいは濃度フェリア
の補正等を好適に行って、従来の直接露光では得られな
かった高品位なプリントを得ることができる。また、複
数画像の合成や画像分割、さらには文字の合成等も画像
データ処理によって行うことができ、用途に応じて自由
に編集／処理したプリントも出力可能である。

【０００５】しかも、デジタルフォトプリンタによれ
ば、画像をプリントとして出力するのみならず、画像デ
ータをコンピュータ等に供給したり、フロッピー（登録
商標）ディスク等の記録媒体に保存しておくこともでき
るので、画像データを、写真以外の様々な用途に利用す
ることができる。

【０００６】このようなデジタルフォトプリンタは、基
本的に、フィルムに記録された画像を光電的に読み取る
スキャナ（画像読取装置）、および読み取った画像を画
像処理して出力用の画像データ（露光条件）とする画像
処理装置を有する画像入力装置と、画像入力装置から出
力された画像データに応じて感光材料を走査露光して潜
像を記録するプリンタ（画像記録装置）、および、露光
済の感光材料に現像処理を施してプリントとするプロセ
サ（現像装置）を有する画像出力装置とを有している。

【０００７】スキャナでは、光源から射出された読取光
をフィルムに入射して、フィルムに撮影された画像を担
持する投影光を得て、この投影光を結像レンズによって
ＣＣＤセンサ等のイメージセンサに結像して光電変換す
ることにより、画像を読み取り、必要に応じて各種の画
像処理を施した後に、フィルム画像の画像データ（画像
データ信号）として画像処理装置に送る。画像処理装置
は、スキャナによって読み取られた画像データから画像
処理条件を設定して、設定した条件に応じた画像処理を
画像データに施し、画像記録のための出力画像データ
（露光条件）としてプリンタに送る。

【０００８】プリンタでは、例えば光ビーム走査露光を
利用する装置であれば、画像処理装置から送られた画像
データに応じて光ビームを変調して、この光ビームを主
走査方向に偏向すると共に、主走査方向と直交する副走
査方向に感光材料を搬送することにより、画像を担持す
る光ビームによって感光材料を露光（焼付け）して潜像
を形成し、次いで、プロセサにおいて感光材料に応じた
現像処理等を施して、フィルムに撮影された画像が再生
されたプリントとする。

【０００９】

【発明が解決しようとする課題】ところで、このような
デジタルフォトプリンタ、通常のアナログのフォトプリ
ンタ（以下、両者をまとめてフォトプリンタという）を
問わず、画像中に人物が存在する場合には、人物の顔が
最も重要視され、その仕上りが、再生画像すなわちプリ
ントの品質や評価に大きな影響を与える。

【００１０】そのため、従来のフォトプリンタでは、フ
ィルムに撮影された画像から人物の顔（顔領域）を抽出
し、顔が好ましく仕上がるように露光条件（デジタルフ
ォトプリンタでは出力用の画像データを得るための画像
処理条件、アナログのフォトプリンタでは露光光量や色
フィルタの挿入量等）を決定している。特に、デジタル
フォトプリンタでは、前述のように、画像データ処理に
よって非常に自由度の高い画像処理を行うことができる
ので、顔の情報は、画像に応じた最適な画像処理条件を
設定するための重要な情報となり、適正な顔抽出を行う
ことにより、高品位なプリントを、より安定して作成す
ることが可能となる。

【００１１】このような事情の下、従来から、顔のみな
らず、各種の主要被写体等の特定被写体の抽出を行うた
めの被写体抽出の方法が、各種提案されており、例え
ば、画像の色相や彩度を用いた肌色抽出や、画像のエッ
ジ部を検出することによる輪郭抽出等が知られている。
しかしながら、フィルムに撮影される画像の状態は、ス
トロボ撮影、逆光シーン、オーバー（露光過剰）、アン
ダー（露光不足）、カラーフェリア等の様々な撮影条件
で変わるため、これらの方法では、様々な状態の画像に
対応して顔抽出を安定して高精度に行うことは困難であ
る。

【００１２】他方、複数の被写体抽出方法を組み合わせ
ることにより、顔抽出の精度を上げることは可能である
が、様々な状態の画像に対応して、安定的に高精度な顔
抽出を行うためには、多数の被写体抽出方法を組み合わ
せる必要があり、被写体抽出のための処理演算時間の増
大を避けることはできず、プリント作成効率の低下等を
招く結果となる。

【００１３】本発明は、上記事情に鑑みてなされたもの
であり、その目的とするところは、従来技術の前記問題
点を解決して、デジタルおよびアナログのフォトプリン
タ等において、様々な状態の画像に対応して、高精度な
特定被写体の抽出を、良好な効率で行うことを可能にす
る特定被写体抽出方法およびこの方法を用いる特定被写
体抽出装置を提供することにある。

【００１４】

【課題を解決するための手段】上記目的を達成するため
に、本発明の第１の態様は、複数の特定被写体抽出アル
ゴリズムを逐次的に実行するに際し、後段の抽出アルゴ
リズムの抽出条件を、前段の抽出アルゴリズムによる抽
出結果に適応させて変更することを特徴とする特定被写
体抽出方法を提供するものである。

【００１５】また、本発明の第２の態様は、複数の特定
被写体抽出アルゴリズムを並列処理で実行することを複
数の段階において実行するに際し、各段階の抽出状況を
管理し、前段階の抽出状況により、後続の段階の抽出処
理条件を限定して前記後続の段階の前記複数の特定被写
体抽出アルゴリズムを並列処理で実行することを特徴と
する特定被写体抽出方法を提供するものである。なお、
本明細書における「並列処理」には、時分割による実質
的な並列処理を含むものとする。

【００１６】ここで、前記抽出処理条件は、前記後続の
段階の前記複数の特定被写体抽出アルゴリズムを実行す
る時の抽出処理対象エリア、または前記後続の段階で実
行する抽出アルゴリズムの種類、もしくは、前記後続の
段階で実行する抽出アルゴリズム内部の制御パラメータ
であるのが好ましい。

【００１７】また、前記各段階において並列処理で実行
する前記複数の特定被写体抽出アルゴリズムは、前記複
数の段階において同一の組み合わせ、または、互いに異
なる組み合わせであるのが好ましい。

【００１８】一方、本発明は、上記特定被写体抽出方法
を用いる特定被写体抽出装置として具体化することが可
能である。

【００１９】すなわち、本発明の第３の態様は、複数の
特定被写体抽出アルゴリズムを逐次的に実行する複数段
の被写体抽出処理手段と、前段の被写体抽出処理手段に
よる被写体抽出結果に応じて後段の被写体抽出処理手段
における抽出条件を適応的に変更する抽出条件変更制御
手段とを有することを特徴とする特定被写体抽出装置を
提供するものである。

【００２０】また、本発明の第４の態様は、複数段階に
おいて各々複数の特定被写体抽出アルゴリズムを並列処
理で実行する複数段の被写体抽出並列処理手段と、この
複数段の被写体抽出並列処理手段による各段階の抽出状
況を管理し、前段階の被写体抽出並列処理手段による被
写体抽出状況により、後続の段階の被写体抽出並列処理
手段の抽出処理条件を限定する制御手段とを有すること
を特徴とする特定被写体抽出装置を提供するものであ
る。

【００２１】ここで、前記制御手段は、前記抽出処理条
件として、前記後続の段階の被写体抽出並列処理手段の
抽出処理対象エリア、または、前記後続の段階の被写体
抽出並列処理手段で実行する抽出アルゴリズムの種類、
もしくは、前記後続の段階の被写体抽出並列処理手段で
実行する抽出アルゴリズム内部の制御パラメータを限定
するのが好ましい。

【００２２】また、前記被写体抽出並列処理手段は、前
記複数の段階の各段階において同一の組み合わせ、また
は、互いに異なる組み合わせの前記複数の特定被写体抽
出アルゴリズムを並列処理で実行するのが好ましい。

【００２３】

【発明の実施の形態】本発明に係る特定被写体抽出方法
および装置を添付の図面に示す好適実施例に基づいて以
下に詳細に説明する。

【００２４】図１に、本発明の一実施例に係る特定被写
体抽出方法を実施する特定被写体抽出装置を内蔵するデ
ジタルフォトプリンタ１０のブロック構成図を示す。図
１に示すデジタルフォトプリンタ（以下、単にフォトプ
リンタという）１０は、基本的に、フィルムＦに撮影さ
れた画像を光電的に読み取るスキャナ（画像読取装置）
１２と、読み取られた画像データ（画像情報）の画像処
理やフォトプリンタ１０全体の操作および制御等を行う
画像処理装置１４と、画像処理装置１４から出力された
画像データに応じて変調した光ビームで感光材料（印画
紙）を画像露光し、現像処理してプリントとして出力す
るプリンタ１６とから構成される。

【００２５】画像処理装置１４には、様々な条件の入力
（設定）、処理の選択や指示、色／濃度補正などの指示
等を入力するためのキーボード１８ａおよびマウス１８
ｂを有する操作系１８と、スキャナ１２で読み取られた
画像、各種の操作指示、条件の設定／登録画面等を表示
するディスプレイ２０とが接続される。

【００２６】なお、本実施例に示す特定被写体抽出装置
は、このようなフォトプリンタのみならず、フィルムに
撮影された画像を光電的に読み取って、得られた画像デ
ータから絞り量などの露光光量や色フィルタ挿入量など
の色調整量等の露光条件を設定し、この露光条件に応じ
て、フィルムの投影光で感光材料を露光する、従来の直
接露光によるアナログのフォトプリンタにも好適に利用
可能である。

【００２７】スキャナ１２は、フィルムＦ等に撮影され
た画像を１コマずつ光電的に読み取る装置で、光源２２
と、可変絞り２４と、フィルムＦに入射する読取光をフ
ィルムＦの面方向で均一にする拡散ボックス２８と、結
像レンズユニット３２と、Ｒ（赤）、Ｇ（緑）およびＢ
（青）の各画像読取に対応するラインＣＣＤセンサを有
するイメージセンサ３４と、アンプ（増幅器）３６と、
Ａ／Ｄ（アナログ／デジタル）変換器３８とを有する。

【００２８】また、フォトプリンタ１０においては、新
写真システム（Ａdvanced ＰhotoＳystem ）や１３５サ
イズのネガ（あるいはリバーサル）フィルム等のフィル
ムの種類やサイズ、ストリップスやスライド等のフィル
ムの形態等に応じて、スキャナ１２の本体に装着自在な
専用のキャリア３０が用意されており、このキャリア３
０を交換することにより、各種のフィルムや処理に対応
することができる。フィルムに撮影され、プリント作成
に供される画像（コマ）は、このキャリア３０によって
所定の読取位置に搬送される。

【００２９】このようなスキャナ１２において、フィル
ムＦに撮影された画像を読み取る際には、光源２２から
射出され、可変絞り２４によって光量調整された読取光
が、キャリアによって所定の読取位置に位置されたフィ
ルムＦに入射して、透過することにより、フィルムＦに
撮影された画像を担持する投影光を得る。

【００３０】上述のキャリア３０は、図２（Ａ）に模式
的に示されるように、所定の読取位置にフィルムＦを位
置させつつ、イメージセンサ３４のラインＣＣＤセンサ
の延在方向（主走査方向）と直交する副走査方向に、フ
ィルムＦの長手方向を一致させて搬送する、読取位置を
副走査方向に挟んで配置される搬送ローラ対３０ａおよ
び３０ｂと、フィルムＦの投影光を所定のスリット状に
規制する、読取位置に対応して位置する主走査方向に延
在するスリット４０ａを有するマスク４０とを有する。

【００３１】フィルムＦは、このキャリア３０によって
読取位置に位置付けされて副走査方向に搬送されつつ、
読取光を入射される。これにより、結果的にフィルムＦ
が主走査方向に延在するスリット４０ａによって２次元
的に走査され、フィルムＦに撮影された各コマの画像が
読み取られる。

【００３２】なお、図２（Ａ）中の参照符号４４は、フ
ィルムＦに光学的に記録されるＤＸコード、拡張ＤＸコ
ード、ＦＮＳコード等のバーコードを読み取るためのコ
ードリーダである。また、新写真システムのフィルムに
は、磁気記録媒体が形成されており、新写真システムの
フィルム（カートリッジ）に対応するキャリアには、こ
の磁気記録媒体に記録された情報を読み取り、また、必
要な情報を記録する磁気ヘッドが配置され、フィルムＦ
の画像読取時に、この磁気ヘッドによって磁気情報が読
み取られ、必要な情報がスキャナ１２から画像処理装置
１４に送られる。

【００３３】前述のように、読取光はキャリア３０に保
持されたフィルムＦを透過して画像を担持する投影光と
なり、この投影光は、結像レンズユニット３２によって
イメージセンサ３４の受光面に結像される。

【００３４】図２（Ｂ）に示されるように、イメージセ
ンサ３４は、Ｒ画像の読み取りを行うラインＣＣＤセン
サ３４Ｒ、Ｇ画像の読み取りを行うラインＣＣＤセンサ
３４Ｇ、およびＢ画像の読み取りを行うラインＣＣＤセ
ンサ３４Ｂを有する、いわゆる３ラインのカラーＣＣＤ
センサで、各ラインＣＣＤセンサは、前述のように主走
査方向に延在している。フィルムＦの投影光は、このイ
メージセンサ３４によって、Ｒ、ＧおよびＢの３原色に
分解されて光電的に読み取られる。イメージセンサ３４
の出力信号は、アンプ３６で増幅され、Ａ／Ｄ変換器３
８でデジタル信号とされて、画像処理装置１４に送られ
る。

【００３５】スキャナ１２においては、フィルムＦに撮
影された画像の読み取りを、低解像度で読み取るプレス
キャンと、出力画像の画像データを得るための本スキャ
ンとの、２回の画像読み取りで行う。プレスキャンは、
スキャナ１２が対象とする全てのフィルムの画像を、イ
メージセンサ３４が飽和することなく読み取れるよう
に、あらかじめ設定された、プレスキャンの読取条件で
行われる。一方、本スキャンは、プレスキャンデータか
ら、その画像（コマ）の最低濃度よりも若干低い濃度で
イメージセンサ３４が飽和するように、各コマ毎に設定
された本スキャンの読取条件で行われる。プレスキャン
と本スキャンとの出力信号は、解像度と出力レベルが異
なる以外は、基本的に同じデータである。

【００３６】なお、本発明の特定被写体抽出方法および
装置を利用するフォトプリンタにおいて、スキャナは、
このようなスリット走査読取によるものに限定されず、
１コマの画像の全面に読取光を照射して一度に読み取
る、面読取を利用するものであってもよい。この場合に
は、例えば、エリアＣＣＤセンサを用い、光源とフィル
ムＦとの間に、Ｒ、ＧおよびＢの各色フィルタの挿入手
段を設け、色フィルタを挿入してエリアＣＣＤセンサで
画像を読み取ることを、Ｒ、ＧおよびＢの各色フィルタ
で順次行い、フィルムに撮影された画像を３原色に分解
して順次行う。

【００３７】前述のように、スキャナ１２から出力され
たデジタル信号は、画像処理装置１４に出力される。図
３に、画像処理装置１４のブロック図を示す。画像処理
装置１４は、データ処理部４８、Ｌｏｇ変換器５０、プ
レスキャン（フレーム）メモリ５２、本スキャン（フレ
ーム）メモリ５４、プレスキャン処理部５６、本スキャ
ン処理部５８および条件設定部６０から構成される。

【００３８】なお、図３は、主に画像処理関連の部位を
示すものであり、画像処理装置１４には、これ以外に
も、画像処理装置１４を含むフォトプリンタ１０全体の
制御や管理を行うＣＰＵ、フォトプリンタ１０の作動等
に必要な情報を記憶するメモリ等が配置され、また、操
作系１８やディスプレイ２０は、このＣＰＵ等（ＣＰＵ
バス）を介して各部位に接続される。

【００３９】スキャナ１２から出力されたＲ、Ｇおよび
Ｂの各デジタル信号は、データ処理部４８において、暗
時補正、欠陥画素補正、シェーディング補正等の所定の
データ処理を施された後、Ｌｏｇ変換器５０によって変
換されてデジタルの画像データ（濃度データ）とされ、
プレスキャンデータはプレスキャンメモリ５２に、本ス
キャンデータは本スキャンメモリ５４に、それぞれ記憶
（格納）される。

【００４０】プレスキャンメモリ５２に記憶されたプレ
スキャンデータは、画像データ処理部６２と画像データ
変換部６４とを有するプレスキャン処理部５６に、他
方、本スキャンメモリ５４に記憶された本スキャンデー
タは、画像データ処理部６６と画像データ変換部６８と
を有する本スキャン処理部５８に読み出されて、処理さ
れる。プレスキャン処理部５６の画像データ処理部６２
と、本スキャン処理部５８の画像データ処理部６６と
は、後述する条件設定部６０が設定した処理条件に応じ
て、スキャナ１２によって読み取られた画像（画像デー
タ）に、所定の画像処理を施す部位で、両者は、解像度
が異なる以外は、基本的に同じ処理を行う。

【００４１】６２、６６の両画像データ処理部による画
像処理には特に限定はなく、公知の各種の画像処理が例
示されるが、例えば、ＬＵＴ（ルックアップテーブル）
を用いたグレイバランス調整、階調補正および濃度（明
るさ）調整、マトリクス（ＭＴＸ）による撮影光源種補
正や画像の彩度調整（色調整）、その他、ローパスフィ
ルタ、加算器、ＬＵＴ、ＭＴＸ等を用いた、また、これ
らを適宜組み合わせた平均化処理や補間演算等を用い
た、電子変倍処理、覆い焼き処理（濃度ダイナミックレ
ンジの圧縮／伸長）、シャープネス（鮮鋭化）処理等が
例示される。これらの各画像処理条件は、プレスキャン
データを用いて後述する条件設定部６０において設定さ
れる。

【００４２】画像データ変換部６８は、画像データ処理
部６６によって処理された画像データを、例えば、３Ｄ
（三次元）−ＬＵＴ等を用いて変換して、プリンタ１６
による画像記録に対応する画像データとしてプリンタ１
６に供給する。画像データ変換部６４は、画像データ処
理部６２によって処理された画像データを、必要に応じ
て間引いて、同様に、３Ｄ−ＬＵＴ等を用いて変換し
て、ディスプレイ２０による表示に対応する画像データ
として、ディスプレイ２０に供給する。両者における処
理条件は、プレスキャンデータを用いて、後述する条件
設定部６０で設定される。

【００４３】条件設定部６０は、プレスキャン処理部５
６および本スキャン処理部５８における各種の処理条件
や、本スキャンの読取条件を設定する。この条件設定部
６０は、セットアップ部７２、キー補正部７４およびパ
ラメータ統合部７６を有する。

【００４４】セットアップ部７２は、プレスキャンデー
タを用いて画像の主要部（本発明においては、特定被写
体を指す）を抽出する主要部抽出部７２Ａと、この主要
部抽出部７２Ａが抽出した特定被写体の情報、プレスキ
ャンデータおよび必要に応じて行われるオペレータの指
示に応じて、本スキャンの読取条件を設定してスキャナ
１２に供給し、また、プレスキャン処理部５６および本
スキャン処理部５８の画像処理条件を作成（演算）して
パラメータ統合部７６に供給する、設定部７２Ｂとを有
する。上述の主要部抽出部７２Ａは、本発明に係る特定
被写体抽出方法を実施する特定被写体抽出装置を構成す
るものである。

【００４５】図４に、特定被写体となる主要部として人
物の顔を抽出する、本発明の特定被写体抽出装置を構成
する主要部抽出部７２Ａの一実施例のブロック図を示す
が、本発明はこれに限定されるわけではない。主要部抽
出部７２Ａは、第１の抽出処理として顔輪郭の抽出を行
う顔輪郭・円形状抽出部７８と、この顔輪郭・円形状抽
出部７８の処理結果に基づいて、第２の抽出処理とし
て、その内部の条件変更部８０ａによって抽出条件を変
更して色空間における肌色定義領域を広げた肌色エリア
の抽出を行う肌色検出処理部８０とを有する。

【００４６】顔輪郭・円形状抽出部７８は、顔輪郭・円
形状抽出アルゴリズムを実行して、エッジ抽出および円
形状抽出を行うことにより、特定被写体としての顔領域
を抽出する。すなわち、人の顔は、一般的に楕円形であ
るので、顔輪郭・円形状抽出部７８は、人の顔であると
推定される楕円形状または円形状の部分を抽出して、顔
候補領域とする。なお、この顔輪郭・円形状抽出アルゴ
リズムによる顔領域の抽出に関しては、例えば、本発明
者の出願に係る特開平８−１８４９２５号公報に開示さ
れている技術を好適に用いることが可能である。

【００４７】この技術は、画像中の人の顔に相当する領
域およびその周辺の領域の色の影響を受けることなく人
の顔に相当する領域のみを抽出するもので、画像データ
を取り込み、２値化やその他の手法により、画像を複数
の領域に分割した後に、複数領域の輪郭から、人の頭部
の輪郭を表わすパターン、人の顔の輪郭を表わすパター
ン、人の顔の内部構造を表わすパターン、人の胴体の輪
郭を表わすパターンをそれぞれ検出し、検出したパター
ンに応じて顔候補領域を設定し、符号が正の重み係数を
付与することを順次行い、また、人でない領域には符号
が負の重み係数を付与し、各処理で設定された顔候補領
域および重み係数から、人の顔に相当する領域である確
率が最も高い領域を抽出するというものである。

【００４８】また、肌色検出処理部８０は、前段の顔輪
郭・円形状抽出部７８の処理結果に適応させて、条件変
更部８０ａで後段の肌色抽出の抽出条件を変更して、肌
色抽出アルゴリズムによる肌色抽出を行うことにより、
特定被写体としての顔領域を抽出しようとするものであ
る。すなわち、肌色検出処理部８０は、条件変更部８０
ａで変更された肌色抽出条件によって画像データから各
画素の色相および彩度を検出して、人の肌に対応する肌
色と推定できる画素領域（肌色領域）を抽出するもので
ある。従来は、逆光撮影、ストロボ撮影等、撮影条件に
よっては、肌色が通常の色相や濃度から大きくずれるこ
とがあり、このような場合には、肌色領域の検出精度が
大きく低下することは前述の通りである。

【００４９】これに対して、本実施例に係る特定被写体
抽出方法および装置は、第１ステップとして、顔輪郭・
円形状抽出部７８による顔候補領域を抽出した後、さら
に、第２ステップとして、上記顔候補領域について、そ
の抽出結果に適応させて条件変更部８０ａで変更された
肌色抽出条件に基づいて肌色検出処理部８０で、当該領
域が肌色領域であるか否かの判定を行うようにして、上
述の問題を解決したものである。以下、本実施例に係る
特定被写体抽出方法およびこれを実施する特定被写体抽
出装置の作用の要点を、図５に示す動作フロー図に基づ
いて詳細に説明する。

【００５０】まず、顔輪郭・円形状抽出部７８は、プレ
スキャン画像データ（必要に応じて間引いてもよい）
に、微分フィルタ処理によるエッジ検出および所定の閾
値による２値化を行い、検出されたエッジに基づいてト
レースを行う。ここで得られた輪郭のラインから抽出さ
れる図形を、予め用意してある人の顔の形状に見たてた
楕円形状の図形と照合して、所定の類似度を有するもの
を、人の顔に相当する領域である確率が高い候補領域と
して抽出する（ステップ５０１）。

【００５１】次に、肌色検出処理部８０は、上記顔輪郭
・円形状抽出部７８により抽出された人の顔に相当する
領域である確率が高い候補領域内の画像データから、条
件変更部８０ａで変更された肌色抽出条件に基づいて、
各画素の色相および彩度を検出して、人の肌に対応する
肌色と推定できる画素領域（肌色領域）を抽出する（ス
テップ５０２〜５０５）。この場合、条件変更部８０ａ
は、検出した色相および彩度が肌色の範疇に入るか否か
の判定条件（肌色抽出条件）を、通常の肌色判定の条件
より緩和することが好ましい。

【００５２】すなわち、前述のように、従来は、人の肌
色は撮影条件によって大きく変化するので、通常は、判
定条件を厳しくして人の顔でない領域を人の顔であると
判定することがないようにしているが、本発明では、判
定対象は人の顔に相当する領域である確率が高い候補領
域であるので、むしろ肌色判定にはその確認の意味を持
たせて、条件変更部８０ａで肌色判定の条件を通常より
緩和することにより、通常の判定条件では人の顔でない
と判定される、ストロボ撮影画像、逆光撮影画像中の人
物を確実に検出（救済）しようとするものである。

【００５３】そのため、ここでは、前段の顔輪郭・円形
状抽出部７８により抽出された人の顔に相当する領域で
ある確率が高い候補領域については、例えば、色空間に
おけるグレーに近い領域に肌色定義領域を広げるとか、
肌色定義領域をグレーに近い領域に移動させるという方
法で、肌色検出処理部８０の条件変更部８０ａで肌色ア
ルゴリズムの抽出条件となる肌色判定の条件を緩和す
る。これにより、従来の通常の判定条件では人の顔でな
いと判定される、ストロボ撮影画像、逆光撮影画像中の
人物を確実に検出することが可能になるという効果が得
られる。

【００５４】なお、上記第１ステップの抽出結果におけ
る顔らしさの確度が大であるほど肌色判定条件を緩和す
る度合を大とするよう、連続的な制御としてもよい。ま
た、上記第１ステップの抽出結果における顔らしさの確
度が大であり、かつ抽出エリア濃度（ポジ画像におけ
る）が第１の所定値よりも大である場合は、逆光シーン
の可能性が大であるとみなして、肌色判定の条件を緩和
してもよい。さらに、上記ステップ５０１の抽出結果に
おける顔らしさの確度が大であり、かつ抽出エリア濃度
（ポジ画像における）が第２の所定値より小の場合は、
ストロボシーンの可能性が大であるとみなして、肌色判
定の条件を緩和してもよい。

【００５５】ここで、上記抽出結果における確度の決め
方については、例えば、本発明者の出願に係る特開平９
−１３８４７１号公報中の図５に示されている、検出方
向成分数が大であるほど確度を大とする方法、または、
縦横比が所定値に近いほど確度を大とする方法が、好適
に利用し得る。さらに、抽出エリアが、他の抽出エリア
と重複する度合が大であるほど確度を大とするようにし
てもよい。

【００５６】次に、本発明の他の実施例に係る特定被写
体抽出装置およびその作用ならびに特定被写体抽出方法
を、図６に示すブロック図および図７に示す動作フロー
図に基づいて詳細に説明する。図６に示す実施例の特定
被写体抽出装置は、図４に示す実施例の肌色検出処理部
８０の代わりに、眼／鼻／口などの顔構成要素の検出処
理部８２を用いて主要部抽出部７２Ａを構成するもので
ある。図７の動作フロー図に示すように、本実施例に係
る特定被写体抽出方法および装置においては、第１ステ
ップとして、同様に、顔輪郭・円形状抽出部７８による
顔候補領域を抽出した後、さらに、第２ステップとし
て、上記顔候補領域について、その抽出結果に適応させ
て条件変更部８２ａで変更された顔構成要素抽出条件に
基づいて検出処理部８２で、当該領域内に、眼／鼻／口
などの顔構成要素が存在するか否かの判定を行うように
したものである。

【００５７】ここでは、検出処理部８２での第２ステッ
プにおける眼／鼻／口などの顔構成要素の検出処理にお
いて、条件変更部８２ａでエッジ検出用閾値を低めに設
定するようにしており、これにより、通常の判定では眼
／鼻／口などの顔構成要素とは判定されず無視される可
能性がある、ストロボ撮影画像、逆光撮影画像中の人物
についても、その眼／鼻／口などの顔構成要素を確実に
検出して、ストロボ撮影画像、逆光撮影画像中の人物を
確実に検出することが可能になるという効果が得られ
る。

【００５８】なお、上述のような第１ステップ、第２ス
テップの組み合わせは、上記実施例に示したものに限定
されるものではなく、Ｎ種類（Ｎ≧２）の特定被写体の
抽出アルゴリズムを各々Ｎ種類の特定被写体抽出処理部
で逐次的に実行する際に、抽出条件変更制御部で、後段
の抽出アルゴリズムの抽出条件を前段の抽出アルゴリズ
ムによる抽出結果に適応させて変更することが、その要
点であることは前述の通りである。

【００５９】以下、本発明のさらに他の実施例を説明す
る。本実施例に係る特定被写体抽出方法および装置は、
ある特定形状の輪郭により画像領域を分断し、次段の抽
出処理へ移行するというもので、この実施例において
は、第１ステップとして、ある特定形状の輪郭抽出処理
の結果に基づいて、エリア分割を行った後、さらに、第
２ステップとして、上記エリア内において、色または濃
度によるクラスタリングを行って、さらなる領域分割を
行うようにしている。そして、上記の各分割エリアの画
像特徴量を求めて、その画像特徴量に基づいて特定被写
体の判定を行う。

【００６０】上記実施例によれば、第１ステップで意味
のある大まかなエリア切り出しを行うことで、第２ステ
ップ以降の判定（抽出）処理の精度が大幅に向上すると
いう効果が得られる。なお、ここでは、第１ステップと
して、顔輪郭抽出アルゴリズムを応用して、特定形状の
輪郭抽出処理を行う例を示したが、モフォロジ処理など
の円形状抽出処理を利用してもよい。

【００６１】以下、本発明のさらに他の実施例を説明す
る。本実施例に係る特定被写体抽出装置のブロック図を
概念的に図８に示す。図８に示す特定被写体抽出装置９
０は、並列に実行される３つの特定被写体抽出アルゴリ
ズムをそれぞれ実行する抽出サブユニット（以下、サブ
ユニットという）９２Ａ，９２Ｂおよび９２Ｃを含む抽
出並列処理ユニット（以下、単に抽出ユニットという）
９２と、サブユニット９４Ａ，９４Ｂおよび９４Ｃを含
む抽出ユニット９４と、サブユニット９６Ａ，９６Ｂお
よび９６Ｃを含む抽出ユニット９６と、カスケード接続
された抽出ユニット９２、９４および９６の抽出状況を
管理し、前段の抽出ユニット９２および９４の抽出状況
によってそれぞれ後段の抽出ユニット９４および９６の
抽出処理条件、例えば、被写体抽出処理対象エリアや実
行する特定被写体抽出アルゴリズムの種類や実行する特
定被写体抽出アルゴリズム内部の制御パラメータなどを
限定する抽出処理条件限定制御ユニット（以下、単に、
制御ユニットという）９８とを有する。

【００６２】図８に示す特定被写体抽出装置において
は、複数の被写体抽出アルゴリズムを１つの抽出ユニッ
トの複数のサブユニット、例えば抽出ユニット９２のサ
ブユニット９２Ａ，９２Ｂおよび９２Ｃ（抽出ユニット
９４および９６でも同様）でそれぞれ並列に（前述のよ
うに、時分割による実質的な並列処理を含む）実行し、
カスケード接続された複数個、例えば３個の抽出ユニッ
ト９２、９４および９６トの各々並列処理される複数の
被写体抽出アルゴリズムのそれぞれを複数個の抽出ユニ
ット毎に複数段階（ステップ）に分けて制御ユニット９
８が管理する。そして、制御ユニットが、各抽出ユニッ
ト９２、９４および９６毎に、各抽出ユニットの各サブ
ユニットの被写体抽出アルゴリズムについて、所定の抽
出ユニットのステップが終了した段階で複数（３つ）の
サブユニットの被写体抽出アルゴリズム間の整合性をチ
ェックする。

【００６３】上述の複数のサブユニットで並列に実行さ
れる被写体抽出アルゴリズムとしては、肌色抽出、顔輪
郭抽出、頭髪抽出、眼／鼻／口／眉抽出、胴体抽出、非
背景エリア抽出などの各処理（これを、サブユニット処
理と呼ぶ）が好適に例示される。また、上記被写体抽出
アルゴリズムにおける抽出処理を複数の段階の抽出ユニ
ットに分ける際には、例えば、画像の解像度、エッジ検
出の閾値、２値化処理の閾値などのパラメータを、段階
分けする方法などが好適に例示される。

【００６４】具体的には、上述の各サブユニットが、全
画面を対象として、あるサブユニット処理を用いて抽出
処理を実行した結果、ある抽出ユニットの段階（ステッ
プ）で、ある領域において複数のサブユニット処理によ
る抽出結果が重複したとするとき（重複度が所定値を越
えたときでもよい）、次の抽出ユニットのステップで
は、制御ユニット９８により、被写体抽出処理対象エリ
アを、上述の複数のサブユニット処理による抽出結果が
重複した領域付近に限定して、未検出の関連情報の抽出
を行うサブユニット処理を実行する。

【００６５】例えば、図９（Ａ）に示すように、第Ｎ
（抽出ユニットの）ステップで頭髪部と口が検出された
とすると（これらは、異なるサブユニットによる抽出結
果である）、これらは人の構成要素の一部であることか
ら、次の第Ｎ＋１（抽出ユニットの）ステップでは、制
御ユニット９８により、サブユニットで実行するサブユ
ニット処理を限定し、まだ検出されていない顔全体の輪
郭や、眼部（図９（Ｂ）参照）の検出を行うための被写
体抽出アルゴリズムを実行する。

【００６６】本実施例によれば、同一コマ内で、適用さ
れる抽出サブユニット処理が、前段の抽出結果を反映し
た形で制御されるので、抽出処理が効率的に行われるよ
うになるという効果が得られる。なお、上述の各サブユ
ニットで実行するサブユニット処理の種類または各サブ
ユニット処理の各抽出ユニットの段階への分け方は、上
記実施例に示したものに限定されるものではない。

【００６７】また、複数の段階の抽出ユニットにおいて
各段階の抽出ユニットの複数のサブユニットで実行され
るサブユニット処理（被写体抽出アルゴリズム）の構成
は、各抽出ユニットとも同一の組み合わせであっても良
いし、互いに異なる組み合わせであっても良い。また、
各抽出ユニットにおいて組み合わせるサブユニット処理
の数、すなわちサブユニットの数は、同じであっても異
なっていても良く、また、１つであっても良い。例え
ば、図８に示す特定被写体抽出装置９０において、サブ
ユニット９２Ａ、９４Ａおよび９６Ａは同一のサブユニ
ット処理とし、同様に、サブユニット９２Ｂ、９４Ｂお
よび９６Ｂも、サブユニット９２Ｃ、９４Ｃおよび９６
Ｃも、それぞれ同一のサブユニット処理とするように組
み合わせても良い。すなわち、各抽出ユニット９２、９
４および９６で同じでアルゴリズム構成とし、例えば各
抽出ユニット９２、９４および９６で解像度をそれぞれ
低、中、高と変化させても良い。なお、この時には、サ
ブユニット９２Ａ、９２Ｂおよび９２Ｃのサブユニット
処理は、同じであっても、互いに異なっていても良い
が、同じ場合には、処理対象を変えるとか、処理強度を
変えるなど、抽出条件などの処理条件を変えておくのが
良い。

【００６８】一方、各々の抽出ユニット９２、９４およ
び９６では、サブユニット９２Ａ、９２Ｂおよび９２Ｃ
のサブユニット処理の構成と、サブユニット９４Ａ、９
４Ｂおよび９４Ｃのサブユニット処理の構成と、サブユ
ニット９６Ａ、９６Ｂおよび９６Ｃのサブユニット処理
の構成とは、それぞれ互いに異なる組み合わせとなるよ
うにしても良い。例えば、第１段の抽出ユニット９２の
サブユニット９２Ａ、９２Ｂおよび９２Ｃでは、１〜Ｎ
種の内の３種の背景抽出アルゴリズムを組み合わせ、第
２段の抽出ユニット９４のサブユニット９４Ａ、９４Ｂ
および９４Ｃでは、顔輪郭抽出、肌色抽出、モフォロジ
関数による円形抽出などの中から３種の抽出アルゴリズ
ムを組み合わせ、第３段の抽出ユニット９６のサブユニ
ット９６Ａ、９６Ｂおよび９６Ｃでは、頭髪郭抽出、胴
体抽出、眼部抽出、鼻／口／眉毛抽出等の顔構成要素抽
出などの中から３種の抽出アルゴリズムを組み合わせて
も良い。

【００６９】また、制御ユニット９８で、複数のサブユ
ニットの出力の整合性をチェックする方法としては、上
述のような候補エリア間の重複度合の他、構成要素を所
定割合だけ抽出した段階をもって契機とする方法なども
用いることができる。この後、未実施または未検出であ
る、残りの構成要素の抽出処理を適用するように制御を
行うが、ここで、サブユニット処理内部の設定パラメー
タを限定して抽出処理を適用するようにしてもよい。

【００７０】サブユニット処理内部の設定パラメータを
限定する例としては、前述の画像の解像度、エッジ検出
の閾値、２値化処理の閾値などのパラメータを、その対
象エリアの面積や画像データの分布から限定する方法が
示される。このような条件が何等かの形で限定された抽
出処理の結果、好ましい方向になった場合（例えば、追
加の構成要素が抽出された場合など）には、その候補エ
リアを目的とする被写体と判定する。

【００７１】一方、抽出処理の結果が好ましい方向にな
らなかった場合には、整合性をチェックした途中段階の
抽出ユニットまで戻って、各サブユニットの処理を再ス
タートする。それ以後の動作は、先に説明した動作の繰
り返しとなる。上記実施例によれば、抽出シーケンスが
固定でなく、処理の進展に応じて好ましい方向に制御さ
れるので、対象物（画像）を効率的に抽出できる。

【００７２】なお、上述の各判定基準の調整は、画像
（データ）の解析結果に応じて主要部抽出部７２Ａが行
ってもよく、また、オペレータが判断して指示を入力し
てもよく、さらには、新写真システムのフィルムであれ
ば、磁気情報からストロボ撮影シーン等を検知して調整
することも可能である。

【００７３】前述のように、多数の被写体抽出方法を組
み合わせることにより、顔抽出の精度は向上することが
可能であるが、多くの被写体抽出方法を行うと、演算や
画像処理に時間がかかり、効率が低下する。これに対
し、本発明の特定被写体抽出方法は、通常の画像の際に
は、これで十分な精度を確保して効率の良い特定被写体
抽出を行い、画像状態等に応じて十分な精度が確保でき
ない場合のみ、さらに、他の被写体抽出を併用して、よ
り高精度な特定被写体抽出を行う。

【００７４】従って、本発明によれば、良好な効率で、
十分な精度を確保して特定被写体の抽出を行うことがで
きる。特に、前述の肌色抽出や顔輪郭・円形状抽出を利
用する顔抽出は、低い解像度や比較的簡単な画像解析
で、高精度な顔抽出を行うことができ、通常の画像であ
れば、両抽出方法を組み合わせれば、十分な精度の顔抽
出ができるので好適である。

【００７５】また、本発明においては、これ以外にも、
公知の各種の被写体抽出方法が利用可能であり、例え
ば、特開平４−３４６３３２号、同４−３４６３３３
号、同４−３４６３３４号、同５−１００３２８号、同
５−１５８１６４号、同５−１６５１１９号、同５−１
６５１２０号、同６−６７３２０号、同６−１６０９９
２号、同６−１６０９９３号、同６−１６０９９４号、
同６−１６０９９５号、同８−１２２９４４号、同９−
８０６５２号、同９−１０１５７９号、同９−１３８４
７０号の各公報等に開示される、各種の被写体抽出方法
が例示される。

【００７６】図３に戻って、説明を続ける。主要部抽出
部７２Ａで抽出された画像の主要部（主要部領域）また
は特定被写体（特定被写体領域）の情報は、セットアッ
プ部の設定部７２Ｂに供給される。設定部７２Ｂは、プ
レスキャンメモリ５２からプレスキャンデータを読み出
し、プレスキャンデータから、濃度ヒストグラムの作成
や、平均濃度、ハイライト（最低濃度）、シャドー（最
高濃度）等の画像特徴量の算出を行い、本スキャンの読
取条件を決定し、また、濃度ヒストグラムや画像特徴量
に加え、主要部抽出部７２Ａが抽出した画像の特定被写
体、さらには、必要に応じて行われるオペレータによる
指示等に応じて、グレイバランス調整、階調補正および
濃度調整を行うＬＵＴの作成、ＭＴＸ演算式の作成、鮮
鋭度補正係数の算出等、プレスキャン処理部５６および
本スキャン処理部５８における各種の画像処理条件を設
定する。

【００７７】キー補正部７４は、キーボード１８ａに設
定された濃度（明るさ）、色、コントラスト、シャープ
ネス、彩度調等を調整するキーやマウス１８ｂで入力さ
れた各種の指示等に応じて、画像処理条件の調整量を算
出し、パラメータ統合部７６に供給するものである。ま
た、パラメータ統合部７６は、設定部７２Ｂが設定した
画像処理条件を受け取り、プレスキャン処理部５６およ
び本スキャン処理部５８に設定し、さらに、キー補正部
７４で算出された調整量に応じて、各部位に設定した画
像処理条件を補正（調整）し、あるいは画像処理条件を
再設定する。

【００７８】以下、スキャナ１２および画像処理装置１
４の作用を説明する。このフィルムＦのプリント作成を
依頼されたオペレータは、フィルムＦに対応するキャリ
ア３０をスキャナ１２に装填し、キャリア３０の所定位
置にフィルムＦ（カートリッジ）をセットし、作成する
プリントサイズ等の必要な指示を入力した後に、プリン
ト作成開始を指示する。

【００７９】これにより、スキャナ１２の可変絞り２４
の絞り値やイメージセンサ（ラインＣＣＤセンサ）３４
の蓄積時間がプレスキャンの読取条件に応じて設定さ
れ、その後、キャリア３０がフィルムＦをカートリッジ
から引き出して、プレスキャンに応じた速度で副走査方
向に搬送して、プレスキャンが開始され、前述のように
所定の読取位置において、フィルムＦがスリット走査さ
れて投影光がイメージセンサ３４に結像して、フィルム
Ｆに撮影された画像がＲ、ＧおよびＢに分解されて光電
的に読み取られる。また、このフィルムＦの搬送の際
に、磁気情報が読み出され、また、コードリーダ４４に
よってＤＸコード等のバーコードが読まれ、必要な情報
が所定の部位に送られる。

【００８０】なお、プレスキャンおよび本スキャンは、
１コマずつ行ってもよく、全コマあるいは所定の複数コ
マずつ、連続的にプレスキャンおよび本スキャンを行っ
てもよい。以下の例では、説明を簡潔にするために、１
コマの画像読取を例に説明を行う。

【００８１】プレスキャンによるイメージセンサ３４の
出力信号は、アンプ３６で増幅されて、Ａ／Ｄ変換器３
８に送られ、デジタル信号とされる。デジタル信号は、
画像処理装置１４に送られ、データ処理部４８で所定の
データ処理を施され、Ｌｏｇ変換器５０でデジタルの画
像データであるプレスキャンデータとされ、プレスキャ
ンメモリ５２に記憶される。

【００８２】プレスキャンメモリ５２にプレスキャンデ
ータが記憶されると、条件設定部６０のセットアップ部
７２がこれを読み出し、主要部抽出部７２Ａおよび設定
部７２Ｂに供給する。主要部抽出部７２Ａにおいては、
前述のように、顔輪郭・円形状抽出部７８において顔候
補領域が抽出され、肌色検出処理部８０において顔輪郭
・円形状抽出部７８により抽出された顔候補領域につい
て、当該領域が肌色領域であるか否かの判定を行い、肌
色領域であると判定された場合には、上記抽出領域の情
報が設定部７２Ｂに送られる。

【００８３】設定部７２Ｂは、プレスキャンデータか
ら、画像の濃度ヒストグラムの作成、ハイライトやシャ
ドー等の画像特徴量の算出等を行い、本スキャンの読取
条件を設定してスキャナ１２に供給し、さらに、濃度ヒ
ストグラムや算出した画像特徴量に加え、さらに、主要
部抽出部７２Ａが抽出した特定被写体、必要に応じて行
われるオペレータの指示を加味して、画像データ処理部
６６における画像処理条件を設定し、パラメータ統合部
７６に供給する。パラメータ統合部７６は、受け取った
画像処理条件をプレスキャン処理部５６および本スキャ
ン処理部５８の所定部位（ハードウエア）に設定する。

【００８４】検定を行う場合には、プレスキャンデータ
が画像データ処理部６２によってプレスキャンメモリ５
２から読み出され、画像データ処理部６２で処理され、
画像データ変換部６４で変換されて、シュミレーション
画像としてディスプレイ２０に表示される。オペレータ
は、ディスプレイ２０の表示を見て、画像すなわち処理
結果の確認（検定）を行い、必要に応じて、キーボード
１８ａに設定された調整キー等を用いて色、濃度、階調
等を調整する。

【００８５】この調整の入力は、キー補正部７４に送ら
れ、キー補正部７４は調整入力に応じた画像処理条件の
補正量を算出し、これをパラメータ統合部７６に送る。
パラメータ統合部７６は、送られた補正量に応じて、前
述のように、画像データ処理部６２および６６のＬＵＴ
やＭＴＸ等を補正する。従って、この補正すなわちオペ
レータによる調整入力に応じて、ディスプレイ２０に表
示される画像も変化する。

【００８６】オペレータは、このコマの画像が適正（検
定ＯＫ）であると判定すると、キーボード１８ａ等を用
いてプリント開始を指示する。これにより、画像処理条
件が確定し、スキャナ１２において可変絞り２４の絞り
値等が設定された本スキャンの読取条件に応じて設定さ
れると共に、キャリア３０が本スキャンに対応する速度
でフィルムＦを搬送し、本スキャンが開始される。な
お、検定を行わない場合には、パラメータ統合部７６に
よる本スキャン処理部５８への画像処理条件の設定を終
了した時点で画像処理条件が確定し、本スキャンが開始
される。

【００８７】本スキャンは、可変絞り２４の絞り値等の
読取条件が設定された本スキャンの読取条件となる以外
はプレスキャンと同様に行われ、イメージセンサ３４か
らの出力信号はアンプ３６で増幅されて、Ａ／Ｄ変換器
３８でデジタル信号とされ、画像処理装置１４のデータ
処理部４８で処理されて、Ｌｏｇ変換器５０で本スキャ
ンデータとされ、本スキャンメモリ５４に送られる。本
スキャンデータが本スキャンメモリ５４に送られると、
本スキャン処理部５８によって読み出され、画像データ
処理部６６において確定した画像処理条件で画像処理さ
れ、次いで、画像データ変換部６８で変換されて出力用
の画像データとされ、プリンタ１６に出力される。

【００８８】プリンタ１６は、供給された画像データに
応じて感光材料（印画紙）を露光して潜像を記録するプ
リンタ（焼付装置）と、露光済の感光材料に所定の処理
を施してプリントとして出力するプロセサ（現像装置）
とを有する。プリンタでは、例えば、感光材料をプリン
トに応じた所定長に切断した後に、バックプリントを記
録し、次いで、感光材料の分光感度特性に応じたＲ露
光、Ｇ露光およびＢ露光の３種の光ビームを画像処理装
置１４から出力された画像データに応じて変調して主走
査方向に偏向すると共に、主走査方向と直交する副走査
方向に感光材料を搬送することにより、前記光ビームで
感光材料を２次元的に走査露光して潜像を記録し、プロ
セサに供給する。感光材料を受け取ったプロセサは、発
色現像、漂白定着、水洗等の所定の湿式現像処理を行
い、乾燥してプリントとし、フィルム１本分等の所定単
位に仕分して集積する。

【００８９】ところで、上述の実施例では、特定被写体
として人物の顔を抽出する場合について説明したが、本
発明はこれに限定されず、特定被写体として人物の顔以
外のもの、例えば、ペットなどの動物、自動車、山、湖
などを抽出してもよい。なお、この場合には、選択され
た特定被写体に適した色や形状を用いた抽出アルゴリズ
ムを選択すればよい。また、上述の実施例では、１コマ
に画像内の特定被写体を抽出する場合について説明した
が、本発明はこれに限定されず、抽出ユニットの条件判
定部における各被写体の抽出領域（エリア）への重み付
けにおいて、同一件内の他のコマの被写体の抽出領域と
の類似性を用いてもよい。

【００９０】すなわち、先のコマの画像における特定被
写体の抽出領域と現在抽出対象としているコマの画像の
特定被写体の抽出領域との類似性を用いて、現在抽出対
象のコマの画像の特定被写体の抽出領域への重み付けを
行ってもよい。例えば、抽出領域の大きさを正規化した
後に、テンプレートマッチング的な類似性を見ることが
できる。あるいは、抽出領域のヒストグラムを取って、
濃度分布の類似性を見ることもできる。この他、色など
の画像特徴量によって画像の類似性を見ることもでき
る。このように、同一件内の他のコマとの類似性を用い
ることにより、さらに、特定被写体の抽出に要する演算
時間を短縮することができる。

【００９１】以上、本発明の特定被写体抽出方法および
この方法を用いる特定被写体抽出装置について詳細に説
明したが、本発明は上記実施例に限定るものではなく、
本発明の要旨を逸脱しない範囲において、各種の改良お
よび変更を行ってよいことはいうまでもない。

【００９２】

【発明の効果】以上、詳細に説明したように、本発明に
よれば、デジタルフォトプリンタ等のフォトプリンタに
おいて、高精度な特定被写体の抽出を、良好な効率で、
様々な状態の画像に対応して安定して行うことができ、
高画質な画像が再生された高品位なプリントを、良好な
効率で作製することが可能になる。

【図面の簡単な説明】

【図１】本発明の特定被写体抽出方法および装置の一
例を利用するデジタルフォトプリンタのブロック図であ
る。

【図２】（Ａ）は、図１に示されるデジタルフォトプ
リンタに装着されるキャリアを説明するための概略斜視
図、（Ｂ）は図１に示されるデジタルフォトプリンタの
イメージセンサの概念図である。

【図３】図１に示されるデジタルフォトプリンタの画
像処理装置のブロック図である。

【図４】図３に示される画像処理装置の主要部抽出部
の一実施例のブロック構成図である。

【図５】図４に示す主要部抽出部を構成する本発明の
一実施例に係る特定被写体抽出装置の作用の要点を説明
する動作フロー図である。

【図６】図３に示される画像処理装置の主要部抽出部
の他の実施例のブロック構成図である。

【図７】図６に示す主要部抽出部を構成する本発明の
他の実施例に係る特定被写体抽出装置の作用の要点を説
明する動作フロー図である。

【図８】本発明に係る特定被写体抽出装置のさらに他
の実施例のブロック構成図である。

【図９】さらに他の実施例に係る特定被写体抽出装置
の作用を説明するための図である。

【符号の説明】

１０（デジタル）フォトプリンタ１２スキャナ１４画像処理装置１６プリンタ１８操作系２０ディスプレイ３０キャリア３４イメージセンサ４０マスク４８データ処理部５２プレスキャン（フレーム）メモリ５４本スキャン（フレーム）メモリ５６プレスキャン処理部５８本スキャン処理部６０条件設定部６２、６６画像データ処理部６４、６８画像データ変換部７２セットアップ部７２Ａ主要部抽出部７２Ｂ設定部７４キー補正部７６パラメータ統合部７８顔輪郭・円形状抽出部８０肌色検出処理部８０ａ、８２ａ条件変更部８２検出処理部９２，９４，９６抽出並列処理ユニット９２Ａ，９２Ｂ、９２Ｃ、９４Ａ，９４Ｂ、９４Ｃ、９６Ａ，９６Ｂ、９６Ｃ抽出サブユニット９８抽出処理条件限定制御ユニット

Claims

【特許請求の範囲】

【請求項１】複数の特定被写体抽出アルゴリズムを逐次
的に実行するに際し、後段の抽出アルゴリズムの抽出条
件を、前段の抽出アルゴリズムによる抽出結果に適応さ
せて変更することを特徴とする特定被写体抽出方法。
【請求項２】複数の特定被写体抽出アルゴリズムを並列
処理で実行することを複数の段階において実行するに際
し、各段階の抽出状況を管理し、前段階の抽出状況によ
り、後続の段階の抽出処理条件を限定して前記後続の段
階の前記複数の特定被写体抽出アルゴリズムを並列処理
で実行することを特徴とする特定被写体抽出方法。
【請求項３】前記抽出処理条件は、前記後続の段階の前
記複数の特定被写体抽出アルゴリズムを実行する時の抽
出処理対象エリアであることを特徴とする請求項２に記
載の特定被写体抽出方法。
【請求項４】前記抽出処理条件は、前記後続の段階で実
行する抽出アルゴリズムの種類であることを特徴とする
請求項２または３に記載の特定被写体抽出方法。
【請求項５】前記抽出処理条件は、前記後続の段階で実
行する抽出アルゴリズム内部の制御パラメータであるこ
とを特徴とする請求項２〜４のいずれかに記載の特定被
写体抽出方法。
【請求項６】前記各段階において並列処理で実行する前
記複数の特定被写体抽出アルゴリズムは、前記複数の段
階において同一の組み合わせであることを特徴とする請
求項２〜５のいずれかに記載の特定被写体抽出方法。
【請求項７】前記各段階において並列処理で実行する前
記複数の特定被写体抽出アルゴリズムは、前記複数の段
階において互いに異なる組み合わせであることを特徴と
する請求項２〜５のいずれかに記載の特定被写体抽出方
法。
【請求項８】複数の特定被写体抽出アルゴリズムを逐次
的に実行する複数段の被写体抽出処理手段と、前段の被
写体抽出処理手段による被写体抽出結果に応じて後段の
被写体抽出処理手段における抽出条件を適応的に変更す
る抽出条件変更制御手段とを有することを特徴とする特
定被写体抽出装置。
【請求項９】複数段階において各々複数の特定被写体抽
出アルゴリズムを並列処理で実行する複数段の被写体抽
出並列処理手段と、この複数段の被写体抽出並列処理手
段による各段階の抽出状況を管理し、前段階の被写体抽
出並列処理手段による被写体抽出状況により、後続の段
階の被写体抽出並列処理手段の抽出処理条件を限定する
制御手段とを有することを特徴とする特定被写体抽出装
置。
【請求項１０】前記制御手段は、前記抽出処理条件とし
て前記後続の段階の被写体抽出並列処理手段の抽出処理
対象エリアを限定することを特徴とする請求項９に記載
の特定被写体抽出装置。
【請求項１１】前記制御手段は、前記抽出処理条件とし
て前記後続の段階の被写体抽出並列処理手段で実行する
抽出アルゴリズムの種類を限定することを特徴とする請
求項９または１０に記載の特定被写体抽出装置。
【請求項１２】前記制御手段は、前記抽出処理条件とし
て前記後続の段階の被写体抽出並列処理手段で実行する
抽出アルゴリズム内部の制御パラメータを限定すること
を特徴とする請求項９〜１１のいずれかに記載の特定被
写体抽出装置。
【請求項１３】前記被写体抽出並列処理手段は、前記複
数の段階の各段階において同一の組み合わせの前記複数
の特定被写体抽出アルゴリズムを並列処理で実行するこ
とを特徴とする請求項９〜１２のいずれかに記載の特定
被写体抽出装置。
【請求項１４】前記被写体抽出並列処理手段は、前記複
数の段階の各段階において互いに異なる組み合わせの前
記複数の特定被写体抽出アルゴリズムを並列処理で実行
することを特徴とする請求項９〜１２のいずれかに記載
の特定被写体抽出装置。