JP2002099910A - 画像処理装置、画像処理方法、及び記録媒体 - Google Patents

Abstract

(57)【要約】 【課題】 従来の写真撮影機器では、ポートレートを作
成する上で背景幕を設置する必要があるという問題点が
あったが、本発明では、簡便な構成で、背景幕を設置す
る必要なく、ポートレートを生成できる画像処理装置を
提供する。 【解決手段】 ＣＰＵ１１がＣＣＤカメラ１６で撮像し
た背景画像データを所定タイミングで取り込んで蓄積し
ておき、ユーザの指示により撮像した画像データと、こ
の背景画像データとに基づく画像処理により、ポートレ
ートの画像データを生成する画像処理装置、画像処理方
法及び記録媒体である。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、撮像した画像デー
タを処理する画像処理装置、画像処理方法及び画像処理
プログラムを格納した記録媒体に関する。

【０００２】

【従来の技術】近年のインターネット環境の普及に伴
い、種々の情報処理端末がコンビニエンスストアの店舗
内などに配置されるようになってきている。これらの情
報端末装置では、商品やチケットの購入等のサービスを
受けることができるほか、近年ではスキャナ及びプリン
タを用いてカラーコピーサービス等の提供も行われるよ
うになっている。

【０００３】一方、同様に店舗の店頭等に設置される機
器として、証明写真を撮影したり、小型のシール写真を
撮影したりする機器が知られている。これら写真撮影機
器においては、証明写真の性質上、または画像処理の都
合上、街頭風景を掩蔽する背景幕が設置されるのが普通
である。

【０００４】

【発明が解決しようとする課題】このように、上記従来
の写真撮影機器は、背景幕を配置するために配置面積が
大きくなり、店舗内や家庭内等に置くことが困難であ
る。この背景幕を不要にするために、背景と前景とを赤
外線照射により検出して、背景部分を別の画像に置き換
える技術が特表平１１−５０２６９３号公報、「画像の
背景を置き換える方法」に開示されている。しかし、こ
のような画像処理を行うためには、赤外線照射装置等、
別途それ専用の装置・構成を設ける必要があって、汎用
の情報処理端末や家庭用のパーソナルコンピュータにお
いて実行することが困難である。

【０００５】本発明は、上記実情に鑑みて為されたもの
で、簡便な構成で背景幕を不要とする画像処理を行うこ
とができる画像処理装置、画像処理方法、及び画像処理
プログラムを格納した記録媒体を提供することを目的と
する。

【０００６】

【課題を解決するための手段】上記従来例の問題点を解
決するための本発明は、撮像手段を備える画像処理装置
であって、前記撮像手段により、所定タイミングごとに
背景画像データを取り込み、少なくとも直近に取り込ま
れた画像データを背景画像として蓄積する背景画像蓄積
手段と、ユーザの指示に従って、前記撮像手段により画
像データを処理対象画像として取り込む手段と、当該処
理対象画像データと、前記蓄積している背景画像データ
とに基づく画像処理により、前記処理対象画像データの
前景部分を抽出する前景抽出手段と、を含むことを特徴
としている。これにより、簡便な構成で背景幕を不要と
する画像処理が可能となる。

【０００７】また、前記背景画像蓄積手段は、直近複数
枚の背景画像データを蓄積し、前記前景抽出手段は、処
理対象画像データと、前記蓄積されている複数枚の背景
画像データの各々とに基づく画像処理により、候補とな
る複数の前景部分の画像データを生成してユーザに提示
することが好ましい。これにより、店舗内や家庭内等
で、背景が時間的に変化する場合に配慮した処理を行う
ことができる。

【０００８】また、上記従来例の問題点を解決するため
の本発明は、画像処理方法であって、所定タイミングご
とに撮像した画像データを背景画像として蓄積する工程
と、指示により撮像した画像データを処理対象画像デー
タとして取り込む工程と、当該処理対象画像データと、
前記蓄積している背景画像の画像データとに基づく画像
処理により、前記処理対象画像データの前景部分を抽出
する工程と、を含むことを特徴としている。

【０００９】

【発明の実施の形態】本発明の実施の形態について図面
を参照しながら説明する。本発明の実施の形態に係る画
像処理装置１は、各地のコンビニエンスストアの店舗内
等に配置されており、図１に示すように、ＣＰＵ１１
と、記憶部１２と、ハードディスク１３と、外部記憶デ
バイス１４と、ネットワーク通信部１５と、ＣＣＤカメ
ラ１６と、プリンタ１７と、入力部１８と、表示部１９
とから基本的に構成され、これらの各部はバス接続され
ている。また、この画像処理装置１は、インターネット
を介してサーバ装置２に接続されている。

【００１０】ＣＰＵ１１は、ハードディスク１３に格納
されているプログラムを処理し、背景画像を取り込む処
理と、背景のないポートレート（証明写真等）を生成す
る処理とを行う。このＣＰＵ１１の具体的動作について
は、後に詳しく説明する。

【００１１】記憶部１２は、ＣＰＵ１１のワークメモリ
として動作し、画像データや各種のパラメータを蓄積し
ている。ハードディスク１３は、ＣＰＵ１１が処理する
プログラムを格納している。外部記憶デバイス１４は、
コンピュータ読み取り可能な記録媒体からプログラムや
データを読み出して、ハードディスク１３にインストー
ルする。ネットワーク通信部１５は、インターネットに
接続され、ＣＰＵ１１から入力されるデータをインター
ネットを介して送信し、インターネットを介して受信し
たデータをＣＰＵ１１に出力する。

【００１２】ＣＣＤカメラ１６は、本発明の撮像手段に
相当するもので、指示により視野範囲の画像を撮像し
て、画像データとしてＣＰＵ１１に出力する。プリンタ
１７は、ＣＰＵ１１からの指示により画像データの印刷
を行う。入力部１８は、タッチパネルやキーボード等で
あり、ユーザの操作をＣＰＵ１１に伝達する。表示部１
９は、ディスプレイ等であり、ＣＰＵ１１からの指示に
より画像データを表示する。

【００１３】サーバ装置２は、各地に配置されている画
像処理装置１の利用者を会員として登録管理している。
具体的にこのサーバ装置２は、会員の氏名等を管理する
会員データベースを備えている。

【００１４】ここで、ＣＰＵ１１の動作について説明す
る。ＣＰＵ１１は、背景画像を取り込む処理として、事
前に設定されている時間ごとにＣＣＤカメラ１６から画
像データを取り込み、記憶部１２に背景画像データとし
て格納する。この背景画像を取り込むＣＰＵ１１の動作
が本発明の背景画像蓄積手段に相当する。

【００１５】また、このＣＰＵ１１は、入力部１８から
ユーザの指示の入力を受けて、図２に示す、背景なしの
ポートレートを生成する処理を開始し、まず、ＣＣＤカ
メラ１６から画像データ（背景付きポートレート）を取
り込み、記憶部１２に格納する（Ｓ１）。そして、記憶
部１２から直近に取り込まれた複数の背景画像データを
取得し（Ｓ２）、取得した背景画像データの一つを選択
し、処理Ｓ１で記憶部１２に格納した処理対象の画像デ
ータと、選択した背景画像データとを比較して、同じピ
クセルが連続する部分（背景部分）を認識して（Ｓ
３）、この部分を除去する（Ｓ４）。この処理Ｓ３及び
Ｓ４により、前景部分が抽出され、背景なしのポートレ
ートが生成される。こうして抽出した前景部分（すなわ
ちユーザの肖像部分）を記憶部１２に格納し（Ｓ５）、
さらに選択していない背景画像データがあるか否かを調
べる（Ｓ６）。ここで、選択していない背景画像データ
があれば（Ｙｅｓならば）、その背景画像データの一つ
を選択し、処理Ｓ３に戻って処理を続ける。また各背景
画像データが選択済みであれば（Ｎｏならば）、処理Ｓ
５で格納した前景部分の画像データを表示部１９に候補
として表示し（Ｓ７）、ユーザに選択を促す。ＣＰＵ１
１は、ユーザの選択を待機して（Ｓ８）、選択がなされ
たときには、当該選択された前景部分の画像データをプ
リンタ１７に出力して（Ｓ９）、処理を終了する。この
ＣＰＵ１１の処理が処理対象画像を取り込む手段と、前
景抽出手段とに対応している。

【００１６】また、ＣＰＵ１１は、ユーザからの指示に
より、当該ユーザの会員情報に対応付けて、処理Ｓ８で
選択された前景抽出後の画像データをネットワーク通信
部１５に出力して、インターネットを介してサーバ装置
２に送信し、サーバ装置２の会員データベースに登録す
る処理を行う。

【００１７】次に、本実施の形態に係る画像処理装置の
動作について説明する。画像処理装置１は、定期的（例
えば１分ごと）にＣＣＤカメラ１６の視野範囲の画像を
撮像して背景画像として取り込み、最近撮影された複数
枚（例えば６枚）の背景画像データを記憶部１２に蓄積
している。

【００１８】背景なしのポートレートを撮影しようとす
るユーザは、このＣＣＤカメラ１６の視野範囲に立ち、
入力部１８を操作して、撮像を行わせる。すると、ＣＰ
Ｕ１１が背景なしのポートレートの生成処理を開始し、
ＣＣＤカメラ１６で撮像した背景付きポートレートの画
像データを処理対象データとして記憶部１２に記録し、
蓄積している複数の背景画像データの各々との比較を行
って、ユーザの肖像部分（前景部分）のみを抽出した背
景なしのポートレート画像データを生成する。

【００１９】ここで、ＣＰＵ１１は、前景部分の抽出の
際に、背景画像データとの比較により、前景部分である
か否かを判断する。このため、例えばコンビニエンスス
トアに配置された画像処理装置１であれば、背景となっ
ている部分に置かれた商品が移動したり、消えたり（購
入のため持ち去られている場合）しているときには、そ
の部分が前景として残ることになる。すなわち、図３
（ａ）に示すような第１の背景画像データと、図３
（ｂ）に示すような第２の背景画像データとがあるとき
に、処理対象画像データとして図３（ｃ）に示すような
画像データが得られたとすると、ＣＰＵ１１がこれらに
基づく画像処理を行った結果は、それぞれ図３（ａ）に
対応する図３（ｄ）と、図３（ｂ）に対応する図３
（ｅ）のようになり、図３（ｄ）では、持ち去られた商
品の画像が処理されずに残っていることとなる（Ｘ）
が、図３（ｅ）では、背景画像データが正当であるの
で、背景なしのポートレート部分が正しく生成される。

【００２０】そして、このように１分ごとに撮像された
背景画像との比較により生成されたポートレートの画像
データが図４に示すように一覧表示され、ユーザはこの
中から前景部分が正しく抽出されたものを選択する。そ
して、背景なしのポートレートがプリンタ１７により印
刷される。

【００２１】尚、ＣＣＤカメラ１６の視角は比較的広め
としておき、ユーザの指示により印刷すべき部分の切り
取り枠を設定して、抽出後の画像から当該設定された枠
で切り取る処理を行って印刷することも好ましい。この
ようにすれば、余白の少ないポートレートを印刷するこ
とができるようになる。ここで証明写真等では５×５ｃ
ｍや、４×３ｃｍなどというように画面比率及びそのサ
イズが決められているので、ユーザの操作により指定さ
れたサイズに基づき、当該比率の枠線を表示部１９に表
示して、切り取り枠の比率を調整しておくことも好まし
い。さらに、この枠の表示位置は、抽出した前景画像近
傍に表示し、ユーザの調整により上下左右に移動可能と
することが好ましい。さらにプリンタ１７による印刷の
際には、指定されたサイズに印刷することが好適であ
る。

【００２２】また、背景画像データの部分的変化によ
り、処理後の画像データに背景画像データの微少な部分
が残存してしまう場合に配慮して、前景部分の画像デー
タを抽出する処理を行った後、前景部分のエッジ検出処
理により、さらに背景画像部分を除去する処理を行うこ
とも好適である。また、残存部分の消去方法としては、
ユーザが自ら選択した部分を消し込んだり、輪郭（やそ
れに含まれる領域）を選択してそれ以外の部分を消去す
ることも可能である。また逆に、残存させるべき部分が
消去されてしまった場合、意図的に残したい部分がある
場合には、該当部分を選択して表示されるように（消去
前の状態に戻して）修正する機能を持たせることも好適
である。

【００２３】さらに、背景画像データに適切なものがな
かった場合など、表示部１９に提示された候補の画像デ
ータのどれもが正当に処理されていない場合には、ＣＰ
Ｕ１１はユーザの指示により、新たに背景画像データと
なるものを取得する処理を行うことも好ましい。具体的
には、処理Ｓ８における選択の画面とともに、「背景を
撮影する」のようなボタンを配置しておき、このボタン
が押下されると、「背景を撮影しますので、離れてくだ
さい」のようなメッセージを発声または表示するととも
に、ＣＣＤカメラ１６で背景画像データとなるものを撮
像して、改めて前景部分の画像データを抽出し、背景な
しのポートレートを生成する処理を行う。

【００２４】さらに、ここまでの説明では、前景部分で
ある肖像部分を抽出してそのまま印刷することとしてい
たが、ユーザ選択により事前に準備された画像を背景や
画像枠として合成したり、画像データそのものをグレイ
スケールに変換して、白黒写真のようにしたり、セピア
調色処理したりすることも好ましい。これにより、趣味
性の高いポートレートの作成が可能となる。

【００２５】また、こうして得られた（背景なし、また
は背景を別途合成した）ポートレートの画像データは、
印刷のみならず、サーバ装置２に会員情報として記録し
て、会員間のコミュニケーションや、電子メールに添付
する画像、または携帯電話機の待受け画面の画像などと
して活用できる。

【００２６】尚、ここでは、背景画像データの取り込み
のタイミングを例えば１分おきなどの決められた間隔と
しているが、例えば昼間や夜間など照明の具合に大きな
変化のない時間帯はその間隔を長めにし、明け方や夕方
など照明の具合が短時間で大きく変化する時間帯はその
取り込み間隔を短めにするなどの処理を行うのも好適で
ある。また、前回取り込んだ背景画像データと、今回取
り込んだ背景画像データとの差分を演算し、その変化量
に応じて次回の取り込みタイミングを決定することとし
てもよい。この場合には、例えば差分で検出される変化
量が大きいほど、次回の取り込みまでの期間を短く設定
する。

【００２７】さらに、本実施の形態の画像処理装置１
は、店舗内に配置される等の場合を考慮していたが、例
えば家庭内のパーソナルコンピュータにおいても、同様
の処理を行うことにより、背景幕を配置したり、複雑な
画像処理を手作業により行うことなく、容易な操作で背
景のないポートレートを作成でき、証明写真や、背景等
の合成を行う際の素材の画像データとして活用できる。

【００２８】

【発明の効果】本発明によれば、撮像手段を備え、撮像
手段により、所定タイミングごとに背景画像データを取
り込み、取り込まれた画像データを背景画像として蓄積
しておき、ユーザの指示に従って、撮像手段で撮影した
画像を処理対象画像として取り込み、この処理対象画像
データと、蓄積している背景画像データとに基づく画像
処理により、処理対象画像データの前景部分を抽出し、
この前景部分の画像データを印刷などの所定処理に供す
る画像処理装置としているので、簡便な構成で、かつ背
景幕の設置を要せずにポートレート等の画像を生成でき
る。また、所定タイミングごとに背景画像データを取り
込むことで、頻繁に背景部分が変化する場合に配慮した
画像処理を行うことができる。

【図面の簡単な説明】

【図１】 本発明の実施の形態に係る画像処理装置の構
成ブロック図である。

【図２】 ＣＰＵ１１のポートレートの生成処理を表す
フローチャート図である。

【図３】 ポートレートの生成状態を表す説明図であ
る。

【図４】 画像処理装置のインタフェースの一例を表す
説明図である。

【符号の説明】

１ 画像処理装置、２ サーバ装置、１１ ＣＰＵ、１
２ 記憶部、１３ ハードディスク、１４ 外部記憶デ
バイス、１５ ネットワーク通信部、１６ ＣＣＤカメ
ラ、１７ プリンタ、１８ 入力部、１９ 表示部。

Claims (4)

【特許請求の範囲】
1. 【請求項１】 撮像手段を備え、 前記撮像手段により、所定タイミングごとに背景画像デ
   ータを取り込み、少なくとも直近に取り込まれた画像デ
   ータを背景画像として蓄積する背景画像蓄積手段と、 ユーザの指示に従って、前記撮像手段により画像データ
   を処理対象画像として取り込む手段と、 当該処理対象画像データと、前記蓄積している背景画像
   データとに基づく画像処理により、前記処理対象画像デ
   ータの前景部分を抽出する前景抽出手段と、を含むこと
   を特徴とする画像処理装置。
2. 【請求項２】 請求項１に記載の画像処理装置におい
   て、 前記背景画像蓄積手段は、直近複数枚の背景画像データ
   を蓄積し、 前記前景抽出手段は、処理対象画像データと、前記蓄積
   されている複数枚の背景画像データの各々とに基づく画
   像処理により、候補となる複数の前景部分の画像データ
   を生成してユーザに提示することを特徴とする画像処理
   装置。
3. 【請求項３】 所定タイミングごとに撮像した画像デー
   タを背景画像として蓄積する工程と、 指示により撮像した画像データを処理対象画像データと
   して取り込む工程と、 当該処理対象画像データと、前記蓄積している背景画像
   の画像データとに基づく画像処理により、前記処理対象
   画像データの前景部分を抽出する工程と、 を含むことを特徴とする画像処理方法。
4. 【請求項４】 所定タイミングごとに撮像した画像デー
   タを背景画像として蓄積するモジュールと、 指示により撮像した画像データを処理対象画像データと
   して取り込むモジュールと、 当該処理対象画像データと、前記蓄積している背景画像
   の画像データとに基づく画像処理により、前記処理対象
   画像データの前景部分を抽出するモジュールと、 を含む画像処理プログラムを格納したことを特徴とする
   コンピュータ読み取り可能な記録媒体。