JP2021005798A - 撮像装置、撮像装置の制御方法およびプログラム - Google Patents

Abstract

【課題】処理時間を短縮しつつプライバシーを保護することができるようにする。【解決手段】撮像装置は、撮像された映像に対して、マスク対象の被写体の領域を抽出する抽出手段（２０８）と、前記撮像された映像において、前記抽出手段により抽出されたマスク対象の被写体の領域に対して第１のマスク処理を行う第１のマスク処理手段（２０９）と、前記第１のマスク処理が行われた映像を出力する第１の出力手段（２０５）と、前記撮像された映像において、前記抽出手段により抽出されたマスク対象の被写体の領域に対して第２のマスク処理を行う第２のマスク処理手段（２１０，２１１）と、前記第２のマスク処理が行われた映像を出力する第２の出力手段（２０６）とを有し、前記第２のマスク処理は、前記第１のマスク処理より処理時間が短い処理である。【選択図】図２

Description

本発明は、撮像装置、撮像装置の制御方法およびプログラムに関する。

特許文献１には、監視エリアを撮像してその映像を閲覧装置に出力するプロセッサを備えた撮像装置が開示されている。プロセッサは、映像に対して、人物の輪郭内部を透過性のマスク画像に変更するマスク処理を実施する。また、プロセッサは、マスク画像を背景画像に重畳して生成される人物の動きと背景画像の観察に限定されるマスク処理映像または、マスク処理が施されていない未処理映像のいずれかの映像をユーザの指示により出力する。撮像装置は、マスク処理が施されていない未処理映像が流出するリスクを低減することができる。

特開２０１７−１１７５９号公報

しかしながら、特許文献１は、マスク処理を実施すると、遅延時間が増加し、マスク処理を施さなければ、プライバシーを保護することができない。

本発明の目的は、処理時間を短縮しつつプライバシーを保護することができるようにすることである。

本発明の一観点によれば、撮像装置は、撮像された映像に対して、マスク対象の被写体の領域を抽出する抽出手段と、前記撮像された映像において、前記抽出手段により抽出されたマスク対象の被写体の領域に対して第１のマスク処理を行う第１のマスク処理手段と、前記第１のマスク処理が行われた映像を出力する第１の出力手段と、前記撮像された映像において、前記抽出手段により抽出されたマスク対象の被写体の領域に対して第２のマスク処理を行う第２のマスク処理手段と、前記第２のマスク処理が行われた映像を出力する第２の出力手段とを有し、前記第２のマスク処理は、前記第１のマスク処理より処理時間が短い処理である。

本発明によれば、処理時間を短縮しつつプライバシーを保護することができるようにする。

撮像装置の外観例を示す斜視図である。 撮像装置の構成例を示すブロック図である。 被写体領域抽出部の処理例を示すフローチャートである。 マスク処理部の処理例を説明するための図である。 ＯＳＤデータ生成部の処理例を示すフローチャートである。 ＯＳＤデータ生成部の処理例を説明するための図である。 ＯＳＤ処理部の処理例を説明するための図である。 各出力部の出力映像の一例を示す図である。 簡易マスク処理を行うか否かを決定する例を示す図である。 ＯＳＤデータ領域を拡張する場合の一例を示す図である。

図１は、本実施形態による撮像装置１００の外観例を示す斜視図である。撮像装置１００は、例えば、デジタルカメラまたはビデオカメラである。撮像装置１００は、撮像ユニット１０１と、映像出力パネル１０２とを有する。映像出力パネル１０２は、ＬＡＮ端子１０３と、ＨＤＭＩ（登録商標）端子１０４と、ＳＤＩ端子１０５とを有する。ＬＡＮ端子１０３とＨＤＭＩ端子１０４とＳＤＩ端子１０５は、映像出力端子である。撮像ユニット１０１は、撮像用レンズと撮像素子により、映像を撮像する。

撮像装置１００は、撮像ユニット１０１により撮像された映像をＩＰ（ＩｎｔｅｒｎｅｔＰｒｏｔｏｃｏｌ）でパケット化し、パケット化した映像をＬＡＮ端子１０３から出力する。

撮像装置１００は、外部機器に応じて、撮像ユニット１０１により撮像された映像をＨＤＭＩ規格に準拠した所定の映像フォーマットに変換し、所定の映像フォーマットの映像をＨＤＭＩ端子１０４から出力する。ＨＤＭＩ規格は、Ｈｉｇｈ Ｄｅｆｉｎｉｔｉｏｎ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｒｆａｃｅ規格である。

撮像装置１００は、撮像ユニット１０１により撮像された映像をＳＤＩ（Ｓｅｒｉａｌ Ｄｉｇｉｔａｌ Ｉｎｔｅｒｆａｃｅ）規格に準拠した所定の映像フォーマットに変換し、所定の映像フォーマットの映像をＳＤＩ端子１０５から出力する。

なお、映像出力パネル１０２は、上記の３種類の映像出力端子を有するが、上記の３種類に限定されず、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）などの他の規格の映像出力端子を有してもよい。

図２は、撮像装置１００の構成例を示す図である。撮像装置１００は、撮像部２０１と、画像処理部２０２と、システム制御部２０３と、記憶部２０４と、出力部２０５と、出力部２０６と、出力部２０７とを有する。さらに、撮像装置１００は、被写体領域抽出部２０８と、マスク処理部２０９と、ＯＳＤ（オンスクリーンディスプレイ）データ生成部２１０と、ＯＳＤ処理部２１１とを有する。以下、撮像装置１００の制御方法を説明する。

撮像部２０１は、図１の撮像ユニット１０１に対応し、撮像用レンズおよび撮像素子を有し、光電変換により、被写体の映像を撮像する。画像処理部２０２は、撮像部１０１により撮像された映像に対して、ノイズ除去やガンマ補正などの画像処理を行い、画像データを生成し、システム制御部２０３に出力する。

システム制御部２０３は、画像データを出力部２０５と出力部２０６と出力部２０７に出力する制御を行う。また、システム制御部２０３は、画像処理部２０２に対して、画質調整の設定を行い、撮像部２０１に対して、ズームやフォーカス制御の設定を行う。撮像部２０１は、設定に基づいて、レンズ制御を行う。

記憶部２０４は、画質調整のパラメータと、映像出力設定値と、登録した顔画像の特徴データなどを記憶する。システム制御部２０３は、記憶部２０４を基に、再起動などした場合でも、以前設定した値を用いて起動することが可能である。

被写体領域抽出部２０８は、システム制御部２０３から入力された画像データに対して、マスク対象の被写体の領域を抽出する。さらに、被写体領域抽出部２０８は、抽出したマスク対象の被写体の領域の情報をＯＳＤデータ生成部２１０およびマスク処理部２０９へ出力する。被写体領域抽出部２０８の処理の詳細は、後に図３を参照しながら説明する。

マスク処理部２０９は、被写体領域抽出部２０８でマスク対象の被写体の領域が抽出された場合に、システム制御部２０３からの入力画像データにおいて、マスク対象の被写体の領域に対してマスク処理を行い、出力部２０５へマスク処理した映像を出力する。

出力部２０５は、マスク処理部２０９から入力した映像をＩＰ（ＩｎｔｅｒｎｅｔＰｒｏｔｏｃｏｌ）でパケット化し、パケット化した映像をＬＡＮのフレーム形式に変換し、ＬＡＮのフレーム形式の映像をＬＡＮ端子１０３に出力する。

ＯＳＤデータ生成部２１０は、システム制御部２０３から入力された画像データに重畳するメニュー表示用の文字やアイコンなどのＯＳＤデータ（重畳データ）を生成する。また、ＯＳＤデータ生成部２１０は、被写体領域抽出部２０８からマスク対象の被写体の領域の情報を入力した場合は、入力したマスク対象の被写体の領域の情報から簡易マスク用のＯＳＤデータを生成する。

ＯＳＤ処理部２１１は、ＯＳＤデータ生成部２１０が生成したＯＳＤデータが存在する場合には、生成されたＯＳＤデータに基づいて、システム制御部２０３から入力された画像データにＯＳＤデータを重畳し、重畳した映像を出力部２０６へ出力する。

ＯＳＤデータ生成部２１０とＯＳＤ処理部２１１は、簡易のマスク処理部であり、システム制御部２０３からの入力画像データにおいて、マスク対象の被写体の領域に対して簡易のマスク処理を行い、出力部２０６へマスク処理した映像を出力する。ＯＳＤデータ生成部２１０とＯＳＤ処理部２１１のマスク処理は、簡易的なマスク処理のため、マスク処理部２０９のマスク処理より処理時間が短い。

出力部２０６は、ＯＳＤ処理部２１１から入力した映像をＨＤＭＩ規格に準拠した所定の映像フォーマットに変換し、所定の映像フォーマットの映像をＨＤＭＩ端子１０４に出力する。

出力部２０７は、システム制御部２０３から入力した映像をＳＤＩ規格に準拠した所定の映像フォーマットに変換し、所定の映像フォーマットの映像をＳＤＩ端子１０５に出力する。

撮像装置１００は、ＬＡＮ端子１０３とＨＤＭＩ端子１０４とＳＤＩ端子１０５から同時に映像を出力可能である。ＬＡＮ端子１０３は、被写体領域抽出部２０８とマスク処理部２０９と出力部２０５により、被写体の輪郭に沿った高精度マスク処理等の高度な処理と映像圧縮処理をした映像を出力することができる。ＨＤＭＩ端子１０４とＳＤＩ端子１０５は、ライブ表示で違和感の少ない低遅延な映像を出力する。

ＯＳＤ処理部２１１は、被写体領域抽出部２０８とＯＳＤデータ生成部２１０の処理の完了を待たずに、映像を出力部２０６に出力する。具体的には、ＯＳＤ処理部２１１は、システム制御部２０３から画像データを取得した時点で、ＯＳＤデータが完成していれば重畳処理を行い、ＯＳＤデータが完成していなければ前回生成したＯＳＤデータを用いて重畳処理を行う。このようにして、ＯＳＤ処理部２１１は、ＯＳＤデータ生成部２１０の処理の待ち合わせによる遅延が発生しない。撮像装置１００は、低遅延出力を目的とした出力部２０６で遅延を増加させない。

出力部２０５と出力部２０６と出力部２０７は、相互に同期処理を行っていないため、それぞれ独立したタイミングで映像を出力する。よって、出力部２０５と出力部２０６と出力部２０７は、出力する映像が数フレーム程度のずれが発生し、全く同じタイミングの映像を出力するわけではない。特に、出力部２０５から出力される映像は、被写体領域抽出部２０８とマスク処理部２０９によって実行される重い処理が行われるため、出力部２０６と出力部２０７から出力される映像より遅延時間が長い。

被写体領域抽出部２０８およびマスク処理部１０９は、高度なマスク機能の実現のために複雑で負荷の重い処理を行うので、出力部２０５は、映像を撮像してから映像が出力されるまでの遅延時間が増えてしまう。被写体領域抽出部２０８は、顔検出や個人認識などの複雑な処理を行うと、遅延時間が増加する。

出力部２０７は、マスク処理を行わない映像を出力するので、遅延時間を短くすることができる。しかし、出力部２０７は、プライバシーを保護した映像を出力する必要がある。

出力部２０７は、ライブ表示を目的とするため、映像の遅延時間を短くする必要がある。そこで、出力部２０７は、高度なマスク処理を行わずに、簡易なマスク処理を行った映像を出力することにより、ライブ表示のために、遅延時間が短い映像を出力する。出力部２０７は、映像の遅延時間を短くしつつ、プライバシーの保護を図ることができる。

図３は、図２の被写体領域抽出部２０８の処理例を示すフローチャートである。まず、ステップＳ３０１では、被写体領域抽出部２０８は、システム制御部２０３から画像データを入力する。

次に、ステップＳ３０２では、被写体領域抽出部２０８は、入力した画像データに対して、顔の検出処理を行う。例えば、被写体領域抽出部２０８は、画像データの各画素の階調色を基に肌色領域を抽出し、その肌色領域の輪郭と、予め用意された顔の輪郭プレートとのマッチング度を算出する。そして、被写体領域抽出部２０８は、そのマッチング度を基に、顔の領域を検出する。なお、被写体領域抽出部２０８は、画像データから抽出した目、鼻および口等の顔の特徴点からパターン認識を行い、顔の領域を検出してもよい。

次に、ステップＳ３０３では、被写体領域抽出部２０８は、ステップＳ３０２で顔が検出されたか否かを判定する。被写体領域抽出部２０８は、顔が検出された場合には、ステップＳ３０４に進み、顔が検出されなかった場合には、図３のフローチャートの処理を終了する。

ステップＳ３０４では、被写体領域抽出部２０８は、ステップＳ３０２で検出された顔の画像に対して、個人認識を行う。被写体領域抽出部２０８は、記憶部２０４に記憶されている認識対象の人物の顔の画像と、ステップＳ３０２で検出された顔の画像とを比較し、認識対象の人物と類似した人物が画像データ内に存在するか否かを判定する。例えば、被写体領域抽出部２０８は、検出された顔の画像を顔の大きさで正規化し、正規化した顔の画像の特徴情報と認識対象の顔の画像の特徴情報とのマッチング度を求めることにより、類似するか否かを判定する。

次に、ステップＳ３０５では、被写体領域抽出部２０８は、ステップＳ３０４で認識された個人がマスク除外者か否かを判定する。具体的には、記憶部２０４に記憶されている認識対象の人物は、人物ごとに、マスク除外対象者であるか否かが予めユーザ設定されている。その設定値は、記憶部２０４に保存されている。被写体領域抽出部２０８は、記憶部２０４に記憶されている設定値を参照し、ステップＳ３０４で認識された個人がマスク除外者か否かを判定する。被写体領域抽出部２０８は、認識された個人がマスク除外者である場合には、マスク処理の対象ではないため、ステップＳ３０７に進む。また、被写体領域抽出部２０８は、認識された個人がマスク除外者でない場合には、マスク処理の対象であるため、ステップＳ３０６に進む。

ステップＳ３０６では、被写体領域抽出部２０８は、マスク処理の対象の個人の顔を含む被写体の領域の抽出を行う。例えば、被写体領域抽出部２０８は、背景差分法を用いた動体検出処理を行い、マスク対象の個人の顔の座標が含まれる動体領域を検索し、被写体の領域として抽出する。そして、被写体領域抽出部２０８は、マスク対象の被写体の領域の抽出を行った後、ステップＳ３０７に進む。

ステップＳ３０７では、被写体領域抽出部２０８は、画像データ内に他の顔が存在するか否かを判定する。被写体領域抽出部２０８は、他の顔が存在する場合には、ステップＳ３０４に戻り、他の顔について、上記の処理を繰り返す。また、被写体領域抽出部２０８は、他の顔が存在しない場合には、ステップＳ３０８に進む。

ステップＳ３０８では、被写体領域抽出部２０８は、ステップＳ３０６で抽出したマスク対象の被写体の領域の情報をＯＳＤデータ生成部２１０に出力する。

次に、ステップＳ３０９では、被写体領域抽出部２０８は、ステップＳ３０６で抽出したマスク対象の被写体の領域の情報をマスク処理部２０９に出力し、図３のフローチャートの処理を終了する。

被写体領域抽出部２０８は、顔検出と、個人認識と、マスク対象の被写体の領域の抽出との重負荷の処理を行い、さらに、マスク処理部２０９は、マスク処理を行う。そのため、出力部２０５は、出力部２０６と出力部２０７に対して、映像出力の遅延が大きくなる。

図４（Ａ）は、マスク処理部２０９の入力画像４０１の一例を示す図である。図４（Ｂ）は、マスク処理部２０９がマスク画像処理を行った映像４０４の一例を示す図である。

入力画像４０１は、マスク処理部２０９がシステム制御部２０３から入力された画像データである。入力画像４０１には、マスク対象である被写体４０２と、マスク対象でない被写体４０３が存在する。被写体領域抽出部２０８は、マスク対象である被写体４０２の領域を抽出する。マスク処理部２０９は、入力画像４０１内の抽出された被写体４０２の領域に対して、マスク画像処理を行い、マスク画像処理後の映像４０４を生成する。映像４０４のマスク画像処理された領域４０５は、被写体４０２の領域である。

マスク処理部２０９は、マスク対象の被写体４０２の領域に対して、特定の単色で塗りつぶすシルエット処理を行い、シルエット化された領域４０５を生成する。なお、マスク処理部２０９は、単色塗りつぶしのシルエット化に限定されず、他のマスク画像処理を行ってもよい。例えば、マスク処理部２０９は、被写体４０２の領域に対して、ぼかしなどの所定のフィルタによって人物を特定できないように、マスク画像処理を行ってもよい。

図５は、図２のＯＳＤデータ生成部２１０の処理例を示すフローチャートである。まず、ステップＳ５０１では、ＯＳＤデータ生成部２１０は、被写体領域抽出部２０８からのマスク対象の被写体の領域の情報の入力を待つ。

次に、ステップＳ５０２では、マスク対象の被写体の領域の情報の入力がない場合には、ステップＳ５０１に戻り、マスク対象の被写体の領域の情報の入力があった場合には、ステップＳ５０３に進む。

ステップＳ５０３では、ＯＳＤデータ生成部２１０は、ＯＳＤデータを生成する。ステップＳ５０３の詳細は、後に図６（Ａ）および図６（Ｂ）を参照しながら説明する。

次に、ステップＳ５０４では、ＯＳＤデータ生成部２１０は、生成したＯＳＤデータをＯＳＤ処理部２１１に出力する。

図６（Ａ）および図６（Ｂ）は、ＯＳＤデータ生成部２１０の処理例を説明するための図である。ＯＳＤデータ生成部２１０は、ＯＳＤデータ生成部２１０から、マスク対象の被写体の領域の情報６０１を入力する。マスク対象の被写体の領域の情報６０１は、２値画像と同様に、マスク対象の被写体の領域６０２内の画素が値０であり、マスク対象の被写体の領域６０２外の画素が値１である。図６（Ａ）では、値０が黒で表され、値１が白で表される。被写体の領域６０２は、マスク領域であり、画素値が０である。

ＯＳＤデータ生成部２１０は、マスク対象の被写体の領域の情報６０１を基に、ＯＳＤデータ６０３を生成する。ＯＳＤデータ６０３は、ＯＳＤデータ領域６０４を有する。ＯＳＤデータ生成部２１０は、マスク対象の被写体の領域６０２に対応するＯＳＤデータ領域６０４のＯＳＤデータ６０３を生成する。ＯＳＤデータ６０３はマスクデータであり、ＯＳＤデータ領域６０４はマスクデータ領域である。

ＯＳＤデータ生成部２１０は、マスク対象の被写体の領域の情報６０１の全領域を縦横に区切ってマス目に分割し、マス目内に画素値が０である画素が存在する場合には、そのマス目に黒い四角の文字データをＯＳＤデータ領域６０４として生成する。ＯＳＤデータ生成部２１０は、マス目分の回数の処理で済む解像度の粗いため、高速に処理が可能であり、処理による遅延がごくわずかである。ＯＳＤデータ領域６０４は、黒い四角の文字データの領域である。ＯＳＤデータ領域６０４は、被写体の領域６０２を包含する領域であり、被写体の領域６０２より広い領域である。その理由については後述する。

なお、ＯＳＤデータ生成部２１０は、黒い四角の文字データをＯＳＤデータ領域６０４として生成したが、これに限定されない。ＯＳＤデータ生成部２１０は、映像の遅延が小さい軽い処理であれば、文字データ以外でＯＳＤデータ領域６０４を生成してもよい。例えば、ＯＳＤデータ生成部２１０は、画素単位でＯＳＤデータ領域６０４を生成可能である場合には、被写体の領域６０２をそのまま単色のＯＳＤデータ領域６０４として用いてもよい。また、ＯＳＤデータ生成部２１０は、被写体の領域６０２を包含する長方形の矩形をＯＳＤデータ領域６０４として生成してもよい。

図７は、ＯＳＤ処理部２１１の処理例を説明するための図である。ＯＳＤ処理部２１１は、重畳部であり、図４（Ａ）の入力画像４０１に対して、図６（Ｂ）のＯＳＤデータ６０３を重畳し、画像７０４を生成する。画像７０４では、被写体４０２の上に、ＯＳＤデータ領域６０４が重畳される。被写体４０２は、ＯＳＤデータ領域６０４により、簡易的にマスクされた画像となる。

図８は、出力部２０５、出力部２０６および出力部２０７が出力する映像のフレームの時系列の例を示す図である。

時刻ｔ１では、マスク対象の被写体４０２が存在しないので、被写体領域抽出部２０８は、マスク対象の被写体４０２の領域を抽出しない。その場合、出力部２０５は、システム制御部２０３からの入力映像をそのまま映像８０１として出力する。出力部２０６は、システム制御部２０３からの入力映像をそのまま映像８０２として出力する。システム制御部２０３は、マスク処理部２０９がシルエット化した領域を生成していないので、出力部２０７へ映像を出力する。出力部２０７は、システム制御部２０３からの入力映像をそのまま映像８０３として出力する。映像８０１〜８０３は、時刻ｔ１の近辺で出力される。

時刻ｔ２では、マスク対象の被写体４０２が存在するので、被写体領域抽出部２０８は、マスク対象の被写体４０２の領域を抽出する。その場合、マスク処理部２０９は、図４（Ｂ）のように、入力画像の被写体４０２の領域に対して、シルエット化された領域４０５を生成し、映像８０４を生成する。出力部２０５は、シルエット化された領域４０５を有する映像８０４を出力する。ＯＳＤデータ生成部２１０は、図７のように、入力画像の被写体４０２の領域に対して、ＯＳＤデータ領域６０４を生成する。ＯＳＤ処理部２１１は、入力画像に対して、ＯＳＤデータ６０３を重畳し、映像８０５を生成する。出力部２０６は、ＯＳＤデータ領域６０４を有する映像８０５を出力する。システム制御部２０３は、マスク処理部２０９がシルエット化した領域４０５を生成しているので、出力部２０７へ映像を出力しない。出力部２０７は、状態８０６のように、映像を出力しない。なお、出力部２０７は、全面が黒い映像を出力してもよい。出力部２０７は、システム制御部２０３からの入力映像を基に、映像を出力する。映像８０４および８０５は、時刻ｔ２の近辺で出力される。

時刻ｔ３では、マスク対象の被写体４０２が存在しないので、被写体領域抽出部２０８は、マスク対象の被写体４０２の領域を抽出しない。その場合、出力部２０５は、システム制御部２０３からの入力映像をそのまま映像８０７として出力する。出力部２０６は、システム制御部２０３からの入力映像をそのまま映像８０８として出力する。システム制御部２０３は、マスク処理部２０９がシルエット化した領域を生成していないので、出力部２０７へ映像を出力する。出力部２０７は、システム制御部２０３からの入力映像をそのまま映像８０９として出力する。映像８０７〜８０９は、時刻ｔ３の近辺で出力される。

図９（Ａ）および図９（Ｂ）は、ＨＤＭＩ端子１０４に接続されたデバイスの種類によって簡易マスク処理を行うか否かを決定する場合の一例を示す図である。

図９（Ａ）は、ＨＤＭＩ端子１０４にディスプレイ９０１が接続された状態を示す図である。撮像装置１００のＨＤＭＩ端子１０４とディスプレイ９０１は、ケーブルで接続されている。ディスプレイ９０１は、ＨＤＭＩ端子１０４を介して、出力部２０６に接続されるデバイスである。撮像装置１００は、ＨＤＭＩ端子１０４にディスプレイ９０１が接続されている場合には、映像がライブ表示に用いられると判断し、簡易マスク処理されたＯＳＤデータ領域を含む映像９０２を、ＨＤＭＩ端子１０４を介して、ディスプレイ９０１に出力する。ディスプレイ９０１は、ＯＳＤデータ領域を含む映像９０２を表示する。

図９（Ｂ）は、ＨＤＭＩ端子１０４にレコーダ９０３が接続された状態を示す図である。撮像装置１００のＨＤＭＩ端子１０４とレコーダ９０３は、ケーブルで接続されている。レコーダ９０３は、ＨＤＭＩ端子１０４を介して、出力部２０６に接続されるデバイスである。撮像装置１００は、ＨＤＭＩ端子１０４にレコーダ９０３が接続されている場合には、映像が録画に用いられると判断し、簡易マスク処理がされていない映像９０４を、ＨＤＭＩ端子１０４を介して、レコーダ９０３に出力する。レコーダ９０３は、簡易マスク処理がされていない映像９０４を録画する。

記憶部２０４は、ＨＤＭＩ端子１０４に接続可能であるデバイスのモデル名とそのデバイスの種類のリストを記憶する。システム制御部２０３は、ＨＤＭＩ端子１０４にデバイスが接続された場合には、ＨＤＭＩ端子１０４に接続されたデバイスのデバイス情報を取得する。デバイス情報は、モデル名を含む。システム制御部２０３は、記憶部２０４に記憶されているリストを参照し、取得したモデル名に対応するデバイスの種類を取得する。ＯＳＤ処理部２１１は、そのデバイスの種類に応じて、簡易マスク処理を行うか否かを決定する。出力部２０６は、そのデバイスの種類に応じて、映像９０２または９０４を、ＨＤＭＩ端子１０４に接続されたデバイスに出力する。

なお、映像９０２を出力するデバイスの種類と、映像９０４を出力するデバイスの種類は、ユーザが設定変更可能である。ユーザは、デバイスの種類毎に、簡易マスク処理を行うか否かを設定することができる。

図１０は、マスク領域拡張処理によりマスク領域を広げた場合の一例を示す図である。前述した通り、ＯＳＤ処理部２１１は、被写体領域抽出部２０８およびＯＳＤデータ生成部２１０の処理の完了を待たずに、画像を出力部２０６に出力する。これにより、出力部２０６は、遅延時間が短い映像を出力することができる。つまり、出力部２０５と出力部２０６の映像出力は、同期せず、数フレーム分ずれる。出力部２０６は、出力部２０５より早く、映像を出力する。

そのため、被写体が移動している場合、ＯＳＤ処理部２１１が、ＯＳＤデータ生成部２１０により生成されたＯＳＤデータを重畳すると、数フレームの間に被写体が移動した分だけＯＳＤデータの位置がずれてしまう。その場合、被写体がＯＳＤデータからはみ出て見えてしまう場合がある。

そこで、ＯＳＤデータ生成部２１０は、図６（Ｂ）のＯＳＤデータ６０３のＯＳＤデータ領域６０４に対して、拡張処理を行い、拡張領域１００２を追加したＯＳＤデータ１００１を生成する。具体的には、ＯＳＤデータ生成部２１０は、ＯＳＤデータ領域６０４に外接するマス目の拡張領域１００２に黒い四角の文字データを配置し、ＯＳＤデータ１００１を生成する。ＯＳＤ処理部２１１は、入力映像にＯＳＤデータ１００１を重畳し、重畳した映像を出力部２０６に出力する。これにより、撮像装置１００は、被写体が移動していても、被写体がＯＳＤデータ領域６０４および拡張領域１００２からはみ出て見えてしまうことを防止することができる。ＯＳＤデータ領域６０４および拡張領域１００２は、マスク対象の被写体の領域６０２より広い領域である。

なお、ＯＳＤデータ生成部２１０は、ＯＳＤデータ領域６０４に隣接するマス目に黒い四角の文字データの拡張領域１００２を追加したが、これに限定されない。ＯＳＤデータ生成部２１０は、被写体の移動ベクトルを算出し、マスク対象の被写体の領域６０２に対して、被写体の移動ベクトルの方向だけに拡張した拡張領域１００２を追加してもよい。

以上のように、被写体領域抽出部２０８は、マスク対象の被写体の領域情報をマスク処理部２０９およびＯＳＤデータ生成部２１０に出力する。マスク処理部２０９は、高度なマスク処理を行う。ＯＳＤデータ生成部２１０およびＯＳＤ処理部２１１は、簡易なマスク処理を行う。出力部２０６は、遅延時間を短縮しつつプライバシーを保護することができる。

（その他の実施形態）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読み出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。

１００ 撮像装置、１０１ 撮像ユニット、１０２ 映像出力パネル、１０３ ＬＡＮ端子、１０４ ＨＤＭＩ端子、１０５ ＳＤＩ端子、２０１ 撮像部、２０２ 画像処理部、２０３ システム制御部、２０４ 記憶部、２０５ 出力部、２０６ 出力部、２０７ 出力部、２０８ 被写体領域抽出部、２０９ マスク処理部、２１０ ＯＳＤデータ生成部、２１１ ＯＳＤ処理部

Claims (11)

1. 撮像された映像に対して、マスク対象の被写体の領域を抽出する抽出手段と、
   前記撮像された映像において、前記抽出手段により抽出されたマスク対象の被写体の領域に対して第１のマスク処理を行う第１のマスク処理手段と、
   前記第１のマスク処理が行われた映像を出力する第１の出力手段と、
   前記撮像された映像において、前記抽出手段により抽出されたマスク対象の被写体の領域に対して第２のマスク処理を行う第２のマスク処理手段と、
   前記第２のマスク処理が行われた映像を出力する第２の出力手段とを有し、
   前記第２のマスク処理は、前記第１のマスク処理より処理時間が短い処理であることを特徴とする撮像装置。
2. 前記第２のマスク処理手段は、
   前記抽出手段により抽出されたマスク対象の被写体の領域に対応する領域のマスクデータを生成する生成手段と、
   前記撮像された映像に対して、前記マスクデータを重畳する重畳手段とを有することを特徴とする請求項１に記載の撮像装置。
3. 前記重畳手段は、前記抽出手段および前記生成手段の処理によってマスクデータが完成していなければ前回生成したマスクデータを用いて映像に対する重畳処理を行うことを特徴とする請求項２に記載の撮像装置。
4. 前記生成手段は、前記マスク対象の被写体の領域を包含する領域のマスクデータを生成することを特徴とする請求項２または３に記載の撮像装置。
5. 前記生成手段は、前記マスク対象の被写体の領域より広い領域のマスクデータを生成することを特徴とする請求項２〜４のいずれか１項に記載の撮像装置。
6. 前記生成手段は、前記マスク対象の被写体の領域に対して、前記被写体の移動ベクトルの方向に拡張した領域のマスクデータを生成することを特徴とする請求項２〜５のいずれか１項に記載の撮像装置。
7. 前記マスクデータは、文字データであることを特徴とする請求項２〜６のいずれか１項に記載の撮像装置。
8. 前記第２のマスク処理手段は、前記第２の出力手段に接続されているデバイスの種類に応じて、前記第２のマスク処理を行うか否かを決定することを特徴とする請求項１〜７のいずれか１項に記載の撮像装置。
9. 前記撮像された映像を出力する第３の出力手段と、
   前記抽出手段によりマスク対象の被写体の領域が抽出された場合には、前記撮像された映像を前記第３の出力手段に出力せず、前記抽出手段によりマスク対象の被写体の領域が抽出されなかった場合には、前記撮像された映像を前記第３の出力手段に出力する制御手段とを有し、
   前記第３の出力手段は、前記制御手段から入力した映像を基に、映像を出力することを特徴とする請求項１〜８のいずれか１項に記載の撮像装置。
10. 撮像された映像に対して、マスク対象の被写体の領域を抽出する抽出ステップと、
    前記撮像された映像において、前記抽出されたマスク対象の被写体の領域に対して第１のマスク処理を行う第１のマスク処理ステップと、
    前記第１のマスク処理が行われた映像を出力する第１の出力ステップと、
    前記撮像された映像において、前記抽出されたマスク対象の被写体の領域に対して第２のマスク処理を行う第２のマスク処理ステップと、
    前記第２のマスク処理が行われた映像を出力する第２の出力ステップとを有し、
    前記第２のマスク処理は、前記第１のマスク処理より処理時間が短い処理であることを特徴とする撮像装置の制御方法。
11. コンピュータを、請求項１〜９のいずれか１項に記載された撮像装置の各手段として機能させるためのプログラム。

Images