JP2006285403A

JP2006285403A - 画像処理方法および画像処理装置

Info

Publication number: JP2006285403A
Application number: JP2005101567A
Authority: JP
Inventors: Naoto Toba; 直人鳥羽
Original assignee: Konica Minolta Inc
Current assignee: Konica Minolta Inc
Priority date: 2005-03-31
Filing date: 2005-03-31
Publication date: 2006-10-19

Abstract

【課題】小さい量子化ビット数で、画像中から動物体を精度良く追跡する。
【解決手段】対象物の色の分布を特徴量として、画像に含まれる対象物を追跡する機能を有する画像処理の際に、量子化ビット数Ｎｈの色相Ｈ、量子化ビット数Ｎｓの彩度Ｓ、量子化ビット数Ｎｖの輝度Ｖにより表現されるＨＳＶ色空間を用いて、対象領域画素数Ｍ、各パラメータの総ビット数Ｎsum＝Ｎｈ＋Ｎｓ＋Ｎｖ、Ｎ'sum＝1.8×Ｎｈ＋0.7×Ｎｓ＋0.4×Ｎｖとした場合に、Ｍ^(1/3)＋Ｎ'sum＞１８、かつ、１０＞Ｎsum＞７、を満足する条件の範囲内で、対象物の色の分布を特徴量として、画像に含まれる対象物の追跡を行う、ことを特徴とする。
【選択図】図１

Description

この発明は、画像に含まれる対象物を追跡する画像処理方法および画像処理装置であって、対象物の色の分布を特徴量として、画像に含まれる対象物を追跡する画像処理方法および画像処理装置である。

近年、防犯上の理由により、監視カメラを設置する施設が増加している。この様な施設では、監視カメラを２４時間駆動させ、常時監視を行う必要がある。
なお、このような監視カメラを用いる場合において、画像に含まれる動体（動いている人物や自動車など、以下、「対象物」）を、画像処理によって認識しつつ追跡することが要求されてきている。

なお、赤外線カメラなどを用いて対象物からの赤外線放射を検出して追跡する手法も存在しているが、専用の赤外線カメラが必要になったり、また、周囲と温度差が無い対象物を検出できないといった問題が生じてくる。

そこで、画像中の色分布ヒストグラムに着目して、対象物の領域を画像中から探索、推定する手法が、以下の特許文献１、特許文献２、非特許文献１、非特許文献２、などで検討されてきている。
特開２００１−１６７２６９号公報（第１頁、図１）特開２００４−３４８２７３号公報（第１頁、図１）「参照画像の探索と更新に基づく注視対象のリアルタイム追跡手法」、林豊洋、榎田修一、江島俊朗、第9回画像センシングシンポジウム、2003年、「色ヒストグラムインターセクションを用いたリアルタイム人物顔抽出」吉村哲也、市川忠嗣、森島繁生、相澤清晴、斎藤隆弘、映像情報メディア学会誌、Vol.55, No.3, pp.412-416, March 2001、

画像中の色の分布は、形状の変化や回転，部分的なオクルージョンの影響を受けにくいことが知られている。すなわち、画像中の人物などの動きを有する対象物の追跡において、形状の変化や大きさの変化といったことが起こるが、そのような変化する対象物を追跡する場合に、対象物の色の分布を特徴量として用いることが有効である。

この場合、たとえば、色の分布が似ていることを手掛かりにして似ている方向へ移動して追跡を行う。この時、画像中から対象物の位置を直接知ることができないため、対象物の位置を統計的、確率的に推定することになる。

そして、予め取得しておいた追跡対象物を表す色の分布と似ている分布を持つ領域を画像中から探す。すなわち、追跡する際に対象物のモデルと、候補領域の２つの色分布がどの程度似ているかにより、判定を行う。

以上のような画像処理による追跡には、処理精度が重要であり、高精度に処理を実行するためには量子化ビット数が大きい方が望ましい。すなわち、量子化ビット数が小さいと精度が低下し、追跡がとぎれてしまうことがある。

一方、以上のような画像処理による追跡は、リアルタイムで実現できることが望ましい。このため、画像処理装置の能力にもよるが、画像処理する際の量子化ビット数は小さい方が望ましい。

なお、画像処理装置の能力を高めれば量子化ビット数が大きくてもリアルタイムで実現可能であるが、その場合には画像処理装置として高価なものが必要となるため、望ましくない。

なお、人間の感じる色の感覚に近いＨＳＶ色空間を用いて、画像中の色分布ヒストグラムに着目して、対象物の領域を画像中から探索する場合であっても、色相Ｈ、彩度Ｓ、輝度Ｖのそれぞれの量子化ビット数の最適な組み合わせについては見いだされておらず、経験的、あるいは実験的な数値が用いられているにすぎなかった。

たとえば、ＨＳＶをそれぞれ４ビット，３ビット，３ビットなどとして色相Ｈに重みをおいた状態で、少なくとも、総量子化ビット数を１０ビット以上とすることが一般的であった。すなわち、総量子化ビット数が１０ビット未満になると、追跡に失敗することが知られており、総量子化ビット数１０ビット未満は使用されていなかった。

本発明は以上のような事情を考慮してなされたもので、ＨＳＶ色空間を用いた場合に、小さい量子化ビット数で、画像中から動物体を精度良く追跡することが可能な画像処理方法および画像処理装置を提供することを目的とする。

すなわち、前記した課題は、以下に列記する各発明によって解決される。
（１）請求項１記載の発明は、対象物の色の分布を特徴量として、画像に含まれる対象物を追跡する機能を有する画像処理方法であって、量子化ビット数Ｎｈの色相Ｈ、量子化ビット数Ｎｓの彩度Ｓ、量子化ビット数Ｎｖの輝度Ｖにより表現されるＨＳＶ色空間を用いて、対象領域画素数Ｍ、各パラメータの総ビット数Ｎsum＝Ｎｈ＋Ｎｓ＋Ｎｖ、Ｎ'sum＝1.8×Ｎｈ＋0.7×Ｎｓ＋0.4×Ｎｖとした場合に、Ｍ^(1/3)＋Ｎ'sum＞１８、かつ、１０＞Ｎsum＞７、を満足する条件の範囲内で、対象物の色の分布を特徴量として、画像に含まれる対象物の追跡を行う、ことを特徴とする画像処理方法である。

（２）請求項２記載の発明は、上記（１）において、前記Ｎsum＝８の条件で対象物の追跡を行うことを特徴とする画像処理方法である。
（３）請求項３記載の発明は、対象物の色の分布を特徴量として、画像に含まれる対象物を追跡する画像処理部を備えた画像処理装置であって、前記画像処理部は、量子化ビット数Ｎｈの色相Ｈ、量子化ビット数Ｎｓの彩度Ｓ、量子化ビット数Ｎｖの輝度Ｖにより表現されるＨＳＶ色空間を用いて、対象領域画素数Ｍ、各パラメータの総ビット数Ｎsum＝Ｎｈ＋Ｎｓ＋Ｎｖ、Ｎ'sum＝1.8×Ｎｈ＋0.7×Ｎｓ＋0.4×Ｎｖとした場合に、Ｍ^(1/3)＋Ｎ'sum＞１８、かつ、１０＞Ｎsum＞７、を満足する条件の範囲内で、対象物の色の分布を特徴量として、画像に含まれる対象物の追跡を行う、ことを特徴とする画像処理装置である。

（４）請求項４記載の発明は、上記（３）において、前記画像処理部はＮsum＝８の条件で対象物の追跡を行うことを特徴とする画像処理装置である。

以上の発明によれば、以下に列記するような効果を得ることができる。
（１）請求項１記載の画像処理方法の発明では、対象物のＨＳＶ色空間における色の分布を特徴量として追跡する際に、色相Ｈでは量子化ビット数Ｎｈ、彩度Ｓでは量子化ビット数Ｎｓ、輝度Ｖでは量子化ビット数Ｎｖとして、対象領域画素数Ｍ、各パラメータの総ビット数Ｎsum＝Ｎｈ＋Ｎｓ＋Ｎｖ、Ｎ'sum＝1.8×Ｎｈ＋0.7×Ｎｓ＋0.4×Ｎｖとした場合に、Ｍ^(1/3)＋Ｎ'sum＞１８、かつ、１０＞Ｎsum＞７、を満足する条件の範囲内で、対象物の色の分布を特徴量として、画像に含まれる対象物の追跡を行う。

すなわち、対象物の色の分布を特徴量として、画像に含まれる対象物の追跡を行う際に、以上の条件の範囲内で行うことにより、処理精度を維持して対象物を追跡可能な状態に保ったままで、量子化ビット数を小さくしてリアルタイム処理に適した状態とすることができる。

（２）請求項２記載の画像処理方法の発明では、上記（１）において、Ｎsum＝８の条件で対象物の追跡を行うことを特徴としている。
すなわち、対象物の色の分布を特徴量として、画像に含まれる対象物の追跡を行う際に、Ｎsum＝Ｎｈ＋Ｎｓ＋Ｎｖ、Ｎ'sum＝1.8×Ｎｈ＋0.7×Ｎｓ＋0.4×Ｎｖとした場合に、Ｍ^(1/3)＋Ｎ'sum＞１８、かつ、Ｎsum＝８、を満足する条件の範囲内で、対象物の色の分布を特徴量として、画像に含まれる対象物の追跡を行う。

以上の条件の範囲内で行うことにより、処理精度を維持して対象物を追跡可能な状態に保ったままで、量子化ビット数を最小限に小さくしてリアルタイム処理に適した状態とすることができる。

（３）請求項３記載の画像処理装置の発明では、対象物のＨＳＶ色空間における色の分布を特徴量として追跡する際に、色相Ｈでは量子化ビット数Ｎｈ、彩度Ｓでは量子化ビット数Ｎｓ、輝度Ｖでは量子化ビット数Ｎｖとして、対象領域画素数Ｍ、各パラメータの総ビット数Ｎsum＝Ｎｈ＋Ｎｓ＋Ｎｖ、Ｎ'sum＝1.8×Ｎｈ＋0.7×Ｎｓ＋0.4×Ｎｖとした場合に、Ｍ^(1/3)＋Ｎ'sum＞１８、かつ、１０＞Ｎsum＞７、を満足する条件の範囲内で、対象物の色の分布を特徴量として、画像に含まれる対象物の追跡を行う。

（４）請求項４記載の画像処理装置の発明では、上記（３）において、前記画像処理部はＮsum＝８の条件で対象物の追跡を行うことを特徴とする。
すなわち、対象物の色の分布を特徴量として、画像に含まれる対象物の追跡を行う際に、Ｎsum＝Ｎｈ＋Ｎｓ＋Ｎｖ、Ｎ'sum＝1.8×Ｎｈ＋0.7×Ｎｓ＋0.4×Ｎｖとした場合に、Ｍ^(1/3)＋Ｎ'sum＞１８、かつ、Ｎsum＝８、を満足する条件の範囲内で、対象物の色の分布を特徴量として、画像に含まれる対象物の追跡を行う。

以下に添付図面を参照して、この発明にかかる画像処理方法および画像処理装置を実施するための最良の形態（以下、「実施形態」と言う）について説明する。なお、これにより本発明が限定されるものではない。

まず、本実施の形態にかかる画像処理装置を含む追跡システムの全体構成について説明する。ここで、図１は、本実施の形態にかかる画像処理装置（画像処理部）と、撮像を行うカメラ部と、撮像結果および追跡結果を表示する表示部とを備えた追跡システム１００の全体構成を示す機能ブロック図である。

本実施の形態にかかる追跡システム１００は、各部を制御する制御部１０１、各種操作の入力や対象物の設定の入力がなされる操作部１０５、対象物周辺の撮像を行うためのレンズ部１１０、撮像のためのタイミング信号を発生するタイミング信号発生部１２０、対象物の光学像を光電変換して画像信号を生成する固体撮像素子１３０、固体撮像素子１３０で得られた画像信号に所定の信号処理を施して画像データを生成する信号処理部１４０、画像データに含まれる対象物の色の分布を特徴量として対象物の追跡を行う画像処理を実行する画像処理部１５０、追跡結果を画像と共に表示する表示部１６０、により構成されている。なお、電源部やメモリなど、既知の手段については省略した状態で示している。

なお、レンズ部１１０、タイミング信号発生部１２０、固体撮像素子１３０、信号処理部１４０によって、撮像を行って画像データを出力するカメラ部が構成されている。また、操作部１０５、カメラ部（レンズ部１１０、タイミング信号発生部１２０、固体撮像素子１３０、信号処理部１４０）と、画像処理部１５０と、表示部１６０とは、追跡システム１００として一体に構成されていてもよいが、それぞれが離れた位置に設けられていてもよいし、それぞれが独立した装置として構成されていてもよい。

また、画像処理部１５０は、本願発明の画像処理装置を構成する部位であり、画像データのＲＧＢからＨＳＶ色空間への色変換と所定量子化ビット数の量子化とを行う色変換・量子化部１５１と、ＨＳＶ色空間の量子化データから色特徴量を算出する色特徴量算出部１５２と、予め取得しておいた追跡対象物を表す色の分布と似ている分布を持つ領域の特徴量を比較する特徴量比較部１５３と、特徴量の比較結果により画像中の対象物の領域を検出する対象物検出部１５４と、を有して構成されている。

ここで、追跡システム１００の動作について、図２のフローチャートや、図３以降の説明図を参照して説明を行う。
まず、画像に含まれる対象物を追跡する際に必要な各種条件設定について、操作部１０５から必要なパラメータなどが入力される（図２Ｓ１）。この際に、カメラ部で所望の撮像領域を撮像するようなカメラ設定、画像中に含まれる対象物の設定などの入力がなされる。図４（ａ）のような画像がカメラ部によって撮像されている場合、オペレータによって所望の対象物をポインティングデバイスなどで囲むような操作がなされ、追跡対象として設定された対象物の表示が表示部１６０になされる。ここでは、追跡対象としての対象物である人物が破線の枠で囲まれた状態で示されている。この対象物の設定により、ＨＳＶ色空間における追跡対象物を表す色の分布のデータが色特徴量として取得される。なお、ＨＳＶ色空間については後述する。

この状態で、固体撮像素子１３０で撮像（図２Ｓ２）された画像信号に信号処理部１４０にて所定の信号処理がなされて画像データとして画像処理部１５０に供給される（図２Ｓ３）。

画像処理部１５０では、カメラ部からの一般的なＲＧＢ形式の画像データをうけて、色変換・量子化部１５１でＨＳＶ色空間に色変換する。なお、ＨＳＶ色空間とは、色相Ｈ、彩度Ｓ、輝度Ｖにより表現される色空間であり、人間の知覚に近い状態で数値化できることが知られている。

ここで、図３にＨＳＶ色空間のモデルをＲＧＢとの関係において示す。ここで、ＨＳＶ色空間は、頂点を下向きにした状態の円錐形状で示されるものであり、円形の平面の回転方向が色相Ｈを表しており、円の半径方向が彩度Ｓであり、垂直方向が輝度Ｖを表している。なお、下向きとなった円錐の頂点部分が輝度０かつ彩度０の黒を表している。

また、色変換・量子化部１５１では、以上のＨＳＶ色空間への色変換と並行して、所定の量子化ビット数の量子化を実行する（図２Ｓ４）。
なお、この量子化ビット数については、高精度に追跡の処理を実行するためには量子化ビット数が大きい方が望ましい。すなわち、量子化ビット数が小さいと精度が低下し、追跡がとぎれてしまうことがある。一方、以上のような画像処理による追跡は、リアルタイムで実現できることが望ましい。このため、画像処理装置の能力にもよるが、画像処理する際の量子化ビット数は小さい方が望ましい。

そこで、本件出願の発明者が鋭意研究を進め、このような相反する要求に対応して、特定の条件を満たす場合に、小さい量子化ビット数で、画像中から動物体を精度良く追跡することが可能であることを見いだした。この特定の条件については後述する。

そして、色特徴量算出部１５２が、ＨＳＶ色空間の所定の量子化ビット数の量子化データから色特徴量を算出する（図２Ｓ５）。
なお、条件設定（図２Ｓ１）の際にオペレータによって所望の対象物をポインティングデバイスなどで囲むような操作がなされた場合（図４（ａ））、その対象物についての色の分布のデータが色特徴量が色特徴量算出部１５２によって算出され、保持されている。この図４（ａ）の場合には、人物の頭部についての色の分布のデータが、追跡対象物の色特徴量として算出され、保持されている。

また、追跡時には対象物が移動しており、画像中から対象物の位置を直接知ることができないため、対象物の位置を統計的、確率的に推定しつつ、色の分布が似ていることを手掛かりにして似ている方向へ移動して、対象物相当の領域について色の分布のデータを特徴量として算出する（図２Ｓ５）。

ここで、特徴量比較部１５３は、条件設定時（図２Ｓ１）に取得された追跡対象物の色特徴量と、追跡時に得られる対象物相当の領域での色特徴量とを比較する（図２Ｓ６）。なお、両者の一致が得られるまで、対象物が直前まで存在していた画像中における近傍領域の色特徴量の算出と比較とを繰り返す。

そして、特徴量比較部１５３による比較で両者の一致が得られたら（図２Ｓ７でＹ）、対象物検出部１５４が現撮像時点での対象物の領域を枠など囲むことで明示しつつ、表示部１６０に画像全体の表示を行う（図２Ｓ８）。

たとえば、図４（ａ）のように条件設定された追跡対象物が移動し、図４（ｂ）、図４（ｃ）、図４（ｄ）、と位置を変えた場合でも、以上の色の分布のデータを特徴量として検出・比較することで、移動しつつある対象物を明示した状態の画像表示が可能になる。このような撮像〜色変換・量子化〜特徴量算出〜特徴量比較〜対象物検出〜画像表示を終了の指示があるまで続行する（図２Ｓ９でＮ〜図２Ｓ２）。

なお、特徴量比較部１５３で、条件設定時に取得された追跡対象物の色特徴量と、追跡時に得られる対象物相当の領域での色特徴量とを比較（図２Ｓ６）しても、両者の一致が得られない状態になった場合には、対象物検出部１５４は追跡不能と判断して、表示部１６０にエラー表示を行う（図２Ｓ１０）。

なお、以上の対象物についての枠の表示や、追跡不能時のエラー表示に関しては、対象物検出部１５４が実行してもよいし、対象物検出部１５４の検出結果を受けた制御部１０１が実行してもよい。

ここで、発明者らが実験を繰り返すことで、特定の条件を満たす場合に、小さい量子化ビット数で、画像中から動物体を精度良く追跡することが可能であることを見いだした際の実験データの一例を図５，図６，図７，図８，図９に示す。

ここでは、追跡の際の画像処理において、カメラ部での撮像結果の画角内を画面右から左に対象物が移動し、左端で折り返し動作をする人物の頭部領域を追跡対象とし、ＨＳＶ色空間における各量子化ビット数の組み合わせと追跡領域範囲（追跡画素数）をパラメータとして追跡動作の可否を評価した。

なお、最後まで顔領域を検出して追跡できた場合を○、一回でも追跡対象を見失った場合は×とした。例えば、右から左に移動中に対象を見失い、折り返してきた対象物を再検出した場合も追跡不能として×で示している。

また、ここでは、３５mm換算で焦点距離３０mm（画角、水平52度×垂直42度）のレンズを有するカメラからの映像信号を３２０×２４０画素の画像データ（毎秒３０フレーム）とし、約５ｍ先を時速４kmで歩行する歩行者を追跡対象物として想定している。

追跡対象物の追跡手法としては、以下の文献１等に記載されているように平均値シフト法を用いて、追跡対象物とのBhattacharyya係数が大きくなる方向に候補領域を移動させることにより追跡対象の位置を求めるようにした。
（文献１）Dorin Comaniciu, et al, Kernel-Based Object Tracking, IEEE Transactions on Pattern Analysis and Machine Intelligence, VOL.25, No.5, May 2003.
図５，図６は画像中の対象物を２９画素×３９画素（１１３１画素）の長方形の領域で設定した場合の、ＨＳＶ色空間における各量子化ビット数の組み合わせと追跡動作の可否を示している。ここで、図５と図６は、本来は一つの表としてあらわせるデータを２つの図にわけて示している。

また、図７は、図５，図６の画像データ全体を約６３％に縮小し、対象物を２２画素×３１画素（７１３画素）の長方形の領域で設定した場合の、ＨＳＶ色空間における各量子化ビット数の組み合わせと追跡動作の可否を示している。

また、図８は、図５，図６の画像データ全体を約３０％に縮小し、対象物を１６画素×２１画素（３３６画素）の長方形の領域で設定した場合の、ＨＳＶ色空間における各量子化ビット数の組み合わせと追跡動作の可否を示している。

また、図９は、図５，図６の画像データを約２３％に縮小し、対象物を１４画素×１９画素（２６６画素）の長方形の領域で設定した場合の、ＨＳＶ色空間における各量子化ビット数の組み合わせと追跡動作の可否を示している。

本件出願の発明者が鋭意研究を進めた結果、以上の実験データに示したものの共通の条件を抽出したところ、量子化ビット数Ｎｈの色相Ｈ、量子化ビット数Ｎｓの彩度Ｓ、量子化ビット数Ｎｖの輝度Ｖにより表現されるＨＳＶ色空間を用いて、以下の数式において特定の条件を満たす場合に、小さい量子化ビット数で、画像中から動物体を精度良く追跡することが可能であることを見いだした。
ｆ（Ｍ）＋Ｎ’sum＞Ａ …（１），
ここで、各量子化ビット数に重みを付けた重み付け総ビット数をＮ'sumとする。また、ｆ（Ｍ）は、対象領域画素数Ｍを変数とする関数、Ａは定数である。
Ｎ'sum＝Ｗｈ×Ｎｈ＋Ｗｓ×Ｎｓ＋Ｗｖ×Ｎｖ …（２），
ここで、Ｗｈ、Ｗｓ、Ｗｖは各量子化ビット数に対する重み付けの定数である。

但し、対象領域画素数Ｍが大きければ各量子化ビット数を限りなく小さくできるわけではなく、追跡や検出を行うための総ビット数Ｎsum＝Ｎｈ＋Ｎｓ＋Ｎｖには下限値が存在している。
Ｎsum＞Ｂ …（３），
そして、追跡精度を満足させるためには、以上の（１）式と（２）式と（３）式とを同時に満足する量子化ビット数を与える必要がある。

また、従来は追跡不能になる可能性が大きいとして使用されていなかった範囲を本実施形態の特徴として考えることができるので上限値も存在している。
Ｃ＞Ｎsum …（４），
すなわち、追跡精度を満足させるためには、以上の（１）式と（２）式と（３）式と（４）式とを同時に満足する量子化ビット数を与える必要がある。

そして、これらの図に示される実験データや、図示されていない多数の実験データを解析したところ、
この結果、総ビット数Ｎsumは従来使用されることがなかった１０ビット未満が、特定の条件のもとで追跡に使用可能であることとが明らかになった。なお、総ビット数Ｎsumが７以下になると、他の条件を満たしていても追跡不能になることも明らかになった。

また、重み付け総ビット数Ｎ’sumについては、重み付けした状態で、対象領域画素数Ｍの三乗根との和が、所定定数（１８）を下回らないようにする必要があることが判明した。

すなわち、上述した（１）〜（４）式は以下のように表すことができることが判明した。
Ｍ^(1/3)＋Ｎ'sum＞１８ …（５），
Ｎ'sum＝1.8×Ｎｈ＋0.7×Ｎｓ＋0.4×Ｎｖ …（６），
１０＞Ｎsum＞７ …（７），
と表せる。ここで、Ｍ^(1/3)は、Ｍの(1/3)乗、すなわち、Ｍの立方根（三乗根）を意味している。

なお、図５，図６，図７，図８，図９に示すように対象領域画素数Ｍが変化しても以上の数式に変化はないことが確認され、汎用性があることも証明されている。なお、紙面の関係で図示されていない多数のデータからも、同様な裏付けが得られている。

また、言い換えると、量子化ビット数Ｎｈの色相Ｈ、量子化ビット数Ｎｓの彩度Ｓ、量子化ビット数Ｎｖの輝度Ｖにより表現されるＨＳＶ色空間を用いて、対象領域画素数Ｍ、総ビット数Ｎsum、重み付け総ビット数Ｎ’sumが以上の数式において特定の条件を満たす場合に、小さい量子化ビット数で、画像中から動物体を精度良く追跡することが可能であることが判明した。

また、以上の（７）式から量子化ビット数は８と９とを選択することが可能であるが、量子化ビット数をできるだけ小さくした状態で動体物を精度良く追跡するには、Ｎsumを追跡可能下限値の８とすることが最も望ましい状態となる。

なお、以上の実施形態の説明では、カメラ部と画像処理部などを含んだ状態の追跡システムを具体例としてきたが、カメラとは独立した画像処理装置として構成することも可能である。

本発明の実施形態の画像処理部（画像処理装置）を含む追跡システムの全体構成を示すブロック図である。本発明の実施形態の追跡システムの動作状態を示すフローチャートである。本発明の本実施形態で使用されるＨＳＶ色空間の様子を示す模式図である。本発明の実施の形態における追跡の様子を示す説明図である。本発明の実施形態に関して具体的実験を行った実験データを示す説明図である。本発明の実施形態に関して具体的実験を行った実験データを示す説明図である。本発明の実施形態に関して具体的実験を行った実験データを示す説明図である。本発明の実施形態に関して具体的実験を行った実験データを示す説明図である。本発明の実施形態に関して具体的実験を行った実験データを示す説明図である。

符号の説明

１００追跡システム
１０１制御部
１１０レンズ部
１２０タイミング信号発生部
１３０固体撮像素子
１４０信号処理部
１５０画像処理部
１５１色変換・量子化部
１５２色特徴量算出部
１５３特徴量比較部
１５４対象物検出部
１６０表示部

Claims

対象物の色の分布を特徴量として、画像に含まれる対象物を追跡する機能を有する画像処理方法であって、
量子化ビット数Ｎｈの色相Ｈ、量子化ビット数Ｎｓの彩度Ｓ、量子化ビット数Ｎｖの輝度Ｖにより表現されるＨＳＶ色空間を用いて、対象領域画素数Ｍ、各パラメータの総ビット数Ｎsum＝Ｎｈ＋Ｎｓ＋Ｎｖ、Ｎ'sum＝1.8×Ｎｈ＋0.7×Ｎｓ＋0.4×Ｎｖとした場合に、
Ｍ^(1/3)＋Ｎ'sum＞１８、
かつ、
１０＞Ｎsum＞７、
を満足する条件の範囲内で、対象物の色の分布を特徴量として、画像に含まれる対象物の追跡を行う、
ことを特徴とする画像処理方法。
前記Ｎsum＝８の条件で対象物の追跡を行うことを特徴とする請求項１記載の画像処理方法。
対象物の色の分布を特徴量として、画像に含まれる対象物を追跡する画像処理部を備えた画像処理装置であって、
前記画像処理部は、量子化ビット数Ｎｈの色相Ｈ、量子化ビット数Ｎｓの彩度Ｓ、量子化ビット数Ｎｖの輝度Ｖにより表現されるＨＳＶ色空間を用いて、対象領域画素数Ｍ、各パラメータの総ビット数Ｎsum＝Ｎｈ＋Ｎｓ＋Ｎｖ、Ｎ'sum＝1.8×Ｎｈ＋0.7×Ｎｓ＋0.4×Ｎｖとした場合に、
Ｍ^(1/3)＋Ｎ'sum＞１８、
かつ、
１０＞Ｎsum＞７、
を満足する条件の範囲内で、対象物の色の分布を特徴量として、画像に含まれる対象物の追跡を行う、
ことを特徴とする画像処理装置。
前記画像処理部はＮsum＝８の条件で対象物の追跡を行うことを特徴とする請求項３記載の画像処理装置。