JP2003219396A - 画像処理方法、画像処理装置、画像処理プログラム及び監視システム - Google Patents
画像処理方法、画像処理装置、画像処理プログラム及び監視システムInfo
- Publication number
- JP2003219396A JP2003219396A JP2002008792A JP2002008792A JP2003219396A JP 2003219396 A JP2003219396 A JP 2003219396A JP 2002008792 A JP2002008792 A JP 2002008792A JP 2002008792 A JP2002008792 A JP 2002008792A JP 2003219396 A JP2003219396 A JP 2003219396A
- Authority
- JP
- Japan
- Prior art keywords
- area
- correction
- image processing
- detection
- detection area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Closed-Circuit Television Systems (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Abstract
(57)【要約】
【課題】 カメラで撮影された動画像の中で来訪者の顔
や宅内に侵入した人物などの映像を携帯端末の小さいモ
ニタの画面上で鮮明に表示できる画像処理装置を提供す
る。 【解決手段】 カメラ101、102で撮影された動画像の部
分高画質符号化や部分拡大符号化を行う画像処理装置10
4と、画像データを公衆網106に伝送する通信部105と、
その動画像を表示するＴＶモニタ付き携帯端末108とで
監視システムを構成する。画像処理装置104は、カメラ1
01、102で撮影された動画像の現フレームから顔や人体
を含む領域を検出して検出領域とし、この検出領域の正
誤を過去のフレームの補正領域と比較して判定し、検出
領域が正しければ検出領域を現フレームの補正領域と
し、検出領域が誤りであれば、過去のフレームの補正領
域を基に現フレームの補正領域を設定し、補正領域に対
して部分高画質符号化等を行う。携帯端末の小さい画面
上に来訪者の顔や不審人物を鮮明に表示できる。
や宅内に侵入した人物などの映像を携帯端末の小さいモ
ニタの画面上で鮮明に表示できる画像処理装置を提供す
る。 【解決手段】 カメラ101、102で撮影された動画像の部
分高画質符号化や部分拡大符号化を行う画像処理装置10
4と、画像データを公衆網106に伝送する通信部105と、
その動画像を表示するＴＶモニタ付き携帯端末108とで
監視システムを構成する。画像処理装置104は、カメラ1
01、102で撮影された動画像の現フレームから顔や人体
を含む領域を検出して検出領域とし、この検出領域の正
誤を過去のフレームの補正領域と比較して判定し、検出
領域が正しければ検出領域を現フレームの補正領域と
し、検出領域が誤りであれば、過去のフレームの補正領
域を基に現フレームの補正領域を設定し、補正領域に対
して部分高画質符号化等を行う。携帯端末の小さい画面
上に来訪者の顔や不審人物を鮮明に表示できる。
Description
【０００１】
【発明の属する技術分野】本発明は、監視カメラで撮影
された動画像をモニタ付き携帯端末に伝送して表示する
監視システムと、その画像処理を行う画像処理装置及び
画像処理方法と、その方法を規定する画像処理プログラ
ムに関するものである。
された動画像をモニタ付き携帯端末に伝送して表示する
監視システムと、その画像処理を行う画像処理装置及び
画像処理方法と、その方法を規定する画像処理プログラ
ムに関するものである。
【０００２】
【従来の技術】従来、大型施設などには、施設内の各所
にカメラを設置して、それらの映像を施設内のセンター
で集中的に監視する監視システムが配備されている。ま
た、宅内やその他の場所に異常検知センサを設置し、こ
のセンサからの通報を受けて警備会社が異常発生場所に
駆けつけるサービスも普及している。
にカメラを設置して、それらの映像を施設内のセンター
で集中的に監視する監視システムが配備されている。ま
た、宅内やその他の場所に異常検知センサを設置し、こ
のセンサからの通報を受けて警備会社が異常発生場所に
駆けつけるサービスも普及している。
【０００３】近年、宅内やその他の場所に設置されたカ
メラで撮影した動画像を利用者のＴＶモニタ付き携帯端
末に伝送する監視システムが開発されている。このシス
テムでは、外出中の利用者でも、携帯端末の画面を通し
て自宅の様子を監視することができる。この場合、カメ
ラで撮影した画像データを携帯端末に伝送するために、
カメラの解像度を携帯端末の解像度に落として画像デー
タの符号化が行われる。ただし、画像全体の解像度を一
様に落とすと、携帯端末の小さいモニタでは視認性が悪
くなる。こうした点を改善する画像処理方法として、人
物や顔などが映っている特定領域に対して符号量を多く
割り当て、この特定領域以外は符号量を少なくする“部
分高画質符号化”や、特定領域を拡大表示する“部分拡
大符号化”の手法が知られている。
メラで撮影した動画像を利用者のＴＶモニタ付き携帯端
末に伝送する監視システムが開発されている。このシス
テムでは、外出中の利用者でも、携帯端末の画面を通し
て自宅の様子を監視することができる。この場合、カメ
ラで撮影した画像データを携帯端末に伝送するために、
カメラの解像度を携帯端末の解像度に落として画像デー
タの符号化が行われる。ただし、画像全体の解像度を一
様に落とすと、携帯端末の小さいモニタでは視認性が悪
くなる。こうした点を改善する画像処理方法として、人
物や顔などが映っている特定領域に対して符号量を多く
割り当て、この特定領域以外は符号量を少なくする“部
分高画質符号化”や、特定領域を拡大表示する“部分拡
大符号化”の手法が知られている。
【０００４】例えば、特開平７−２８８８０６号公報に
は、テレビ会議システムやテレビ電話システムなどにお
いて、ユーザがモニタに表示された画像を見て、詳しく
観察したい領域をマウスで指定すると、その指定領域の
解像度を高め、それ以外の領域の解像度を低くする画像
処理方法が開示されており、また、指定領域内の指定さ
れた映像の動きに追従して指定領域を移動させる方法が
開示されている。また、特願２００１−２２２７１９号
公報には、動画像から人物の外郭や顔の輪郭を抽出する
画像処理方法が開示されている。
は、テレビ会議システムやテレビ電話システムなどにお
いて、ユーザがモニタに表示された画像を見て、詳しく
観察したい領域をマウスで指定すると、その指定領域の
解像度を高め、それ以外の領域の解像度を低くする画像
処理方法が開示されており、また、指定領域内の指定さ
れた映像の動きに追従して指定領域を移動させる方法が
開示されている。また、特願２００１−２２２７１９号
公報には、動画像から人物の外郭や顔の輪郭を抽出する
画像処理方法が開示されている。
【０００５】
【発明が解決しようとする課題】しかし、カメラの映像
を携帯端末の画面で監視する場合には、部分高画質符号
化を行う特定領域が利用者の希望する対象物から外れて
しまうと、利用者の希望する部分が返って低画質とな
り、その結果、携帯端末の小さいモニタでは所望の対象
物が鮮明に見えなくなり、例えば、来訪者の識別や宅内
に侵入した人物の詳細な状態が把握できないと言う問題
が発生する。
を携帯端末の画面で監視する場合には、部分高画質符号
化を行う特定領域が利用者の希望する対象物から外れて
しまうと、利用者の希望する部分が返って低画質とな
り、その結果、携帯端末の小さいモニタでは所望の対象
物が鮮明に見えなくなり、例えば、来訪者の識別や宅内
に侵入した人物の詳細な状態が把握できないと言う問題
が発生する。
【０００６】本発明は、こうした問題点を解決するもの
であり、カメラで撮影された動画像の中で来訪者の顔や
宅内に侵入した人物などの映像を携帯端末の小さいモニ
タの画面上で常に鮮明に表示することができる画像処理
方法を提供し、また、その方法を実施する画像処理装
置、プログラム及び監視システムを提供することを目的
としている。
であり、カメラで撮影された動画像の中で来訪者の顔や
宅内に侵入した人物などの映像を携帯端末の小さいモニ
タの画面上で常に鮮明に表示することができる画像処理
方法を提供し、また、その方法を実施する画像処理装
置、プログラム及び監視システムを提供することを目的
としている。
【０００７】
【課題を解決するための手段】そこで、本発明では、モ
ニタ付き携帯端末で表示する画像データを生成する画像
処理方法として、カメラで撮影された動画像の現フレー
ムから特定の被写体を含む領域を検出して検出領域と
し、この検出領域の正誤を過去のフレームにおける補正
領域と比較して判定し、検出領域が正しければその検出
領域を現フレームの補正領域として設定し、検出領域が
誤っていれば、過去のフレームの補正領域を基に現フレ
ームの補正領域を設定し、設定した補正領域が他の領域
に比べて明瞭に表示できるように符号化処理を行うよう
にしている。
ニタ付き携帯端末で表示する画像データを生成する画像
処理方法として、カメラで撮影された動画像の現フレー
ムから特定の被写体を含む領域を検出して検出領域と
し、この検出領域の正誤を過去のフレームにおける補正
領域と比較して判定し、検出領域が正しければその検出
領域を現フレームの補正領域として設定し、検出領域が
誤っていれば、過去のフレームの補正領域を基に現フレ
ームの補正領域を設定し、設定した補正領域が他の領域
に比べて明瞭に表示できるように符号化処理を行うよう
にしている。
【０００８】また、本発明の画像処理装置には、カメラ
で撮影された動画像の現フレームから特定の被写体を含
む領域を検出する領域検出部と、領域検出部で検出され
た検出領域の正誤を過去のフレームにおける補正領域と
比較して判定し、検出領域が正しければその検出領域を
現フレームの補正領域として設定し、検出領域が誤って
いれば、過去のフレームの補正領域を基に現フレームの
補正領域を設定する領域補正部と、領域補正部が設定し
た補正領域を他の領域に比べて明瞭に表示できるように
符号化する符号化部とを設けている。
で撮影された動画像の現フレームから特定の被写体を含
む領域を検出する領域検出部と、領域検出部で検出され
た検出領域の正誤を過去のフレームにおける補正領域と
比較して判定し、検出領域が正しければその検出領域を
現フレームの補正領域として設定し、検出領域が誤って
いれば、過去のフレームの補正領域を基に現フレームの
補正領域を設定する領域補正部と、領域補正部が設定し
た補正領域を他の領域に比べて明瞭に表示できるように
符号化する符号化部とを設けている。
【０００９】また、宅内またはその周囲に設置された監
視カメラと、監視カメラで撮影された動画像の部分高画
質符号化または部分拡大符号化を行う画像処理装置と、
画像処理装置で処理された画像データを公衆網に伝送す
る通信部と、画像データを無線回線を介して受信し、そ
の動画像を表示するＴＶモニタ付き携帯端末とで監視シ
ステムを構成している。
視カメラと、監視カメラで撮影された動画像の部分高画
質符号化または部分拡大符号化を行う画像処理装置と、
画像処理装置で処理された画像データを公衆網に伝送す
る通信部と、画像データを無線回線を介して受信し、そ
の動画像を表示するＴＶモニタ付き携帯端末とで監視シ
ステムを構成している。
【００１０】また、宅内またはその周囲に設置された監
視カメラと、監視カメラで撮影された動画像の画像デー
タを公衆網に伝送する通信部と、サービスプロバイダの
サーバに設けられた、公衆網を介して受信した動画像の
部分高画質符号化または部分拡大符号化を行う画像処理
装置と、画像処理装置で処理された画像データを無線回
線を介して受信し、前記動画像を表示するＴＶモニタ付
き携帯端末とで監視システムを構成している。
視カメラと、監視カメラで撮影された動画像の画像デー
タを公衆網に伝送する通信部と、サービスプロバイダの
サーバに設けられた、公衆網を介して受信した動画像の
部分高画質符号化または部分拡大符号化を行う画像処理
装置と、画像処理装置で処理された画像データを無線回
線を介して受信し、前記動画像を表示するＴＶモニタ付
き携帯端末とで監視システムを構成している。
【００１１】また、コンピュータプログラムは、コンピ
ュータに、カメラで撮影された動画像の現フレームから
特定の被写体を含む領域を検出し、検出領域として決定
する手順と、この検出領域の正誤を過去のフレームにお
ける補正領域と比較して判定し、検出領域が正しければ
その検出領域を現フレームの補正領域として設定し、検
出領域が誤っていれば、過去のフレームの補正領域を基
に現フレームの補正領域を設定する手順と、設定した補
正領域が他の領域に比べて明瞭に表示できるように符号
化処理を行う手順とを実行させるようにしている。
ュータに、カメラで撮影された動画像の現フレームから
特定の被写体を含む領域を検出し、検出領域として決定
する手順と、この検出領域の正誤を過去のフレームにお
ける補正領域と比較して判定し、検出領域が正しければ
その検出領域を現フレームの補正領域として設定し、検
出領域が誤っていれば、過去のフレームの補正領域を基
に現フレームの補正領域を設定する手順と、設定した補
正領域が他の領域に比べて明瞭に表示できるように符号
化処理を行う手順とを実行させるようにしている。
【００１２】こうした画像処理を行うことにより、利用
者は、携帯端末の小さい画面上で符号化、復号化を経た
画像を見るにも関わらず、所望の対象物を鮮明に、また
は大きく見ることができる。そのため、遠隔地にいて
も、宅内やその他の情況を的確に把握することができ
る。
者は、携帯端末の小さい画面上で符号化、復号化を経た
画像を見るにも関わらず、所望の対象物を鮮明に、また
は大きく見ることができる。そのため、遠隔地にいて
も、宅内やその他の情況を的確に把握することができ
る。
【００１３】また、検出領域として、所望の対象物を全
く含まない、あるいは、一部しか含まない領域が決定さ
れた場合でも、補正領域を求める処理により、正しい領
域を設定して、携帯端末の画面上に所望の対象物を表示
させることができ、携帯端末の視認性を保つことができ
る。また、検出領域が所望の対象物に対して大き過ぎ、
携帯端末の画面上で拡大効果が薄れる場合でも、対象物
に対して適当なサイズの領域に補正され、携帯端末での
視認性を保つことが可能となる。こうした補正は、利用
者が指定しなくても、自動的に行われる。
く含まない、あるいは、一部しか含まない領域が決定さ
れた場合でも、補正領域を求める処理により、正しい領
域を設定して、携帯端末の画面上に所望の対象物を表示
させることができ、携帯端末の視認性を保つことができ
る。また、検出領域が所望の対象物に対して大き過ぎ、
携帯端末の画面上で拡大効果が薄れる場合でも、対象物
に対して適当なサイズの領域に補正され、携帯端末での
視認性を保つことが可能となる。こうした補正は、利用
者が指定しなくても、自動的に行われる。
【００１４】また、こうした画像処理を行う画像処理装
置を監視システムに組み入れることにより、遠隔地にい
ながら、来訪者の確認や対応、宅内やその他の状態の把
握が可能となり、携帯端末の小さい画面上においても、
来訪者、家族や不審人物といった所望の対象物を鮮明に
見ることができる。
置を監視システムに組み入れることにより、遠隔地にい
ながら、来訪者の確認や対応、宅内やその他の状態の把
握が可能となり、携帯端末の小さい画面上においても、
来訪者、家族や不審人物といった所望の対象物を鮮明に
見ることができる。
【００１５】また、この画像処理装置をサービスプロバ
イダのサーバ上に設けることにより、システム導入の際
に利用者に掛かる負担を軽減できる。また、モニタ付き
携帯端末を警備会社の警備員に持たせる場合には、異常
発生場所に急行する警備員が現場に到着する前にその状
態を把握できる。
イダのサーバ上に設けることにより、システム導入の際
に利用者に掛かる負担を軽減できる。また、モニタ付き
携帯端末を警備会社の警備員に持たせる場合には、異常
発生場所に急行する警備員が現場に到着する前にその状
態を把握できる。
【００１６】
【発明の実施の形態】（実施の形態１）図１は、本発明
の実施の形態１における宅内監視システムを示してい
る。このシステムでは、玄関に設置された来訪者撮影用
のドアホンカメラ102と、宅内やその周囲を撮影するた
めに宅内や屋外などに設置された住居用監視カメラ101
と、住居用監視カメラ101及びドアホンカメラ102で撮影
された動画像を切り替えて出力する切り替え器103と、
切り替え器103から出力された画像データの部分高画質
符号化や部分拡大符号化を行う画像処理装置104と、画
像処理装置104で処理された画像データを送信する通信
部105とが利用者の住居100に設けられている。この通信
部105から送信された画像データは、公衆網106を通じて
基地局107に伝送され、基地局107から無線回線で利用者
が携帯するＴＶモニタ付き携帯端末108に伝送される。
携帯端末108は、受信した画像データを復号化して、そ
の画面にドアホンカメラ102または住居用監視カメラ101
で撮影された動画像を表示する。
の実施の形態１における宅内監視システムを示してい
る。このシステムでは、玄関に設置された来訪者撮影用
のドアホンカメラ102と、宅内やその周囲を撮影するた
めに宅内や屋外などに設置された住居用監視カメラ101
と、住居用監視カメラ101及びドアホンカメラ102で撮影
された動画像を切り替えて出力する切り替え器103と、
切り替え器103から出力された画像データの部分高画質
符号化や部分拡大符号化を行う画像処理装置104と、画
像処理装置104で処理された画像データを送信する通信
部105とが利用者の住居100に設けられている。この通信
部105から送信された画像データは、公衆網106を通じて
基地局107に伝送され、基地局107から無線回線で利用者
が携帯するＴＶモニタ付き携帯端末108に伝送される。
携帯端末108は、受信した画像データを復号化して、そ
の画面にドアホンカメラ102または住居用監視カメラ101
で撮影された動画像を表示する。
【００１７】画像処理装置104は、図２に示すように、
入力する動画像の各フレームから顔部分や人物を含む領
域を検出する領域検出部111（領域検出部111が検出した
領域を“検出領域”と言う）と、各フレームの検出領域
の位置や大きさと比較して、領域検出部111で検出され
た最新の検出領域が正解であるかどうかをチェックし、
正解であれば、その検出領域をそのまま出力し、不正解
であれば、それに代わる検出領域を“補正領域”として
出力する領域補正部112と、入力画像を符号化するとと
もに検出領域または補正領域への部分高画質符号化や部
分拡大符号化を行う符号化部110とを備えている。
入力する動画像の各フレームから顔部分や人物を含む領
域を検出する領域検出部111（領域検出部111が検出した
領域を“検出領域”と言う）と、各フレームの検出領域
の位置や大きさと比較して、領域検出部111で検出され
た最新の検出領域が正解であるかどうかをチェックし、
正解であれば、その検出領域をそのまま出力し、不正解
であれば、それに代わる検出領域を“補正領域”として
出力する領域補正部112と、入力画像を符号化するとと
もに検出領域または補正領域への部分高画質符号化や部
分拡大符号化を行う符号化部110とを備えている。
【００１８】この装置の符号化部110は、切り替え器103
から出力された動画像を領域検出部111へ送る。領域検
出部111は、入力する各フレームの画像から顔部分を検
出し、その領域を確定する、例えば特開２００１−２２
２７１９号公報に記載された顔検出処理、または、入力
画像から人物部分を検出しその領域を確定する人物検出
処理を行い、その検出領域を領域補正部112へ出力す
る。
から出力された動画像を領域検出部111へ送る。領域検
出部111は、入力する各フレームの画像から顔部分を検
出し、その領域を確定する、例えば特開２００１−２２
２７１９号公報に記載された顔検出処理、または、入力
画像から人物部分を検出しその領域を確定する人物検出
処理を行い、その検出領域を領域補正部112へ出力す
る。
【００１９】領域補正部112は、領域検出部111から出力
された検出領域が、それ以前の各フレームでの検出領域
の位置や大きさから見て、正解か不正解かをチェック
し、正解であれば検出領域を補正領域として、また、不
正解であれば検索領域に代わる補正領域を符号化部110
に出力する。ここで言う正解とは、検出領域に検出すべ
き対象物が包含されており、例えば、検出領域内で来訪
者の顔が識別でき、または人物の状態が把握できる状態
を意味する。この領域補正部112における処理の詳細は
後述する。
された検出領域が、それ以前の各フレームでの検出領域
の位置や大きさから見て、正解か不正解かをチェック
し、正解であれば検出領域を補正領域として、また、不
正解であれば検索領域に代わる補正領域を符号化部110
に出力する。ここで言う正解とは、検出領域に検出すべ
き対象物が包含されており、例えば、検出領域内で来訪
者の顔が識別でき、または人物の状態が把握できる状態
を意味する。この領域補正部112における処理の詳細は
後述する。
【００２０】符号化部110は、領域補正部112より出力さ
れた補正領域に対して符号量を多く割り当て、その他の
領域は符号量を少なくする部分高画質符号化や、その補
正領域を拡大した後に符号化する部分拡大符号化による
画像データの符号化を行い、符号化した画像データを通
信部105に出力する。
れた補正領域に対して符号量を多く割り当て、その他の
領域は符号量を少なくする部分高画質符号化や、その補
正領域を拡大した後に符号化する部分拡大符号化による
画像データの符号化を行い、符号化した画像データを通
信部105に出力する。
【００２１】図１６のフローチャートは、この画像処理
装置の処理手順を示している。まず、処理対象となる画
像を取得する（ＳＴ１）。次に、領域検出部111が、領
域検出処理により、入力画像から顔部分を検出する顔検
出処理（ＳＴ２）、または、入力画像から人物部分を検
出する人物検出処理（ＳＴ３）を行い、検出領域を確定
する。画像がドアホンカメラ画像の場合は、顔検出処理
の結果が検出領域となり、住居用監視カメラの場合は、
人物検出結果が検出領域となる。次に、領域補正部112
が、領域補正処理により、領域検出処理で確定した検出
領域を補正する（ＳＴ４）。次に、符号化部110は、符
号化処理により、補正領域の符号量を多く割り当てる部
分高画質符号化（ＳＴ５）、または、領域を拡大した後
符号化する部分拡大符号化（ＳＴ６）を行う。
装置の処理手順を示している。まず、処理対象となる画
像を取得する（ＳＴ１）。次に、領域検出部111が、領
域検出処理により、入力画像から顔部分を検出する顔検
出処理（ＳＴ２）、または、入力画像から人物部分を検
出する人物検出処理（ＳＴ３）を行い、検出領域を確定
する。画像がドアホンカメラ画像の場合は、顔検出処理
の結果が検出領域となり、住居用監視カメラの場合は、
人物検出結果が検出領域となる。次に、領域補正部112
が、領域補正処理により、領域検出処理で確定した検出
領域を補正する（ＳＴ４）。次に、符号化部110は、符
号化処理により、補正領域の符号量を多く割り当てる部
分高画質符号化（ＳＴ５）、または、領域を拡大した後
符号化する部分拡大符号化（ＳＴ６）を行う。
【００２２】図３は、領域補正部112の構成を示してい
る。この領域補正部112は、領域検出部111から入力する
検出領域の中心点座標、半径、その他の検出領域データ
を格納するメモリ120と、過去のフレームにおける検出
領域のデータから最新フレームの検出領域の移動量を算
出し、その移動量が適正範囲内にあるかどうかを判定す
る移動量算出部122と、過去のフレームにおける検出領
域のデータから最新フレームの検出領域のサイズ変動量
を算出し、そのサイズ変動量が適正範囲内にあるかどう
かを判定するサイズ変動量算出部123と、過去のフレー
ムにおける検出領域の位置及びサイズから、最新フレー
ムの検出領域の位置及びサイズが適正かどうかを判定す
る特徴算出部121と、特徴算出部121、移動量算出部122
及びサイズ変動量算出部123で算出された結果に基づき
最新フレームの検出領域が正解であるか否かの判断を行
う正解判定部124と、正解判定部124の判定結果をカウン
トするカウンタ125と、検出領域データの初期値を格納
するメモリ126と、補正領域として採用するデータを選
択し、ａ倍に拡大して符号化部110へ出力する切り替え
部127とを備えている。
る。この領域補正部112は、領域検出部111から入力する
検出領域の中心点座標、半径、その他の検出領域データ
を格納するメモリ120と、過去のフレームにおける検出
領域のデータから最新フレームの検出領域の移動量を算
出し、その移動量が適正範囲内にあるかどうかを判定す
る移動量算出部122と、過去のフレームにおける検出領
域のデータから最新フレームの検出領域のサイズ変動量
を算出し、そのサイズ変動量が適正範囲内にあるかどう
かを判定するサイズ変動量算出部123と、過去のフレー
ムにおける検出領域の位置及びサイズから、最新フレー
ムの検出領域の位置及びサイズが適正かどうかを判定す
る特徴算出部121と、特徴算出部121、移動量算出部122
及びサイズ変動量算出部123で算出された結果に基づき
最新フレームの検出領域が正解であるか否かの判断を行
う正解判定部124と、正解判定部124の判定結果をカウン
トするカウンタ125と、検出領域データの初期値を格納
するメモリ126と、補正領域として採用するデータを選
択し、ａ倍に拡大して符号化部110へ出力する切り替え
部127とを備えている。
【００２３】この領域補正部112では、領域検出部111で
作成された検出領域データが入力すると、この検出領域
データが、メモリ120に格納されるとともに、特徴算出
部121、移動量算出部122及びサイズ変動量算出部123に
送られる。特徴算出部121は、メモリ120に格納されてい
る最新を含む任意のフレームでの検出領域の位置とサイ
ズとの関係から、検出すべき対象物の画面上の座標にお
ける特徴を求め、検出領域の移動範囲とサイズの上下限
値とを決定し、最新の検出領域がこの条件を満たしてい
るか否かの判断を行う。
作成された検出領域データが入力すると、この検出領域
データが、メモリ120に格納されるとともに、特徴算出
部121、移動量算出部122及びサイズ変動量算出部123に
送られる。特徴算出部121は、メモリ120に格納されてい
る最新を含む任意のフレームでの検出領域の位置とサイ
ズとの関係から、検出すべき対象物の画面上の座標にお
ける特徴を求め、検出領域の移動範囲とサイズの上下限
値とを決定し、最新の検出領域がこの条件を満たしてい
るか否かの判断を行う。
【００２４】移動量算出部122は、メモリ120に格納され
ている最新を含む任意のフレーム間での検出領域の位置
変化量と方向とを求め、その位置変化量及び方向が任意
に定めた閾値以内であるか否かの判定を行う。サイズ変
動量算出部123は、メモリ120に格納されている最新を含
む任意のフレーム間での検出領域のサイズ変動量と方向
とを求め、そのサイズ変動量及び方向が任意に定めた閾
値以内であるか否かの判定を行う。
ている最新を含む任意のフレーム間での検出領域の位置
変化量と方向とを求め、その位置変化量及び方向が任意
に定めた閾値以内であるか否かの判定を行う。サイズ変
動量算出部123は、メモリ120に格納されている最新を含
む任意のフレーム間での検出領域のサイズ変動量と方向
とを求め、そのサイズ変動量及び方向が任意に定めた閾
値以内であるか否かの判定を行う。
【００２５】正解判定部124は、特徴算出部121、移動量
算出部122及びサイズ変動量算出部123における判定結果
の一部またはすべてに基づき最新の検出領域が正解であ
るか否かの判断を行う。カウンタ125は、正解判定部124
で連続して誤り（不正解）と判断された回数をカウント
する。
算出部122及びサイズ変動量算出部123における判定結果
の一部またはすべてに基づき最新の検出領域が正解であ
るか否かの判断を行う。カウンタ125は、正解判定部124
で連続して誤り（不正解）と判断された回数をカウント
する。
【００２６】切り替え部127は、カウンタ125の値に応じ
て、メモリ126に格納された検出領域の初期値を選択
し、あるいは、移動量算出部122で求めた検出領域の中
心点やサイズ変動量算出部123で求めた検出領域の半径
を補正領域の中心点及び半径として選択し、予め定めら
れた値ａ倍に拡大して、補正領域として符号化部110に
出力する。
て、メモリ126に格納された検出領域の初期値を選択
し、あるいは、移動量算出部122で求めた検出領域の中
心点やサイズ変動量算出部123で求めた検出領域の半径
を補正領域の中心点及び半径として選択し、予め定めら
れた値ａ倍に拡大して、補正領域として符号化部110に
出力する。
【００２７】図１７のフローチャートは、領域補正部11
2の処理手順を示している。まず、領域検出部111から検
出領域を取得する（ＳＴ１）。移動量算出部122は、移
動量算出処理により、最新の検出領域データを含む任意
のフレーム間での検出領域データの位置変化量と方向と
を求め、その位置変化量と方向とが任意に定めた閾値以
内であるか否かの判定を行う（ＳＴ２）。サイズ変動量
算出部123は、サイズ変動量算出処理により、最新の検
出領域データを含む任意のフレーム間での検出領域デー
タのサイズ変動量と方向とを求め、そのサイズ変動量と
方向とが任意に定めた閾値以内であるか否かを判定する
（ＳＴ３）。特徴算出部121は、特徴算出処理により、
最新の検出領域データを含む任意のフレームでの検出領
域の位置とサイズとの関係から、検出されるべき対象物
の画面上の座標における特徴を求め、検出領域の移動範
囲とサイズとの上下限値を決定し、最新の検出領域がこ
の条件を満たしているかの判断をする（ＳＴ４）。
2の処理手順を示している。まず、領域検出部111から検
出領域を取得する（ＳＴ１）。移動量算出部122は、移
動量算出処理により、最新の検出領域データを含む任意
のフレーム間での検出領域データの位置変化量と方向と
を求め、その位置変化量と方向とが任意に定めた閾値以
内であるか否かの判定を行う（ＳＴ２）。サイズ変動量
算出部123は、サイズ変動量算出処理により、最新の検
出領域データを含む任意のフレーム間での検出領域デー
タのサイズ変動量と方向とを求め、そのサイズ変動量と
方向とが任意に定めた閾値以内であるか否かを判定する
（ＳＴ３）。特徴算出部121は、特徴算出処理により、
最新の検出領域データを含む任意のフレームでの検出領
域の位置とサイズとの関係から、検出されるべき対象物
の画面上の座標における特徴を求め、検出領域の移動範
囲とサイズとの上下限値を決定し、最新の検出領域がこ
の条件を満たしているかの判断をする（ＳＴ４）。
【００２８】正解判定部124は、移動量算出処理、サイ
ズ変動量算出処理及び特徴算出処理での判定結果の一部
またはすべてに基づき、最新の検出領域が正解であるか
否かの正解判定処理を行い、その判定結果に基づいて、
補正領域としてどのデータを採用するかを決定する（Ｓ
Ｔ５）。検出領域が正解であれば、これを補正領域とし
て採用する（ＳＴ６）。検出領域が不正解のときは、正
解判定処理で連続して誤りと判定した回数をカウンタ12
5で数え、その値が任意に定めた回数に一致したとき
は、補正領域として、メモリ126に格納されている初期
値を採用し（ＳＴ７）、そうでない場合は、前フレーム
で採用した補正領域データを採用する（ＳＴ８）。次
に、補正領域を任意の倍率に拡大する（ＳＴ９）。
ズ変動量算出処理及び特徴算出処理での判定結果の一部
またはすべてに基づき、最新の検出領域が正解であるか
否かの正解判定処理を行い、その判定結果に基づいて、
補正領域としてどのデータを採用するかを決定する（Ｓ
Ｔ５）。検出領域が正解であれば、これを補正領域とし
て採用する（ＳＴ６）。検出領域が不正解のときは、正
解判定処理で連続して誤りと判定した回数をカウンタ12
5で数え、その値が任意に定めた回数に一致したとき
は、補正領域として、メモリ126に格納されている初期
値を採用し（ＳＴ７）、そうでない場合は、前フレーム
で採用した補正領域データを採用する（ＳＴ８）。次
に、補正領域を任意の倍率に拡大する（ＳＴ９）。
【００２９】図４は、移動量算出部122の構成を示して
いる。この移動量算出部122は、メモリ120に格納された
前フレームの検出領域の中心点座標と領域検出部111か
ら入力する最新フレームの検出領域の中心点座標との差
分を算出する減算器130と、メモリ120に格納された前々
フレームの検出領域の中心点座標と領域検出部111から
入力する最新フレームの検出領域の中心点座標との差分
を算出する減算器132と、最新フレームの検出領域の中
心点座標が正解であるか否かを決定する判定部131と、
出力する中心点座標の選択を行う切り替え器133とを備
えている。
いる。この移動量算出部122は、メモリ120に格納された
前フレームの検出領域の中心点座標と領域検出部111か
ら入力する最新フレームの検出領域の中心点座標との差
分を算出する減算器130と、メモリ120に格納された前々
フレームの検出領域の中心点座標と領域検出部111から
入力する最新フレームの検出領域の中心点座標との差分
を算出する減算器132と、最新フレームの検出領域の中
心点座標が正解であるか否かを決定する判定部131と、
出力する中心点座標の選択を行う切り替え器133とを備
えている。
【００３０】この移動量算出部122では、まず、検出領
域の中心点の移動量を求めるため、減算器130で、領域
検出部111から出力される検出領域の中心点座標とメモ
リ120に格納された前フレームの検出領域の中心点座標
との差分を求める。次に、検出領域の移動方向の変位を
求めるため、ここでは前フレーム及び前々フレームから
の検出領域の中心点座標の移動方向を比較する。そのた
めに、減算器132で、最新フレームの中心点座標とメモ
リ120に格納された２フレーム前の中心点座標との差分
を算出する。
域の中心点の移動量を求めるため、減算器130で、領域
検出部111から出力される検出領域の中心点座標とメモ
リ120に格納された前フレームの検出領域の中心点座標
との差分を求める。次に、検出領域の移動方向の変位を
求めるため、ここでは前フレーム及び前々フレームから
の検出領域の中心点座標の移動方向を比較する。そのた
めに、減算器132で、最新フレームの中心点座標とメモ
リ120に格納された２フレーム前の中心点座標との差分
を算出する。
【００３１】判定部131は、減算器130及び132の結果か
ら、前フレームからの検出領域の移動量である減算器13
0の出力が任意に設定した閾値ｂ以下であり、且つ、過
去２フレーム前からの前記中心点座標の移動方向が同じ
であるときに、最新フレームにおける検出領域の中心点
座標を正解とし、それ以外であれば誤りとする。例え
ば、図５に示すように、２フレーム前の検出領域が領域
300であり、前フレームの検出領域が領域301であり、最
新フレームの検出領域が領域302であるとすると、それ
らの領域における中心点の移動方向が一定ではないの
で、検出領域302は誤りと判断される。判定部131は、移
動量判定結果を出力する。また、この移動量判定結果に
より切り替え器133が切り替えられ、正解の場合は、領
域検出部111から入力した最新フレームの検出領域の中
心点座標が出力され、不正解の場合は、メモリ120に格
納された前フレームの補正領域の中心点座標が出力され
る。
ら、前フレームからの検出領域の移動量である減算器13
0の出力が任意に設定した閾値ｂ以下であり、且つ、過
去２フレーム前からの前記中心点座標の移動方向が同じ
であるときに、最新フレームにおける検出領域の中心点
座標を正解とし、それ以外であれば誤りとする。例え
ば、図５に示すように、２フレーム前の検出領域が領域
300であり、前フレームの検出領域が領域301であり、最
新フレームの検出領域が領域302であるとすると、それ
らの領域における中心点の移動方向が一定ではないの
で、検出領域302は誤りと判断される。判定部131は、移
動量判定結果を出力する。また、この移動量判定結果に
より切り替え器133が切り替えられ、正解の場合は、領
域検出部111から入力した最新フレームの検出領域の中
心点座標が出力され、不正解の場合は、メモリ120に格
納された前フレームの補正領域の中心点座標が出力され
る。
【００３２】図１８のフローチャートは、この移動量算
出部122の移動量算出処理手順を示している。まず、領
域検出部111で検出された検出領域の中心点座標を取得
する（ＳＴ１）。次に、過去の任意のフレーム間での検
出領域の座標移動量を算出する。ここでは、過去２フレ
ーム分の中心点座標を用いる方法を説明する。まず、最
新フレームにおける検出領域の中心点座標と、前フレー
ムにおける検出領域の中心点座標との差分を求め（ＳＴ
２）、差分が予め設定した閾値内であるか否かを判断す
る（ＳＴ３）。前記差分が閾値内でない場合は、最新フ
レームの検出領域の中心点が誤りと判断され、前フレー
ムの補正領域の中心点座標が本処理の中心点座標として
採用される（ＳＴ７）。
出部122の移動量算出処理手順を示している。まず、領
域検出部111で検出された検出領域の中心点座標を取得
する（ＳＴ１）。次に、過去の任意のフレーム間での検
出領域の座標移動量を算出する。ここでは、過去２フレ
ーム分の中心点座標を用いる方法を説明する。まず、最
新フレームにおける検出領域の中心点座標と、前フレー
ムにおける検出領域の中心点座標との差分を求め（ＳＴ
２）、差分が予め設定した閾値内であるか否かを判断す
る（ＳＴ３）。前記差分が閾値内でない場合は、最新フ
レームの検出領域の中心点が誤りと判断され、前フレー
ムの補正領域の中心点座標が本処理の中心点座標として
採用される（ＳＴ７）。
【００３３】次に、最新フレームの検出領域の中心点座
標と２フレーム前の検出領域の中心点座標との差分を求
め（ＳＴ４）、ＳＴ４で求めた差分とＳＴ２で求めた差
分とを用いて、２フレーム前から最新フレームまでの検
出領域の移動方向と、前フレームから最新フレームまで
の検出領域の移動方向とが同じであるか否かを判断する
（ＳＴ５）。移動方向が同じである場合は正解と判断さ
れ、最新フレームの検出領域の中心点座標が本処理の中
心点座標として採用され（ＳＴ６）、同じでない場合
は、不正解と判断され、前フレームの補正領域の中心点
座標が本処理の中心点座標として採用される（ＳＴ
７）。
標と２フレーム前の検出領域の中心点座標との差分を求
め（ＳＴ４）、ＳＴ４で求めた差分とＳＴ２で求めた差
分とを用いて、２フレーム前から最新フレームまでの検
出領域の移動方向と、前フレームから最新フレームまで
の検出領域の移動方向とが同じであるか否かを判断する
（ＳＴ５）。移動方向が同じである場合は正解と判断さ
れ、最新フレームの検出領域の中心点座標が本処理の中
心点座標として採用され（ＳＴ６）、同じでない場合
は、不正解と判断され、前フレームの補正領域の中心点
座標が本処理の中心点座標として採用される（ＳＴ
７）。
【００３４】図６は、サイズ変動量算出部123の構成を
示している。このサイズ変動量算出部123は、メモリ120
に格納された前フレームの検出領域の半径と領域検出部
111から入力する最新フレームの検出領域の半径との差
分を算出する減算器140と、メモリ120に格納された前々
フレームの検出領域の半径と領域検出部111から入力す
る最新フレームの検出領域の半径との差分を算出する減
算器142と、最新フレームの検出領域の半径が正解であ
るか否かを決定する判定部141と、出力する検出領域の
半径の選択を行う切り替え器143とを備えている。
示している。このサイズ変動量算出部123は、メモリ120
に格納された前フレームの検出領域の半径と領域検出部
111から入力する最新フレームの検出領域の半径との差
分を算出する減算器140と、メモリ120に格納された前々
フレームの検出領域の半径と領域検出部111から入力す
る最新フレームの検出領域の半径との差分を算出する減
算器142と、最新フレームの検出領域の半径が正解であ
るか否かを決定する判定部141と、出力する検出領域の
半径の選択を行う切り替え器143とを備えている。
【００３５】判定部141は、減算器140及び142の結果か
ら、前フレームからの検出領域のサイズ変動量を表す減
算器140の出力が任意に設定した閾値ｃ以下であり、且
つ、過去２フレーム前からの半径の変動方向が同じであ
るときに、最新フレームにおける検出領域の半径を正解
とし、それ以外であれば誤りとする。例えば、図７に示
すように、２フレーム前の検出領域が領域303であり、
前フレームの検出領域が領域304であり、最新フレーム
の検出領域が領域305であるとすると、領域304では半径
が長くなり、領域305では短くなっていて、半径の変動
方向が一定ではないので、この場合には、最新フレーム
の検出領域305の半径は不正解と判断される。
ら、前フレームからの検出領域のサイズ変動量を表す減
算器140の出力が任意に設定した閾値ｃ以下であり、且
つ、過去２フレーム前からの半径の変動方向が同じであ
るときに、最新フレームにおける検出領域の半径を正解
とし、それ以外であれば誤りとする。例えば、図７に示
すように、２フレーム前の検出領域が領域303であり、
前フレームの検出領域が領域304であり、最新フレーム
の検出領域が領域305であるとすると、領域304では半径
が長くなり、領域305では短くなっていて、半径の変動
方向が一定ではないので、この場合には、最新フレーム
の検出領域305の半径は不正解と判断される。
【００３６】判定部141は、サイズ変動量判定結果を出
力する。また、このサイズ変動量判定結果により切り替
え器143が切り替えられ、正解の場合は、領域検出部111
から入力した最新フレームの検出領域の半径が出力さ
れ、不正解の場合は、メモリ120に格納された前フレー
ムの補正領域の半径が出力される。
力する。また、このサイズ変動量判定結果により切り替
え器143が切り替えられ、正解の場合は、領域検出部111
から入力した最新フレームの検出領域の半径が出力さ
れ、不正解の場合は、メモリ120に格納された前フレー
ムの補正領域の半径が出力される。
【００３７】図１９のフローチャートは、このサイズ変
動量算出部123のサイズ変動量算出処理手順を示してい
る。まず、領域検出部111で検出された検出領域の半径
を取得する（ＳＴ１）。次に、最新フレームにおける検
出領域の半径と、前フレームにおける検出領域の半径と
の差分を求め（ＳＴ２）、差分が予め設定した閾値内で
あるか否かを判断する（ＳＴ３）。前記差分が閾値内で
ない場合は、最新フレームの検出領域の半径が誤りと判
断され、前フレームの補正領域の半径が本処理の半径と
して採用される（ＳＴ７）。
動量算出部123のサイズ変動量算出処理手順を示してい
る。まず、領域検出部111で検出された検出領域の半径
を取得する（ＳＴ１）。次に、最新フレームにおける検
出領域の半径と、前フレームにおける検出領域の半径と
の差分を求め（ＳＴ２）、差分が予め設定した閾値内で
あるか否かを判断する（ＳＴ３）。前記差分が閾値内で
ない場合は、最新フレームの検出領域の半径が誤りと判
断され、前フレームの補正領域の半径が本処理の半径と
して採用される（ＳＴ７）。
【００３８】次に、最新フレームの検出領域の半径と２
フレーム前の検出領域の半径との差分を求め（ＳＴ
４）、ＳＴ４で求めた差分とＳＴ２で求めた差分との正
負が同じであり、ＳＴ４で求めた差分の絶対値がＳＴ２
で求めた差分の絶対値以上であるか否か、即ち、検出領
域のサイズ変動の方向が同じであるか否か、を判断する
（ＳＴ５）。サイズ変動の方向が同じである場合は正解
と判断され、最新フレームの検出領域の半径が本処理の
半径として採用され（ＳＴ６）、同じでない場合は、不
正解と判断され、前フレームの補正領域の半径が本処理
の半径として採用される（ＳＴ７）。
フレーム前の検出領域の半径との差分を求め（ＳＴ
４）、ＳＴ４で求めた差分とＳＴ２で求めた差分との正
負が同じであり、ＳＴ４で求めた差分の絶対値がＳＴ２
で求めた差分の絶対値以上であるか否か、即ち、検出領
域のサイズ変動の方向が同じであるか否か、を判断する
（ＳＴ５）。サイズ変動の方向が同じである場合は正解
と判断され、最新フレームの検出領域の半径が本処理の
半径として採用され（ＳＴ６）、同じでない場合は、不
正解と判断され、前フレームの補正領域の半径が本処理
の半径として採用される（ＳＴ７）。
【００３９】次に、特徴算出部121の構成について説明
する。図９に示すように、ドアホンカメラ102で来訪者
を撮影する場合、画面上における来訪者の顔の位置は、
カメラと来訪者との距離によって変わるが、画面上で顔
領域の中心点位置が移動し得る範囲は来訪者の身長によ
って決まる。また、画面上での顔領域の中心点位置と顔
領域のサイズとの関係は、来訪者の顔の大きさと身長と
の特徴によって決まる。
する。図９に示すように、ドアホンカメラ102で来訪者
を撮影する場合、画面上における来訪者の顔の位置は、
カメラと来訪者との距離によって変わるが、画面上で顔
領域の中心点位置が移動し得る範囲は来訪者の身長によ
って決まる。また、画面上での顔領域の中心点位置と顔
領域のサイズとの関係は、来訪者の顔の大きさと身長と
の特徴によって決まる。
【００４０】いま、図１０に示すように画面をエリアに
区切り、同一人物がドアホンカメラからの距離を変えて
顔領域の中心点位置をそれぞれのエリアに移動したとき
の顔領域のサイズを求め、こうした測定を多数の人物に
ついて行うことにより、図２４に示すように、顔領域の
中心点が位置するエリアと、顔領域のサイズ（Ｘ半径）
と、人物の特徴（顔の大きさと身長）を識別する特徴ナ
ンバーとを対応付けたデータベースを得ることができ
る。
区切り、同一人物がドアホンカメラからの距離を変えて
顔領域の中心点位置をそれぞれのエリアに移動したとき
の顔領域のサイズを求め、こうした測定を多数の人物に
ついて行うことにより、図２４に示すように、顔領域の
中心点が位置するエリアと、顔領域のサイズ（Ｘ半径）
と、人物の特徴（顔の大きさと身長）を識別する特徴ナ
ンバーとを対応付けたデータベースを得ることができ
る。
【００４１】特徴算出部121は、図８に示すように、過
去のフレームの検出領域データから特徴ナンバーが決定
された図１０のデータベースを格納するメモリ120と、
最新フレームで得られた特徴データが有効であるか否か
を判定する判定部150と、判定部150の判定回数をカウン
トするカウンタ153と、判定部150の判定結果が正解であ
る判定回数をカウントするカウンタ151と、カウンタ153
の値がｍになる前にカウンタ151の値がｐになったと
き、最新フレームの特徴ナンバーを出力する切り替え器
152とを備えている。
去のフレームの検出領域データから特徴ナンバーが決定
された図１０のデータベースを格納するメモリ120と、
最新フレームで得られた特徴データが有効であるか否か
を判定する判定部150と、判定部150の判定回数をカウン
トするカウンタ153と、判定部150の判定結果が正解であ
る判定回数をカウントするカウンタ151と、カウンタ153
の値がｍになる前にカウンタ151の値がｐになったと
き、最新フレームの特徴ナンバーを出力する切り替え器
152とを備えている。
【００４２】この特徴算出部121には、移動量算出部122
から出力された最新フレームの検出領域の中心点座標
と、サイズ変動量算出部123から出力された最新フレー
ムの検出領域の半径とがメモリ120に入力し、移動量算
出部122及びサイズ変動量算出部12から出力された移動
量判定結果及び変動量判定結果が判定部150に入力す
る。メモリ120からは、格納するデータベースより、入
力した中心点座標が位置するエリアの中で、入力した半
径に対応する特徴ナンバーが読み出される。
から出力された最新フレームの検出領域の中心点座標
と、サイズ変動量算出部123から出力された最新フレー
ムの検出領域の半径とがメモリ120に入力し、移動量算
出部122及びサイズ変動量算出部12から出力された移動
量判定結果及び変動量判定結果が判定部150に入力す
る。メモリ120からは、格納するデータベースより、入
力した中心点座標が位置するエリアの中で、入力した半
径に対応する特徴ナンバーが読み出される。
【００４３】判定部150は、移動量算出部122及びサイズ
変動量算出部123より得られた判定結果が双方とも正解
であれば、メモリ120から読み出した特徴ナンバーを有
効とし、カウンタ151とカウンタ153とを更新する。ま
た、移動量算出部122及びサイズ変動量算出部123より得
られた判定結果の一方でも不正解であれば、メモリ120
から読み出した特徴ナンバーを無効とし、カウンタ153
のみを更新する。こうしてカウンタ153は、判定の処理
回数をカウントし、カウンタ151は正解と判定した処理
回数をカウントする。カウンタ153の値がｍとなる前に
カウンタ151の値がｐとなると切り替え器152を閉じ、最
新フレームの特徴ナンバーが最終的な特徴ナンバーとし
て決定する。
変動量算出部123より得られた判定結果が双方とも正解
であれば、メモリ120から読み出した特徴ナンバーを有
効とし、カウンタ151とカウンタ153とを更新する。ま
た、移動量算出部122及びサイズ変動量算出部123より得
られた判定結果の一方でも不正解であれば、メモリ120
から読み出した特徴ナンバーを無効とし、カウンタ153
のみを更新する。こうしてカウンタ153は、判定の処理
回数をカウントし、カウンタ151は正解と判定した処理
回数をカウントする。カウンタ153の値がｍとなる前に
カウンタ151の値がｐとなると切り替え器152を閉じ、最
新フレームの特徴ナンバーが最終的な特徴ナンバーとし
て決定する。
【００４４】図２０のフローチャートは、この特徴算出
部121の処理手順を示している。最新フレームの検出領
域を取得して（ＳＴ１）、移動量算出部122で移動量算
出処理が行われ（ＳＴ２）、サイズ変動量算出部123で
サイズ変動量算出処理が行われると（ＳＴ３）、それら
の処理の判定結果を基に特徴ナンバー取得のステップに
進むか否かを判断する（ＳＴ４）。ＳＴ２及びＳＴ３で
今回の検出領域が正解と判断された場合には、特徴ナン
バー取得のステップ処理に進み、図２４のテーブルか
ら、移動量算出処理で得られた中心点座標に該当するエ
リアを参照し、その中からサイズ変動量算出処理で得ら
れた半径に対応する特徴ナンバーを取得する（ＳＴ
５）。そして、カウンタ151とカウンタ153とのカウント
値から、任意の割合以上同じ特徴ナンバーを取得したこ
とが判明した場合に（ＳＴ６）、最終的な特徴ナンバー
として決定する（ＳＴ７）。
部121の処理手順を示している。最新フレームの検出領
域を取得して（ＳＴ１）、移動量算出部122で移動量算
出処理が行われ（ＳＴ２）、サイズ変動量算出部123で
サイズ変動量算出処理が行われると（ＳＴ３）、それら
の処理の判定結果を基に特徴ナンバー取得のステップに
進むか否かを判断する（ＳＴ４）。ＳＴ２及びＳＴ３で
今回の検出領域が正解と判断された場合には、特徴ナン
バー取得のステップ処理に進み、図２４のテーブルか
ら、移動量算出処理で得られた中心点座標に該当するエ
リアを参照し、その中からサイズ変動量算出処理で得ら
れた半径に対応する特徴ナンバーを取得する（ＳＴ
５）。そして、カウンタ151とカウンタ153とのカウント
値から、任意の割合以上同じ特徴ナンバーを取得したこ
とが判明した場合に（ＳＴ６）、最終的な特徴ナンバー
として決定する（ＳＴ７）。
【００４５】図１１は、図３のカウンタ125と切り替え
部127とを用いて補正領域を決定する補正領域決定部の
詳細を示している。この補正領域決定部は、カウンタと
して、移動量判定結果の不正解回数をカウントするカウ
ンタ125-1と、サイズ変動量判定結果の不正解回数をカ
ウントするカウンタ125-2とを備え、切り替え部とし
て、補正領域の中心点座標を選択して出力する切り替え
部127-1と、補正領域の半径を選択して出力する切り替
え部127-2とを備え、さらに、カウンタ125-1及び125-2
のカウント値を基に、切り替え部127-1及び127-2の切り
替えを制御する制御信号を出力する制御信号作成部162
を備えている。
部127とを用いて補正領域を決定する補正領域決定部の
詳細を示している。この補正領域決定部は、カウンタと
して、移動量判定結果の不正解回数をカウントするカウ
ンタ125-1と、サイズ変動量判定結果の不正解回数をカ
ウントするカウンタ125-2とを備え、切り替え部とし
て、補正領域の中心点座標を選択して出力する切り替え
部127-1と、補正領域の半径を選択して出力する切り替
え部127-2とを備え、さらに、カウンタ125-1及び125-2
のカウント値を基に、切り替え部127-1及び127-2の切り
替えを制御する制御信号を出力する制御信号作成部162
を備えている。
【００４６】この補正領域決定部のカウンタ125-1及び1
25-2は、正解判定部124の制御信号で制御される。正解
判定部124には、移動量算出部122、サイズ変動量算出部
123及び特徴算出部121の判定結果が入力し、正解判定部
124は、移動量判定結果及び特徴判定結果の少なくとも
一方が誤りであればカウンタ125-1の値を更新し、どち
らも正解であればリセットするカウンタの制御信号を出
力する。同時に判定部124は、サイズ変動量判定結果及
び特徴判定結果の少なくとも一方が不正解であればカウ
ンタ125-2の値を更新し、どちらも正解であればリセッ
トするカウンタの制御信号を出力する。
25-2は、正解判定部124の制御信号で制御される。正解
判定部124には、移動量算出部122、サイズ変動量算出部
123及び特徴算出部121の判定結果が入力し、正解判定部
124は、移動量判定結果及び特徴判定結果の少なくとも
一方が誤りであればカウンタ125-1の値を更新し、どち
らも正解であればリセットするカウンタの制御信号を出
力する。同時に判定部124は、サイズ変動量判定結果及
び特徴判定結果の少なくとも一方が不正解であればカウ
ンタ125-2の値を更新し、どちらも正解であればリセッ
トするカウンタの制御信号を出力する。
【００４７】切り替え制御信号作成部162は、カウンタ1
25-1の値が任意に定めた値に達していればメモリ126-1
に格納された初期値の中心点座標を選択し、そうでなけ
れば、移動量算出部122が移動量算出処理で求めた中心
点座標160を選択する切り替え器127-1の切り替え制御信
号を作成し、切り替え器127-1は、この制御信号に基づ
いて補正領域の中心点座標を出力する。
25-1の値が任意に定めた値に達していればメモリ126-1
に格納された初期値の中心点座標を選択し、そうでなけ
れば、移動量算出部122が移動量算出処理で求めた中心
点座標160を選択する切り替え器127-1の切り替え制御信
号を作成し、切り替え器127-1は、この制御信号に基づ
いて補正領域の中心点座標を出力する。
【００４８】同時に切り替え制御信号作成部162は、カ
ウンタ125-2の値が任意に定めた値に達していればメモ
リ126-2に格納された初期値の半径を選択し、そうでな
ければサイズ変動量算出部123がサイズ変動量算出処理
で求めた半径161を選択する切り替え器127-2の切り替え
制御信号を作成し、切り替え器127-2は、この制御信号
に基づいて補正領域の半径を出力する。
ウンタ125-2の値が任意に定めた値に達していればメモ
リ126-2に格納された初期値の半径を選択し、そうでな
ければサイズ変動量算出部123がサイズ変動量算出処理
で求めた半径161を選択する切り替え器127-2の切り替え
制御信号を作成し、切り替え器127-2は、この制御信号
に基づいて補正領域の半径を出力する。
【００４９】図２１のフローチャートは、この領域補正
処理部での中心点座標の補正処理手順を示している。こ
こではｍフレーム分の判定結果から、最終的な補正領域
の中心点座標を判断するものとして説明する。まず、特
徴算出処理及び移動量算出処理から双方の最新フレーム
の正解判定結果を取得する（ＳＴ１）。次に、取得した
判定結果の少なくともどちらか一方が誤りであればカウ
ンタ値を更新し（ＳＴ３）、どちらも正解であればカウ
ンタをリセットする。カウンタの値が任意に定めた値ｍ
に達しているか否かを判断し（ＳＴ５）、ｍであれば補
正領域の中心点は初期値として定めた座標とし（ＳＴ
６）、ｍに達していなければ補正領域の中心点を前記移
動算出処理で求めた値とする（ＳＴ７）。
処理部での中心点座標の補正処理手順を示している。こ
こではｍフレーム分の判定結果から、最終的な補正領域
の中心点座標を判断するものとして説明する。まず、特
徴算出処理及び移動量算出処理から双方の最新フレーム
の正解判定結果を取得する（ＳＴ１）。次に、取得した
判定結果の少なくともどちらか一方が誤りであればカウ
ンタ値を更新し（ＳＴ３）、どちらも正解であればカウ
ンタをリセットする。カウンタの値が任意に定めた値ｍ
に達しているか否かを判断し（ＳＴ５）、ｍであれば補
正領域の中心点は初期値として定めた座標とし（ＳＴ
６）、ｍに達していなければ補正領域の中心点を前記移
動算出処理で求めた値とする（ＳＴ７）。
【００５０】また、図２２のフローチャートは、この領
域補正処理部での半径の補正処理手順を示している。こ
こではｍフレーム分の判定結果から、最終的な補正領域
の半径を判断するものとして説明する。まず、特徴算出
処理及びサイズ変動量算出処理から双方の最新フレーム
の正解判定結果を取得する（ＳＴ１）。次に、取得した
判定結果の少なくともどちらか一方が誤りであればカウ
ンタ値を更新し（ＳＴ３）、どちらも正解であればカウ
ンタをリセットする。カウンタの値が任意に定めた値ｍ
に達したか否かを判断し（ＳＴ５）、ｍであれば補正領
域の半径は初期値として定めた値にし（ＳＴ６）、ｍに
達していなければ補正領域の半径を前記サイズ変動量算
出処理で求めた値とする（ＳＴ７）。
域補正処理部での半径の補正処理手順を示している。こ
こではｍフレーム分の判定結果から、最終的な補正領域
の半径を判断するものとして説明する。まず、特徴算出
処理及びサイズ変動量算出処理から双方の最新フレーム
の正解判定結果を取得する（ＳＴ１）。次に、取得した
判定結果の少なくともどちらか一方が誤りであればカウ
ンタ値を更新し（ＳＴ３）、どちらも正解であればカウ
ンタをリセットする。カウンタの値が任意に定めた値ｍ
に達したか否かを判断し（ＳＴ５）、ｍであれば補正領
域の半径は初期値として定めた値にし（ＳＴ６）、ｍに
達していなければ補正領域の半径を前記サイズ変動量算
出処理で求めた値とする（ＳＴ７）。
【００５１】この領域補正処理で、不正解な検出領域に
代えて、前フレームの補正領域における中心点と、前フ
レームの補正領域における半径とを持つ領域（即ち、前
フレームでの補正領域）を採用することにより、検出領
域が所望の対象物を全く含まなかったり一部しか含まな
かったりした場合、あるいは、所望の対象物に対して大
き過ぎたり小さ過ぎたりした場合でも、対象物を適切に
含む領域に補正することができる。
代えて、前フレームの補正領域における中心点と、前フ
レームの補正領域における半径とを持つ領域（即ち、前
フレームでの補正領域）を採用することにより、検出領
域が所望の対象物を全く含まなかったり一部しか含まな
かったりした場合、あるいは、所望の対象物に対して大
き過ぎたり小さ過ぎたりした場合でも、対象物を適切に
含む領域に補正することができる。
【００５２】また、検出領域が不正解と判断される期間
が長い場合には、所望の対象物の画面上における位置や
サイズも変化している可能性があり、領域補正処理で保
持しているデータの信頼性が落ちてくることになるが、
このとき（不正解がｍフレーム続いたとき）には、一
旦、初期値の中心点と初期値の半径とを持つ初期状態の
領域に戻すことにより、以降の領域補正処理を正常化す
ることができる。
が長い場合には、所望の対象物の画面上における位置や
サイズも変化している可能性があり、領域補正処理で保
持しているデータの信頼性が落ちてくることになるが、
このとき（不正解がｍフレーム続いたとき）には、一
旦、初期値の中心点と初期値の半径とを持つ初期状態の
領域に戻すことにより、以降の領域補正処理を正常化す
ることができる。
【００５３】なお、ここでは、不正解がｍフレーム続く
ときに、補正領域として初期領域を採用しているが、そ
れに代えて、検出領域を補正せずに、そのまま補正領域
として採用するようにしても良い。
ときに、補正領域として初期領域を採用しているが、そ
れに代えて、検出領域を補正せずに、そのまま補正領域
として採用するようにしても良い。
【００５４】前述するように、検出領域が誤りと判断さ
れる期間が長い場合には、所望の対象物の画面上におけ
る位置やサイズも変化している可能性があり、検出領域
が所望の対象物を含む正しい領域を指定していても、領
域補正処理ではそれを知ることが出来ない。しかし、こ
のように補正領域を、一旦、検出領域に戻す処理によ
り、補正領域自体の誤りを防ぐことができ、所望の対象
物の視認性を保つことが可能となる。
れる期間が長い場合には、所望の対象物の画面上におけ
る位置やサイズも変化している可能性があり、検出領域
が所望の対象物を含む正しい領域を指定していても、領
域補正処理ではそれを知ることが出来ない。しかし、こ
のように補正領域を、一旦、検出領域に戻す処理によ
り、補正領域自体の誤りを防ぐことができ、所望の対象
物の視認性を保つことが可能となる。
【００５５】なお、図１７の処理手順では、検出領域が
正解であるときにのみ、これを補正領域として採用する
こととしたが、正解判定部の判定結果が不正解である回
数をカウントするカウンタを設け、このカウンタでカウ
ントする不正解回数が所定値ｍに達するまでは、検出領
域を補正領域として採用するようにしても良い。この場
合の処理手順を図２３のフローチャートに示している。
まず、特徴算出処理、移動量算出処理及びサイズ変動量
算出処理から最新フレームの正解判定結果を取得する
（ＳＴ１）。次に、取得した判定結果の少なくともどれ
か１つが誤りであるか否かを判断し（ＳＴ２）、１つで
も誤りが有ればカウンタ値を更新し（ＳＴ３）、すべて
正解であればカウンタをリセットする。カウンタの値が
任意に定めた値ｍに達しているか否かを判断し（ＳＴ
５）、ｍ未満であれば、補正領域は検出領域と同じ中心
点座標、半径を採用し（ＳＴ６）、ｍであれば、補正領
域の中心点座標を前記移動量算出処理、半径を前記サイ
ズ変動量算出処理で求めた値とする（ＳＴ７）。
正解であるときにのみ、これを補正領域として採用する
こととしたが、正解判定部の判定結果が不正解である回
数をカウントするカウンタを設け、このカウンタでカウ
ントする不正解回数が所定値ｍに達するまでは、検出領
域を補正領域として採用するようにしても良い。この場
合の処理手順を図２３のフローチャートに示している。
まず、特徴算出処理、移動量算出処理及びサイズ変動量
算出処理から最新フレームの正解判定結果を取得する
（ＳＴ１）。次に、取得した判定結果の少なくともどれ
か１つが誤りであるか否かを判断し（ＳＴ２）、１つで
も誤りが有ればカウンタ値を更新し（ＳＴ３）、すべて
正解であればカウンタをリセットする。カウンタの値が
任意に定めた値ｍに達しているか否かを判断し（ＳＴ
５）、ｍ未満であれば、補正領域は検出領域と同じ中心
点座標、半径を採用し（ＳＴ６）、ｍであれば、補正領
域の中心点座標を前記移動量算出処理、半径を前記サイ
ズ変動量算出処理で求めた値とする（ＳＴ７）。
【００５６】なお、領域補正部112の各部の機能は、画
像処理装置104が内蔵するコンピュータにプログラムで
規定した処理を行わせることにより実現できる。また、
このプログラムを記録媒体に記録して他の画像処理装置
にダウンロードし、同じ機能を持たせることができる。
像処理装置104が内蔵するコンピュータにプログラムで
規定した処理を行わせることにより実現できる。また、
このプログラムを記録媒体に記録して他の画像処理装置
にダウンロードし、同じ機能を持たせることができる。
【００５７】このように、この実施形態の監視システム
では、画像処理装置が、部分高画質符号化や部分拡大符
号化すべき領域を領域検出処理で検出した後、さらに補
正処理を実施して、検出された領域が不適正な場合にそ
れを補正しているため、携帯端末の小さい画面上で符号
化、復号化を経た動画像を表示するにも関わらず、所望
の対象物を含む特定領域を常に鮮明に見ることができ
る。そのため、遠隔地に居ても、宅内やその他の情況を
的確に把握することができる。
では、画像処理装置が、部分高画質符号化や部分拡大符
号化すべき領域を領域検出処理で検出した後、さらに補
正処理を実施して、検出された領域が不適正な場合にそ
れを補正しているため、携帯端末の小さい画面上で符号
化、復号化を経た動画像を表示するにも関わらず、所望
の対象物を含む特定領域を常に鮮明に見ることができ
る。そのため、遠隔地に居ても、宅内やその他の情況を
的確に把握することができる。
【００５８】また、利用者は、携帯端末の小さい画面上
で、人物領域を指定するような操作を行わなくとも、来
訪者の顔や宅内の家族の様子、宅内に侵入した不審人物
などを鮮明に見ることができる。
で、人物領域を指定するような操作を行わなくとも、来
訪者の顔や宅内の家族の様子、宅内に侵入した不審人物
などを鮮明に見ることができる。
【００５９】（実施の形態２）図１２は、本発明の実施
の形態２における宅内監視システムを示している。この
システムでは、画像処理装置104をサービスプロバイダ
のサーバ109に設置している。その他の構成は実施の形
態１（図１）と変わりがない。
の形態２における宅内監視システムを示している。この
システムでは、画像処理装置104をサービスプロバイダ
のサーバ109に設置している。その他の構成は実施の形
態１（図１）と変わりがない。
【００６０】このシステムでは、住居用監視カメラ101
やドアホンカメラ102で撮影された画像が切り替え器103
に送られ、切り替え器103で選択された画像が通信部105
から公衆網106を経て、サービスプロバイダのサーバ109
上に備えられた画像処理装置104に送られる。画像処理
装置104は、実施の形態１の場合と同様に、画像データ
から特定領域の検出、領域補正、部分高画質符号化また
は部分拡大符号化を行い、画像処理装置104で画像処理
された画像データは、基地局107を介してＴＶモニタ付
き携帯端末108に伝送され、携帯端末108の画面に表示さ
れる。このように、画像処理装置をサービスプロバイダ
のサーバに設けることにより、システム導入の際に利用
者に掛かる負担が軽減される。
やドアホンカメラ102で撮影された画像が切り替え器103
に送られ、切り替え器103で選択された画像が通信部105
から公衆網106を経て、サービスプロバイダのサーバ109
上に備えられた画像処理装置104に送られる。画像処理
装置104は、実施の形態１の場合と同様に、画像データ
から特定領域の検出、領域補正、部分高画質符号化また
は部分拡大符号化を行い、画像処理装置104で画像処理
された画像データは、基地局107を介してＴＶモニタ付
き携帯端末108に伝送され、携帯端末108の画面に表示さ
れる。このように、画像処理装置をサービスプロバイダ
のサーバに設けることにより、システム導入の際に利用
者に掛かる負担が軽減される。
【００６１】（実施の形態３）図１３は、本発明の実施
の形態３における宅内監視システムを示している。この
システムでは、宅内または屋外に設置された異常検知セ
ンサ200を備えており、また、この家を警備する警備会
社201の警備員がＴＶモニタ付き携帯端末108を所持して
いる。その他の構成は実施の形態１と同様である。この
システムでは、異常検知センサ200が異常を検知した
際、異常通報を発し、異常通報は、通信部105から、公
衆網106、基地局107を経て警備会社201及びＴＶモニタ
付き携帯端末108に伝送通報される。
の形態３における宅内監視システムを示している。この
システムでは、宅内または屋外に設置された異常検知セ
ンサ200を備えており、また、この家を警備する警備会
社201の警備員がＴＶモニタ付き携帯端末108を所持して
いる。その他の構成は実施の形態１と同様である。この
システムでは、異常検知センサ200が異常を検知した
際、異常通報を発し、異常通報は、通信部105から、公
衆網106、基地局107を経て警備会社201及びＴＶモニタ
付き携帯端末108に伝送通報される。
【００６２】一方、住居用監視カメラ101やドアホンカ
メラ102で撮影された画像は切り替え器103に送られ、切
り替え器103で選択された画像は画像処理装置104で特定
領域の検出、領域補正、部分高画質符号化または部分拡
大符号化が行われた後、通信部105から公衆網106、基地
局107を介して、警備会社201と、異常発生場所に出向く
警備員が所持するＴＶモニタ付き携帯端末108とに伝送
される。また、伝送画像は警備会社201の端末画面にも
表示される。
メラ102で撮影された画像は切り替え器103に送られ、切
り替え器103で選択された画像は画像処理装置104で特定
領域の検出、領域補正、部分高画質符号化または部分拡
大符号化が行われた後、通信部105から公衆網106、基地
局107を介して、警備会社201と、異常発生場所に出向く
警備員が所持するＴＶモニタ付き携帯端末108とに伝送
される。また、伝送画像は警備会社201の端末画面にも
表示される。
【００６３】このシステムでは、警備員が異常発生場所
に到着する前に、携帯端末108の画面でその状況を把握
することができ、例えば異常検知センサ200の通報が誤
報であるときは、現場に駆けつけなくて済む。また、現
場での不審人物との鉢合わせを回避することができ、警
備員の安全を確保することができる。
に到着する前に、携帯端末108の画面でその状況を把握
することができ、例えば異常検知センサ200の通報が誤
報であるときは、現場に駆けつけなくて済む。また、現
場での不審人物との鉢合わせを回避することができ、警
備員の安全を確保することができる。
【００６４】（実施の形態４）実施の形態４では、ＴＶ
モニタ付き携帯端末から領域を指定して、その領域の部
分高画質符号化や部分拡大符号化を行わせることが可能
な宅内監視システムについて説明する。このシステムで
は、図１４に示すように、画像処理装置が、領域補正部
112への入力を選択する切り替え器170を備えており、こ
の切り替え器170が、領域検出部111で検出された検出領
域、または、ＴＶモニタ付き携帯端末108で指定された
指定領域を選択して領域補正部112へ出力する。
モニタ付き携帯端末から領域を指定して、その領域の部
分高画質符号化や部分拡大符号化を行わせることが可能
な宅内監視システムについて説明する。このシステムで
は、図１４に示すように、画像処理装置が、領域補正部
112への入力を選択する切り替え器170を備えており、こ
の切り替え器170が、領域検出部111で検出された検出領
域、または、ＴＶモニタ付き携帯端末108で指定された
指定領域を選択して領域補正部112へ出力する。
【００６５】このシステムでは、領域検出部111が、符
号化部110経由で画像を入力し、特定部分を検出して検
出領域を出力する。一方、携帯端末108は、ＴＶモニタ
の画面における特定領域を後述の方法によりテンキーで
指定し、指定領域を切り替え器170に入力する。切り替
え器170は、前記検出領域と指定領域とを切り替えて領
域補正部112に出力し、領域補正部112は、必要に応じ
て、切り替え器170で選択された領域に対し補正を行
い、符号化部110に出力する。符号化部110は、領域補正
部112から出力された領域に対し部分高画質符号化また
は部分拡大符号化を行い、出力する。
号化部110経由で画像を入力し、特定部分を検出して検
出領域を出力する。一方、携帯端末108は、ＴＶモニタ
の画面における特定領域を後述の方法によりテンキーで
指定し、指定領域を切り替え器170に入力する。切り替
え器170は、前記検出領域と指定領域とを切り替えて領
域補正部112に出力し、領域補正部112は、必要に応じ
て、切り替え器170で選択された領域に対し補正を行
い、符号化部110に出力する。符号化部110は、領域補正
部112から出力された領域に対し部分高画質符号化また
は部分拡大符号化を行い、出力する。
【００６６】図１５は、ＴＶモニタ付き携帯端末108の
テンキーで領域を指定する方法を示している。175はカ
メラで撮影した画像が表示されている携帯端末のＴＶモ
ニタである。171は領域検出部111で検出された検出領域
であり、この領域内に対して符号化部110で部分高画質
符号化がなされているものとする。この検出領域171に
は人物の顔部分が包含されていないため、利用者は、携
帯端末108のテンキーを用いて、顔部分を包含するよう
な領域を指定する。172、173に示すようにテンキーで画
面上に領域の始点、終点を指定すると、174に示すよう
な領域が指定領域となり、符号化部110で指定領域174に
対して部分高画質符号化が行われ、顔部分が鮮明に見え
るようになる。このように、このシステムでは、利用者
が、携帯端末の画面上で鮮明に見たい部分を指定するこ
とができる。
テンキーで領域を指定する方法を示している。175はカ
メラで撮影した画像が表示されている携帯端末のＴＶモ
ニタである。171は領域検出部111で検出された検出領域
であり、この領域内に対して符号化部110で部分高画質
符号化がなされているものとする。この検出領域171に
は人物の顔部分が包含されていないため、利用者は、携
帯端末108のテンキーを用いて、顔部分を包含するよう
な領域を指定する。172、173に示すようにテンキーで画
面上に領域の始点、終点を指定すると、174に示すよう
な領域が指定領域となり、符号化部110で指定領域174に
対して部分高画質符号化が行われ、顔部分が鮮明に見え
るようになる。このように、このシステムでは、利用者
が、携帯端末の画面上で鮮明に見たい部分を指定するこ
とができる。
【００６７】この処理により、画像処理装置が検出領域
を決定する処理において、誤って所望の対象物がまった
く、または、一部しか含まれない領域を指定した場合で
も、利用者が正しい領域を指定し直すことにより、携帯
端末の画面上で所望の対象物を鮮明に表示させることが
でき、携帯端末の画面上での視認性を高めることができ
る。また、画像処理装置が所望の対象物に対して大き過
ぎる領域を指定し、そのために部分拡大符号化による拡
大効果が薄れてしまう場合でも、利用者が対象物に対し
て適当なサイズの領域を指定することによって、利用者
が見たい部分を携帯端末の画面に大きく表示させること
ができ、携帯端末の視認性を高めることができる。
を決定する処理において、誤って所望の対象物がまった
く、または、一部しか含まれない領域を指定した場合で
も、利用者が正しい領域を指定し直すことにより、携帯
端末の画面上で所望の対象物を鮮明に表示させることが
でき、携帯端末の画面上での視認性を高めることができ
る。また、画像処理装置が所望の対象物に対して大き過
ぎる領域を指定し、そのために部分拡大符号化による拡
大効果が薄れてしまう場合でも、利用者が対象物に対し
て適当なサイズの領域を指定することによって、利用者
が見たい部分を携帯端末の画面に大きく表示させること
ができ、携帯端末の視認性を高めることができる。
【００６８】
【発明の効果】以上の説明から明らかなように、本発明
の画像処理装置及び画像処理方法を用いることにより、
監視カメラの映像をモニタ付き携帯端末で見る監視シス
テムにおいて、携帯端末の画面上の視認性を高めること
ができ、この携帯端末を保持する利用者や警備員は、遠
隔地にいても、来訪者や宅内の様子、異常発生場所の状
況などを鮮明な画像で見ることができる。
の画像処理装置及び画像処理方法を用いることにより、
監視カメラの映像をモニタ付き携帯端末で見る監視シス
テムにおいて、携帯端末の画面上の視認性を高めること
ができ、この携帯端末を保持する利用者や警備員は、遠
隔地にいても、来訪者や宅内の様子、異常発生場所の状
況などを鮮明な画像で見ることができる。
【図面の簡単な説明】
【図１】本発明の実施の形態１における宅内監視システ
ムの構成を示すブロック図
ムの構成を示すブロック図
【図２】本発明の実施の形態１における画像処理装置の
構成を示すブロック図
構成を示すブロック図
【図３】本発明の実施の形態１における領域補正部の構
成を示すブロック図
成を示すブロック図
【図４】本発明の実施の形態１における移動量算出部の
構成を示すブロック図
構成を示すブロック図
【図５】本発明の実施の形態１における検出領域の移動
例
例
【図６】本発明の実施の形態１におけるサイズ変動量算
出部の構成を示すブロック図
出部の構成を示すブロック図
【図７】本発明の実施の形態１における検出領域のサイ
ズ変動例
ズ変動例
【図８】本発明の実施の形態１における特徴算出部の構
成を示すブロック図
成を示すブロック図
【図９】本発明の実施の形態１における特徴算出部にお
ける来訪者の特徴例
ける来訪者の特徴例
【図１０】本発明の実施の形態１における特徴算出部で
使用する画面のエリア分割例
使用する画面のエリア分割例
【図１１】本発明の実施の形態１における補正領域決定
部の構成を示すブロック図
部の構成を示すブロック図
【図１２】本発明の実施の形態２における宅内監視シス
テムの構成を示すブロック図
テムの構成を示すブロック図
【図１３】本発明の実施の形態３における宅内監視シス
テムの構成を示すブロック図
テムの構成を示すブロック図
【図１４】本発明の実施の形態４における携帯端末と画
像処理部の関係を示すブロック図
像処理部の関係を示すブロック図
【図１５】本発明の実施の形態４における携帯端末の表
示画面
示画面
【図１６】本発明の実施の形態１における画像処理方法
のフローチャート
のフローチャート
【図１７】本発明の実施の形態１における領域補正処理
方法のフローチャート
方法のフローチャート
【図１８】本発明の実施の形態１における移動量算出処
理のフローチャート
理のフローチャート
【図１９】本発明の実施の形態１におけるサイズ変動量
算出処理のフローチャート
算出処理のフローチャート
【図２０】本発明の実施の形態１における特徴算出処理
のフローチャート
のフローチャート
【図２１】本発明の実施の形態１における中心点座標正
解判定処理のフローチャート
解判定処理のフローチャート
【図２２】本発明の実施の形態１における領域半径正解
判定処理のフローチャート
判定処理のフローチャート
【図２３】本発明の実施の形態１における領域補正処理
のフローチャート
のフローチャート
【図２４】本発明の実施の形態１における特徴算出部で
使用する特徴ナンバーのテーブル
使用する特徴ナンバーのテーブル
100 住居
101 住居用監視カメラ
102 ドアホンカメラ
103、133、152、170 切り替え器
104 画像処理装置
105 通信部
106 公衆網
107 交換機
108 ＴＶモニタ付き携帯端末
109 サービスプロバイダのサーバ
110、182 符号化部
111、181 領域検出部
112 領域補正部
120、126 メモリ
121 特徴算出部
122 移動量算出部
123 サイズ変動量算出部
124、131、141、150 正解判定部
125、151、153 カウンタ
130、132、140、142 減算器
160 中心点座標
161 半径
162 切り替え制御信号作成部
171、300、301、302 検出領域
172 領域の始点
173 領域の終点
174 指定領域
180 カメラ
200 異常検知センサ
201 警備会社
303、304、305 検出領域
─────────────────────────────────────────────────────
フロントページの続き
(51)Int.Cl.7 識別記号 ＦＩ テーマコート゛(参考）
Ｈ０４Ｎ 7/24 Ｈ０４Ｎ 7/13 Ｚ
Ｆターム(参考） 5B057 BA02 CA08 CA12 CA16 CB08
CB12 CB16 CC01 CD02 CD05
CH08 DA08 DB02 DB09 DC30
5C054 AA01 CC05 CH02 DA07 EA05
EG10 EJ07 FC01 FC12 FC13
FD07 FE28 FF06 HA18
5C059 MB01 MB12 ME00 NN01 NN26
PP04 PP26 PP28 SS10 TA60
TB18 TC34 TD12 UA02 UA05
UA38
5L096 BA02 BA18 CA02 FA59 FA64
HA04 JA11
Claims (30)
- 【請求項１】 カメラで撮影された動画像の現フレーム
から特定の被写体を含む領域を検出して検出領域とし、
前記検出領域の正誤を過去のフレームにおける補正領域
と比較して判定し、前記検出領域が正しければ前記検出
領域を現フレームの前記補正領域として設定し、前記検
出領域が誤っていれば、過去のフレームの前記補正領域
を基に現フレームの補正領域を設定し、設定した前記補
正領域が他の領域に比べて明瞭に表示できるように符号
化処理を行い、モニタ付き携帯端末で表示する画像デー
タを生成することを特徴とする画像処理方法。 - 【請求項２】 前記符号化処理として、前記補正領域に
符号を多く割り当てる部分高画質符号化を行うことを特
徴とする請求項１に記載の画像処理方法。 - 【請求項３】 前記符号化処理として、前記補正領域を
拡大して符号化する部分拡大符号化を行うことを特徴と
する請求項１に記載の画像処理方法。 - 【請求項４】 前記検出領域に含まれる前記被写体とし
て、人間の顔を含む領域を検出することを特徴とする請
求項１から請求項３のいずれかに記載の画像処理方法。 - 【請求項５】 前記検出領域に含まれる前記被写体とし
て、人体を含む領域を検出することを特徴とする請求項
１から請求項３のいずれかに記載の画像処理方法。 - 【請求項６】 前フレームの前記補正領域から現フレー
ムの前記検出領域への座標移動量と、過去のフレーム間
における前記補正領域の座標移動量とを比較して前記検
出領域の正誤を判定することを特徴とする請求項１から
請求項５のいずれかに記載の画像処理方法。 - 【請求項７】 前記検出領域が誤っていれば、前フレー
ムの前記補正領域の座標位置を現フレームの前記補正領
域の座標位置として設定することを特徴とする請求項６
に記載の画像処理方法。 - 【請求項８】 現フレームに至る連続する所定数のフレ
ームの前記検出領域が誤っていたときは、初期値を現フ
レームの前記補正領域の中心点座標として設定すること
を特徴とする請求項６に記載の画像処理方法。 - 【請求項９】 前フレームの前記補正領域のサイズと現
フレームの前記検出領域のサイズとのサイズ変化量と、
過去のフレーム間における前記補正領域のサイズ変化量
とを比較して前記検出領域の正誤を判定することを特徴
とする請求項１から請求項５のいずれかに記載の画像処
理方法。 - 【請求項１０】 前記検出領域が誤っていれば、前フレ
ームの前記補正領域のサイズを現フレームの前記補正領
域のサイズとして設定することを特徴とする請求項９に
記載の画像処理方法。 - 【請求項１１】 現フレームに至る連続する所定数のフ
レームの前記検出領域が誤っていたときは、初期値を現
フレームの前記補正領域のサイズとして設定することを
特徴とする請求項９に記載の画像処理方法。 - 【請求項１２】 過去のフレームにおける前記補正領域
の座標位置とサイズとから前記補正領域に含まれる被写
体の特徴を判断して、前記被写体を含む検出領域が正解
と判定される座標範囲とサイズの上下限値とを決定し、
現フレームの前記検出領域が前記座標範囲と前記サイズ
の上下限値との条件を満たしているか否かを識別して、
前記検出領域の正誤を判定することを特徴とする請求項
１から５のいずれかに記載の画像処理方法。 - 【請求項１３】 現フレームに至る連続する所定数のフ
レームの前記検出領域が誤っていたときは、現フレーム
の前記検出領域を現フレームの前記補正領域として設定
することを特徴とする請求項６または請求項９に記載の
画像処理方法。 - 【請求項１４】 カメラで撮影された動画像の現フレー
ムから特定の被写体を含む領域を検出する領域検出部
と、 前記領域検出部で検出された検出領域の正誤を過去のフ
レームにおける補正領域と比較して判定し、前記検出領
域が正しければ前記検出領域を現フレームの前記補正領
域として設定し、前記検出領域が誤っていれば、過去の
フレームの前記補正領域を基に現フレームの補正領域を
設定する領域補正部と、 前記領域補正部が設定した前記補正領域を他の領域に比
べて明瞭に表示できるように符号化する符号化部とを備
え、モニタ付き携帯端末で表示する画像データを生成す
ることを特徴とする画像処理装置。 - 【請求項１５】 前記符号化部は、前記補正領域に符号
を多く割り当てる部分高画質符号化を行うことを特徴と
する請求項１４に記載の画像処理装置。 - 【請求項１６】 前記符号化部は、前記補正領域を拡大
して符号化する部分拡大符号化を行うことを特徴とする
請求項１４に記載の画像処理装置。 - 【請求項１７】 前記領域検出部は、前記被写体として
人間の顔を含む領域を検出することを特徴とする請求項
１４に記載の画像処理装置。 - 【請求項１８】 前記領域検出部は、前記被写体として
人体を含む領域を検出することを特徴とする請求項１４
に記載の画像処理装置。 - 【請求項１９】 前記領域補正部は、前フレームの前記
補正領域から現フレームの前記検出領域への座標移動量
と、過去のフレーム間における前記補正領域の座標移動
量とを比較して前記検出領域の正誤を判定し、その判定
結果とともに、前記検出領域が正しければ前記検出領域
の座標位置を出力し、前記検出領域が誤っていれば現フ
レームの前記補正領域の座標位置を出力する移動量算出
部を備えることを特徴とする請求項１４に記載の画像処
理装置。 - 【請求項２０】 前記領域補正部は、前フレームの前記
補正領域のサイズと現フレームの前記検出領域のサイズ
とのサイズ変化量と、過去のフレーム間における前記補
正領域のサイズ変化量とを比較して前記検出領域の正誤
を判定し、その判定結果とともに、前記検出領域が正し
ければ前記検出領域のサイズを出力し、前記検出領域が
誤っていれば、現フレームの前記補正領域のサイズを出
力するサイズ変動量算出部を備えることを特徴とする請
求項１４に記載の画像処理装置。 - 【請求項２１】 前記領域補正部は、前記検出領域がそ
の座標位置とサイズとから前記検出領域に含まれる被写
体の特徴を表しているか否かを判定し、前記検出領域が
前記被写体の特徴を表しているとき、前記検出領域の座
標位置及びサイズが入力するごとに前記特徴を表す情報
を出力する特徴算出部を備えることを特徴とする請求項
１４に記載の画像処理装置。 - 【請求項２２】 前記領域補正部は、現フレームに至る
連続する所定数のフレームの前記検出領域が誤っていた
ときに、初期値を現フレームの前記補正領域における中
心点の座標として設定することを特徴とする請求項１４
に記載の画像処理装置。 - 【請求項２３】 前記領域補正部は、現フレームに至る
連続する所定数のフレームの前記検出領域が誤っていた
ときに、初期値を現フレームの前記補正領域のサイズと
して設定することを特徴とする請求項１４に記載の画像
処理装置。 - 【請求項２４】 前記領域補正部は、現フレームに至る
連続する所定数のフレームの前記検出領域が誤っていた
ときに、現フレームの前記検出領域を現フレームの前記
補正領域として設定することを特徴とする請求項１４に
記載の画像処理装置。 - 【請求項２５】 宅内またはその周囲に設置された監視
カメラと、前記監視カメラで撮影された動画像の符号化
を行う画像処理装置と、前記画像処理装置で処理された
画像データを公衆網に伝送する通信部と、前記画像デー
タを前記無線回線を介して受信し、前記動画像を表示す
るＴＶモニタ付き携帯端末とを備え、前記画像処理装置
が、請求項１４から請求項２４のいずれかに記載の画像
処理装置から成る監視システム。 - 【請求項２６】 宅内またはその周囲に設置された監視
カメラと、前記監視カメラで撮影された動画像の画像デ
ータを公衆網に伝送する通信部と、サービスプロバイダ
のサーバに設けられた、前記公衆網を介して受信した前
記動画像の符号化を行う画像処理装置と、前記画像処理
装置で処理された画像データを無線回線を介して受信
し、前記動画像を表示するＴＶモニタ付き携帯端末とを
備え、前記画像処理装置が、請求項１４から請求項２４
のいずれかに記載の画像処理装置から成る監視システ
ム。 - 【請求項２７】 前記画像処理装置は、前記携帯端末か
ら送られた領域情報に基づいて部分高画質符号化または
部分拡大符号化を行う動画像の領域を変更することを特
徴とする請求項２６に記載の監視システム。 - 【請求項２８】 宅内またはその周囲に設置された異常
検知センサと、前記異常検知センサが異常を検知したと
きに警備会社に通報する通報装置とを備え、前記ＴＶモ
ニタ付き携帯端末を前記警備会社の警備員が持つことを
特徴とする請求項２５から請求項２７のいずれかに記載
の監視システム。 - 【請求項２９】 コンピュータに、 カメラで撮影された動画像の現フレームから特定の被写
体を含む領域を検出し、検出領域として決定する手順
と、 前記検出領域の正誤を過去のフレームにおける補正領域
と比較して判定し、前記検出領域が正しければ前記検出
領域を現フレームの前記補正領域として設定し、前記検
出領域が誤っていれば、過去のフレームの前記補正領域
を基に現フレームの補正領域を設定する手順と、 設定した前記補正領域が他の領域に比べて明瞭に表示で
きるように符号化処理を行う手順とを実行させるための
プログラム。 - 【請求項３０】 請求項２９に記載のプログラムを記録
した記録媒体。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002008792A JP2003219396A (ja) | 2002-01-17 | 2002-01-17 | 画像処理方法、画像処理装置、画像処理プログラム及び監視システム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002008792A JP2003219396A (ja) | 2002-01-17 | 2002-01-17 | 画像処理方法、画像処理装置、画像処理プログラム及び監視システム |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2003219396A true JP2003219396A (ja) | 2003-07-31 |
Family
ID=27646961
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002008792A Pending JP2003219396A (ja) | 2002-01-17 | 2002-01-17 | 画像処理方法、画像処理装置、画像処理プログラム及び監視システム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2003219396A (ja) |
Cited By (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100582784B1 (ko) * | 2002-10-17 | 2006-05-23 | 엘지전자 주식회사 | 화상통신 시스템의 영상 처리 방법 |
| JP2007020064A (ja) * | 2005-07-11 | 2007-01-25 | Fujifilm Holdings Corp | 撮像システム、撮像装置、撮像方法、及び撮像プログラム |
| JP2009005238A (ja) * | 2007-06-25 | 2009-01-08 | Sony Computer Entertainment Inc | 符号化処理装置および符号化処理方法 |
| JP2009005239A (ja) * | 2007-06-25 | 2009-01-08 | Sony Computer Entertainment Inc | 符号化処理装置および符号化処理方法 |
| JP4540705B2 (ja) * | 2005-02-17 | 2010-09-08 | 富士通株式会社 | 画像処理方法、画像処理システム、撮像装置、画像処理装置及びコンピュータプログラム |
| JP2011237884A (ja) * | 2010-05-06 | 2011-11-24 | Nomura Research Institute Ltd | 対象物検出サイズ算出システムおよび対象物検出サイズ算出プログラム |
| JP2013134736A (ja) * | 2011-12-27 | 2013-07-08 | Canon Inc | 画像処理装置、その制御方法、及びプログラム |
| US8565543B2 (en) | 2008-07-18 | 2013-10-22 | Sony Corporation | Video recording apparatus, video recording method, and recording medium |
| KR20140091828A (ko) * | 2013-01-14 | 2014-07-23 | 주식회사 케이티 | 얼굴 인식 정보를 이용하는 장치 및 방법 |
| CN106488001A (zh) * | 2015-09-01 | 2017-03-08 | Lg电子株式会社 | 移动终端以及该移动终端的控制方法 |
| CN109740516A (zh) * | 2018-12-29 | 2019-05-10 | 深圳市商汤科技有限公司 | 一种用户识别方法、装置、电子设备及存储介质 |
| JP2020008929A (ja) * | 2018-07-03 | 2020-01-16 | 富士ゼロックス株式会社 | 身長算出システム、情報処理装置およびプログラム |
| CN110930624A (zh) * | 2019-12-06 | 2020-03-27 | 深圳北斗国芯科技有限公司 | 一种基于北斗的安全生产监控系统 |
| EP3739863A1 (de) * | 2019-05-17 | 2020-11-18 | GIRA GIERSIEPEN GmbH & Co. KG | Verfahren für den betrieb einer türkommunikationsanlage |
-
2002
- 2002-01-17 JP JP2002008792A patent/JP2003219396A/ja active Pending
Cited By (21)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100582784B1 (ko) * | 2002-10-17 | 2006-05-23 | 엘지전자 주식회사 | 화상통신 시스템의 영상 처리 방법 |
| JP4540705B2 (ja) * | 2005-02-17 | 2010-09-08 | 富士通株式会社 | 画像処理方法、画像処理システム、撮像装置、画像処理装置及びコンピュータプログラム |
| US8300101B2 (en) | 2005-02-17 | 2012-10-30 | Fujitsu Limited | Image processing method, image processing system, image pickup device, image processing device and computer program for manipulating a plurality of images |
| JP2007020064A (ja) * | 2005-07-11 | 2007-01-25 | Fujifilm Holdings Corp | 撮像システム、撮像装置、撮像方法、及び撮像プログラム |
| JP4509883B2 (ja) * | 2005-07-11 | 2010-07-21 | 富士フイルム株式会社 | 撮像システム、撮像装置、撮像方法、及び撮像プログラム |
| JP2009005238A (ja) * | 2007-06-25 | 2009-01-08 | Sony Computer Entertainment Inc | 符号化処理装置および符号化処理方法 |
| JP2009005239A (ja) * | 2007-06-25 | 2009-01-08 | Sony Computer Entertainment Inc | 符号化処理装置および符号化処理方法 |
| US8565543B2 (en) | 2008-07-18 | 2013-10-22 | Sony Corporation | Video recording apparatus, video recording method, and recording medium |
| JP2011237884A (ja) * | 2010-05-06 | 2011-11-24 | Nomura Research Institute Ltd | 対象物検出サイズ算出システムおよび対象物検出サイズ算出プログラム |
| JP2013134736A (ja) * | 2011-12-27 | 2013-07-08 | Canon Inc | 画像処理装置、その制御方法、及びプログラム |
| KR20140091828A (ko) * | 2013-01-14 | 2014-07-23 | 주식회사 케이티 | 얼굴 인식 정보를 이용하는 장치 및 방법 |
| KR102014769B1 (ko) | 2013-01-14 | 2019-08-27 | 주식회사 케이티 | 얼굴 인식 정보를 이용하는 장치 및 방법 |
| CN106488001A (zh) * | 2015-09-01 | 2017-03-08 | Lg电子株式会社 | 移动终端以及该移动终端的控制方法 |
| EP3148166A3 (en) * | 2015-09-01 | 2017-05-03 | LG Electronics Inc. | Mobile terminal and control method for the mobile terminal |
| US9692868B2 (en) | 2015-09-01 | 2017-06-27 | Lg Electronics Inc. | Mobile terminal and control method for the mobile terminal |
| CN106488001B (zh) * | 2015-09-01 | 2019-09-27 | Lg电子株式会社 | 移动终端以及该移动终端的控制方法 |
| JP2020008929A (ja) * | 2018-07-03 | 2020-01-16 | 富士ゼロックス株式会社 | 身長算出システム、情報処理装置およびプログラム |
| CN109740516A (zh) * | 2018-12-29 | 2019-05-10 | 深圳市商汤科技有限公司 | 一种用户识别方法、装置、电子设备及存储介质 |
| CN109740516B (zh) * | 2018-12-29 | 2021-05-14 | 深圳市商汤科技有限公司 | 一种用户识别方法、装置、电子设备及存储介质 |
| EP3739863A1 (de) * | 2019-05-17 | 2020-11-18 | GIRA GIERSIEPEN GmbH & Co. KG | Verfahren für den betrieb einer türkommunikationsanlage |
| CN110930624A (zh) * | 2019-12-06 | 2020-03-27 | 深圳北斗国芯科技有限公司 | 一种基于北斗的安全生产监控系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4422334B2 (ja) | ビデオにおける動きの検出のための方法および装置 | |
| JP2003219396A (ja) | 画像処理方法、画像処理装置、画像処理プログラム及び監視システム | |
| JP6529062B1 (ja) | デジタルアキュレート・セキュリティシステム、方法及びプログラム | |
| KR101894399B1 (ko) | 개인 정보 보호 기능을 포함한 모니터링 시스템 및 그 방법 | |
| JP2004054536A (ja) | 広域監視システム | |
| US7194109B2 (en) | Method and system for delivering monitored image signal of subject to be monitored | |
| US20040216165A1 (en) | Surveillance system and surveillance method with cooperative surveillance terminals | |
| KR20040105612A (ko) | 변화검출방법과 장치 및 그 방법 또는 장치를 사용한감시시스템 | |
| KR100953029B1 (ko) | 보안 시스템 및 보안 방법 | |
| JP3908707B2 (ja) | 防犯監視システム、防犯監視方法、および、防犯監視プログラム | |
| CN113011291A (zh) | 事件检测方法及装置、电子设备和存储介质 | |
| KR102233679B1 (ko) | Ess 침입자 및 화재 감지 장치 및 방법 | |
| US20090009597A1 (en) | Method Apparatus and System of Remote Monitoring | |
| JP2008148138A (ja) | 監視システム | |
| KR20010008215A (ko) | 실시간동영상원격감시제어시스템 및 방법과 그인터페이스장치 | |
| JP2008112402A (ja) | 地域監視システム | |
| JP5183054B2 (ja) | 防犯装置 | |
| JP2002133558A (ja) | 監視用信号の通信方法、及び監視用信号通信装置 | |
| KR20190127101A (ko) | 클라우드 기반 보안 서비스 시스템 및 방법 | |
| CN111950374A (zh) | 图像传输方法及系统 | |
| JP4202228B2 (ja) | 管理サーバおよび監視システム | |
| JP4540456B2 (ja) | 不審者検出装置 | |
| KR20010100434A (ko) | 영상 감시 보안 시스템 및 그 방법 | |
| JP2004336127A (ja) | 監視システム | |
| JP2000209569A (ja) | 遠隔監視装置および遠隔監視方法ならびに遠隔監視システム |