WO2021250805A1

WO2021250805A1 - 見守り監視装置および見守り監視方法

Info

Publication number: WO2021250805A1
Application number: PCT/JP2020/022794
Authority: WO
Inventors: 耕治鹿庭; 万寿男奥
Original assignee: マクセル株式会社
Priority date: 2020-06-10
Filing date: 2020-06-10
Publication date: 2021-12-16
Also published as: US20230300296A1; CN115943626A; JP2024125422A; JP7516515B2; JPWO2021250805A1

Abstract

見守り監視装置は、監視カメラ１とホームサーバ２を備え、被見守り人３が存在する見守り空間４を監視する。監視カメラ１は、被見守り人の居る見守り空間を撮影する。ホームサーバ２は、監視カメラ１で取得した撮影画像から人物を検出し、検出した人物を顔部および身体部位に区分する人物検出部２０１と、人物検出部が区分した顔部を除く身体部位に対して加工描画処理を行う加工描画部２０２と、加工描画処理を行った画像と撮影画像との合成画像を作成する画像合成部２０３と、合成画像を見守り人７の表示端末８に送信するネットワーク部２１と、を備える。また、被見守り人の顔情報を登録した顔情報登録データを有し、検出した人物がこれに登録されていない場合には、その人物について加工描画部２０２による加工描画処理を行わない。

Description

見守り監視装置および見守り監視方法

　本発明は、監視カメラで人物を見守る見守り監視装置および見守り監視方法に関し、見守り対象者（被見守り人）の状況把握とプライバシー保護を両立させる見守り監視技術に係る。

　見守り監視装置においては、被見守り人のプライバシー保護のために、監視カメラの撮影画像全体、あるいは人の顔を含む身体部分に対してモザイク処理や摺りガラス処理等の抽象化を行うことが行われるが、被見守り人の状況を把握しにくいという課題がある。

　これに関し特許文献１には、人物の動作を検知するセンサを備え、センサにより人物の動作が検知されると、撮像した画像データに暈し処理を施して出力し、所定時間人物の動きが検知されないと、撮像した画像データを出力する見守り監視システムが開示されている。

特開２０１８－１８４５６号公報

　特許文献１の方法では、プライバシー保護が考慮されているとしても、人物が動いている時には暈し処理が施されるため、人物の状況を正確に把握しにくくなる。特に、人物の顔を含めて暈し処理を行っているため、その人物が見守り対象の人物かどうかさえ判断しにくくなる。見守り対象者についてはその顔まで隠す必要はなく、むしろ顔を見ることでその人の健康状態等を知ることも可能となる。また特許文献１では、センサにより人物の動作の有無を検知してから画像出力を制御するので、画像出力まで所定の時間を要し、見守りを行う人（見守り人）が見守りを開始しようとした時に、被見守り人の状況を瞬時に把握することができないといった課題がある。

　本発明は上記の点を鑑みてなされたものであり、その目的は、被見守り人の状況把握とプライバシー保護を両立させ、見守り人が見守りを開始あるいは再開しようとした時に、被見守り人の状況を瞬時に把握できる見守り監視装置および見守り監視方法を提供することにある。

　上記課題を解決するために、本発明の見守り監視装置は、被見守り人の居る見守り空間を撮影する監視カメラと、監視カメラで取得した撮影画像から人物を検出し、検出した人物を顔部および身体部位に区分する人物検出部と、人物検出部が区分した顔部を除く身体部位に対して加工描画処理を行う加工描画部と、加工描画処理を行った画像と撮影画像との合成画像を作成する画像合成部と、合成画像を見守り人の表示端末に送信するネットワーク部と、を備える。

　また本発明の見守り監視方法は、被見守り人の居る見守り空間の撮影画像を取得する画像取得ステップと、撮影画像から人物を検出し、検出した人物を顔部および身体部位に区分する人物検出ステップと、人物検出ステップで区分した顔部を除く身体部位に対して加工描画処理を行う加工描画ステップと、加工描画処理を行った画像と撮影画像との合成画像を作成する画像合成ステップと、合成画像を見守り人の表示端末に送信する送信ステップと、を備える

　本発明によれば、被見守り人の状況把握とプライバシー保護を両立させ、見守り人が見守りを開始する、あるいは再開しようとした時に、被見守り人の状況を瞬時に把握することが可能となる。

実施例１に係る監視システムの全体構成を示す図。監視カメラの構成例を示すブロック図。監視カメラの構成例（測距機能付き）を示すブロック図。ホームサーバの構成例を示すブロック図。加工描画部による加工描画処理（色付け処理）の一例を示す図。加工描画部による加工描画処理（濃淡処理）の一例を示す図。見守り監視処理のフローチャートを示す図。実施例２に係る監視システムの全体構成を示す図。ホームサーバの構成例を示すブロック図。表示端末に表示される監視画像の例を示す図。見守り監視処理のフローチャートを示す図。実施例３におけるホームサーバの構成例を示すブロック図。表示端末に表示される監視画像の例を示す図。見守り監視処理のフローチャートを示す図。実施例４に係るサーバ一体型監視カメラの構成例を示すブロック図。サーバ一体型監視カメラの構成例（測距機能付き）を示すブロック図。実施例５に係る監視システムの全体構成を示す図。表示される監視画像（監視カメラ１０１）の例を示す図。表示される監視画像（監視カメラ１０２）の例を示す図。見守り監視処理のフローチャートを示す図。実施例６に係る監視システムの全体構成を示す図。サーバの構成例を示すブロック図。見守り監視処理のフローチャートを示す図。

　以下、図面を参照しながら、本発明の実施形態について説明する。

　実施例１では、見守り監視装置の基本構成と基本動作（人物検出、加工描画処理）について説明する。

　図１は、実施例１に係る監視システムの全体構成を示す図である。監視システムは見守り監視装置として、監視カメラ１とホームサーバ２を備え、被見守り人３が存在する見守り空間４を監視する。ホームサーバ２はネットワーク５とアクセスポイント６を介して、見守り人７の所持する表示端末８に接続される。監視カメラ１は見守り空間４の撮影を行う。監視カメラ１で撮影した画像データは、通信信号１ａ、２ａによって、ホームサーバ２に送信される。ホームサーバ２では画像データに対し後述する加工描画処理を施し、ネットワーク５、アクセスポイント６を経由して、通信信号６ａ、８ａにて表示端末８へ送信する。表示端末８では加工描画処理された画像が表示され、見守り人７はこれを視認することで被見守り人３の状況を把握することができる。

　図２Ａと図２Ｂは、監視カメラ１の２つの構成例を示すブロック図である。
図２Ａに示す監視カメラ１は、撮影機能のみを有する構成の場合で、レンズ部１０、撮像素子１１、信号処理部１２、ネットワーク部１３、コントローラ１４を有する。レンズ部１０で集光された撮影対象は、撮像素子１１上で結像し、信号処理部１２で画像データに変換され、ネットワーク部１３から通信信号１ａでホームサーバ２に向けて送信される。コントローラ１４は、これらの動作全体を制御する。

　図２Ｂに示す監視カメラ１は、図２Ａの撮影機能の他に測距機能を有している。そのため、照射部１６、受光部１７、赤外光発生部１８、ＴＯＦ（Ｔｉｍｅ　ｏｆ　Ｆｌｉｇｈｔ）検出部１９を追加している。赤外光発生部１８で発生した赤外光は照射部１６から外部（見守り空間４）に照射する。受光部１７では、照射した赤外光が撮影対象（被見守り人３）で反射された反射光を受光する。ＴＯＦ検出部１９は、照射光と反射光との時間差から、監視カメラから撮影対象までの距離を測定し、測距データを得る。なお測距機能を実現する手段としては、特定の２次元パターンを有する赤外光を照射し、受光した赤外光の２次元パターンの歪から距離を計算する方式や、赤外光に替えてレーザ光を用いる方式など、ＴＯＦ以外の方式であってもよい。

　図３は、ホームサーバ２の構成例を示すブロック図である。ホームサーバ２は、ネットワーク部２１、ＣＰＵ２２、ＲＡＭ２３、ストレージ部２４を備える。ストレージ部２４には、処理プログラムやデータとして、基本プログラム２４ａ、見守り監視プログラム２４ｂを有する。処理プログラムやデータはＲＡＭ２３に展開して、ＣＰＵ２２で実行することで見守り監視動作の各種の制御を行う。ストレージ部２４はフラッシュＲＯＭなどの半導体で構成されるもの、ハードディスクと組み合わせて構成されるものなど、その構成方法が限定されるものではない。ネットワーク部２１は、監視カメラ１から撮影画像データを受信し、表示端末８に表示用の画像データを送信する。

　ストレージ部２４には見守り監視プログラム２４ｂが格納されており、ＣＰＵ２２がこれを実行することで、人物検出部２０１や加工描画部２０２や画像合成部２０３などの機能部を実現する。人物検出部２０１はカメラの撮影画像から人物（被見守り人）を検出するとともに、検出した人物領域を顔や胴体などの身体部位に区分する処理を行う。また加工描画部２０２は、被見守り人のプライバシーを保護するため、人物の各身体部位に対する色付け処理や、人物の各部分までの距離に応じて濃淡処理を施す。画像合成部２０３は、撮影画像と加工描画処理を施した画像とを合成し、合成後の画像は監視画像としてネットワーク部２１を介して見守り人７の表示端末８へ送信される。このように本実施例のホームサーバ２は、カメラ撮影画像に対して画像処理を施して見守り人へ提供する機能を有し、「管理装置」と呼ぶことができる。

　図４Ａと図４Ｂは、加工描画部２０２による加工描画処理の一例を示す図である。
図４Ａは、人物の身体部位に色付け処理を行った例である。人物検出部２０１は撮影画像から人物３０を検出すると、これを顔３１、胴体３２、手３３、足３４などの身体部位に区分する。そして加工描画部２０２は、顔３１以外の部位３２，３３，３４にそれぞれ異なる色を付与している（ここでは色の違いをパターンで表記している）。

　図４Ｂは、監視カメラ１が図２Ｂの構成（測距機能付き）の場合に、測距データに応じて身体部位に濃淡処理を行った例である。濃淡処理は、顔３１以外の部位に対し、画素単位に、あるいは複数画素単位に行い、距離の近い画素は明るく、距離の遠い画素は暗くする処理である。濃淡処理は、図４Ａで付与した色付け処理の後これと組み合わせて行うが、色付け処理を行わず、濃淡処理単独としてもよい。

　上記の加工描画処理が施された監視画像は、撮影画像と合成され、表示端末８に送信されて表示される。その結果見守り人７は、人物３０の身体部の細部詳細は認識できないが、身体部の動きは分かり易くなる。特に濃淡処理により、前後の位置関係を濃淡で表現でき、動きの把握が容易になる。

　本実施例の加工描画処理は、人物３０の顔部に対しては行わない。このため、顔の表情による状況把握は何ら支障なく行える。そして、身体部位ごとの描画を行っているため、人物の挙動を把握し易くなるという効果がある。

　なお、人物（被見守り人）が複数いる場合には、被見守り人毎に付与する色を異ならせ、被見守り人を区別しやすいようにしてもよい。また、被見守り人の顔の向きによっては、監視カメラの撮影画像内に被見守り人の顔が検出されず、頭部のみが検出される場合がある。この場合においても、被見守り人のプライバシー保護を優先させて、上記の処理を行うのが良い。

　図５は、見守り監視処理のフローチャートを示す図である。以下の処理は、ホームサーバ２のＣＰＵ２２が見守り監視プログラム２４ｂを実行することで実現する。

　Ｓ１００で処理を開始し、Ｓ１０１で見守り監視プログラムにログインする。ログインにより、ホームサーバ２と監視カメラ１とを紐付ける。Ｓ１０２で監視カメラ１からネットワーク部２１を介して撮影画像データを受信する。なお、図２Ｂに示す監視カメラ１を使用する場合には、撮影画像データとともに測距データを受信する。

　Ｓ１０３では、人物検出部２０１により、撮影画像データから人物を検出する。さらにＳ１０４では、人物検出部２０１により、検出した人物の領域を、顔、胴体、手、足、などの身体部位に区分する。Ｓ１０６では、検出した全ての人物について身体部位の区分が終了したかどうかを判定する。未処理の人物があればＳ１０４に戻り繰り返し実行する。

　Ｓ１０７では、加工描画部２０２により、身体部位に対して異なる色データを付与する。さらにＳ１０８では、画像データとともに測距データがある場合には、測距データに応じで濃淡データを付与する。Ｓ１０９では、付与された色や濃淡のデータに従い、画像データの加工描画処理を行う。Ｓ１１０では、全ての身体部位に対して加工描画処理を終了したかどうかを判定する。またＳ１１１では、全ての人物に対して加工描画処理を終了したかどうかを判定する。未処理の身体部位または人物があれば、Ｓ１０７に戻り繰り返し実行する。

　Ｓ１１２では、加工描画処理した画像データを、撮影画像データと合成する。Ｓ１１３では、合成した画像データを、ネットワーク部２１によりネットワーク５を介して表示端末８に向けて送信する。

　Ｓ１１４では、ログオフ等により監視処理の終了が指示されている場合には、Ｓ１１５で処理を終了する。終了が指示されていない場合には、Ｓ１０２に戻り監視処理を継続する。

　上記したように、本実施例の加工描画処理は、人物の顔部に対しては行わず、顔部以外の身体部位に対して行う。見守り監視は、例えば、老親が自宅にいる状況を見守る場合や、保育所で園児や保母の様子を見守る場合などのように、見守り人にとって被見守り人は予め意図された人物であり、被見守り人の顔部画像をそのまま表示するのはプライバシーの問題にはならない場合が多い。

　一方、本実施例で加工描画処理を行うことは、被見守り人の身体部分の詳細状況を隠すことが目的であり、例えば着替えや風呂上がりの時のように、被見守り人がラフな格好でいる状況がそのまま見られることがなくなる。また、見守り人にとっても必要以上に被見守り人、特に老親のプライバシーを見ることを抑制することができる。さらに、全身が写った画像データが表示端末から漏洩することを防止することができる。これにより被見守り人は、プライバシーのために生活や活動のスタイルを意識することなく、見守り監視を受けることができる。また、本実施例の加工描画処理では、被見守り人の動き等に関わらず同一様式の処理画像を表示させることができる。

　以上のように、実施例１によれば、顔の表情や身体部位の動きによって被見守り人の状況把握ができるとともに、被見守り人の生活スタイルをあいまいにさせるプライバシー保護とを両立させることができる。また、被見守り人の状況にかかわらず同一様式の見守り画像を提供しており、見守り人が見守りを開始する、あるいは再開しようとした時でも、瞬時に見守り状況を把握可能であるという効果がある。

　実施例２では、見守り空間に複数の人物が存在し、それぞれの人物が被見守り人かどうかを判定して各描画処理を行う場合について説明する。

　図６は、実施例２に係る監視システムの全体構成を示す図である。見守り空間４には、複数の人物３ａ～３ｃが存在する例を示す。実施例１（図１）に示した見守り監視装置と同一機能を有する要素には同一の符号を付与しており、重複する説明を省略する。

　図７は、実施例２におけるホームサーバ２の構成例を示すブロック図である。実施例１（図３）のホームサーバ２の構成と比較し、ストレージ部２４は、基本プログラム２４ａ、見守り監視プログラム２４ｂに加えて、顔情報登録データ２４ｃを含む。顔情報登録データ２４ｃは、見守り対象である被見守り人の顔情報を予め登録したものである。

　人物検出部２０１は検出した人物の顔情報を、顔情報登録データ２４ｃの登録データと照合し、対象人物が登録されているかどうかを判定する。対象人物が登録者（被見守り人）の場合には、加工描画部２０２により加工描画処理を行い、対象人物が未登録者（被見守り人以外）の場合は、加工描画処理を行わない。

　図８は、表示端末８に表示される監視画像８０の例を示す図である。ここでは、複数の人物３ａ～３ｃが検出され、そのうち人物３ｂと３ｃは顔情報登録データ２４ｃに顔情報が登録された被見守り人であり、人物３ａは顔情報登録データ２４ｃに顔情報が登録されておらず、被見守り人ではない場合を想定する。

　加工描画部２０２は、登録された人物３ｂと３ｃについては、顔以外の身体部位に色付け処理を行っている。一方、未登録の人物３ａについては、身体部位の加工描画処理を行わない。

　図９は、見守り監視処理のフローチャートを示す図である。実施例１（図５）に示した処理と同様の処理を行うステップについては同一符号を付与し、重複する説明を省略する。図９のフローチャートでは、Ｓ１０５ａとＳ１０５ｂが追加される。

　Ｓ１０５ａでは、人物検出部２０１は検出した人物の顔情報を、顔情報登録データ２４ｃの登録データと照合し、対象人物が登録されているかどうかを判別する。またＳ１０５ｂでは、対象人物が被見守り人（登録されている）かどうかで分岐し、被見守り人の場合（Ｓ１０５ｂ、Ｙｅｓ）にはＳ１０７以降の加工描画処理を行う。被見守り人でない場合（Ｓ１０５ｂ、Ｎｏ）は、加工描画処理を行わずＳ１１１へ進み、次の人物についての処理を進める。

　上記の処理フローによれば、加工描画処理は、被見守り人として登録された人にのみ行われ、被見守り人のプライバシーを保護することができる。被見守り人以外の人物については、加工描画処理を行わず撮影画像をそのまま表示することで、詳細な状況を把握することができる。

　以上説明したように、実施例２によれば、実施例１と同様の効果を持つとともに、見守り空間に被見守り人以外の人物が存在するときは意図しない人物として、見守り人はその状況を明確に素早く把握できるという効果がある。

　実施例３では、見守り空間に不審者がいることを検知して警報を発する場合について説明する。監視システムの全体構成は、実施例２（図６）と同様である。

　図１０は、実施例３におけるホームサーバ２の構成例を示すブロック図である。実施例２（図７）のホームサーバ２の構成と比較し、ストレージ部２４には、基本プログラム２４ａ、見守り監視プログラム２４ｂ、顔情報登録データ２４ｃの他に、不審者パターン登録データ２４ｄと、画像データ保存部２４ｅを含む。

　不審者パターン登録データ２４ｄは、人物が故意に顔を隠すような外観状況を、不審者パターンとして登録したデータである。例えば不審者パターンとしては、人物が、フルフェースのヘルメットや、目出し帽や、マスクとサングラスなどを装着している状況が該当する。画像データ保存部２４ｅは、監視カメラからの撮影画像データ（加工描画処理前）を保存する。

　人物検出部２０１は検出した人物について不審者パターン登録データ２４ｄと照合して、不審者パターンに該当するかどうかを判定する。不審者パターンに該当すると判定した場合、アラーム情報を作成して表示端末８へ報知する。またその場合は、加工描画部２０２は撮影画像に対して、加工描画処理を行なわず、画像データ保存部２４ｅに保存した監視カメラからの撮影画像データ（加工描画処理前）を表示端末８へ送信する。

　図１１は、表示端末８に表示される監視画像８０の例を示す図である。ここでは、複数の人物３ａ～３ｃが検出され、そのうち人物３ｂと３ｃは顔情報登録データ２４ｃに顔情報が登録された被見守り人である。一方人物３ａは、顔情報登録データ２４ｃに顔情報が登録されておらず、かつ、不審者パターン登録データ２４ｄに登録された不審者パターン３９（例えばヘルメットを装着）に該当している場合を想定する。

　人物検出部２０１が人物の中に不審者パターンに該当する人物３ａを検出すると、「不審者がいます」等のアラーム情報８９を作成し、監視画像８０に含めて表示端末８に送信し表示させる。あるいはアラーム情報を表示端末８に音声で伝えてもよい。その場合、加工描画部２０２は撮影画像に対して、不審者と判定した人物３ａは勿論のこと、登録された人物３ｂと３ｃについても加工描画処理を行わない。不審者がいる場合は異常事態であるから、見守り人７に対し、検出した各人物の状況を詳細に知らせる必要があるからである。

　図１２は、見守り監視処理のフローチャートを示す図である。実施例２（図９）に示した処理と同様の処理を行うステップについては、同一符号を付与し、重複する説明を省略する。図１２のフローチャートでは、Ｓ１２３～Ｓ１２５の異常処理が追加されている。

　Ｓ１２０では、人物検出部２０１は不審者パターン登録データ２４ｄと照合して、不審者パターンに該当する人物を検出すると、Ｓ１２３以降の異常処理に進む。またＳ１２１では、不審者パターンには該当しないが、顔情報が顔情報登録データ２４ｃの登録データに一致しないときは、被見守り人以外の意図されていない人物としてＳ１２３以降の異常処理に進む。

　さらにＳ１２２では、システム権限の上位者（例えば見守り人）から加工描画処理を停止するよう指示された場合にも、Ｓ１２３以降の異常処理に進むようにする。これは、見守り人が詳細画像を要求するような場合である。

　Ｓ１２３では、アラーム情報８９を作成し表示端末２に送信する。見守り人７が表示端末８を見ていない場合も考慮し、音声やメール等で発信してもよい。Ｓ１２４では、撮影画像を画像データ保存部２４ｅに保存する。これにより、異常発生時の画像データを解析し、不審者等の特定などに利用できる。Ｓ１２５では、加工描画処理された画像データではなく、画像データ保存部２４ｅに保存された撮影画像データをそのまま表示端末８へ送信する。

　上記した異常処理（Ｓ１２３～Ｓ１２５）を行う条件は、上記の場合に限らない。被見守り人が独居老人のように被見守り人の数が限定されている場合で、画像データの中に登録した顔情報の数以上の人を検知した場合、直ちに異常処理を行うように設定してもよい。例えば顔情報登録データ２４ｃに、人物３ｂと３ｃの２人分の顔情報が登録されている状況で、図１１のように３人の人物３ａ～３ｃが検出された状況がこれに該当する。

　また、異常処理を実行する条件は、システム権限の上位者（見守り者）が適宜設定することで、ユーザにとって使い勝手の良いシステムが実現できる。

　以上のように実施例３によれば、見守り空間に不審者がいるなどの異常事態を素早く検知して、見守り人に知らせることができるという効果がある。

　前記実施例１～３においては、監視カメラ１とホームサーバ２とは別体として説明したが、実施例４では、両者を一体化した構成について説明する。

　図１３Ａと図１３Ｂは、サーバ一体型監視カメラの２つの構成例を示すブロック図である。図１３Ａは、図２Ａの監視カメラ１と、実施例２（図７）のホームサーバ２の機能を一体化した場合を示す。図１３Ｂは、図２Ｂの監視カメラ１（測距機能付き）と、実施例２（図７）のホームサーバ２の機能を一体化した場合を示す。

　これらサーバ一体型監視カメラ１ｂの構成では、ホームサーバ２はコントローラ１４ａと称し、ストレージ部２４には、監視カメラ１の制御を司るカメラ制御プログラム２４ｆを追加している。またネットワーク部２１は、加工描画処理した画像の合成画像データを外部ネットワーク５に送出するが、直接ネットワークに送出してもよく、見守り空間４にアクセスポイントを配置してこれを経由して送出してもよい。サーバ一体型監視カメラ１ｂにおけるコントローラ１４ａは、他の実施例（図３、図１０）の構成としてもよいことは言うまでもない。

　実施例４によれば、監視カメラ１とホームサーバ２とが一体化されているので、監視装置の全体サイズが小型化し、また装置の設置が容易になる効果がある。

　実施例５では、複数台の監視カメラを設置して複数の監視画像を表示する場合、同一の人物については共通の加工描画処理を行うことについて説明する。

　図１４は、実施例５に係る監視システムの全体構成を示す図である。見守り空間４には複数台（ここでは２台）の監視カメラ１０１，１０２を設置している。各監視カメラ１０１，１０２は、図２Ａまたは図２Ｂに示した監視カメラ１と同じ構成であり、これらを共通のホームサーバ２に接続する。ここでは、実施例２（図７）に示すホームサーバ２を適用している。ホームサーバ２は、監視カメラ１０１，１０２のそれぞれの撮影画像に対し加工描画処理を行う。そして、見守り人７からの要求で、監視カメラ１０１，１０２の画像を切り替えて表示端末８に送信する。複数台の監視カメラを用いることで、見守り空間４が広い場合でも、領域を分割して全体を監視することができる。

　図１５Ａと図１５Ｂは、表示端末８に表示される監視画像の例を示す図で、図１５Ａは監視カメラ１０１からの監視画像８１、図１５Ｂは監視カメラ１０２からの監視画像８２を示す。監視カメラ１０１、１０２の監視領域は、見守り空間４の一部の領域を重複させているため、同一人物が両方の監視画像８１、８２に出現されることがある。本例では、人物３ｂが両方の監視画像８１、８２に含まれている。このような場合、加工描画部２０２は、同一の人物３ｂに対しては２つの監視画像間で加工描画処理を共通化し、同じ色付け、同じ濃淡処理を行う。一方、他の人物３ａ、３ｃに対してはこれと異なる加工描画処理を行う。これにより、監視カメラ１０１、１０２の選択を切り替えたときに、同一人物には同じ加工描画が施されているので、見守り人は、即座に同一人物であることが分かり、監視空間が分割されていてもこれらを統合して容易に認識することできる。

　図１６は、見守り監視処理のフローチャートを示す図である。実施例２（図９）に示した処理と同様の処理を行うステップについては、同一符号を付与している。

　図１６のフローチャートでは、Ｓ１３０のステップを追加し、複数の監視カメラに対応して、Ｓ１０２～Ｓ１０６の人物検出処理を監視カメラの数だけ繰り返す。

　Ｓ１３１では、人物検出部２０１は複数の監視カメラに写っている同一人物を特定する。Ｓ１３２では、表示端末８側から、監視画像を送信すべき監視カメラの選択情報を受信する。Ｓ１０７以降では、選択された監視カメラの撮影画像に対して加工描画処理を行うが、Ｓ１３１で同一人物として特定された人物に対しては共通の加工描画を行う。なお、Ｓ１０５の顔データ照合で未登録の人物に対しては、実施例２の場合と同様に加工描画を行わない。Ｓ１１３では、選択された監視カメラの監視画像を表示端末８へ送信する。

　以上のように実施例５によれば、複数の監視カメラを備える見守り監視装置において、監視カメラを切り替えながら監視を行うことで、分割された見守り空間を連続した空間として捉えるとともに、複数の監視画像間で同一の被見守り人を容易に識別することができるという効果がある。

　実施例６では、監視システムの管理装置であるサーバをネットワーク上に配置した構成について説明する。

　図１７は、実施例６に係る監視システムの全体構成を示す図である。本実施例の監視システムは、実施例１（図１）や実施例２（図６）におけるホームサーバ２の機能を、ネットワーク５上に配置したサーバ９により実現する構成である。この構成は、ネットワークを介して見守り監視を商用サービスとして提供するのに好適な形態である。

　新たな構成として、ネットワーク５上に配置される管理装置であるサーバ９と、監視カメラ１の撮影画像を中継するアクセスポイント６０を追加している。アクセスポイント６０は、監視カメラ１で撮影された画像データを、通信信号６０ａ、ネットワーク５を介して、サーバ９に送信する。サーバ９では監視カメラ１の撮影画像に加工描画処理を行い、アクセスポイント６を介して表示端末８へ送信する。

　図１８は、実施例６におけるサーバ９の構成例を示すブロック図である。基本構成は実施例２（図７）の構成を適用した場合で、ネットワーク部９１、ＣＰＵ９２、ＲＡＭ９３、ストレージ部９４を備える。ストレージ部９４には、処理プログラムやデータとして、基本プログラム９４ａ、ユーザ管理プログラム９４ｂ、見守り監視サービスプログラム９４ｃ、顔情報登録データ９４ｄを含む。ここでユーザ管理プログラム９４ｂは、見守り監視サービスの提供先であるユーザを管理する。図１７の見守り空間４は、サービスの提供先である特定のユーザの空間となる。顔情報登録データ９４ｄには、ユーザ毎の被見守り人の顔データを予め登録したものである。また処理プログラムやデータは、ＲＡＭ９３に展開して、ＣＰＵ９２で実行する。ストレージ部９４はフラッシュＲＯＭなどの半導体で構成されるもの、ハードディスクと組み合わせて構成されるものなど、その構成方法が限定されるものではない。

　図１９は、見守り監視処理のフローチャートを示す図である。以下の処理は、見守り監視サービスプログラム９４ｃにより実行される。実施例２（図９）に示した処理と同様の処理を行うステップについては、同一符号を付与している。

　Ｓ１００で処理を開始し、Ｓ１４０で見守り監視サービスへのログインを行う。ログインは、サーバ９とユーザの監視カメラ１とを紐付ける。

　Ｓ１０２で監視カメラからの画像データを受信する。以降のステップは、図９の処理フローと同様である。

　以上説明したように実施例６によれば、複数のユーザに対応した商用の見守り監視サービスに適用できるという効果を有する。

　なお、上記の各実施例において、通信信号１ａ、２ａ、６ａ、８ａ等は、無線信号をイメージした図になっているが、これは有線信号であってもよく、さらに、通信部におけるデータ量を削減するために、例えばＨ.２６４等の画像圧縮伸長技術を用いても、本発明の目的、効果を損なうものではない。

　以上説明した各実施例は、これらに限られるものではなく、ある実施例の構成の一部を他の実施例に置き換えることが可能である。また、ある実施例の構成に、他の実施例の構成を加えることも可能である。これらは全て本発明の範疇に属するものであり、さらに文中や図中に現れる数値やメッセージ等もあくまで一例であり、異なるものを用いても本発明の効果を損なうものでない。

　また、実施例で述べた機能ブロック等は、それらの一部または全部を、例えば集積回路で設計する等によりハードウェアで実装しても良い。また、マイクロプロセッサユニット、ＣＰＵ等が動作プログラムを解釈して実行することによりソフトウェアで実装しても良い。また、ソフトウェアの実装範囲を限定するものでなく、ハードウェアとソフトウェアを併用しても良い。

　１、１ｂ、１０１、１０２：監視カメラ、２：ホームサーバ、３、３ａ～３ｃ、３０：人物（被見守り人）、４：見守り空間、５：ネットワーク、６、６０：アクセスポイント、７：見守り人、８：表示端末、９：サーバ、２１：ネットワーク部、２２：ＣＰＵ、２３：ＲＡＭ、２４、９４：ストレージ部、２４ｂ：見守り監視プログラム、９４ｃ：見守り監視サービスプログラム、２４ｃ、９４ｄ：顔情報登録データ、２４ｄ：不審者パターン登録データ、２４ｅ：画像データ保存部、２４ｆ：カメラ制御プログラム、３１：頭部、３２～３４：身体部位、３９：不審者パターン、８０、８１、８２：監視画像、２０１：人物検出部、２０２：加工描画部、２０３：画像合成部。

Claims

　被見守り人の居る見守り空間を撮影する監視カメラと、
　前記監視カメラで取得した撮影画像から人物を検出し、検出した人物を顔部および身体部位に区分する人物検出部と、
　前記人物検出部が区分した顔部を除く身体部位に対して加工描画処理を行う加工描画部と、
　前記加工描画処理を行った画像と前記撮影画像との合成画像を作成する画像合成部と、
　前記合成画像を見守り人の表示端末に送信するネットワーク部と、
　を備えることを特徴とする見守り監視装置。
　請求項１に記載の見守り監視装置において、
　被見守り人の顔情報を登録した顔情報登録データを有し、
　前記人物検出部は、検出した人物の顔情報を前記顔情報登録データの登録データと照合し、検出した人物が登録されているかどうかを判定し、
　判定の結果、検出した人物が登録されている場合には、その人物について前記加工描画部による加工描画処理を行い、検出した人物が登録されていない場合には、その人物について前記加工描画部による加工描画処理を行わないことを特徴とする見守り監視装置。
　請求項１または２に記載の見守り監視装置において、
　見守り監視の異常処理として、アラーム情報を作成して前記表示端末へ送信する処理、または前記監視カメラの撮影画像を加工描画処理を行わずに前記表示端末へ送信する処理を行うことを特徴とする見守り監視装置。
　請求項３に記載の見守り監視装置において、
　不審者の外観状況を不審者パターンとして登録した不審者パターン登録データを有し、
　前記人物検出部は、検出した人物を前記不審者パターン登録データと照合し、不審者パターンに該当すると判定した場合、前記異常処理を実行することを特徴とする見守り監視装置。
　請求項３に記載の見守り監視装置において、
　前記人物検出部は、検出した人物が被見守り人以外の意図しない人物と判定した場合、あるいは、前記人物検出部で検出した人物の数が被見守り人として登録された人物の数よりも多い場合、前記異常処理を実行することを特徴とする見守り監視装置。
　請求項１または２に記載の見守り監視装置において、
　前記監視カメラを複数台設置して複数の撮影画像を取得する構成であって、
　前記人物検出部により同一の人物が複数の撮影画像に含まれると判定した場合、前記加工描画部は、同一の人物に対しては複数の撮影画像間で共通の加工描画処理を行うことを特徴とする見守り監視装置。
　見守り空間の外部のネットワーク上に配置された管理装置により見守りを行う見守り監視装置において、
　前記管理装置は、
　被見守り人の居る見守り空間を撮影する監視カメラからの撮影画像を受信するネットワーク部と、
　被見守り人の顔情報を登録した顔情報登録データと、
　前記監視カメラで取得した撮影画像から人物を検出し、検出した人物を顔部および身体部位に区分する人物検出部と、
　前記人物検出部が区分した顔部を除く身体部位に対して加工描画処理を行う加工描画部と、
　前記加工描画処理を行った画像と撮影画像との合成画像を作成する画像合成部と、を備え、
　前記合成画像を前記ネットワーク部を介して見守り人の表示端末に送信するものであって、
　前記人物検出部は、検出した人物の顔情報を前記顔情報登録データの登録データと照合し、検出した人物が登録されているかどうかを判定し、
　判定の結果、検出した人物が登録されている場合には、その人物について前記加工描画部による加工描画処理を行い、検出した人物が登録されていない場合には、その人物について前記加工描画部による加工描画処理を行わないことを特徴とする見守り監視装置。
　請求項１ないし７のいずれかに記載の見守り監視装置において、
　前記加工描画部は、顔部を除く身体部位に対して色付け処理を行うことを特徴とする見守り監視装置。
　請求項１ないし８のいずれかに記載の見守り監視装置において、
　前記監視カメラは、さらに、撮影対象までの距離を測定する機能を有し、
　前記加工描画部は、前記監視カメラが取得した測距データに応じて、顔部を除く身体部位に対して濃淡処理を行うことを特徴とする見守り監視装置。
　被見守り人の居る見守り空間の撮影画像を取得する画像取得ステップと、
　前記撮影画像から人物を検出し、検出した人物を顔部および身体部位に区分する人物検出ステップと、
　前記人物検出ステップで区分した顔部を除く身体部位に対して加工描画処理を行う加工描画ステップと、
　前記加工描画処理を行った画像と前記撮影画像との合成画像を作成する画像合成ステップと、
　前記合成画像を見守り人の表示端末に送信する送信ステップと、
　を備えることを特徴とする見守り監視方法。
　請求項１０に記載の見守り監視方法において、
　予め被見守り人の顔情報を顔情報登録データに登録するステップを有し、
　前記人物検出ステップでは、検出した人物の顔情報を前記顔情報登録データと照合し、検出した人物が登録されているかどうかを判定し、
　判定の結果、検出した人物が登録されている場合には、その人物について前記加工描画ステップによる加工描画処理を行い、検出した人物が登録されていない場合には、その人物について前記加工描画ステップによる加工描画処理を行わないことを特徴とする見守り監視方法。
　請求項１０または１１に記載の見守り監視方法において、
　予め不審者の外観状況を不審者パターンとして不審者パターン登録データに登録するステップと、
　アラーム情報を作成して前記表示端末へ送信する処理、または前記撮影画像を加工描画処理を行わずに前記表示端末へ送信する処理を行う異常処理ステップとを有し、
　前記人物検出ステップでは、検出した人物を前記不審者パターン登録データと照合し、不審者パターンに該当すると判定した場合、前記異常処理ステップを実行することを特徴とする見守り監視方法。
　請求項１０または１１に記載の見守り監視方法において、
　前記画像取得ステップでは、前記見守り空間に対する複数の撮影画像を取得し、
　前記人物検出ステップにより同一の人物が複数の撮影画像に含まれると判定した場合、前記加工描画ステップでは、同一の人物に対しては複数の撮影画像間で共通の加工描画処理を行うことを特徴とする見守り監視方法。
　請求項１０ないし１３のいずれかに記載の見守り監視方法において、
　前記加工描画ステップでは、顔部を除く身体部位に対する色付け処理と、撮影対象までの測距データに応じて身体部位に対する濃淡処理のいずれか、もしくは両方の処理を行うことを特徴とする見守り監視方法。