JP2017168105A - 行動検知装置、該方法および該プログラム、ならびに、被監視者監視装置 - Google Patents

Abstract

【課題】本発明は、カメラが配設される配設位置にかかわらず、被監視者における所定の行動をより高精度に検知できる行動検知装置、該方法および該プログラムならびに被監視者監視装置を提供する。
【解決手段】本発明にかかる行動検知装置の一例であるセンサ装置ＳＵ、その方法およびそのプログラムならびに被監視者監視装置では、監視対象である被監視者を、その上方から撮像した画像が取得され、前記被監視者における所定の行動を検知するための互いに異なる複数の行動検知アルゴリズムの中から、前記画像を撮像したカメラと前記画像中における所定の領域である設定領域との位置関係に基づいて行動検知アルゴリズムが選択され、この選択された行動検知アルゴリズムで前記画像に基づいて前記被監視者における所定の行動が検知される。
【選択図】図２

Description

本発明は、監視すべき監視対象である被監視者における所定の行動を検知する行動検知装置、行動検知方法および行動検知プログラムに関する。そして、本発明は、この行動検知装置を用いた被監視者監視装置に関する。

我が国（日本）は、戦後の高度経済成長に伴う生活水準の向上、衛生環境の改善および医療水準の向上等によって、高齢化社会、より詳しくは、総人口に対する６５歳以上の人口の割合である高齢化率が２１％を超える超高齢化社会になっている。また、２００５年では、総人口約１億２７６５万人に対し６５歳以上の高齢者人口は、約２５５６万人であったのに対し、２０２０年では、総人口約１億２４１１万人に対し高齢者人口は、約３４５６万人となる予測もある。このような高齢化社会では、病気や怪我や高齢等による看護や介護を必要とする要看護者や要介護者（要看護者等）は、高齢化社会ではない通常の社会で生じる要看護者等よりもその増加が見込まれる。そして、我が国は、例えば２０１３年の合計特殊出生率が１．４３という少子化社会でもある。そのため、看護や介護の必要な高齢者を高齢の家族（配偶者、子、兄弟）が介護する老老介護も起きて来ている。

要看護者や要介護者は、病院や、老人福祉施設（日本の法令では老人短期入所施設、養護老人ホームおよび特別養護老人ホーム等）等の施設に入所し、その看護や介護を受ける。このような施設では、要看護者等が、例えばベッドからの転落や歩行中の転倒等によって怪我を負ったり、ベッドから抜け出して徘徊したりするなどの問題がある。このような事態に対し、可及的速やかに対応する必要があり、また、このような事態を放置しておくとさらに大きな問題に発展してしまう可能性もあるため、前記施設では、看護師や介護士等は、定期的に巡視することによってその安否や様子を確認している。

しかしながら、要看護者等の増加数に対し看護師等の増加数が追い付かずに、看護業界や介護業界では、慢性的に人手不足になっている。さらに、日勤の時間帯に較べ、準夜勤や夜勤の時間帯では、看護師や介護士等の人数が減るため、一人当たりの業務負荷が増大するので、前記業務負荷の軽減が要請される。また、前記老老介護の事態は、前記施設でも例外ではなく、高齢の要看護者等を高齢の看護師等がケアすることもしばしば見られる。一般に高齢になると体力が衰えるため、健康であっても若い看護師等に比し看護等の負担が重くなり、また、その動きや判断も遅くなる。

このような人手不足や看護師等の負担を軽減するため、看護業務や介護業務を補完する技術が求められている。このため、近年では、要看護者等の、監視すべき監視対象である被監視者を監視（モニタ）する被監視者監視装置が研究、開発されている。

このような技術の一つとして、例えば特許文献１に開示された人体検知装置や特許文献２に開示された画像処理装置がある。この特許文献１に開示された人体検知装置は、被監視者の部屋の床面を撮像する撮像カメラと、撮像カメラの撮像範囲を複数の領域に分離識別し各領域での被監視者の存在および動作を検知する検知領域判断部と、この検知領域判断部での被監視者の存在および動作に関する検知結果を基にして、所定の領域で、もしくは所定の領域とその隣接領域にわたって、被監視者が所定の状態にあることを検知すると、監視者側へ異常発生の旨の発報を行なう判定処理部とを備える。そして、前記検知領域判断部には、前記複数の領域の一種として、被監視者の部屋の床面上の寝台が存在するベッド領域と、少なくともこのベッド領域を除き被監視者の部屋の床面をあらわし前記所定の領域である床領域とを設定してあり、前記判定処理部は、被監視者がベッド領域から床領域へ移動したことを検知すると監視者側へ被監視者離床の旨の異常発報を行なう。

前記特許文献２に開示された画像処理装置は、撮影を行う撮像カメラと、室内斜め上方から室内下方に向けて前記撮像カメラにより撮影された画像情報に基づいて人の離床、入床を判断する画像処理部と、を備える画像処理装置であって、前記画像処理部は、前記画像情報のうち、室内床面上に設置されたベッドが占有する領域であるベッド領域と、床面の領域で前記ベッドが置かれる領域以外の床面領域と、を識別可能であるともに、前記ベッドの外形下辺を表わす境界辺を通過して、前記床面領域から前記ベッド領域への人体移動を検知すると、入床事象と判断し、前記境界辺を通過して、前記ベッド領域から前記床面領域への人体移動を検知すると、離床事象と判断する。

一方、安否確認の点では、一人暮らしの独居者も前記要看護者等と同様であり、監視対象である被監視者となる。

特開２００１−３０７２４６号公報 特開２００２−２３０５３３号公報

前記特許文献１に開示された人体検知装置は、前記特許文献１の図１に示されているように、部屋の床面全面を撮像できるように天井の略中央位置に撮像カメラが配設されていることを前提に、離床を判定している。前記特許文献２に開示された画像処理装置は、室内斜め上方から室内下方に向けて撮影できるように撮像カメラが配設されていることを前提に、入床および離床それぞれを判定している。

ところで、部屋のサイズ（大きさ）や形状は、実際には、様々であり、前記天井の略中央位置や前記室内斜め上方から室内下方に向けて撮影できる位置にカメラが配設できるとは限らない。このため、前記前提を欠くと、前記特許文献１に開示された人体検知装置や前記特許文献２に開示された画像処理装置は、前記離床の判定や前記入床および離床それぞれの判定における精度が低下してしまう。

本発明は、上述の事情に鑑みて為された発明であり、その目的は、カメラが配設される配設位置にかかわらず、被監視者における所定の行動をより高精度に検知できる行動検知装置、行動検知方法および行動検知プログラム、ならびに、この行動検知装置を用いた被監視者監視装置を提供することである。

本発明にかかる行動検知装置、行動検知方法および行動検知プログラムならびに被監視者監視装置では、監視対象である被監視者を、その上方から撮像した画像が取得され、前記被監視者における所定の行動を検知するための互いに異なる複数の行動検知アルゴリズムの中から、前記画像を撮像したカメラと前記画像中における所定の領域である設定領域との位置関係に基づいて行動検知アルゴリズムが選択され、この選択された行動検知アルゴリズムで前記画像に基づいて前記被監視者における所定の行動が検知される。

本発明にかかる行動検知装置、行動検知方法および行動検知プログラムならびに被監視者監視装置は、カメラが配設される配設位置にかかわらず、被監視者における所定の行動をより高精度に検知できる。

上記並びにその他の本発明の目的、特徴及び利点は、以下の詳細な記載と添付図面から明らかになるであろう。

実施形態における被監視者監視システムの構成を示す図である。 実施形態の被監視者監視システムにおけるセンサ装置の構成を示す図である。 前記センサ装置で用いられる設定領域および行動検知線を説明するための図である。 前記設定領域に対するカメラの位置関係を説明するための図である。 前記センサ装置で用いられる前記カメラの位置関係を求める手法を説明するための図である。 前記センサ装置で用いられるＸｎ用の行動検知アルゴリズムを示すメインルーチンのフローチャートである。 前記Ｘｎ用の行動検知アルゴリズムにおけるＸｎ用の起床判定アルゴリズムを示すサブルーチンのフローチャートである。 前記Ｘｎ用の行動検知アルゴリズムにおけるＸｎ用の離床判定アルゴリズムを示すサブルーチンのフローチャートである。 前記カメラの位置関係が直上である場合に用いられる直上用の行動検知アルゴリズムで用いられる起床判定手法および離床判定手法を説明するための図である。 前記カメラの位置関係が手前である場合に用いられる手前用の行動検知アルゴリズムで用いられる起床判定手法および離床判定手法を説明するための図である。 前記カメラの位置関係が横である場合に用いられる横用の行動検知アルゴリズムで用いられる起床判定手法および離床判定手法を説明するための図である。 前記カメラの位置関係が奥である場合に用いられる奥用の行動検知アルゴリズムで用いられる起床判定手法および離床判定手法を説明するための図である。 前記カメラの位置関係が斜め前である場合に用いられる斜め前用の行動検知アルゴリズムで用いられる起床判定手法および離床判定手法を説明するための図である。 前記カメラの位置関係が斜め奥である場合に用いられる斜め奥用の行動検知アルゴリズムで用いられる起床判定手法および離床判定手法を説明するための図である。 前記センサ装置の動作を示すメインルーチンのフローチャートである。 図１５に示すメインルーチンで用いられる行動検知の動作を示すサブルーチンのフローチャートである。 前記カメラの位置関係が複数の基本位置関係それぞれの重みで表された場合の前記重みの演算手法を説明するための図である。

以下、本発明にかかる実施の一形態を図面に基づいて説明する。なお、各図において同一の符号を付した構成は、同一の構成であることを示し、適宜、その説明を省略する。本明細書において、総称する場合には添え字を省略した参照符号で示し、個別の構成を指す場合には添え字を付した参照符号で示す。

本被監視者監視装置は、監視対象である被監視者における、予め設定された所定の行動を検知する行動検知部と、前記行動検知部で検知した前記所定の行動を外部に通知する通知部とを備えるものである。そして、前記行動検知部は、前記被監視者を、前記被監視者の上方から撮像した画像に基づいて所定の行動検知アルゴリズムで前記被監視者における所定の行動を検知する。このような被監視者監視装置は、１個の機器として、一体に構成されて実現されて良く、また、システムとして、複数の機器で実現されて良い。そして、被監視者監視装置が複数の機器で実現される場合に、前記行動検知部は、これら複数の機器のうちのいずれに実装されて良い。一例として、ここでは、前記被監視者監視装置がシステムとして複数の機器で実現されている場合について、前記被監視者監視装置の実施形態を説明する。なお、前記被監視者監視装置が１個の機器として一体に構成されて実現される場合についても、以下の説明と同様に、前記被監視者監視装置を構成できる。また、一例として、ここでは、前記行動検知部が前記通知部と共に後述のセンサ装置ＳＵに実装される場合について、説明するが、このシステムのうちの他の装置、例えば後述の管理サーバ装置ＳＶ、固定端末装置ＳＰあるいは携帯端末装置ＴＡに実装される場合についても、以下の説明と同様に、前記被監視者監視装置を構成できる。

図１は、実施形態における被監視者監視システムの構成を示す図である。図２は、実施形態の被監視者監視システムにおけるセンサ装置の構成を示す図である。図３は、前記センサ装置で用いられる設定領域および行動検知線を説明するための図である。なお、図３は、これら設定領域および行動検知線を入力するための入力画面の一例でもある。図４は、前記設定領域に対するカメラの位置関係を説明するための図である。図５は、前記センサ装置で用いられる前記カメラの位置関係を求める手法を説明するための図である。図５Ａは、画像中心が設定領域（寝具領域）における行動検知線の手前に位置する場合を示し、図５Ｂは、画像中心が設定領域（寝具領域）内に位置する場合を示す。図６は、前記センサ装置で用いられるＸｎ用の行動検知アルゴリズムを示すメインルーチンのフローチャートである。Ｘｎは、カメラの位置関係であり、本実施形態では、直上、手前、奥、横、斜め前および斜め奥である。図７は、前記Ｘｎ用の行動検知アルゴリズムにおけるＸｎ用の起床判定アルゴリズムを示すサブルーチンのフローチャートである。図８は、前記Ｘｎ用の行動検知アルゴリズムにおけるＸｎ用の離床判定アルゴリズムを示すサブルーチンのフローチャートである。図９は、前記カメラの位置関係が直上である場合に用いられる直上用の行動検知アルゴリズムで用いられる起床判定手法および離床判定手法を説明するための図である。図９左側は、カメラで取得された画像の一例を示し、図９右側は、図９左側に示す画像から抽出された人体の領域（人体領域）を示す。図１０は、前記カメラの位置関係が手前である場合に用いられる手前用の行動検知アルゴリズムで用いられる起床判定手法および離床判定手法を説明するための図である。図１１は、前記カメラの位置関係が横である場合に用いられる横用の行動検知アルゴリズムで用いられる起床判定手法および離床判定手法を説明するための図である。図１２は、前記カメラの位置関係が奥である場合に用いられる奥用の行動検知アルゴリズムで用いられる起床判定手法および離床判定手法を説明するための図である。図１３は、前記カメラの位置関係が斜め前である場合に用いられる斜め前用の行動検知アルゴリズムで用いられる起床判定手法および離床判定手法を説明するための図である。図１４は、前記カメラの位置関係が斜め奥である場合に用いられる斜め奥用の行動検知アルゴリズムで用いられる起床判定手法および離床判定手法を説明するための図である。これら図１０ないし図１４において、図の左側は、起床前を示し、図の中央は、起床後を示し、図の右側は、離床後を示す。図１１ないし図１４において、上段は、カメラで取得された画像の一例を示し、下段は、上段で示す画像から抽出された人体領域を示す。

前記被監視者監視装置をシステムとして実現したその一例の被監視者監視システムＭＳは、監視すべき（見守るべき）監視対象（見守り対象）である被監視者（見守り対象者）Ｏｂ（Ｏｂ−１〜Ｏｂ−４）における、予め設定された所定の行動を検知して前記被監視者Ｏｂを監視するものであり、例えば、図１に示すように、１または複数のセンサ装置ＳＵ（ＳＵ−１〜ＳＵ−４）と、管理サーバ装置ＳＶと、固定端末装置ＳＰと、１または複数の携帯端末装置ＴＡ（ＴＡ−１、ＴＡ−２）とを備え、これらは、有線や無線で、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、電話網およびデータ通信網等の網（ネットワーク、通信回線）ＮＷを介して通信可能に接続される。ネットワークＮＷには、通信信号を中継する例えばリピーター、ブリッジ、ルーターおよびクロスコネクト等の中継機が備えられても良い。図１に示す例では、これら複数のセンサ装置ＳＵ−１〜ＳＵ−４、管理サーバ装置ＳＶ、固定端末装置ＳＰおよび複数の携帯端末装置ＴＡ−１、ＴＡ−２は、アクセスポイントＡＰを含む無線ＬＡＮ（例えばＩＥＥＥ８０２．１１規格に従ったＬＡＮ等）ＮＷによって互いに通信可能に接続されている。

被監視者監視システムＭＳは、被監視者Ｏｂに応じて適宜な場所に配設される。被監視者（見守り対象者）Ｏｂは、例えば、病気や怪我等によって看護を必要とする者や、身体能力の低下等によって介護を必要とする者や、一人暮らしの独居者等である。特に、早期発見と早期対処とを可能にする観点から、被監視者Ｏｂは、例えば異常状態等の所定の不都合な事象がその者に生じた場合にその発見を必要としている者であることが好ましい。このため、被監視者監視システムＭＳは、被監視者Ｏｂの種類に応じて、病院、老人福祉施設および住戸等の建物に好適に配設される。図１に示す例では、被監視者監視システムＭＳは、複数の被監視者Ｏｂが入居する複数の居室ＲＭや、ナースステーション等の複数の部屋を備える介護施設の建物に配設されている。

センサ装置ＳＵは、ネットワークＮＷを介して他の装置ＳＶ、ＳＰ、ＴＡと通信する通信機能を備え、被監視者Ｏｂを検知してその検知結果を管理サーバ装置ＳＶへ送信する装置である。このセンサ装置ＳＵは、後にさらに詳述する。

管理サーバ装置ＳＶは、ネットワークＮＷを介して他の装置ＳＵ、ＳＰ、ＴＡと通信する通信機能を備え、センサ装置ＳＵから被監視者Ｏｂに関する検知結果および前記被監視者Ｏｂの画像を受信して被監視者Ｏｂに対する監視に関する情報（監視情報）を管理する機器である。管理サーバ装置ＳＶは、センサ装置ＳＵから被監視者Ｏｂに関する前記検知結果および前記被監視者Ｏｂの画像を受信すると、被監視者Ｏｂに対する監視に関する前記監視情報を記憶（記録）し、そして、被監視者Ｏｂに対する監視に関する前記監視情報を収容した通信信号（監視情報通信信号）を固定端末装置ＳＰおよび携帯端末装置ＴＡに送信する。また、管理サーバ装置ＳＶは、クライアント（本実施形態では固定端末装置ＳＰおよび携帯端末装置ＴＡ等）の要求に応じたデータを前記クライアントに提供する。このような管理サーバ装置ＳＶは、例えば、通信機能付きのコンピュータによって構成可能である。

固定端末装置ＳＰは、ネットワークＮＷを介して他の装置ＳＵ、ＳＶ、ＴＡと通信する通信機能、所定の情報を表示する表示機能、および、所定の指示やデータを入力する入力機能等を備え、管理サーバ装置ＳＶや携帯端末装置ＴＡに与える所定の指示やデータを入力したり、センサ装置ＳＵで得られた検知結果や画像を表示したり等することによって、被監視者監視システムＭＳのユーザインターフェース（ＵＩ）として機能する機器である。このような固定端末装置ＳＰは、例えば、通信機能付きのコンピュータによって構成可能である。

携帯端末装置ＴＡは、ネットワークＮＷを介して他の装置ＳＶ、ＳＰ、ＳＵと通信する通信機能、所定の情報を表示する表示機能、所定の指示やデータを入力する入力機能、および、音声通話を行う通話機能等を備え、管理サーバ装置ＳＶやセンサ装置ＳＵに与える所定の指示やデータを入力したり、管理サーバ装置ＳＶからの通知によってセンサ装置ＳＵで得られた前記検知結果や画像を表示したり等することによって、被監視者Ｏｂに対する監視に関する前記監視情報を受け付けて表示する機器である。このような携帯端末装置ＴＡは、例えば、いわゆるタブレット型コンピュータやスマートフォンや携帯電話機等の、持ち運び可能な通信端末装置によって構成可能である。

次に、上述のセンサ装置ＳＵについてさらに説明する。センサ装置ＳＵは、例えば、図２に示すように、カメラ１と、音入出力部２と、制御処理部３と、通信インターフェース部（通信ＩＦ部）４と、記憶部５とを備える。

カメラ１は、制御処理部３に接続され、制御処理部３の制御に従って、画像（画像データ）を生成する装置である。カメラ１は、監視すべき監視対象である被監視者Ｏｂが所在を予定している空間（所在空間、図１に示す例では配設場所の居室ＲＭ）を監視可能に前記所在空間の上方に配置され、前記所在空間を撮像対象としてその上方から撮像し、前記撮像対象を俯瞰した画像（画像データ）を生成し、前記撮像対象の画像を制御処理部３へ出力する。カメラ１は、本実施形態では、静止画および動画を生成する。このようなカメラ１は、被監視者Ｏｂ全体を撮像できる蓋然性が高いことから、被監視者Ｏｂの横臥する例えばベッド等の寝具ＢＴにおける、被監視者Ｏｂの頭部が位置すると予定されている予め設定された頭部予定位置（通常、枕の配設位置）の直上から撮像対象を撮像できるように、配設されることが好ましいが、実際には、部屋のサイズ（大きさ）や形状等に応じて、適宜な位置、例えば天井や壁の上方等に配設される。カメラ１は、監視対象である被監視者Ｏｂを、被監視者Ｏｂの上方から撮像した画像を取得する画像取得部の一例である。

このようなカメラ１は、可視光の画像を生成する装置であって良いが、比較的暗がりでも被監視者Ｏｂを監視できるように、本実施形態では、赤外光の画像を生成する装置である。このようなカメラ１は、例えば、本実施形態では、撮像対象における赤外の光学像を所定の結像面上に結像する結像光学系、前記結像面に受光面を一致させて配置され、前記撮像対象における赤外の光学像を電気的な信号に変換するイメージセンサ、および、イメージセンサの出力を画像処理することで前記撮像対象における赤外の画像を表すデータである画像データを生成する画像処理部等を備えるデジタル赤外線カメラである。カメラ１の結像光学系は、本実施形態では、その配設された居室ＲＭ全体を撮像できる画角を持つ広角な光学系（いわゆる広角レンズ（魚眼レンズを含む））であることが好ましい。なお、カメラ１は、赤外線サーモグラフィー装置であっても良い。

なお、センサ装置ＳＵは、被監視者における所定の行動の１つとして微体動異常を検知するために、ドップラセンサをさらに備えても良い。このドップラセンサは、送信波を送信し、物体で反射した前記送信波の反射波を受信し、前記送信波と前記反射波とに基づいてドップラ周波数成分のドップラ信号を出力する体動センサである。前記物体が動いている場合、いわゆるドップラ効果により前記物体の動いている速度に比例して反射波の周波数がシフトするため、送信波の周波数と反射波の周波数とに差（ドップラ周波数成分）が生じる。ドップラセンサ１１は、このドップラ周波数成分の信号をドップラ信号として生成し、制御処理部３へ出力する。前記送信波は、超音波やマイクロ波等であって良いが、本実施形態では、マイクロ波である。マイクロ波は、着衣を透過して被監視者Ｏｂの体表で反射できるため、被監視者Ｏｂが衣服を着ていても体表の動きを検知でき、好ましい。そして、制御処理部３は、後述の行動検知処理部３６によって、前記ドップラセンサのドップラ信号に基づいて被監視者Ｏｂの呼吸動作に伴う胸部の体動（胸部の上下動）を求め、その胸部の体動における周期の乱れや予め設定された閾値以下である前記胸部の体動における振幅を検知すると、前記微体動異常であると判定する。

音入出力部２は、制御処理部３に接続され、外部の音を取得してセンサ装置ＳＵに入力するための回路であって、制御処理部３の制御に従って音を表す電気信号に応じた音を生成して出力するための回路である。音入出力部２は、例えば、音の音響振動を電気信号に変換するマイクロホン等と、音の電気信号を音の音響振動に変換するスピーカ等とを備えて構成される。音入出力部２は、外部の音を表す電気信号を制御処理部３へ出力し、また、制御処理部３から入力された電気信号を音の音響振動に変換して出力する。

通信ＩＦ部４は、制御処理部３に接続され、制御処理部３の制御に従って通信を行うための通信回路である。通信ＩＦ部４は、制御処理部３から入力された転送すべきデータを収容した通信信号を、この被監視者監視システムＭＳのネットワークＮＷで用いられる通信プロトコルに従って生成し、この生成した通信信号をネットワークＮＷを介して他の装置ＳＶ、ＳＰ、ＴＡへ送信する。通信ＩＦ部４は、ネットワークＮＷを介して他の装置ＳＶ、ＳＰ、ＴＡから通信信号を受信し、この受信した通信信号からデータを取り出し、この取り出したデータを制御処理部３が処理可能な形式のデータに変換して制御処理部３へ出力する。なお、通信ＩＦ部４は、さらに、例えば、Ｂｌｕｅｔｏｏｔｈ（登録商標）規格、ＩｒＤＡ（Ｉｎｆｒａｒｅｄ Ｄａｔａ Ａｓｓｃｏｉａｔｉｏｎ）規格およびＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）規格等の規格を用い、外部機器との間でデータの入出力を行うインターフェース回路を備えても良い。

記憶部５は、制御処理部３に接続され、制御処理部３の制御に従って、各種の所定のプログラムおよび各種の所定のデータを記憶する回路である。

前記各種の所定のプログラムには、例えば、被監視者Ｏｂに対する監視に関する情報処理を実行する監視処理プログラム等の制御処理プログラムが含まれる。前記監視処理プログラムには、画像中における所定の領域を設定領域として設定するための処理を行う領域設定処理プログラム、被監視者Ｏｂにおける所定の行動を検知するために予め記憶された複数の所定の行動検知アルゴリズムのうちの少なくとも１つに用いられる、前記画像中における所定の線を行動検知線として設定するための処理を行う行動検知線設定処理プログラム、前記設定領域に対するカメラ１の位置関係を求める位置関係演算プログラム、前記複数の行動検知アルゴリズムの中から位置関係演算プログラムで求めた位置関係に基づいて行動検知アルゴリズムを選択するアルゴリズム選択プログラム、前記アルゴリズム選択プログラムで選択した行動検知アルゴリズムでカメラ１で取得した画像に基づいて被監視者Ｏｂにおける所定の行動を検知する行動検知処理プログラム、前記行動検知プログラムで検知した前記所定の行動を外部に通知する通知処理プログラム、カメラ１２で撮像した動画を、その動画を要求した固定端末装置ＳＰや携帯端末装置ＴＡへストリーミングで配信するストリーミング処理プログラム、および、音入出力部２等を用いることで固定端末装置ＳＰや携帯端末装置ＴＡとの間で音声通話を行うナースコール処理プログラム等が含まれる。前記各種の所定のデータには、例えば、前記設定領域および前記行動検知線等のこれら上述の各プログラムを実行する上で必要なデータや、被監視者Ｏｂを監視する上で必要なデータ等が含まれる。

これら前記設定領域、前記行動検知線および前記複数の行動検知アルゴリズムを記憶するために、記憶部５は、機能的に、設定領域記憶部５１、行動検知線記憶部５２および行動検知アルゴリズム記憶部５３を備える。

設定領域記憶部５１は、画像中における所定の領域を設定領域として記憶するものである。設定領域は、被監視者Ｏｂにおける所定の行動を検知するために前記複数の行動検知アルゴリズムのうちの少なくとも１つに用いられる領域であり、本実施形態では、前記所定の行動は、被監視者Ｏｂの起床および離床であることから、前記起床の有無および前記離床の有無を検知するために、設定領域ＡＲは、例えば、図３に４点ＰＴ１〜ＰＴ４で囲まれた領域として示すように、カメラ１で所在空間を撮像した画像中における例えばベッド等の寝具ＢＴの領域である。

行動検知線記憶部５２は、画像中における所定の線を行動検知線として記憶するものである。行動検知線は、被監視者Ｏｂにおける所定の行動を検知するために前記複数の行動検知アルゴリズムのうちの少なくとも１つに用いられる線であり、本実施形態では、前記所定の行動は、被監視者Ｏｂの起床および離床であることから、前記起床の有無および前記離床の有無を検知するために、行動検知線ＡＬは、例えば、図３に２点ＰＴ２、ＰＴ３の線分として示すように、寝具ＢＴに対し入床および離床する、寝具ＢＴの領域として設定された設定領域ＡＲにおける１または複数の境界線である。

行動検知アルゴリズム記憶部５３は、互いに異なる複数の行動検知アルゴリズムを設定領域ＡＲに対する、前記画像を撮像したカメラ１の位置関係に対応付けて記憶するものである。

設定領域ＡＲに対する前記カメラ１の位置関係は、本実施形態では、例えば、図４に示すように、設定領域ＡＲを基準に分類されており、カメラ１が設定領域ＡＲの直上に位置する直上ＰＯ１、カメラ１が設定領域ＡＲの手前上方に位置する手前ＰＯ２、カメラ１が設定領域ＡＲの奥上方に位置する奥ＰＯ３、カメラ１が設定領域ＡＲの横上方に位置する横ＰＯ４、ＰＯ４、カメラ１が設定領域ＡＲの斜め前上方に位置する斜め前ＰＯ５、ＰＯ５、および、カメラ１が設定領域ＡＲの斜め奥上方に位置する斜め奥ＰＯ６、ＰＯ６である。これら直上ＰＯ１、手前ＰＯ２、奥ＰＯ３、横ＰＯ４、斜め前ＰＯ５および斜め奥ＰＯ６は、後述の基本位置関係でもある。

そして、互いに異なる複数の行動検知アルゴリズムは、本実施形態では、これら６個の直上ＰＯ１、手前ＰＯ２、奥ＰＯ３、横ＰＯ４、斜め前ＰＯ５および斜め奥ＰＯ６それぞれに対応して予め用意されており、前記複数の行動検知アルゴリズムは、前記カメラ１の位置関係が直上ＰＯ１である場合に用いられる直上用の行動検知アルゴリズム、前記カメラ１の位置関係が手前ＰＯ２である場合に用いられる手前用の行動検知アルゴリズム、前記カメラ１の位置関係が奥ＰＯ３である場合に用いられる奥用の行動検知アルゴリズム、前記カメラ１の位置関係が横ＰＯ４である場合に用いられる横用の行動検知アルゴリズム、前記カメラ１の位置関係が斜め前ＰＯ５である場合に用いられる斜め前用の行動検知アルゴリズム、および、前記カメラ１の位置関係が斜め奥である場合に用いられる斜め奥用の行動検知アルゴリズムを含む。

前記直上用の行動検知アルゴリズムは、例えば、図９に示すように、画像上における設定領域ＡＲ外の被監視者Ｏｂの第１面積Ｓ１、および、前記画像上における設定領域ＡＲと被監視者Ｏｂとが重なった第２面積Ｓ２に基づいて被監視者Ｏｂにおける所定の行動を検知するアルゴリズムである。

前記手前用の行動検知アルゴリズムは、例えば、図１０に示すように、画像上における行動検知線ＡＬと被監視者Ｏｂの足先位置ＦＰとの距離Ｗａに基づいて被監視者Ｏｂにおける所定の行動を検知するアルゴリズムである。この距離Ｗａは、行動検知線ＡＬの外側にはみ出した被監視者Ｏｂの長さに相当する。

前記横用の行動検知アルゴリズムは、例えば、図１１に示すように、画像上において、設定領域ＡＲの前記横の方向に沿ってカメラ１に最も近い位置に位置する第１境界線ＢＬ１と設定領域ＡＲの前記横の方向に沿ってカメラ１に最も遠い位置に位置する第２境界線ＢＬ２との間での設定領域ＡＲと被監視者Ｏｂとが重なった第３面積Ｓ３に基づいて被監視者Ｏｂにおける所定の行動を検知するアルゴリズムである。

前記奥用の行動検知アルゴリズムは、例えば、図１２に示すように、画像上における設定領域ＡＲと被監視者Ｏｂとが重なった第２面積Ｓ２に基づいて被監視者Ｏｂにおける所定の行動を検知するアルゴリズムである。

前記斜め前用の行動検知アルゴリズムは、例えば、図１３に示すように、画像上における行動検知線ＡＬと被監視者Ｏｂの足先位置ＦＰとの距離Ｗａ、および、前記画像上において、設定領域ＡＲの前記横の方向に沿ってカメラ１に最も近い位置に位置する第１境界線ＢＬ１と設定領域ＡＲの前記横の方向に沿ってカメラ１に最も遠い位置に位置する第２境界線ＢＬ２との間での設定領域ＡＲと被監視者Ｏｂとが重なった第３面積Ｓ３に基づいて被監視者Ｏｂにおける所定の行動を検知するアルゴリズムである。

前記斜め奥用の行動検知アルゴリズムは、例えば、図１４に示すように、画像上において、設定領域ＡＲの前記横の方向に沿ってカメラ１に最も近い位置に位置する第１境界線ＢＬ１と設定領域ＡＲの前記横の方向に沿ってカメラ１に最も遠い位置に位置する第２境界線ＢＬ２との間での設定領域ＡＲと被監視者Ｏｂとが重なった第３面積Ｓ３に基づいて被監視者Ｏｂにおける所定の行動を検知するアルゴリズムである。

これら６個の前記直上用の行動検知アルゴリズム、前記手前用の行動検知アルゴリズム、前記奥用の行動検知アルゴリズム、前記横用の行動検知アルゴリズム、前記斜め前用の行動検知アルゴリズムおよび前記斜め奥用の行動検知アルゴリズムは、大略、同様の手順であり、Ｘｎを直上、手前、奥、横、斜め前および斜め奥とすると（Ｘｎ＝直上、手前、奥、横、斜め前、斜め奥）、図６ないし図８に示すフォローチャートで表すことができる。

より具体的には、Ｘｎ用の行動検知アルゴリズムでは、図６に示すように、先ず、画像から人体の領域（人体領域）が抽出され（Ｓ１ｎ）、次に、Ｘｎ用の起床判定処理が実行され（Ｓ２ｎ）、そして、Ｘｎ用の離床判定処理が実行される（Ｓ３ｎ）。人体領域は、カメラ１で取得した画像から例えば背景差分法やフレーム間差分法等の手法を用いることで動体領域を抽出することで抽出される（動体領域＝人体領域）。前記背景差分法では、予め背景画像が求められて前記各種の所定のデータの１つとして記憶部５に予め記憶され、カメラ１によって生成された画像と前記背景画像との差分画像から動体の有無が判定され、この判定の結果、動体がある場合にはこの動体の領域が動体領域とされる。前記フレーム差分法では、カメラ１によって生成された、現在のフレームの画像と過去のフレーム（例えば１つ前のフレーム）の画像との差分画像から動体の有無が判定され、この判定の結果、動体がある場合にはこの動体の領域が動体領域とされる。なお、逆に、Ｘｎ用の離床判定処理Ｓ３ｎが実行された後に、Ｘｎ用の起床判定処理Ｓ２ｎが実行されても良い。

Ｘｎ用の起床判定処理Ｓ２ｎでは、図７に示すように、まず、被監視者Ｏｂにおける起床に関する現在の状態が起床前か否かが判定される（Ｓ２１ｎ）。被監視者Ｏｂにおける起床に関する現在の状態は、記憶部５に記憶される。例えば、被監視者Ｏｂにおける起床に関する現在の状態は、起床に関する状態を表すフラグ（起床状態フラグ）によって記憶部５に記憶される。例えば、被監視者Ｏｂが起床前であると判定されている場合には、この起床状態フラグは、「０」とされ、被監視者Ｏｂが起床後であると判定されている場合には、この起床状態フラグは、「１」とされる。この判定の結果、起床前ではない場合、すなわち、起床後である場合（起床状態フラグ＝１、Ｎｏ）には、このＸｎ用の起床判定処理Ｓ２ｎが終了され、起床前である場合（起床状態フラグ＝０、Ｙｅｓ）には、次の処理Ｓ２２ｎが実行される。処理Ｓ２２ｎでは、Ｘｎ用の起床判定条件を満たすか否かが判定される。この処理Ｓ２２ｎは、Ｘｎごとに後にさらに説明する。この判定の結果、Ｘｎ用の起床判定条件を満たす場合（Ｙｅｓ）は、起床が通知処理部３７へ通知され（Ｓ２３ｎ）、被監視者Ｏｂにおける起床に関する現在の状態が起床後として記憶部５に記憶され（起床状態フラグ←１、Ｓ２４ｎ）、このＸｎ用の起床判定処理Ｓ２ｎが終了される。一方、前記判定の結果、Ｘｎ用の起床判定条件を満たさない場合（Ｎｏ）は、被監視者Ｏｂにおける起床に関する現在の状態が起床前として記憶部５に記憶され（起床状態フラグ←０、Ｓ２５ｎ）、このＸｎ用の起床判定処理Ｓ２ｎが終了される。

Ｘｎ用の離床判定処理Ｓ３ｎでは、図８に示すように、まず、被監視者Ｏｂにおける離床に関する現在の状態が離床前か否かが判定される（Ｓ３１ｎ）。被監視者Ｏｂにおける離床に関する現在の状態は、記憶部５に記憶される。例えば、被監視者Ｏｂにおける離床に関する現在の状態は、離床に関する状態を表すフラグ（離床状態フラグ）によって記憶部５に記憶される。例えば、被監視者Ｏｂが離床前であると判定されている場合には、この離床状態フラグは、「０」とされ、被監視者Ｏｂが離床後であると判定されている場合には、この離床状態フラグは、「１」とされる。この判定の結果、離床前ではない場合、すなわち、離床後である場合（離床状態フラグ＝１、Ｎｏ）には、このＸｎ用の離床判定処理Ｓ３ｎが終了され、離床前である場合（離床状態フラグ＝０、Ｙｅｓ）には、次の処理Ｓ３２ｎが実行される。処理Ｓ３２ｎでは、Ｘｎ用の離床判定条件を満たすか否かが判定される。この処理Ｓ３２ｎは、Ｘｎごとに後にさらに説明する。この判定の結果、Ｘｎ用の離床判定条件を満たす場合（Ｙｅｓ）は、離床が通知処理部３７へ通知され（Ｓ３３ｎ）、被監視者Ｏｂにおける離床に関する現在の状態が離床後として記憶部５に記憶され（離床状態フラグ←１、Ｓ３４ｎ）、このＸｎ用の離床判定処理Ｓ３ｎが終了される。一方、前記判定の結果、Ｘｎ用の離床判定条件を満たさない場合（Ｎｏ）は、被監視者Ｏｂにおける離床に関する現在の状態が離床前として記憶部５に記憶され（離床状態フラグ←０、Ｓ３５ｎ）、このＸｎ用の離床判定処理Ｓ３ｎが終了される。

次に、図９ないし図１４を用いてＸｎごとに、Ｘｎ用の起床判定条件およびＸｎ用の離床判定条件について説明する。Ｘｎ用の起床判定条件およびＸｎ用の離床判定条件は、例えば、本実施形態では、画像上における設定領域ＡＲ外の被監視者Ｏｂの第１面積Ｓ１、画像上における設定領域ＡＲと被監視者Ｏｂとが重なった第２面積Ｓ２、設定領域ＡＲの前記横の方向に沿ってカメラ１に最も近い位置に位置する第１境界線ＢＬ１と設定領域ＡＲの前記横の方向に沿ってカメラ１に最も遠い位置に位置する第２境界線ＢＬ２との間での設定領域ＡＲと被監視者Ｏｂとが重なった第３面積Ｓ３、および、画像上における行動検知線ＡＬと被監視者Ｏｂの足先位置ＦＰとの距離Ｗａのうちの１または複数に基づく条件である。大略、前記第１面積Ｓ１が大きくなるに従って起床の発生が検知され、さらに大きくなるに従って離床の発生が検知される。大略、前記第２面積Ｓ２が小さくなるに従って起床の発生が検知され、さらに小さくなるに従って離床の発生が検知される。大略、前記第３面積Ｓ３が小さくなるに従って起床の発生が検知され、さらに小さくなるに従って離床の発生が検知される。そして、大略、前記距離Ｗａが大きくなるに従って起床の発生が検知され、さらに大きくなるに従って離床の発生が検知される。

より具体的には、まず、直上用の行動検知アルゴリズムで用いられる直上用の起床判定条件は、図９に示すように、画像上における設定領域ＡＲ外の被監視者Ｏｂの第１面積Ｓ１が予め設定された第１閾値（直上用起床判定閾値）Ｔｈ１を越えたか否かである。第１面積Ｓ１が第１閾値Ｔｈ１を越えた場合（Ｓ１＞Ｔｈ１）には、被監視者Ｏｂが起床したと判定され、被監視者Ｏｂにおける起床に関する現在の状態は、起床後とされる。一方、第１面積Ｓ１が第１閾値Ｔｈ１以下である場合（Ｓ１≦Ｔｈ１）には、被監視者Ｏｂは起床していないと判定され、被監視者Ｏｂにおける起床に関する現在の状態は、起床前とされる。第１面積Ｓ１は、例えば、処理Ｓ１ｎで抽出された人体領域のうち、設定領域ＡＲ外の人体領域における画素の総数を計数することで求められる。そして、直上用の行動検知アルゴリズムで用いられる直上用の離床判定条件は、図９に示すように、画像上における設定領域ＡＲと被監視者Ｏｂとが重なった第２面積Ｓ２が予め設定された第２閾値（直上用離床判定閾値）Ｔｈ２を越えたか否かである。第２面積Ｓ２が第２閾値Ｔｈ２を越えていない場合、すなわち、第２面積Ｓ２が第２閾値Ｔｈ２未満である場合（Ｓ２＜Ｔｈ２）には、被監視者Ｏｂが離床したと判定され、被監視者Ｏｂにおける離床に関する現在の状態は、離床後とされる。一方、第２面積Ｓ２が第２閾値Ｔｈ２以上である場合（Ｓ２≧Ｔｈ２）には、被監視者Ｏｂは離床していないと判定され、被監視者Ｏｂにおける離床に関する現在の状態は、離床前とされる。第２面積Ｓ２は、例えば、処理Ｓ１ｎで抽出された人体領域のうち、設定領域ＡＲと人体領域とが重なった領域における画素の総数を計数することで求められる。これら第１および第２閾値Ｔｈ１、Ｔｈ２は、例えば、複数のサンプルを統計的に処理して経験的に予め設定される。

手前用の行動検知アルゴリズムで用いられる手前用の起床判定条件は、図１０に示すように、画像上における行動検知線ＡＬと被監視者Ｏｂの足先位置ＦＰとの距離Ｗａが予め設定された第３閾値（手前用起床判定閾値）Ｔｈ３を越えたか否かである。距離Ｗａが第３閾値Ｔｈ３以上である場合（Ｗａ≧Ｔｈ３）には、被監視者Ｏｂが起床したと判定され、被監視者Ｏｂにおける起床に関する現在の状態は、起床後とされる（図１０の中央参照）。一方、距離Ｗａが第３閾値Ｔｈ３を越えていない場合、すなわち、距離Ｗａが第３閾値Ｔｈ３未満である場合（Ｗａ＜Ｔｈ３）には、被監視者Ｏｂは起床していないと判定され、被監視者Ｏｂにおける起床に関する現在の状態は、起床前とされる（図１０の左側参照）。距離Ｗａは、例えば、処理Ｓ１ｎで抽出された人体領域のうち、床面に最も近い位置が被監視者Ｏｂの足先位置ＦＰとされ、行動検知線ＡＬとこの被監視者Ｏｂの足先位置ＦＰとの間における、縦方向に沿う１ラインの画素の総数を計数することで求められる。そして、手前用の行動検知アルゴリズムで用いられる手前用の離床判定条件は、図１０に示すように、前記距離Ｗａが予め設定された第４閾値（手前用離床判定閾値）Ｔｈ４を越えたか否かである。距離Ｗａが第４閾値Ｔｈ４以上である場合（Ｗａ≧Ｔｈ４）には、被監視者Ｏｂが離床したと判定され、被監視者Ｏｂにおける離床に関する現在の状態は、離床後とされる（図１０の右側参照）。一方、距離Ｗａが第４閾値Ｔｈ４を越えていない場合、すなわち、距離Ｗａが第４閾値Ｔｈ４未満である場合（Ｗａ＜Ｔｈ４）には、被監視者Ｏｂは離床していないと判定され、被監視者Ｏｂにおける離床に関する現在の状態は、離床前とされる（図１０の中央参照）。これら第３および第４閾値Ｔｈ３、Ｔｈ４は、例えば、複数のサンプルを統計的に処理して経験的に予め設定される。

横用の行動検知アルゴリズムで用いられる横用の起床判定条件は、図１１に示すように、画像上において、設定領域ＡＲの前記横の方向に沿ってカメラ１に最も近い位置に位置する第１境界線ＢＬ１と設定領域ＡＲの前記横の方向に沿ってカメラ１に最も遠い位置に位置する第２境界線ＢＬ２との間での設定領域ＡＲと被監視者Ｏｂとが重なった第３面積Ｓ３が予め設定された第５閾値（横用起床判定閾値）Ｔｈ５を越えたか否かである。第３面積Ｓ３が第５閾値Ｔｈ５以下である場合（Ｓ３≦Ｔｈ５）には、被監視者Ｏｂが起床したと判定され、被監視者Ｏｂにおける起床に関する現在の状態は、起床後とされる（図１１の中央参照）。一方、第３面積Ｓ３が第５閾値Ｔｈ５を越えている場合（Ｓ３＞Ｔｈ５）には、被監視者Ｏｂは起床していないと判定され、被監視者Ｏｂにおける起床に関する現在の状態は、起床前とされる（図１１の左側参照）。第３面積Ｓ３は、例えば、処理Ｓ１ｎで抽出された人体領域のうち、第１境界線ＢＬ１と第２境界線ＢＬ２に挟まれた設定領域ＡＲと人体領域とが重なった領域における画素の総数を計数することで求められる。そして、横用の行動検知アルゴリズムで用いられる横用の離床判定条件は、図１１に示すように、前記第３面積Ｓ３が予め設定された第６閾値（横用離床判定閾値）Ｔｈ６を越えたか否かである。第３面積Ｓ３が第６閾値Ｔｈ６以下である場合（Ｓ３≦Ｔｈ６）には、被監視者Ｏｂが離床したと判定され、被監視者Ｏｂにおける離床に関する現在の状態は、離床後とされる（図１１の右側参照）。一方、第３面積Ｓ３が第６閾値Ｔｈ６を越えている場合（Ｓ３＞Ｔｈ６）には、被監視者Ｏｂは離床していないと判定され、被監視者Ｏｂにおける離床に関する現在の状態は、離床前とされる（図１１の中央参照）。これら第５および第６閾値Ｔｈ５、Ｔｈ６は、例えば、複数のサンプルを統計的に処理して経験的に予め設定される。

奥用の行動検知アルゴリズムで用いられる奥用の起床判定条件は、図１２に示すように、画像上における設定領域ＡＲと被監視者Ｏｂとが重なった第２面積Ｓ２が予め設定された第７閾値（奥用起床判定閾値）Ｔｈ７を越えたか否かである。第２面積Ｓ２が第７閾値Ｔｈ７以下である場合（Ｓ２≦Ｔｈ７）には、被監視者Ｏｂが起床したと判定され、被監視者Ｏｂにおける起床に関する現在の状態は、起床後とされる（図１２の中央参照）。一方、第２面積Ｓ２が第７閾値Ｔｈ７を越えている場合（Ｓ２＞Ｔｈ７）には、被監視者Ｏｂは起床していないと判定され、被監視者Ｏｂにおける起床に関する現在の状態は、起床前とされる（図１２の左側参照）。そして、奥用の行動検知アルゴリズムで用いられる奥用の離床判定条件は、図１２に示すように、前記第２面積Ｓ２が予め設定された第８閾値（奥用離床判定閾値）Ｔｈ８を越えたか否かである。第２面積Ｓ２が第８閾値Ｔｈ８以下である場合（Ｓ２≦Ｔｈ８）には、被監視者Ｏｂが離床したと判定され、被監視者Ｏｂにおける離床に関する現在の状態は、離床後とされる（図１２の右側参照）。一方、第２面積Ｓ２が第８閾値Ｔｈ８を越えている場合（Ｓ２＞Ｔｈ８）には、被監視者Ｏｂは離床していないと判定され、被監視者Ｏｂにおける離床に関する現在の状態は、離床前とされる（図１２の中央参照）。これら第７および第８閾値Ｔｈ７、Ｔｈ８は、例えば、複数のサンプルを統計的に処理して経験的に予め設定される。

斜め前用の行動検知アルゴリズムで用いられる斜め前用の起床判定条件は、図１３に示すように、画像上における行動検知線ＡＬと被監視者Ｏｂの足先位置ＦＰとの距離Ｗａが予め設定された第９閾値（第１斜め前用起床判定閾値）Ｔｈ９を越えたか否か、および、前記画像上において、設定領域ＡＲの前記横の方向に沿ってカメラ１に最も近い位置に位置する第１境界線ＢＬ１と設定領域ＡＲの前記横の方向に沿ってカメラ１に最も遠い位置に位置する第２境界線ＢＬ２との間での設定領域ＡＲと被監視者Ｏｂとが重なった第３面積Ｓ３が予め設定された第１０閾値（第２斜め前用起床判定閾値）Ｔｈ１０を越えたか否か、である。距離Ｗａが第９閾値Ｔｈ９以上であって、第３面積Ｓ３が第１０閾値Ｔｈ１０以下である場合（Ｗａ≧Ｔｈ９かつＳ３≦Ｔｈ１０）には、被監視者Ｏｂが起床したと判定され、被監視者Ｏｂにおける起床に関する現在の状態は、起床後とされる（図１３の中央参照）。一方、距離Ｗａが第９閾値Ｔｈ９を超えていない場合、すなわち、距離Ｗａが第９閾値Ｔｈ９未満であって、第３面積Ｓ３が第１０閾値Ｔｈ１０を越えている場合（Ｗａ＜Ｔｈ９かつＳ３＞Ｔｈ１０）には、被監視者Ｏｂは起床していないと判定され、被監視者Ｏｂにおける起床に関する現在の状態は、起床前とされる（図１３の左側参照）。そして、斜め前用の行動検知アルゴリズムで用いられる斜め前用の離床判定条件は、図１３に示すように、前記距離Ｗａが予め設定された第１１閾値（第１斜め前用離床判定閾値）Ｔｈ１１を越えたか否か、および、前記第３面積Ｓ３が予め設定された第１２閾値（第２斜め前用離床判定閾値）Ｔｈ１２を越えたか否かである。距離Ｗａが第１１閾値Ｔｈ１１以上であって、第３面積Ｓ３が第１２閾値Ｔｈ１２以下である場合（Ｗａ≧Ｔｈ１１かつＳ３≦Ｔｈ１２）には、被監視者Ｏｂが離床したと判定され、被監視者Ｏｂにおける離床に関する現在の状態は、離床後とされる（図１３の右側参照）。一方、距離Ｗａが第１１閾値Ｔｈ１１を超えていない場合、すなわち、距離Ｗａが第１１閾値Ｔｈ１１未満であって、第３面積Ｓ３が第１２閾値Ｔｈ１２を越えている場合（Ｗａ＜Ｔｈ１１かつＳ３＞Ｔｈ１２）には、被監視者Ｏｂは離床していないと判定され、被監視者Ｏｂにおける離床に関する現在の状態は、離床前とされる（図１３の中央参照）。これら第９ないし第１２閾値Ｔｈ９〜Ｔｈ１２は、例えば、複数のサンプルを統計的に処理して経験的に予め設定される。

斜め奥用の行動検知アルゴリズムで用いられる斜め奥用の起床判定条件は、図１４に示すように、前記画像上において、設定領域ＡＲの前記横の方向に沿ってカメラ１に最も近い位置に位置する第１境界線ＢＬ１と設定領域ＡＲの前記横の方向に沿ってカメラ１に最も遠い位置に位置する第２境界線ＢＬ２との間での設定領域ＡＲと被監視者Ｏｂとが重なった第３面積Ｓ３が予め設定された第１３閾値（斜め奥用起床判定閾値）Ｔｈ１３を越えたか否か、である。第３面積Ｓ３が第１３閾値Ｔｈ１３以下である場合（Ｓ３≦Ｔｈ１３）には、被監視者Ｏｂが起床したと判定され、被監視者Ｏｂにおける起床に関する現在の状態は、起床後とされる（図１４の中央参照）。一方、第３面積Ｓ３が第１３閾値Ｔｈ１３を越えている場合（Ｓ３＞Ｔｈ１３）には、被監視者Ｏｂは起床していないと判定され、被監視者Ｏｂにおける起床に関する現在の状態は、起床前とされる（図１４の左側参照）。そして、斜め奥用の行動検知アルゴリズムで用いられる斜め奥用の離床判定条件は、図１４に示すように、前記第３面積Ｓ３が予め設定された第１４閾値（斜め奥用離床判定閾値）Ｔｈ１４を越えたか否かである。第３面積Ｓ３が第１４閾値Ｔｈ１４以下である場合（Ｓ３≦Ｔｈ１４）には、被監視者Ｏｂが離床したと判定され、被監視者Ｏｂにおける離床に関する現在の状態は、離床後とされる（図１４の右側参照）。一方、第３面積Ｓ３が第１４閾値Ｔｈ１４を越えている場合（Ｓ３＜Ｔｈ１４）には、被監視者Ｏｂは離床していないと判定され、被監視者Ｏｂにおける離床に関する現在の状態は、離床前とされる（図１４の中央参照）。これら第１３および第１４閾値Ｔｈ１３、Ｔｈ１４は、例えば、複数のサンプルを統計的に処理して経験的に予め設定される。

なお、上述の第１ないし第１４閾値Ｔｈ１〜Ｔｈ１４は、画像上での被監視者Ｏｂにおける大きさや行動速度を考慮して設定されても良い。

このような図６ないし図１４を用いて説明した６個の前記直上用の行動検知アルゴリズム、前記手前用の行動検知アルゴリズム、前記奥用の行動検知アルゴリズム、前記横用の行動検知アルゴリズム、前記斜め前用の行動検知アルゴリズムおよび前記斜め奥用の行動検知アルゴリズムが行動検知アルゴリズム記憶部５３に予め記憶される。

このような記憶部５は、例えば不揮発性の記憶素子であるＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）や書き換え可能な不揮発性の記憶素子であるＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）等を備える。そして、記憶部５は、前記所定のプログラムの実行中に生じるデータ等を記憶するいわゆる制御処理部３のワーキングメモリとなるＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等を含む。

制御処理部３は、センサ装置ＳＵの各部を当該各部の機能に応じてそれぞれ制御し、カメラ１によって被監視者Ｏｂをその上方から撮像した画像を取得し、この取得した画像に基づいて被監視者Ｏｂにおける所定の行動を検知して通知するための回路である。制御処理部３は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）およびその周辺回路を備えて構成される。制御処理部３は、前記制御処理プログラムが実行されることによって、制御部３１、領域設定処理部３２、行動検知線設定処理部３３、位置関係演算部３４、アルゴリズム選択部３５、行動検知処理部３６、通知処理部３７、ストリーミング処理部３８およびナースコール処理部３９を機能的に備える。

制御部３１は、センサ装置ＳＵの各部を当該各部の機能に応じてそれぞれ制御し、センサ装置ＳＵの全体制御を司るものである。

領域設定処理部３２は、画像中における所定の領域を設定領域ＡＲとして設定するための処理を行うものである。行動検知線設定処理部３３は、前記画像中における所定の線を行動検知線ＡＬとして設定するための処理を行うものである。

本実施形態では、制御処理部３は、固定端末装置ＳＰまたは携帯端末装置ＴＡから設定領域ＡＲおよび行動検知線ＡＬそれぞれの設定を要求する通信信号（設定要求通信信号）を通信ＩＦ部４で受信すると、カメラ１で取得した画像を収容した通信信号（設定画像通信信号）を通信ＩＦ部４で返信する。固定端末装置ＳＰまたは携帯端末装置ＴＡは、例えば、図３に示す設定領域ＡＲおよび行動検知線ＡＬを入力するための設定画面を表示する。前記設定画面には、前記領域設定画像通信信号に収容された画像が表示される。ユーザ（監視者および被監視者等）は、例えばマウス等のポインティングデバイスを用いて、あるいは、タッチパネルに対するタップ操作を用いて、前記設定画面に設定領域ＡＲの各頂点ＰＴ１〜ＰＴ４および行動検知線ＡＬの両端点ＰＴ２、ＰＴ３それぞれを入力する。なお、入力方法は、設定領域ＡＲの各辺の入力や行動検知線ＡＬの線の入力等であっても良い。設定領域ＡＲおよび行動検知線ＡＬを受け付けると、固定端末装置ＳＰまたは携帯端末装置ＴＡは、これら受け付けた設定領域ＡＲおよび行動検知線ＡＬを収容した通信信号（設定情報通信信号）をセンサ装置ＳＵへ送信する。この設定情報通信信号を通信ＩＦ部４で受信すると、領域設定処理部３２は、この受信した設定情報通信信号に収容された設定領域ＡＲ（４頂点ＰＴ１〜ＰＴ４）を取り出して記憶部５の設定領域記憶部５１に記憶することで設定領域ＡＲをセンサ装置ＳＵに設定し、行動検知線設定処理部３３は、この受信した設定情報通信信号に収容された行動検知線ＡＬ（両端点ＰＴ２、ＰＴ３）を取り出して記憶部５の行動検知線記憶部５２に記憶することで行動検知線ＡＬをセンサ装置ＳＵに設定する。本実施形態では、通信ＩＦ部４および行動検知線設定処理部３３は、行動検知線を外部から受け付けて前記記憶部に記憶する行動検知線受付部の一例に相当する。

なお、センサ装置ＳＵは、図１に破線で示すように、入力部６および表示部７をさらに備えても良い。入力部６は、制御処理部３に接続され、例えば、被監視者Ｏｂを監視する上で必要な各種データをセンサ装置ＳＵに入力する機器であり、例えば、所定の機能を割り付けられた複数の入力スイッチやマウス等である。表示部７は、制御処理部３に接続され、制御処理部３の制御に従って、入力部６から入力されたデータ等を表示する機器であり、例えばＣＲＴディスプレイ、ＬＣＤおよび有機ＥＬディスプレイ等の表示装置である。なお、入力部６および表示部７からタッチパネルが構成されてもよい。このタッチパネルを構成する場合において、入力部６は、例えば抵抗膜方式や静電容量方式等の操作位置を検出して入力する位置入力装置である。このタッチパネルでは、表示部７の表示面上に位置入力装置が設けられ、表示部７に入力可能な１または複数の入力内容の候補が表示され、ユーザが、入力したい入力内容を表示した表示位置を触れると、位置入力装置によってその位置が検出され、検出された位置に表示された表示内容がユーザの操作入力内容としてセンサ装置ＳＵに入力される。このような入力部６および表示部７が備えられている場合に、制御処理部３は、例えば、図３に示す設定領域および行動検知線を入力するための設定画面を表示部７に表示し、入力部６によって設定領域ＡＲおよび行動検知線ＡＬを受け付けても良い。この場合、前記設定画面には、カメラ１で取得した画像が表示される。ユーザは、例えば入力部６としてのマウス等のポインティングデバイスを用いて、あるいは、入力部６および表示部７で構成されるタッチパネルに対するタップ操作によって、前記設定画面に設定領域ＡＲの各頂点ＰＴ１〜ＰＴ４および行動検知線ＡＬの両端点ＰＴ２、ＰＴ３それぞれを入力する。設定領域ＡＲおよび行動検知線ＡＬを受け付けると、領域設定処理部３２は、この入力部６で受け付けた設定領域ＡＲ（４頂点ＰＴ１〜ＰＴ４）を記憶部５の設定領域記憶部５１に記憶し、行動検知線設定処理部３３は、この入力部６で受け付けた行動検知線ＡＬ（両端点ＰＴ２、ＰＴ３）を記憶部５の行動検知線記憶部５２に記憶する。このような場合、入力部６および行動検知線設定処理部３３は、行動検知線を外部から受け付けて前記記憶部に記憶する行動検知線受付部の他の一例に相当する。

位置関係演算部３４は、設定領域ＡＲに対するカメラ１の位置関係を求めるものである。本実施形態では、位置関係演算部３４は、行動検知線ＡＬを考慮して、設定領域ＡＲに対する前記カメラ１の位置関係を求める。より具体的には、例えば、図５に示すように、位置関係演算部３４は、画像中心ＣＰが設定領域ＡＲおよび行動検知線ＡＬに対してどの位置に存在するかによって前記カメラ１の位置関係を求め、この求めた前記カメラ１の位置関係を記憶部５に記憶する。図５に示すように、行動検知線ＡＬに沿う左右方向をＸ方向とし、これに直交する前後方向をＹ方向とすると、例えば、図５Ａに示すように、画像中心ＣＰが設定領域ＡＲより−Ｙ方向にあり（手前にあり）、かつ、行動検知線ＡＬと画像中心ＣＰとの間に設定領域ＡＲの境界が無く、かつ、行動検知線ＡＬとＹ方向のいずれかの位置で重なっている場合（すなわち、画像中心ＣＰのＸ座標値が行動検知線ＡＬにおける一方端ＰＴ２のＸ座標値から他方端ＰＴ３のＸ座標値までの範囲に含まれる場合）、位置関係演算部３４は、前記カメラ１の位置関係として手前ＰＯ２と演算する。また例えば、図５Ｂに示すように、画像中心ＣＰが設定領域ＡＲ内にある場合、位置関係演算部３４は、前記カメラ１の位置関係として直上ＰＯ１と演算する。また例えば、画像中心ＣＰが設定領域ＡＲより−Ｙ方向にあり（手前にあり）、かつ、行動検知線ＡＬと画像中心ＣＰとの間に設定領域ＡＲの境界が有り、かつ、行動検知線ＡＬとＹ方向のいずれかの位置で重なっている場合（すなわち、画像中心のＸ座標値が行動検知線ＡＬにおける一方端ＰＴ２のＸ座標値から他方端ＰＴ３のＸ座標値までの範囲に含まれる場合）、位置関係演算部３４は、前記カメラ１の位置関係として奥ＰＯ３と演算する。また例えば、画像中心ＣＰが設定領域ＡＲよりＸ方向または−Ｘ方向にあり（横にあり）、かつ、設定領域ＡＲとＸ方向のいずれかの位置で重なっている場合（すなわち、画像中心ＣＰのＹ座標値が設定領域ＡＲにおける最小のＹ座標値から最大のＹ座標値までの範囲に含まれる場合）、位置関係演算部３４は、前記カメラ１の位置関係として横ＰＯ４と演算する。また例えば、画像中心ＣＰが設定領域ＡＲより−Ｙ方向にあり（手前にあり）、かつ、行動検知線ＡＬと画像中心ＣＰとの間に設定領域ＡＲの境界が無く、かつ、行動検知線ＡＬとＹ方向のいずれの位置でも重なっていない場合（すなわち、画像中心ＣＰのＸ座標値が行動検知線ＡＬにおける一方端ＰＴ２のＸ座標値から他方端ＰＴ３のＸ座標値までの範囲に含まれない場合）、位置関係演算部３４は、前記カメラ１の位置関係として斜め前ＰＯ５と演算する。また例えば、画像中心ＣＰが設定領域ＡＲより−Ｙ方向にあり（手前にあり）、かつ、行動検知線ＡＬと画像中心ＣＰとの間に設定領域ＡＲの境界が有り、かつ、行動検知線ＡＬとＹ方向のいずれの位置でも重なっていない場合（すなわち、画像中心ＣＰのＸ座標値が行動検知線ＡＬにおける一方端ＰＴ２のＸ座標値から他方端ＰＴ３のＸ座標値までの範囲に含まれない場合）、位置関係演算部３４は、前記カメラ１の位置関係として斜め奥ＰＯ６と演算する。なお、図５Ａにおいて、上述では、行動検知線ＡＬが点ＰＴ２と点ＰＴ３と間の線分であるので、位置関係演算部３４は、前記カメラ１の位置関係として手前ＰＯ２と演算したが、仮に、行動検知線ＡＬが点ＰＴ３と点ＰＴ４との間の線分である場合には、位置関係演算部３４は、前記カメラ１の位置関係として横ＰＯ４と演算することになる。

なお、カメラ１が壁上方に配設される等によってカメラ１が斜め下向きにあおり角を持つ場合では、ユーザ入力や公知の常套手段による画像に基づく自動計算によって求めたあおり角に基づいて、カメラ１の配設位置を床面（画像上）に射影したカメラ１の直下位置が求められ、この求められた直下位置が上述の画像中心ＣＰとされ、上述と同様に、前記カメラ１の位置関係が演算される。

アルゴリズム選択部３５は、記憶部５の行動検知アルゴリズム記憶部５３に記憶された前記複数の行動検知アルゴリズムの中から位置関係演算部３４で求めた位置関係に基づいて行動検知アルゴリズムを選択し、この選択結果を行動検知処理部３６へ通知するものである。より具体的には、本実施形態では、アルゴリズム選択部３５は、位置関係演算部３４で求めた前記カメラ１の位置関係を判定し、この判定の結果、位置関係演算部３４で求めた前記カメラ１の位置関係が直上ＰＯ１である場合には、上述した直上用の行動検知アルゴリズムを選択し、前記判定の結果、位置関係演算部３４で求めた前記カメラ１の位置関係が手前ＰＯ２である場合には、上述した手前用の行動検知アルゴリズムを選択し、前記判定の結果、位置関係演算部３４で求めた前記カメラ１の位置関係が奥ＰＯ３である場合には、上述した奥用の行動検知アルゴリズムを選択し、前記判定の結果、位置関係演算部３４で求めた前記カメラ１の位置関係が横ＰＯ４である場合には、上述した横用の行動検知アルゴリズムを選択し、前記判定の結果、位置関係演算部３４で求めた前記カメラ１の位置関係が斜め前ＰＯ５である場合には、上述した斜め前用の行動検知アルゴリズムを選択し、前記判定の結果、位置関係演算部３４で求めた前記カメラ１の位置関係が斜め奥ＰＯ６である場合には、上述した斜め奥用の行動検知アルゴリズムを選択し、そして、この選択結果を行動検知処理部３６へ通知する。

行動検知処理部３６は、アルゴリズム選択部３５で選択した行動検知アルゴリズムでカメラ１で取得した画像に基づいて被監視者Ｏｂにおける所定の行動（本実施形態では起床の有無および離床の有無）を検知し、その検知結果を通知処理部３７へ通知するものである。

通知処理部３７は、行動検知処理部３６で検知した前記所定の行動（本実施形態では、起床および離床）を外部に通知するものである。より具体的には、通知処理部３７は、検知した前記所定の行動（状態、状況）を表す情報（検知行動情報（本実施形態では起床および離床のうちの１または複数を表す情報））、前記所定の行動が検知された被監視者Ｏｂを特定し識別するための識別子情報（前記被監視者Ｏｂを検知しているセンサ装置ＳＵを特定し識別するための識別子情報）、および、前記所定の行動の検知に用いられた画像等を収容した通信信号（監視情報通信信号）を生成し、通信ＩＦ部４で管理サーバ装置ＳＶへ送信する。

ストリーミング処理部３８は、ネットワークＮＷおよび通信ＩＦ部４を介して固定端末装置ＳＰまたは携帯端末装置ＴＡから動画の配信の要求があった場合に、この要求のあった固定端末装置ＳＰまたは携帯端末装置ＴＡへ、カメラ１で生成した動画（例えばライブの動画）をストリーミング再生で通信ＩＦ部４およびネットワークＮＷを介して配信するものである。

ナースコール処理部３９は、被監視者Ｏｂからナースコールを受け付ける図略のナースコール押しボタンスイッチでその入力操作を受け付けた場合に、通信ＩＦ部４およびネットワークＮＷを介して、固定端末装置ＳＰまたは携帯端末装置ＴＡとの間で音声通話を可能にするものである。

図１には、一例として、４個の第１ないし第４センサ装置ＳＵ−１〜ＳＵ−４が示されており、第１センサ装置ＳＵ−１は、被監視者Ｏｂの一人であるＡさんＯｂ−１の居室ＲＭ−１（不図示）に配設され、第２センサ装置ＳＵ−２は、被監視者Ｏｂの一人であるＢさんＯｂ−２の居室ＲＭ−２（不図示）に配設され、第３センサ装置ＳＵ−３は、被監視者Ｏｂの一人であるＣさんＯｂ−３の居室ＲＭ−３（不図示）に配設され、そして、第４センサ装置は、被監視者Ｏｂの一人であるＤさんＯｂ−４の居室ＲＭ−４（不図示）に配設されている。

次に、本実施形態の動作について説明する。図１５は、前記センサ装置の動作を示すメインルーチンのフローチャートである。図１６は、図１５に示すメインルーチンで用いられる行動検知の動作を示すサブルーチンのフローチャートである。

このような構成の被監視者監視システムＭＳでは、各装置ＳＵ、ＳＶ、ＳＰ、ＴＡは、電源が投入されると、必要な各部の初期化を実行し、その稼働を始める。また、センサ装置ＳＵでは、その制御処理プログラムの実行によって、制御処理部３には、制御部３１、領域設定処理部３２、行動検知線設定処理部３３、位置関係演算部３４、アルゴリズム選択部３５、行動検知処理部３６、通知処理部３７、ストリーミング処理部３８およびナースコール処理部３９が機能的に構成される。

図１５において、まず、制御処理部３は、領域設定処理部３２によって設定領域ＡＲが設定され（Ｓ４１）、行動検知線設定処理部３３によって行動検知線ＡＬが設定される（Ｓ４２）。より具体的には、上述したように、本実施形態では、固定端末装置ＳＰまたは携帯端末装置ＴＡから前記設定要求通信信号を通信ＩＦ部４で受信すると、制御処理部３は、前記設定画像通信信号を通信ＩＦ部４で返信する。固定端末装置ＳＰまたは携帯端末装置ＴＡは、例えば図３に示す前記設定画面を表示し、ユーザ（監視者および被監視者等）は、前記設定画面に設定領域ＡＲおよび行動検知線ＡＬそれぞれを入力する。設定領域ＡＲおよび行動検知線ＡＬを受け付けると、固定端末装置ＳＰまたは携帯端末装置ＴＡは、前記設定情報通信信号をセンサ装置ＳＵへ送信する。この設定情報通信信号を通信ＩＦ部４で受信すると、領域設定処理部３２は、この受信した設定情報通信信号に収容された設定領域ＡＲを取り出して記憶部５の設定領域記憶部５１に記憶することで設定領域ＡＲをセンサ装置ＳＵに設定し、行動検知線設定処理部３３は、この受信した設定情報通信信号に収容された行動検知線ＡＬを取り出して記憶部５の行動検知線記憶部５２に記憶することで行動検知線ＡＬをセンサ装置ＳＵに設定する。

次に、制御処理部３は、位置関係演算部３４によって設定領域ＡＲに対するカメラ１の位置関係を求め、この求めた前記カメラ１の位置関係を記憶部５に記憶する（Ｓ４３）。より具体的には、上述したように、本実施形態では、位置関係演算部３４は、画像中心ＣＰが設定領域ＡＲおよび行動検知線ＡＬに対してどの位置に存在するかによって前記カメラ１の位置関係を求める。

次に、制御処理部３は、カメラ１によって被監視者Ｏｂを被監視者Ｏｂの上方から撮像した画像を取得する。これによって１フレーム分の前記画像が取得され、センサ装置ＳＵに入力される（Ｓ４４）。

次に、制御処理部３は、行動検知処理部３６によって、処理Ｓ４４で取得した前記画像に基づいて被監視者Ｏｂにおける所定の行動を検知する後述の行動検知処理を実行し（Ｓ４５）、次のフレームの画像に対し、この行動検知処理を実行するべく、処理を処理Ｓ４４へ戻す。すなわち、制御処理部３は、処理Ｓ４４および処理Ｓ４５を繰り返し実行することで、１フレームごとに行動検知処理を実行する。

次に、行動検知処理Ｓ４５についてさらに説明する。この行動検知処理Ｓ４５では、図１６において、まず、制御処理部３は、アルゴリズム選択部３５によって、記憶部５の行動検知アルゴリズム記憶部５３に記憶された前記複数の行動検知アルゴリズムの中から位置関係演算部３４で求めた位置関係に基づいて行動検知アルゴリズムを選択する（Ｓ５１）。より具体的には、アルゴリズム選択部３５は、記憶部５の記憶内容を参照することで、位置関係演算部３４で求めた前記カメラ１の位置関係を判定する。

この判定の結果、処理Ｓ４３によって位置関係演算部３４で求めた前記カメラ１の位置関係が直上ＰＯ１である場合（直上）には、アルゴリズム選択部３５は、上述した直上用の行動検知アルゴリズムを選択し、この選択結果を行動検知処理部３６へ通知する。この通知を受けた行動検知処理部３６は、処理Ｓ５２−１を実行する。この処理Ｓ５２−１では、行動検知処理部３６は、アルゴリズム選択部３５で選択した直上用の行動検知アルゴリズムでカメラ１で取得した画像に基づいて被監視者Ｏｂにおける所定の行動（本実施形態では起床の有無および離床の有無）を検知し、その検知結果を通知処理部３７へ通知し、この行動検知処理Ｓ４５を終了する。すなわち、行動検知処理部３６は、直上用としての図６ないし図８に示す上述のフローチャートに従った各処理（Ｘｎ＝直上）で前記画像に基づいて被監視者Ｏｂにおける起床の有無および離床の有無を判定し、起床または離床を判定すると、これを検知結果として通知処理部３７へ通知し、この行動検知処理Ｓ４５を終了する。

処理Ｓ５１における前記判定の結果、処理Ｓ４３によって位置関係演算部３４で求めた前記カメラ１の位置関係が手前ＰＯ２である場合（手前）には、アルゴリズム選択部３５は、上述した手前用の行動検知アルゴリズムを選択し、この選択結果を行動検知処理部３６へ通知する。この通知を受けた行動検知処理部３６は、処理Ｓ５２−２を実行する。この処理Ｓ５２−２では、行動検知処理部３６は、アルゴリズム選択部３５で選択した手前用の行動検知アルゴリズム（すなわち、手前用としての図６ないし図８に示す上述のフローチャートに従った各処理（Ｘｎ＝手前））でカメラ１で取得した画像に基づいて被監視者Ｏｂにおける所定の行動（本実施形態では起床の有無および離床の有無）を検知し、その検知結果を通知処理部３７へ通知し、この行動検知処理Ｓ４５を終了する。

処理Ｓ５１における前記判定の結果、処理Ｓ４３によって位置関係演算部３４で求めた前記カメラ１の位置関係が横ＰＯ４である場合（横）には、アルゴリズム選択部３５は、上述した横用の行動検知アルゴリズムを選択し、この選択結果を行動検知処理部３６へ通知する。この通知を受けた行動検知処理部３６は、処理Ｓ５２−３を実行する。この処理Ｓ５２−３では、行動検知処理部３６は、アルゴリズム選択部３５で選択した横用の行動検知アルゴリズム（すなわち、横用としての図６ないし図８に示す上述のフローチャートに従った各処理（Ｘｎ＝横））でカメラ１で取得した画像に基づいて被監視者Ｏｂにおける所定の行動（本実施形態では起床の有無および離床の有無）を検知し、その検知結果を通知処理部３７へ通知し、この行動検知処理Ｓ４５を終了する。

処理Ｓ５１における前記判定の結果、処理Ｓ４３によって位置関係演算部３４で求めた前記カメラ１の位置関係が奥ＰＯ３である場合（奥）には、アルゴリズム選択部３５は、上述した奥用の行動検知アルゴリズムを選択し、この選択結果を行動検知処理部３６へ通知する。この通知を受けた行動検知処理部３６は、処理Ｓ５２−４を実行する。この処理Ｓ５２−４では、行動検知処理部３６は、アルゴリズム選択部３５で選択した奥用の行動検知アルゴリズム（すなわち、奥用としての図６ないし図８に示す上述のフローチャートに従った各処理（Ｘｎ＝奥））でカメラ１で取得した画像に基づいて被監視者Ｏｂにおける所定の行動（本実施形態では起床の有無および離床の有無）を検知し、その検知結果を通知処理部３７へ通知し、この行動検知処理Ｓ４５を終了する。

処理Ｓ５１における前記判定の結果、処理Ｓ４３によって位置関係演算部３４で求めた前記カメラ１の位置関係が斜め前ＰＯ５である場合（斜め前）には、アルゴリズム選択部３５は、上述した斜め前用の行動検知アルゴリズムを選択し、この選択結果を行動検知処理部３６へ通知する。この通知を受けた行動検知処理部３６は、処理Ｓ５２−５を実行する。この処理Ｓ５２−５では、行動検知処理部３６は、アルゴリズム選択部３５で選択した斜め前用の行動検知アルゴリズム（すなわち、斜め前用としての図６ないし図８に示す上述のフローチャートに従った各処理（Ｘｎ＝斜め前））でカメラ１で取得した画像に基づいて被監視者Ｏｂにおける所定の行動（本実施形態では起床の有無および離床の有無）を検知し、その検知結果を通知処理部３７へ通知し、この行動検知処理Ｓ４５を終了する。

処理Ｓ５１における前記判定の結果、処理Ｓ４３によって位置関係演算部３４で求めた前記カメラ１の位置関係が斜め奥ＰＯ６である場合（斜め奥）には、アルゴリズム選択部３５は、上述した斜め奥用の行動検知アルゴリズムを選択し、この選択結果を行動検知処理部３６へ通知する。この通知を受けた行動検知処理部３６は、処理Ｓ５２−６を実行する。この処理Ｓ５２−６では、行動検知処理部３６は、アルゴリズム選択部３５で選択した斜め奥用の行動検知アルゴリズム（すなわち、斜め奥用としての図６ないし図８に示す上述のフローチャートに従った各処理（Ｘｎ＝斜め奥））でカメラ１で取得した画像に基づいて被監視者Ｏｂにおける所定の行動（本実施形態では起床の有無および離床の有無）を検知し、その検知結果を通知処理部３７へ通知し、この行動検知処理Ｓ４５を終了する。

そして、上述の図７に示す処理Ｓ２３ｎによる起床の通知または上述の図８に示す処理Ｓ３３ｎによる離床の通知を受けると、通知処理部３７は、被監視者Ｏｂの状態として判定された判定結果を表す判定結果情報（本実施形態では、起床および離床）や被監視者Ｏｂの静止画の画像データ等の監視情報を収容した通信信号（監視情報通信信号）をネットワークＮＷを介して管理サーバ装置ＳＶへ送信する。

管理サーバ装置ＳＶは、前記監視情報通信信号をネットワークＮＷを介してセンサ装置ＳＵから受信すると、この監視情報通信信号に収容された判定結果情報や静止画の画像データ等の監視情報をその記憶部に記憶（記録）する。そして、管理サーバ装置ＳＶは、これら判定結果情報や静止画の画像データ等の監視情報を収容した監視情報通信信号を端末装置（本実施形態では固定端末装置ＳＰおよび携帯端末装置ＴＡ）へ送信する。これによって被監視者Ｏｂの状態（状況）が端末装置ＳＰ、ＴＡを介して例えば看護師や介護士等の監視者に報知される。

固定端末装置ＳＰおよび携帯端末装置ＴＡは、前記監視情報通信信号をネットワークＮＷを介して管理サーバ装置ＳＶから受信すると、この監視情報通信信号に収容された前記監視情報を表示する。このような動作によって、被監視者監視システムＭＳは、各センサ装置ＳＵ、管理サーバ装置ＳＶ、固定端末装置ＳＰおよび携帯端末装置ＴＡによって、各被監視者Ｏｂを検知して各被監視者Ｏｂを監視している。

以上説明したように、被監視者監視装置の一例である被監視者監視システムＭＳならびに行動検知装置、行動検知方法および行動検知プログラムを用いたその一例のセンサ装置ＳＵは、複数の行動検知アルゴリズムの中から、設定領域ＡＲに対するカメラ１の位置関係に応じた行動検知アルゴリズムを選択し、この選択した行動検知アルゴリズムで被監視者Ｏｂにおける所定の行動（本実施形態では起床および離床）を検知するので、カメラ１が配設される配設位置にかかわらず、被監視者Ｏｂにおける前記所定の行動をより高精度に検知できる。また、カメラ１が配設され、行動検知の開始後に、寝具ＢＴの位置が変更されると、寝具ＢＴに対するカメラ１の位置関係が変わってしまうが、上記被監視者監視システムＭＳおよびセンサ装置ＳＵは、記憶部５に記憶された設定領域ＡＲを変更後の寝具ＢＴの領域に変更することで、このような寝具ＢＴの位置の変更による前記カメラ１の位置関係の変更にも対処できる。したがって、上記被監視者監視システムＭＳおよびセンサ装置ＳＵは、寝具ＢＴの位置にかかわらず、被監視者Ｏｂにおける前記所定の行動をより高精度に検知できる。

上記被監視者監視システムＭＳおよびセンサ装置ＳＵは、前記カメラ１の位置関係として直上ＰＯ１、手前ＰＯ２、奥ＰＯ３、横ＰＯ４、斜め前ＰＯ５および斜め奥ＰＯ６のいずれであるかを求める位置関係演算部３４を備えるので、カメラ１が直上、手前、奥、横、斜め前および斜め奥のいずれかに配設される場合に対処でき、これらの場合に、被監視者Ｏｂにおける前記所定の行動をより高精度に検知できる。

上記被監視者監視システムＭＳおよびセンサ装置ＳＵは、図９を用いて上述した直上用の行動検知アルゴリズムを含むので、前記カメラ１の位置関係が直上ＰＯ１である場合に、画像上における設定領域ＡＲ外の被監視者Ｏｂの第１面積Ｓ１および前記画像上における設定領域ＡＲと被監視者Ｏｂとが重なった第２面積Ｓ２を求めるという比較的簡易な画像処理で被監視者Ｏｂにおける起床の有無および離床の有無を判定できる。

上記被監視者監視システムＭＳおよびセンサ装置ＳＵは、図１０を用いて上述した手前用の行動検知アルゴリズムを含むので、前記カメラ１の位置関係が手前ＰＯ２である場合に、画像上における行動検知線ＡＬと被監視者Ｏｂの足先位置ＦＰとの距離Ｗａを求めるという比較的簡易な画像処理で被監視者Ｏｂにおける起床の有無および離床の有無を判定できる。

上記被監視者監視システムＭＳおよびセンサ装置ＳＵは、図１１を用いて上述した横用の行動検知アルゴリズムを含むので、前記カメラ１の位置関係が横ＰＯ４である場合に、画像上において、設定領域ＡＲの横の方向に沿ってカメラ１に最も近い位置に位置する第１境界線ＢＬ１と設定領域ＡＲの前記横の方向に沿ってカメラ１に最も遠い位置に位置する第２境界線ＢＬ２との間での設定領域ＡＲと被監視者Ｏｂとが重なった第３面積Ｓ３を求めるという比較的簡易な画像処理で被監視者Ｏｂにおける起床の有無および離床の有無を判定できる。

上記被監視者監視システムＭＳおよびセンサ装置ＳＵは、図１２を用いて上述した奥用の行動検知アルゴリズムを含むので、前記カメラ１の位置関係が奥ＰＯ３である場合に、前記第２面積Ｓ２を求めるという比較的簡易な画像処理で被監視者Ｏｂにおける起床の有無および離床の有無を判定できる。

上記被監視者監視システムＭＳおよびセンサ装置ＳＵは、図１３を用いて上述した斜め前用の行動検知アルゴリズムを含むので、前記カメラ１の位置関係が斜め前ＰＯ５である場合に、前記距離Ｗａおよび前記第３面積Ｓ３を求めるという比較的簡易な画像処理で被監視者Ｏｂにおける起床の有無および離床の有無を判定できる。

記被監視者監視システムＭＳおよびセンサ装置ＳＵは、図１４を用いて上述した斜め奥用の行動検知アルゴリズムを含むので、前記カメラ１の位置関係が斜め奥ＰＯ６である場合に、前記第３面積Ｓ３を求めるという比較的簡易な画像処理で被監視者Ｏｂにおける起床の有無および離床の有無を判定できる。

上記被監視者監視システムＭＳおよびセンサ装置ＳＵは、行動検知線ＡＬを外部から受け付けて記憶部５に記憶する前記行動検知線受付部の一例として、通信ＩＦ部４および行動検知線設定処理部３３を備えるので、行動検知線ＡＬを簡易に入力して設定できる。

なお、上述の実施形態では、位置関係演算部３４にて、画像中心ＣＰが設定領域ＡＲおよび行動検知線ＡＬに対してどの位置に存在するかによって前記カメラ１の位置関係が求められているが、図３に示すカメラ１で取得した画像に画像中心ＣＰも一緒に表示部７に表示され、ユーザーの入力部６の操作によって設定領域および行動検知線の入力が受け付けられ、画像中心ＣＰと設定領域ＡＲおよび行動検知線ＡＬの位置関係とされても良い。

また、上述の実施形態では、アルゴリズム選択部３５は、行動検知処理Ｓ４５の処理Ｓ５１で、複数の行動検知アルゴリズムの中から位置関係演算部３４で求めた前記カメラ１の位置関係に基づく行動検知アルゴリズムを選択したが、位置関係演算部３４によって前記カメラ１の位置関係を求めた後の他のタイミングで行動検知アルゴリズムを選択しても良い。例えば、アルゴリズム選択部３５は、上述の処理Ｓ４３で位置関係演算部３４が前記カメラ１の位置関係を求めた直後に、行動検知アルゴリズムを選択しても良い。

また、上述の実施形態において、アルゴリズム選択部３５は、所定期間ごとに、複数の行動検知アルゴリズムの中から位置関係演算部３４で求めた前記カメラ１の位置関係に基づく行動検知アルゴリズムを選択して良く、また、ユーザから行動検知アルゴリズムの選択処理の要求を受け付けた場合に、割り込み処理で、アルゴリズム選択部３５は、所定期間ごとに、複数の行動検知アルゴリズムの中から位置関係演算部３４で求めた前記カメラ１の位置関係に基づく行動検知アルゴリズムを選択して良い。特に、ユーザによる設定領域ＡＲの設定や行動検知線ＡＬの設定後に、前記ユーザによる割り込み処理で、アルゴリズム選択部３５は、行動検知アルゴリズムを選択することが好ましい。これによれば、センサ装置ＳＵの再配置や寝具ＢＴの再配置に適切に対処でき、被監視者Ｏｂにおける前記所定の行動をより高精度に検知できる。

また、上述の実施形態では、被監視者Ｏｂにおける所定の行動は、その一例として起床および離床であるが、これに限定されるものではない。被監視者Ｏｂにおける所定の行動は、前記被監視者の上方から撮像した画像に基づいて検知できる行動であれば、他の行動であっても良い。例えば、被監視者Ｏｂにおける所定の行動は、寝返り等によるはみ出しであっても良い。前記はみ出しは、人体領域から例えば頭部のパターンや腕のパターンを用いたパターンマッチングによって抽出された頭部や腕に基づいて検知できる。例えば前記カメラ１の位置関係が直上では、就寝中の頭部や腕の位置をベッド境界付近に設けた境界線を越えた部位面積を用いた行動検知アルゴリズムで検知でき、また例えば前記カメラ１の位置関係が手前では、ベッド高さに相当する境界線を越えた部位長さを用いた行動検知アルゴリズムで検知できる。前記転落は、人体領域から例えば頭部のパターンや体幹のパターンを用いたパターンマッチングによって抽出された頭部や体幹に基づいて検知できる。例えば前記カメラ１の位置関係が直上ＰＯ１では、起床や離床に伴う頭部の大きさや体幹の大きさにおける相違を用いた直上用の行動検知アルゴリズムで検知でき、また例えば前記カメラ１の位置関係が手前ＰＯ２では、起床や離床に伴う頭部の上下の移動量や体幹の上下の移動量における相違を用いた手前用の行動検知アルゴリズムで検知でき、また例えば前記カメラ１の位置関係が奥ＰＯ３では、起床や離床に伴う行動検知線ＡＬ上に見えている頭部の面積や体幹の面積における相違を用いた奥用の行動検知アルゴリズムで検知でき、また例えば前記カメラ１の位置関係が横ＰＯ４では、起床や離床に伴う頭部の左右および上下の各移動量や体幹の左右および上下の各移動量における相違を用いた横用の行動検知アルゴリズムで検知でき、また例えば前記カメラ１の位置関係が斜め前ＰＯ５では、上述の手前用と横用の各行動検知アルゴリズムを用いて検知でき、また例えば前記カメラ１の位置関係が斜め奥ＰＯ６では、上述の奥用と横用の各行動検知アルゴリズムを用いて検知できる。

また、上述の実施形態では、Ｘｎ用の起床判定条件およびＸｎ用の離床判定条件は、前記第１面積Ｓ１、前記第２面積Ｓ２、前記第３面積Ｓ３および前記距離Ｗａのうちの１または複数に対し閾値Ｔｈとの比較であったが、これに限定されるものではない。Ｘｎ用の起床判定条件およびＸｎ用の離床判定条件は、前記被監視者の上方から撮像した画像に基づいて判定できる条件であれば、他の条件であっても良い。例えば、Ｘｎ用の起床判定条件およびＸｎ用の離床判定条件は、前記第１面積Ｓ１と前記第２面積Ｓ２との比に対し所定の閾値Ｔｈとの比較であって良い。前記閾値Ｔｈは、例えば、上述と同様に、複数のサンプルを統計的に処理して経験的に予め設定される。また例えば、Ｘｎ用の起床判定条件およびＸｎ用の離床判定条件は、行動検知線ＡＬを跨ぐ動作の有無であっても良い。例えば、前記カメラ１の位置関係が直上ＰＯ１や手前ＰＯ２では、人体領域が行動検知線ＡＬを初めて跨ぐ動作の検出によって起床が判定され、人体領域全体が行動検知線ＡＬを跨ぐ動作の検出によって離床が判定され、前記カメラ１の位置関係が奥ＰＯ３では、人体領域が行動検知線ＡＬを初めて跨ぐ動作の検出によって起床が判定され、人体領域の半分が行動検知線ＡＬを跨ぐ動作の検出によって離床が判定される。

また、上述の実施形態では、設定領域ＡＲは、ユーザによって設定されたが、自動設定されてもよい。これによれば、設定領域ＡＲを自動設定できる。例えば、カメラ１で取得された画像からエッジフィルタを用いてエッジを抽出することで、寝具ＢＴの領域が検出され、この検出された寝具ＢＴの領域が設定領域ＡＲとして自動設定される。また例えば、カメラ１で取得された画像から寝具ＢＴのパターンを用いたパターンマッチングによって、寝具ＢＴの領域が検出され、この検出された寝具ＢＴの領域が設定領域ＡＲとして自動設定される。また例えば、３Ｄセンサ、ベッドの脚に取り付けた位置センサおよび寝具ＢＴの下に敷かれる圧力センサを持つカーペット等のセンサを用いることで、寝具ＢＴの領域が検出され、この検出された寝具ＢＴの領域が設定領域ＡＲとして自動設定される。

また、上述の実施形態では、センサ装置ＳＵは、前記行動検知線受付部の他の一例として、通信ＩＦ部４および行動検知線設定処理部３３を備えたが、センサ装置ＳＵは、制御処理部３に機能的に、カメラ１で取得した画像に基づいて行動検知線ＡＬを求め、この求めた行動検知線ＡＬを記憶部５の行動検知線記憶部５２に記憶する行動検知線演算部をさらに備えても良い。これによれば、前記行動検知線演算部をさらに備えるので、行動検知線ＡＬを自動設定できる。例えば、カメラ１で取得された画像からエッジの抽出やパターンマッチングによって、寝具ＢＴの領域が検出され、この検出された寝具ＢＴの長辺が行動検知線ＡＬとして自動設定される。また例えば、上述と同様に、寝具ＢＴの領域が検出され、前記画像取得部の一例であるカメラ１は、互いに異なる時刻に撮像した複数の画像を取得し、これら複数の画像から動体領域が人体領域として検出され、この検出された人体領域が前記寝具ＢＴの領域から外部に出る頻度が各辺ごとに求められ、所定期間（設定期間）で最も頻度の高い辺が行動検知線ＡＬとして自動設定される。

また、上述の実施形態では、行動検知線ＡＬは、１個であったが、複数であっても良い。この場合、各行動検知線ＡＬごとに前記カメラ１の位置関係が演算され、各行動検知線ＡＬごとに、前記演算された前記カメラ１の位置関係に基づく行動検知アルゴリズムで被監視者Ｏｂにおける所定の行動が検知される。

また、上述の実施形態では、位置関係演算部３４は、前記カメラ１の位置関係として、６個の直上ＰＯ１、手前ＰＯ２、奥ＰＯ３、横ＰＯ４、斜め前ＰＯ５および斜め奥ＰＯ６の基本位置関係のいずれかに演算し、アルゴリズム選択部３５は、この位置関係演算部３４で求めた前記カメラ１の位置関係に対応した、直上用、手前用、奥用、横用、斜め前用および斜め奥用のいずれかの行動検知アルゴリズムを選択したが、カメラ１の位置に応じて徐々に行動検知アルゴリズムを切り換えても良い。この場合では、例えば、上述の実施形態において、位置関係演算部３４は、設定領域ＡＲに対する、画像を撮像したカメラ１の位置関係を互いに異なる複数の基本位置関係に分類した場合において、前記複数の基本位置関係それぞれの重みを設定領域ＡＲに対する前記カメラ１の位置に基づいて求めることで、設定領域ＡＲに対する前記画像を撮像したカメラ１の位置関係を求め、前記複数の行動検知アルゴリズムは、画像に基づいて被監視者Ｏｂにおける所定の行動を検知するための所定の評価値を前記複数の基本位置関係に応じて複数求め、前記求めた複数の評価値に前記複数の基本位置関係それぞれの重みで重み付けし、前記重み付けした結果と所定の閾値との比較結果に基づいて被監視者Ｏｂにおける前記所定の行動を検知するアルゴリズムを重み付け行動検知アルゴリズムとして含み、アルゴリズム選択部３５は、前記複数の行動検知アルゴリズムの中から位置関係演算部３４で求めた位置関係に基づいて前記重み付け行動検知アルゴリズムを選択し、行動検知処理部３６は、位置関係演算部３４で求めた前記複数の基本位置関係それぞれの重みを用いてアルゴリズム選択部３５で選択した重み付け行動検知アルゴリズムで前記画像に基づいて被監視者Ｏｂにおける前記所定の行動を検知する。これによれば、設定領域ＡＲに対する前記カメラ１の位置関係を１個の基本位置関係で表すのではなく、複数の基本位置関係それぞれの重みで表し、前記複数の基本位置関係に応じた複数の評価値を前記複数の基本位置関係それぞれの重みで重み付けし、前記重み付けした結果に基づいて被監視者Ｏｂにおける所定の行動を検知するので、１個の基本位置関係に応じた行動検知アルゴリズムで被監視者Ｏｂにおける前記所定の行動を検知する場合に較べて、より高精度に被監視者Ｏｂにおける前記所定の行動を検知できる。

図１７は、前記カメラの位置関係が複数の基本位置関係それぞれの重みで表された場合の前記重みの演算手法を説明するための図である。図１７Ａは、設定領域ＡＲおよび画像中心ＣＰを示し、図１７Ｂは、図１７Ａに示す設定領域ＡＲを２倍に拡大した拡大設定領域ＡＲＥおよび画像中心ＣＰを示す。より具体的には、前記基本位置関係は、例えば、上述の直上ＰＯ１、手前ＰＯ２、奥ＰＯ３、横ＰＯ４、斜め前ＰＯ５および斜め奥ＰＯ６であり、前記所定の評価値は、例えば、上述の第１面積Ｓ１、第２面積Ｓ２、第３面積Ｓ３および距離Ｗａである。そして、位置関係演算部３４は、図１７に示すように、設定領域ＡＲをその対角線（図１７Ｂに破線で示す）の交点を中心に設定領域を２倍に拡大することで、水平幅Ｗで垂直幅Ｈである拡大設定領域ＡＲＥを求める。次に、位置関係演算部３４は、画像中心ＣＰから拡大設定領域ＡＲＥに最も近い距離ｐを求める。図１７に示す例では、画像中心ＣＰが設定領域ＡＲ内における平面視にて右下寄りでかつ設定領域ＡＲが横長であるため、行動検知線ＡＬが設定領域ＡＲの下辺と判定され、画像中心ＣＰと拡大設定領域ＡＲＥとの最短距離ｐは、拡大設定領域ＡＲＥの下辺までの距離となっている。そして、位置関係演算部３４は、画像中心ＣＰが設定領域ＡＲ、拡大設定領域ＡＲＥおよび行動検知線ＡＬに対してどの位置に存在するかによって基本位置関係を求め、この求めた基本位置関係の重みを求める。図１７に示す例では、画像中心ＣＰが設定領域ＡＲ内にあり、行動検知線ＡＬおよび画像中心からの距離ｐが最短となる拡大設定領域ＡＲＥの辺の両方が画像中心ＣＰより下側にあるので、直上ＰＯ１および手前ＰＯ２の２個の基本位置関係が演算され、直上ＰＯ１の重みがｐとされ、手前ＰＯ２の重みがＨ／２−ｐとされる。上述した直上用の起床判定条件は、第１面積Ｓ１と第１閾値Ｔｈ１との比較であり、上述した手前用の起床判定条件は、距離Ｗａと第３閾値Ｔｈ３との比較であるので、重み付け行動検知アルゴリズムにおける起床判定条件は、Ｖ１＝（（Ｗａ−Ｔｈ３）×（Ｈ／２−ｐ）＋（Ｓ１−Ｔｈ１）×ｐ）×（Ｈ／２）と第１５閾値Ｔｈ１５との比較となる。例えば第１５閾値Ｔｈ１５は、０とされ、行動検知処理部３６は、重み付けした結果Ｖ１が０以上である場合（Ｖ１≧０）には、被監視者Ｏｂが起床したと判定し、重み付けした結果Ｖ１が０未満である場合（Ｖ１＜０）には、被監視者Ｏｂが起床前と判定する。また、上述した直上用の離床判定条件は、第２面積Ｓ２と第２閾値Ｔｈ２との比較であり、上述した手前用の離床判定条件は、距離Ｗａと第４閾値Ｔｈ４との比較であるので、重み付け行動検知アルゴリズムにおける離床判定条件は、Ｖ２＝（（Ｗａ−Ｔｈ４）×（Ｈ／２−ｐ）＋（Ｓ２−Ｔｈ１）×ｐ）×（Ｈ／２）と第１６閾値Ｔｈ１６との比較となる。例えば第１６閾値Ｔｈ１６は、０とされ、行動検知処理部３６は、重み付けした結果Ｖ２が０以上である場合（Ｖ２≧０）には、被監視者Ｏｂが離床したと判定し、重み付けした結果Ｖ２が０未満である場合（Ｖ２＜０）には、被監視者Ｏｂが離床前と判定する。

また、この場合において、拡大設定領域ＡＲＥの外側に画像中心ＣＰがある場合は、十分に斜めからのカメラ１による撮像であるので、上述した横用の行動検知アルゴリズムや斜め奥用の行動検知アルゴリズム等がそのまま用いることができる。

そして、上述では、基本位置関係は、２個が選択されて重み付けされたが、３個以上が選択されて重み付けされても良い。

また、上述の実施形態では、センサ装置ＳＵが前記行動検知部および前記通知部を備えたが、前記行動検知部および前記通知部は、管理サーバ装置ＳＶに備えられても良く、また、固定端末装置ＳＰに備えられても良く、また、携帯端末装置ＴＡに備えられても良い。このような場合、センサ装置ＳＵからネットワークＮＷを介して被監視者Ｏｂの上方から撮像した画像およびドップラ信号を収容した通信信号を受信して取得する通信インターフェース等が、画像取得部の一例に相当することになる。

本明細書は、上記のように様々な態様の技術を開示しているが、そのうち主な技術を以下に纏める。

一態様にかかる行動検知装置は、監視対象である被監視者を、前記被監視者の上方から撮像した画像を取得する画像取得部と、前記画像中における所定の領域を設定領域として記憶し、前記画像に基づいて前記被監視者における所定の行動を検知するための互いに異なる複数の行動検知アルゴリズムを記憶する記憶部と、前記複数の行動検知アルゴリズムの中から、前記画像を撮像したカメラと前記設定領域との位置関係に基づいて行動検知アルゴリズムを選択するアルゴリズム選択部と、前記アルゴリズム選択部で選択した行動検知アルゴリズムで前記画像に基づいて前記被監視者における所定の行動を検知する行動検知処理部とを備える。好ましくは、上述の行動検知装置において、前記設定領域は、例えばベッド等の寝具の領域（寝具領域）である。好ましくは、上述の行動検知装置において、前記画像の中心が前記設定領域に対してどの位置に存在するかによって、前記画像を撮像したカメラと前記設定領域の前記位置関係を求める位置関係演算部をさらに備える。

このような行動検知装置は、複数の行動検知アルゴリズムの中から、カメラと設定領域との位置関係に応じた行動検知アルゴリズムを選択し、この選択した行動検知アルゴリズムで被監視者における所定の行動を検知するので、カメラが配設される配設位置にかかわらず、被監視者における所定の行動をより高精度に検知できる。また、カメラが配設され、行動検知の開始後に、寝具の位置が変更されると、前記寝具に対するカメラの位置関係が変わってしまうが、上記行動検知装置は、記憶部に記憶された前記設定領域を変更後の前記寝具の領域に変更することで、このような寝具の位置の変更による前記カメラの位置関係の変更にも対処できる。したがって、上記行動検知装置は、寝具の位置にかかわらず、被監視者における所定の行動をより高精度に検知できる。

他の一態様では、これら上述の行動検知装置において、前記位置関係は、前記カメラが前記設定領域の直上に位置する直上、前記カメラが前記設定領域の手前上方に位置する手前、前記カメラが前記設定領域の奥上方に位置する奥、前記カメラが前記設定領域の横上方に位置する横、前記カメラが前記設定領域の斜め前上方に位置する斜め前、および、前記カメラが前記設定領域の斜め奥上方に位置する斜め奥のうちのいずれかである。

このような行動検知装置は、カメラが直上、手前、奥、横、斜め前および斜め奥のいずれかに配設される場合に対処でき、これらの場合に、被監視者における所定の行動をより高精度に検知できる。

他の一態様では、これら上述の行動検知装置において、前記記憶部は、前記被監視者における所定の行動を検知するために前記複数の行動検知アルゴリズムのうちの少なくとも１つに用いられる、前記画像中における所定の線を行動検知線としてさらに記憶し、前記位置関係演算部は、前記行動検知線を考慮して、前記画像を撮像したカメラと前記設定領域との位置関係を求める。

これによれば、前記行動検知線を考慮して前記カメラの位置関係を求める行動検知装置を提供できる。

他の一態様では、これら上述の行動検知装置において、前記複数の行動検知アルゴリズムは、前記位置関係が直上である場合に用いられる直上用の行動検知アルゴリズムを含み、前記直上用の行動検知アルゴリズムは、前記画像上における前記設定領域外の前記被監視者の第１面積、および、前記画像上における前記設定領域と前記被監視者とが重なった第２面積に基づいて前記被監視者における所定の行動を検知するアルゴリズムである。

このような行動検知装置は、画像上における設定領域外の被監視者の第１面積および前記画像上における設定領域と被監視者とが重なった第２面積を求めるという比較的簡易な画像処理で前記被監視者における所定の行動を検知できる。

他の一態様では、これら上述の行動検知装置において、前記記憶部は、前記被監視者における所定の行動を検知するために前記複数の行動検知アルゴリズムのうちの少なくとも１つに用いられる、前記画像中における所定の線を行動検知線としてさらに記憶し、前記複数の行動検知アルゴリズムは、前記位置関係が手前である場合に用いられる手前用の行動検知アルゴリズムを含み、前記手前用の行動検知アルゴリズムは、前記画像上における前記行動検知線と前記被監視者の足先位置との距離に基づいて前記被監視者における所定の行動を検知するアルゴリズムである。

このような行動検知装置は、画像上における行動検知線と被監視者の足先位置との距離を求めるという比較的簡易な画像処理で前記被監視者における所定の行動を検知できる。

他の一態様では、これら上述の行動検知装置において、前記複数の行動検知アルゴリズムは、前記位置関係が横である場合に用いられる横用の行動検知アルゴリズムを含み、前記横用の行動検知アルゴリズムは、前記画像上において、前記設定領域の前記横の方向に沿って前記カメラに最も近い位置に位置する第１境界線と前記設定領域の前記横の方向に沿って前記カメラに最も遠い位置に位置する第２境界線との間での前記設定領域と前記被監視者とが重なった第３面積に基づいて前記被監視者における所定の行動を検知するアルゴリズムである。

このような行動検知装置は、画像上において、設定領域の横の方向に沿ってカメラに最も近い位置に位置する第１境界線と前記設定領域の前記横の方向に沿って前記カメラに最も遠い位置に位置する第２境界線との間での前記設定領域と被監視者とが重なった第３面積を求めるという比較的簡易な画像処理で前記被監視者における所定の行動を検知できる。

他の一態様では、これら上述の行動検知装置において、前記複数の行動検知アルゴリズムは、前記位置関係が奥である場合に用いられる奥用の行動検知アルゴリズムを含み、前記奥用の行動検知アルゴリズムは、前記画像上における前記設定領域と前記被監視者とが重なった第２面積に基づいて前記被監視者における所定の行動を検知するアルゴリズムである。

このような行動検知装置は、画像上における設定領域と被監視者とが重なった第２面積を求めるという比較的簡易な画像処理で前記被監視者における所定の行動を検知できる。

他の一態様では、これら上述の行動検知装置において、前記記憶部は、前記被監視者における所定の行動を検知するために前記複数の行動検知アルゴリズムのうちの少なくとも１つに用いられる、前記画像中における所定の線を行動検知線としてさらに記憶し、前記複数の行動検知アルゴリズムは、前記位置関係が斜め前である場合に用いられる斜め前用の行動検知アルゴリズムを含み、前記斜め前用の行動検知アルゴリズムは、前記画像上における前記行動検知線と前記被監視者の足先位置との距離、および、前記画像上において、前記設定領域の前記横の方向に沿って前記カメラに最も近い位置に位置する第１境界線と前記設定領域の前記横の方向に沿って前記カメラに最も遠い位置に位置する第２境界線との間での前記設定領域と前記被監視者とが重なった第３面積に基づいて前記被監視者における所定の行動を検知するアルゴリズムである。

このような行動検知装置は、画像上における行動検知線と被監視者の足先位置との距離、および、前記画像上において、設定領域の横の方向に沿ってカメラに最も近い位置に位置する第１境界線と前記設定領域の前記横の方向に沿って前記カメラに最も遠い位置に位置する第２境界線との間での前記設定領域と前記被監視者とが重なった第３面積を求めるという比較的簡易な画像処理で前記被監視者における所定の行動を検知できる。

他の一態様では、これら上述の行動検知装置において、前記記憶部は、前記被監視者における所定の行動を検知するために前記複数の行動検知アルゴリズムのうちの少なくとも１つに用いられる、前記画像中における所定の線を行動検知線としてさらに記憶し、前記複数の行動検知アルゴリズムは、前記位置関係が斜め奥である場合に用いられる斜め奥用の行動検知アルゴリズムを含み、前記斜め奥用の行動検知アルゴリズムは、前記画像上において、前記設定領域の前記横の方向に沿って前記カメラに最も近い位置に位置する第１境界線と前記設定領域の前記横の方向に沿って前記カメラに最も遠い位置に位置する第２境界線との間での前記設定領域と前記被監視者とが重なった第３面積に基づいて前記被監視者における所定の行動を検知するアルゴリズムである。

このような行動検知装置は、画像上において、設定領域の横の方向に沿ってカメラに最も近い位置に位置する第１境界線と前記設定領域の前記横の方向に沿って前記カメラに最も遠い位置に位置する第２境界線との間での前記設定領域と被監視者とが重なった第３面積を求めるという比較的簡易な画像処理で前記被監視者における所定の行動を検知できる。

他の一態様では、これら上述の行動検知装置において、前記位置関係演算部は、前記画像を撮像したカメラと前記設定領域との位置関係を互いに異なる複数の基本位置関係に分類した場合において、前記複数の基本位置関係それぞれの重みを前記設定領域に対する前記カメラの位置に基づいて求めることで、前記画像を撮像したカメラと前記設定領域との位置関係を求め、前記複数の行動検知アルゴリズムは、前記画像に基づいて前記被監視者における所定の行動を検知するための所定の評価値を前記複数の基本位置関係に応じて複数求め、前記求めた複数の評価値に前記複数の基本位置関係それぞれの重みで重み付けし、前記重み付けした結果と所定の閾値との比較結果に基づいて前記被監視者における所定の行動を検知するアルゴリズムを重み付け行動検知アルゴリズムとして含み、前記アルゴリズム選択部は、前記複数の行動検知アルゴリズムの中から前記位置関係演算部で求めた位置関係に基づいて前記重み付け行動検知アルゴリズムを選択し、前記行動検知処理部は、前記位置関係演算部で求めた前記複数の基本位置関係それぞれの重みを用いて前記アルゴリズム選択部で選択した重み付け行動検知アルゴリズムで前記画像に基づいて前記被監視者における所定の行動を検知する。

このような行動検知装置は、設定領域に対する前記カメラの位置関係を１個の基本位置関係で表すのではなく、複数の基本位置関係それぞれの重みで表し、前記複数の基本位置関係に応じた複数の評価値を前記複数の基本位置関係それぞれの重みで重み付けし、前記重み付けした結果に基づいて被監視者における所定の行動を検知するので、１個の基本位置関係に応じた行動検知アルゴリズムで前記被監視者における所定の行動を検知する場合に較べて、より高精度に前記被監視者における所定の行動を検知できる。

他の一態様では、上述の行動検知装置において、前記行動検知線を外部から受け付けて前記記憶部に記憶する行動検知線受付部をさらに備える。

このような行動検知装置は、行動検知線受付部をさらに備えるので、行動検知線を簡易に入力して設定できる。

他の一態様では、上述の行動検知装置において、前記画像取得部で取得した画像に基づいて前記行動検知線を求め、前記求めた行動検知線を前記記憶部に記憶する行動検知線演算部をさらに備える。

このような行動検知装置は、行動検知線演算部をさらに備えるので、行動検知線を自動設定できる。

他の一態様にかかる行動検知方法は、監視対象である被監視者を、前記被監視者の上方から撮像した画像を取得する画像取得工程と、前記被監視者における所定の行動を検知するための互いに異なる複数の行動検知アルゴリズムの中から、前記画像を撮像したカメラと前記画像中における所定の領域である設定領域との位置関係に基づいて行動検知アルゴリズムを選択するアルゴリズム選択工程と、前記アルゴリズム選択工程で選択した行動検知アルゴリズムで前記画像に基づいて前記被監視者における所定の行動を検知する行動検知処理工程とを備える。

他の一態様にかかる行動検知プログラムは、コンピュータに、監視対象である被監視者を、前記被監視者の上方から撮像した画像を取得する画像取得工程と、前記被監視者における所定の行動を検知するための互いに異なる複数の行動検知アルゴリズムの中から、前記画像を撮像したカメラと前記画像中における所定の領域である設定領域との位置関係に基づいて行動検知アルゴリズムを選択するアルゴリズム選択工程と、前記アルゴリズム選択工程で選択した行動検知アルゴリズムで前記画像に基づいて前記被監視者における所定の行動を検知する行動検知処理工程と、を実行させるためのプログラムである。

このような行動検知方法および行動検知プログラムは、複数の行動検知アルゴリズムの中から、カメラと設定領域との位置関係に応じた行動検知アルゴリズムを選択し、この選択した行動検知アルゴリズムで被監視者における所定の行動を検知するので、カメラが配設される配設位置にかかわらず、被監視者における所定の行動をより高精度に検知できる。また、カメラが配設され、行動検知の開始後に、例えばベッド等の寝具の位置が変更されると、前記寝具に対するカメラの位置関係が変わってしまうが、上記行動検知方法および行動検知プログラムは、記憶部に記憶された前記設定領域を変更することで、このような寝具の位置の変更による前記カメラの位置関係の変更にも対処できる。したがって、上記行動検知方法および行動検知プログラムは、寝具の位置にかかわらず、被監視者における所定の行動をより高精度に検知できる。

他の一態様にかかる被監視者監視装置は、監視対象である被監視者における所定の行動を検知する行動検知部と、前記行動検知部で検知した前記所定の行動を外部に通知する通知部とを備え、前記行動検知部は、これら上述のいずれかの行動検知装置を含む。

このような被監視者監視装置は、これら上述のいずれかの行動検知装置を含むので、カメラが配設される配設位置にかかわらず、被監視者における所定の行動をより高精度に検知できる。

この出願は、２０１５年６月１１日に出願された日本国特許出願特願２０１５−１１８３８８を基礎とするものであり、その内容は、本願に含まれるものである。

本発明を表現するために、上述において図面を参照しながら実施形態を通して本発明を適切且つ十分に説明したが、当業者であれば上述の実施形態を変更および／または改良することは容易に為し得ることであると認識すべきである。したがって、当業者が実施する変更形態または改良形態が、請求の範囲に記載された請求項の権利範囲を離脱するレベルのものでない限り、当該変更形態または当該改良形態は、当該請求項の権利範囲に包括されると解釈される。

本発明によれば、行動検知装置、行動検知方法および行動検知プログラム、ならびに、被監視者監視装置が提供できる。

Ｏｂ（Ｏｂ−１〜Ｏｂ−４） 被監視者
ＮＳ（ＮＳ−１、ＮＳ−２） 監視者（ユーザ）
ＭＳ 被監視者監視システム
ＳＵ センサ装置
ＳＶ 管理サーバ装置
ＳＰ 固定端末装置
ＴＡ 携帯端末装置
１ カメラ
３ 制御処理部
４ 通信インターフェース部（通信ＩＦ部）
５ 記憶部
３１ 制御部
３２ 領域設定処理部
３３ 行動検知線設定処理部
３４ 位置関係演算部
３５ アルゴリズム選択部
３６ 行動検知処理部
３７ 通知処理部
５１ 設定領域記憶部
５２ 行動検知線記憶部
５３ 行動検知アルゴリズム記憶部

Claims (16)

1. 監視対象である被監視者を、前記被監視者の上方から撮像した画像を取得する画像取得部と、
   前記画像中における所定の領域を設定領域として記憶し、前記画像に基づいて前記被監視者における所定の行動を検知するための互いに異なる複数の行動検知アルゴリズムを記憶する記憶部と、
   前記複数の行動検知アルゴリズムの中から、前記画像を撮像したカメラと前記設定領域との位置関係に基づいて行動検知アルゴリズムを選択するアルゴリズム選択部と、
   前記アルゴリズム選択部で選択した行動検知アルゴリズムで前記画像に基づいて前記被監視者における所定の行動を検知する行動検知処理部とを備える、
   行動検知装置。
2. 前記画像の中心が前記設定領域に対してどの位置に存在するかによって、前記画像を撮像したカメラと前記設定領域の前記位置関係を求める位置関係演算部をさらに備える、
   請求項１に記載の行動検知装置。
3. 前記位置関係は、前記カメラが前記設定領域の直上に位置する直上、前記カメラが前記設定領域の手前上方に位置する手前、前記カメラが前記設定領域の奥上方に位置する奥、前記カメラが前記設定領域の横上方に位置する横、前記カメラが前記設定領域の斜め前上方に位置する斜め前、および、前記カメラが前記設定領域の斜め奥上方に位置する斜め奥のうちのいずれかである、
   を特徴とする請求項１または請求項２に記載の行動検知装置。
4. 前記記憶部は、前記被監視者における所定の行動を検知するために前記複数の行動検知アルゴリズムのうちの少なくとも１つに用いられる、前記画像中における所定の線を行動検知線としてさらに記憶し、
   前記位置関係演算部は、前記行動検知線を考慮して、前記画像を撮像したカメラと前記設定領域との位置関係を求める、
   請求項２または請求項３に記載の行動検知装置。
5. 前記複数の行動検知アルゴリズムは、前記位置関係が直上である場合に用いられる直上用の行動検知アルゴリズムを含み、
   前記直上用の行動検知アルゴリズムは、前記画像上における前記設定領域外の前記被監視者の第１面積、および、前記画像上における前記設定領域と前記被監視者とが重なった第２面積に基づいて前記被監視者における所定の行動を検知するアルゴリズムである、
   請求項１ないし請求項４のいずれか１項に記載の行動検知装置。
6. 前記記憶部は、前記被監視者における所定の行動を検知するために前記複数の行動検知アルゴリズムのうちの少なくとも１つに用いられる、前記画像中における所定の線を行動検知線としてさらに記憶し、
   前記複数の行動検知アルゴリズムは、前記位置関係が手前である場合に用いられる手前用の行動検知アルゴリズムを含み、
   前記手前用の行動検知アルゴリズムは、前記画像上における前記行動検知線と前記被監視者の足先位置との距離に基づいて前記被監視者における所定の行動を検知するアルゴリズムである、
   請求項１ないし請求項５のいずれか１項に記載の行動検知装置。
7. 前記複数の行動検知アルゴリズムは、前記位置関係が横である場合に用いられる横用の行動検知アルゴリズムを含み、
   前記横用の行動検知アルゴリズムは、前記画像上において、前記設定領域の前記横の方向に沿って前記カメラに最も近い位置に位置する第１境界線と前記設定領域の前記横の方向に沿って前記カメラに最も遠い位置に位置する第２境界線との間での前記設定領域と前記被監視者とが重なった第３面積に基づいて前記被監視者における所定の行動を検知するアルゴリズムである、
   請求項１ないし請求項６のいずれか１項に記載の行動検知装置。
8. 前記複数の行動検知アルゴリズムは、前記位置関係が奥である場合に用いられる奥用の行動検知アルゴリズムを含み、
   前記奥用の行動検知アルゴリズムは、前記画像上における前記設定領域と前記被監視者とが重なった第２面積に基づいて前記被監視者における所定の行動を検知するアルゴリズムである、
   請求項１ないし請求項７のいずれか１項に記載の行動検知装置。
9. 前記記憶部は、前記被監視者における所定の行動を検知するために前記複数の行動検知アルゴリズムのうちの少なくとも１つに用いられる、前記画像中における所定の線を行動検知線としてさらに記憶し、
   前記複数の行動検知アルゴリズムは、前記位置関係が斜め前である場合に用いられる斜め前用の行動検知アルゴリズムを含み、
   前記斜め前用の行動検知アルゴリズムは、前記画像上における前記行動検知線と前記被監視者の足先位置との距離、および、前記画像上において、前記設定領域の前記横の方向に沿って前記カメラに最も近い位置に位置する第１境界線と前記設定領域の前記横の方向に沿って前記カメラに最も遠い位置に位置する第２境界線との間での前記設定領域と前記被監視者とが重なった第３面積に基づいて前記被監視者における所定の行動を検知するアルゴリズムである、
   請求項１ないし請求項８のいずれか１項に記載の行動検知装置。
10. 前記記憶部は、前記被監視者における所定の行動を検知するために前記複数の行動検知アルゴリズムのうちの少なくとも１つに用いられる、前記画像中における所定の線を行動検知線としてさらに記憶し、
    前記複数の行動検知アルゴリズムは、前記位置関係が斜め奥である場合に用いられる斜め奥用の行動検知アルゴリズムを含み、
    前記斜め奥用の行動検知アルゴリズムは、前記画像上において、前記設定領域の前記横の方向に沿って前記カメラに最も近い位置に位置する第１境界線と前記設定領域の前記横の方向に沿って前記カメラに最も遠い位置に位置する第２境界線との間での前記設定領域と前記被監視者とが重なった第３面積に基づいて前記被監視者における所定の行動を検知するアルゴリズムである、
    請求項１ないし請求項９のいずれか１項に記載の行動検知装置。
11. 前記位置関係演算部は、前記画像を撮像したカメラと前記設定領域との位置関係を互いに異なる複数の基本位置関係に分類した場合において、前記複数の基本位置関係それぞれの重みを前記設定領域に対する前記カメラの位置に基づいて求めることで、前記画像を撮像したカメラと前記設定領域との位置関係を求め、
    前記複数の行動検知アルゴリズムは、前記画像に基づいて前記被監視者における所定の行動を検知するための所定の評価値を前記複数の基本位置関係に応じて複数求め、前記求めた複数の評価値に前記複数の基本位置関係それぞれの重みで重み付けし、前記重み付けした結果と所定の閾値との比較結果に基づいて前記被監視者における所定の行動を検知するアルゴリズムを重み付け行動検知アルゴリズムとして含み、
    前記アルゴリズム選択部は、前記複数の行動検知アルゴリズムの中から前記位置関係演算部で求めた位置関係に基づいて前記重み付け行動検知アルゴリズムを選択し、
    前記行動検知処理部は、前記位置関係演算部で求めた前記複数の基本位置関係それぞれの重みを用いて前記アルゴリズム選択部で選択した重み付け行動検知アルゴリズムで前記画像に基づいて前記被監視者における所定の行動を検知する、
    請求項２ないし請求項４のいずれか１項に記載の行動検知装置。
12. 前記行動検知線を外部から受け付けて前記記憶部に記憶する行動検知線受付部をさらに備える、
    請求項４に記載の行動検知装置。
13. 前記画像取得部で取得した画像に基づいて前記行動検知線を求め、前記求めた行動検知線を前記記憶部に記憶する行動検知線演算部をさらに備える、
    請求項４に記載の行動検知装置。
14. 監視対象である被監視者を、前記被監視者の上方から撮像した画像を取得する画像取得工程と、
    前記被監視者における所定の行動を検知するための互いに異なる複数の行動検知アルゴリズムの中から、前記画像を撮像したカメラと前記画像中における所定の領域である設定領域との位置関係に基づいて行動検知アルゴリズムを選択するアルゴリズム選択工程と、
    前記アルゴリズム選択工程で選択した行動検知アルゴリズムで前記画像に基づいて前記被監視者における所定の行動を検知する行動検知処理工程とを備える、
    行動検知方法。
15. コンピュータに、
    監視対象である被監視者を、前記被監視者の上方から撮像した画像を取得する画像取得工程と、
    前記被監視者における所定の行動を検知するための互いに異なる複数の行動検知アルゴリズムの中から、前記画像を撮像したカメラと前記画像中における所定の領域である設定領域との位置関係に基づいて行動検知アルゴリズムを選択するアルゴリズム選択工程と、
    前記アルゴリズム選択工程で選択した行動検知アルゴリズムで前記画像に基づいて前記被監視者における所定の行動を検知する行動検知処理工程と、
    を実行させるための行動検知プログラム。
16. 監視対象である被監視者における所定の行動を検知する行動検知部と、
    前記行動検知部で検知した前記所定の行動を外部に通知する通知部とを備え、
    前記行動検知部は、請求項１ないし請求項１３のいずれか１項に記載の行動検知装置を含む、
    被監視者監視装置。
    

Images