JP6978080B2 - 個室見守り装置 - Google Patents
個室見守り装置 Download PDFInfo
- Publication number
- JP6978080B2 JP6978080B2 JP2018535687A JP2018535687A JP6978080B2 JP 6978080 B2 JP6978080 B2 JP 6978080B2 JP 2018535687 A JP2018535687 A JP 2018535687A JP 2018535687 A JP2018535687 A JP 2018535687A JP 6978080 B2 JP6978080 B2 JP 6978080B2
- Authority
- JP
- Japan
- Prior art keywords
- room
- watching device
- private room
- image
- living room
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 239000003550 marker Substances 0.000 claims description 60
- 238000000034 method Methods 0.000 claims description 25
- 230000003287 optical effect Effects 0.000 claims description 21
- 238000005286 illumination Methods 0.000 claims description 20
- 230000005540 biological transmission Effects 0.000 claims description 17
- 230000033001 locomotion Effects 0.000 claims description 15
- 239000013598 vector Substances 0.000 claims description 15
- 238000012545 processing Methods 0.000 claims description 14
- 230000008569 process Effects 0.000 claims description 7
- 230000007774 longterm Effects 0.000 claims description 4
- 238000001514 detection method Methods 0.000 description 42
- 230000005484 gravity Effects 0.000 description 7
- 206010038743 Restlessness Diseases 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 238000004364 calculation method Methods 0.000 description 5
- 238000012790 confirmation Methods 0.000 description 4
- 238000009434 installation Methods 0.000 description 4
- 239000011159 matrix material Substances 0.000 description 4
- 238000004422 calculation algorithm Methods 0.000 description 3
- 230000036541 health Effects 0.000 description 3
- 206010042772 syncope Diseases 0.000 description 3
- 230000001186 cumulative effect Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 210000003127 knee Anatomy 0.000 description 2
- 238000010845 search algorithm Methods 0.000 description 2
- 206010000117 Abnormal behaviour Diseases 0.000 description 1
- 238000012935 Averaging Methods 0.000 description 1
- 208000003443 Unconsciousness Diseases 0.000 description 1
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000005856 abnormality Effects 0.000 description 1
- 230000032683 aging Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004140 cleaning Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012806 monitoring device Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000012567 pattern recognition method Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 238000013139 quantization Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/02—Alarms for ensuring the safety of persons
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
- G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
- G08B25/04—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using a single signalling line, e.g. in a closed loop
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- Emergency Management (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Alarm Systems (AREA)
- Emergency Alarm Devices (AREA)
- Image Analysis (AREA)
Description
本装置の使用開始及び使用中、介護者に求める操作は単純なものにし、誤操作が生じないようなものにすること。
本装置の被介護者用居室への取付けや移動が簡単かつ短時間で済むようなものとし、取付け者に特別な技能や知識を求めないこと。
取付け後に狂いが生じにくい構造とし、定期的なメンテナンスも光学レンズ表面のクリーニング程度の極簡単な作業で済むようにすること。
本個室見守りシステムを居室内に設置する際に、床面とセンサとの距離を自動計測する。また、居室外に出るためのドア、トイレのドアの位置を検出する。図6に処理フローを示す。なお、本実施例では、以下、トイレのドアを用いる例について説明するが、別の実施例として、トイレ以外の別室のドアを用いてもよい。
を満たすエッジ画素(xi[pixel],yi[pixel])に対して、円の方程式
を最小二乗法によりフィッティングすることにより、リング形状の半径ρ [picxel]と中心の画像座標(α[picxel], β[picxel])をサブピクセルの精度で計算する。
床面上マーカー172の中心のカメラ座標(x’[mm],y’[mm],z’[mm])は、次式により求められる:
を最小にするような3つのパラメータa,b,cの値を計算すると、撮像レンズの主面上の任意の位置(カメラ座標)(X’[mm],Y’[mm],0[mm])と床面との距離 H(X’,Y’)[mm]が一次式
で表される。
(vii)上記(vi)の結果を用い、室内に居る人や室内にある物品(家具など)の居室床面からの高さ(以下、「床上高」という。)を求める。
図14と図15は、それぞれ、図12の床面上マーカー201と床面上マーカー202のリング内部の二値化画像である。二値化された後の黒画素の個数が別途定める閾値未満であれば(図13ステップ1305)、(図13ステップ1310へ飛び終了、)リングの内部が空白、すなわち、そのリングは「床高検知用マーカー171」と判定する。
図12の床面上マーカー203において、リングの内部は空白であるので、「床高検知用マーカー」171となる。
と定義される。
であり、また、正規化された重心の周りの2次モーメント
を要素とする正定値対称行列(固有値が必ず正の値になる)
の固有値をλ1とλ2(λ1≧λ2>0)としたとき、長軸と短軸の長さaとbは、
であり、長軸の角度θは、固有値λ1に対応する固有ベクトルとx軸の正の向きがなす角度
である。
上記の計算手順に従って、各輝点の画像座標{(xi[pixel],yi[pixel]):i=1,2,・・・,M}に対応する3次元空間での点のワールド座標{(Xi[mm],Yi[mm],Zi[mm]:i=1,2,・・・,M}が求められる。
本個室見守りシステムを居室内に設置する際に、居室の形状、および、大型家具の位置を自動検出する。
における、各投影輝点の3次元座標(x’(θ),y’(θ),z’(θ))について、x’(θ)とy’(θ)の周辺分布(プロジェクション)を求める。実際には、x’(θ)とy’(θ)の値を量子化し、ヒストグラムを算出する。求めたヒストグラムから計算される、i番目の量子化値の出現確率pi(x’(θ))とqi(y’(θ))とからエントロピーH(θ)を求める:
(i)まず、J番目(J>1)のフレームのLED照明画像と輝点投影画像を取得する。(図21ステップ212)
保持しておいた一つ前の(J−1)番目フレームのLED照明画像と、J番目フレームのLED照明画像を用いて、オプティカルフローを計算する。(図21ステップ214)
または、高さ分布の重心よりk・σ(k>0)位置μ+k・σ[mm]
または、高さの累積分布のα%に対応するZi[mm]を「人の高さ」と設定する。
から、移動ベクトルの偏角を計算する(Δ≧1は別途定めた値):
(ただし、Πiは、偏角がiδ°以上、(i+1)δ°未満であるような移動ベクトルの度数)を計算する。そして、度数分布Πから計算される、確率分布p={pi:i=0,1,・・・,2M−1}
に対して、下記数式27で記述されるエントロピー H(p)を計算する:
このエントロピーは、人の動きの角度変化のランダムネスを測るものである。エントロピーの計算値が別途定める値を越した場合、そのタイミングをもって、「人が室内を徘徊している」とする。
そして、確率分布 p の180°対称性を測る尺度として、確率分布pのqに対する「相対エントロピー」(「カルバック・ライブラー情報量」ともいう)を計算する:
このカルバック・ライブラー情報量は、偏角の度数分布が180°対称の場合、値ゼロを取る。通常のエントロピーによる基準に加えて、相対エントロピー(カルバック・ライブラー情報量)の計算値が別途定める値以下の場合にも、そのタイミングをもって、「人が室内を徘徊している」とする。
(i)赤外線輝点アレイを居室内に投光して得られる輝点投影画像を用いて、ベッドの領域を検出する。上記の「居室形状取得」と同様に、各投影輝点に対して、XYZワールド座標を計算する。
(ii)次に、ベッドの高さが床面から400mmから600mmであることを想定して、床面からの高さが400mmから600mmであるような輝点について、XY座標で計算した2次元ユークリッド距離が200mm以下であるような輝点のペアをグループ化する。すなわち、すなわち、床面からの高さが400mmから600mmであるような3個の輝点A、B、Cついて、2つの輝点AとBの2次元ユークリッド距離が200mm以下であり、かつ、2つの輝点BとCの2次元ユークリッド距離が200mm以下である場合、3つの輝点A、B、Cを同じグループに分類する、という操作を再帰的に施すことにより、輝点をグループに分類する。これには、グラフ理論の連結成分を求めるアルゴリズム(たとえば、深さ優先探索アルゴリズム)を使うことができる。
(i)赤外線輝点アレイを居室内に投光して得られる輝点投影画像を用いて、ベッドの領域を検出する。上記の「居室形状取得」と同様に、各投影輝点に対して、XYZワールド座標を計算する。
(i)本装置では「人体の検出」によって自動的に見守りを行うため、「見守り開始」操作を必用としないが、複数の人体を検出し、片方が静止した場合は動いている方を自動的に見守るようになる。
警報が鳴って「安全確認」ボタンを押さない場合は、更に一定の時間(t2時間)が経過した後に、別の形式の警報をならしてもよい。
112 演算処理部
113 情報送受信部
114 データ取得部
115 センサユニット
116 情報送受信ユニット
118 光学ブロック
119 情報送受信部
120 表示・操作部
121 拡散光照明器
122 撮像装置
123 水準器
124 照度計
125、126 投光器
127 カバー
171 床高検知用マーカー
172 床面上マーカー
181 ドア位置検知用マーカー
191 トイレドア位置検知用マーカー
192 LED照明画像
193 エッジ画像
251 慣性等価楕円
252 外接矩形
253 人の動線
Claims (11)
- 居室内の情報を取得・処理するセンサユニットとセンサユニットが発する通報の介護者や家族への伝達と、センサユニットへのコマンド送信とを行う情報送受信ユニットを有する個室見守り装置であって、
センサユニットは、制御部、演算処理部、情報送受信部を内包する電気・電子ブロックと、データ取得部を構成する光学ブロックとを有し、
光学ブロックは、複数の赤外線輝点アレイ投光器、撮像装置、LED拡散光照明器、水準器、照度計を有する個室見守り装置。 - 請求項1に記載の個室見守り装置であって、更に、
LED拡散光照明下で撮像された居室内画像に対して、既知の半径のリング形状が描かれたマーカーが居室床上に3枚以上散撒かれた居室内の画像にハフ変換を施すことによりリング形状を検出する手段と、
該居室床上に散撒かれたマーカーに描かれたリング形状の既知の半径と、該居室内の画像から検出されたリング形状の半径とに基づいて、該居室床上に散撒かれたマーカーのそれぞれについて、中心からセンサユニットまでの距離を検出する手段と、
該居室床上に散撒かれた3枚以上のマーカーについて検出された中心からセンサユニットまでの距離に基づいて、床面と撮像レンズの主面との傾き角を検出する手段と、
を有することを特徴とする個室見守り装置。 - 請求項1に記載の個室見守り装置であって、更に、
赤外線輝点アレイ投光器により投光された輝点群の高さ分布画像である高さマップの角度を少しずつ変えながら各角度方向への投影であるプロジェクションを取得する手段と、
そのプロジェクションのエントロピーが最小となる角度を定めることによって、高さマップの水平方向の傾きを正規化する手段と、
エントロピー値が最小となるように壁位置算出時の居室水平方向の回転を補正する手段と、
を有することを特徴とする個室見守り装置。 - 請求項1に記載の個室見守り装置であって、更に、
LED拡散光照明下で撮像された居室内画像に対して移動物体のオプティカルフローを計算する手段と、
計算されたフローベクトルをフローベクトルから移動物体の位置を特定する手段と、
移動物体と等価の慣性モーメントを有する楕円を求める手段と、
赤外線輝点アレイを投光して撮像された画像において、その楕円によって囲まれる領域内に存在する各輝点に対して、移動物体の3次元座標を求める手段と、
を有することを特徴とする個室見守り装置。 - 請求項1または4に記載の個室見守り装置であって、更に、移動物体の高さ値が特定の値となった時、人が転倒したものとする手段を有する個室見守り装置。
- 請求項1または4に記載の個室見守り装置であって、更に、
移動物体の移動ベクトルを求める手段と、
移動ベクトルの時系列を記録する手段と、
記録された移動ベクトルの量子化された偏角に関する度数分布からエントロピーを計算する手段と、エントロピーの計算値により徘徊状態を判定する手段と、
を有することを特徴とする個室見守り装置。 - 請求項1または4に記載の個室見守り装置であって、更に、
LED拡散光照明下で撮像された居室内画像に対して、居室外に出るためのドア直前居室床上に特定のシンボルが描かれたマーカーが置かれた居室内の画像から該マーカーを検出する手段と、
被介護者の居室外退出を検出する手段と、
を有することを特徴とする個室見守り装置。 - 請求項1または4に記載の個室見守り装置であって、更に、
LED拡散光照明下で撮像された居室内画像に対して、別室ドアの直前居室床上に特定のシンボルが描かれたマーカーが置かれた居室内の画像から該マーカーを検出する手段と、
被介護者の長時間別室入室状態を検出する手段と、
を有することを特徴とする個室見守り装置。 - 請求項1、2、3または4に記載の個室見守り装置であって、更に、
高さマップに関連し、求められた各投影輝点のxyz座標から、居室内に存在し別に定められる特定高さ範囲内にあり特定の面積以上の物品を検出する手段と、
移動物体の動線が、その位置で停止したことを検知する手段と、
を有することを特徴とする個室見守り装置。 - 請求項1、2、3または4に記載の個室見守り装置であって、更に、
高さマップに関連し、求められた各投影輝点のxyz座標から、居室内に存在し別に定められる一定高さ範囲内にあり一定面積範囲内にある物品を検出する手段と、
移動物体の動線が、その位置で停止したことを検知する手段を有することを特徴とする個室見守り装置。 - 請求項1に記載の個室見守り装置であって、更に、被介護者とともに居室に入った介護者が被介護者を残して単独退出した時、センサが「通常の見守りモード」となるよう再設定する手動及び自動の手段を有することを特徴とする個室見守り装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016175037 | 2016-08-22 | ||
JP2016175037 | 2016-08-22 | ||
PCT/JP2017/029889 WO2018038087A2 (ja) | 2016-08-22 | 2017-08-22 | 個室見守り装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2018038087A1 JPWO2018038087A1 (ja) | 2019-07-11 |
JP6978080B2 true JP6978080B2 (ja) | 2021-12-08 |
Family
ID=61246178
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018535687A Active JP6978080B2 (ja) | 2016-08-22 | 2017-08-22 | 個室見守り装置 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP6978080B2 (ja) |
WO (1) | WO2018038087A2 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7237520B2 (ja) * | 2018-10-26 | 2023-03-13 | キヤノン株式会社 | 情報処理装置、情報処理方法およびプログラム |
CN114842397B (zh) * | 2022-05-19 | 2023-04-07 | 华南农业大学 | 一种基于异常检测的实时老人跌倒检测方法 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2752335B2 (ja) * | 1994-09-27 | 1998-05-18 | 鐘紡株式会社 | 病室内患者監視装置 |
JP5760905B2 (ja) * | 2011-09-28 | 2015-08-12 | 株式会社Jvcケンウッド | 危険検知装置及び危険検知方法 |
JPWO2015133195A1 (ja) * | 2014-03-06 | 2017-04-06 | ノーリツプレシジョン株式会社 | 情報処理装置、情報処理方法、及び、プログラム |
-
2017
- 2017-08-22 JP JP2018535687A patent/JP6978080B2/ja active Active
- 2017-08-22 WO PCT/JP2017/029889 patent/WO2018038087A2/ja active Application Filing
Also Published As
Publication number | Publication date |
---|---|
WO2018038087A3 (ja) | 2018-04-19 |
JPWO2018038087A1 (ja) | 2019-07-11 |
WO2018038087A2 (ja) | 2018-03-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI425431B (zh) | 監視裝置與程式 | |
US7106885B2 (en) | Method and apparatus for subject physical position and security determination | |
JP2018018829A (ja) | 照明空間を特性評価するための検知照明システム及び方法 | |
US20160044301A1 (en) | 3d modeling of imaged objects using camera position and pose to obtain accuracy with reduced processing requirements | |
KR20160045556A (ko) | 에어리어 정보 추정 장치, 에어리어 정보 추정 방법, 및 공기 조화 장치 | |
JP2013078433A (ja) | 監視装置、プログラム | |
JP2015132963A (ja) | 監視システム | |
JP2014035302A (ja) | 対象物検出装置、対象物検出方法、プログラム | |
EP3069100B1 (en) | 3d mapping device | |
US11625828B2 (en) | Cost effective, mass producible system for rapid detection of fever conditions based on thermal imaging | |
JP6978080B2 (ja) | 個室見守り装置 | |
JP7430270B2 (ja) | 天井及びダウンライトキャビティと接続した配置のために構成された撮像装置及び筐体 | |
JP2015120584A (ja) | 画像監視装置およびエレベーター監視装置 | |
US10817715B2 (en) | Number-of-people detection system and number-of-people detection method thereof | |
JP2018117331A (ja) | ベッド見守り装置 | |
US10121344B2 (en) | Smoke detection device, method for detecting at least one smoke detection feature, and computer program | |
CN114586077A (zh) | 监视系统以及程序 | |
US20230172489A1 (en) | Method And A System For Monitoring A Subject | |
US20200293788A1 (en) | Monitoring system and monitoring method thereof | |
JP6119946B1 (ja) | 画像認識システム | |
KR102546045B1 (ko) | 라이다(LiDAR)를 이용한 인체 감시장치 | |
KR100844640B1 (ko) | 물체 인식 및 거리 계측 방법 | |
JP6155106B2 (ja) | 画像センサ | |
JP6591647B2 (ja) | 画像処理装置 | |
KR20170004039U (ko) | 열화상 오버레이 모니터링 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20190222 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200819 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20211007 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20211104 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6978080 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |