JP2017134712A - 手洗い監視システム - Google Patents
手洗い監視システム Download PDFInfo
- Publication number
- JP2017134712A JP2017134712A JP2016015286A JP2016015286A JP2017134712A JP 2017134712 A JP2017134712 A JP 2017134712A JP 2016015286 A JP2016015286 A JP 2016015286A JP 2016015286 A JP2016015286 A JP 2016015286A JP 2017134712 A JP2017134712 A JP 2017134712A
- Authority
- JP
- Japan
- Prior art keywords
- hand
- washing
- wash
- image
- frame image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Image Analysis (AREA)
Abstract
Description
前記解析装置は、前記手洗い画像の取得手段と、取得された前記手洗い画像から手領域を抽出する手領域抽出手段と、前記手領域抽出手段において得られるフレーム画像から実行された洗い方の種類を識別する洗い方認識手段と、識別された洗い方が所定の順番の洗い方である場合に当該洗い方に秒数加算していくことにより擦り状態の良否を判定する擦り判定手段と、前記モニタに、手洗いに要した秒数に基づいてアバターの階層的表示を行わせる表示手段とを含むことを特徴とする手洗い監視システムである。
種類1)手のひらを合わせてよく洗う。
種類2)手の甲を伸ばすように洗う。
種類3)指先及び爪の間を洗う。
種類4)指の間を十分に洗う。
種類5)親指と手のひらをねじり洗いする。
種類6)手首を洗う。
このステップは、工場等の手洗い用シンクに設置した撮影手段(監視カメラ)1によって手洗い状況の撮影を行い、撮影した手洗い画像を、画像取得手段4を介して解析装置2内に取り込むステップである。
この手領域抽出ステップ(S12)は、手領域抽出手段5において、画像取得手段4によって取り込んだ手洗い画像から肌色抽出を行って手領域を抽出し、手領域の処理系列画像(以下「フレーム画像」とする)を生成するステップである。このステップにおいては、取得画像をYUV変換してYUV色情報を取得し、人の手の肌色に対応する赤みVを抽出し、抽出したV値から、赤みヒストグラムを作成する処理が行われる。図3はヒストグラムの一例を示すもので、横軸がV値(画素値)、縦軸が個数(頻度)である。このヒストグラムにおいては、手に対応するピークと背景に対応するピークがあるので、2つのピークの谷を閾値とし、谷部分よりも左側の部分(赤み部分)が手領域とされる。
この手洗い開始判定ステップは、上記のようにしてノイズが除去されたフレーム画像を解析し、手洗いが開始されたか否かを判定するステップである。本発明に係る方法においては、水で手洗いし、石鹸の泡を手に載せ(泡タイプのハンドソープを用い、ポンプから泡を出して手に載せた直後で、泡を広げる前)、両手を離して開いたまま静止した状態にあることが手洗い開始判定条件とされ、この条件が検出された段階で、換言すれば、動きがない状態で大きい肌色領域が2つ認識された段階で、手洗い動作が開始されたとの判定がなされる。大きい肌色領域が2つ存在することは、背景差分によって認識可能である。
上記手洗い開始の判定後洗い方認識ステップ(S14)に移行し、洗い方認識手段6において、送られてくるフレーム画像における手領域から、上述した6種類の洗い方のうちのどの洗い方が実行されているかが識別される。図6は、この洗い方認識ステップ(S14)における処理の流れ、換言すれば、6種類の洗い対象部分を識別する方法を示すフロー図である。
閾値=(赤色画素/肌色画素)×100
とし、閾値が10%以上であれば指間洗いと判断し、それが10%以下であれば手首洗いと判断する。
上記6種類の洗い方はこのようにして識別判定され、この洗い方の判別後、次の擦り判定ステップ(S15)に移行する。本発明に係る方法においては、上記6種類の洗い方がその順に行われることを前提としており、例えば、現在が手のひらのターンであるとすると、上記洗い方認識ステップ(S14)において洗い方が手のひらか否かの判定がなされ、Yesの場合は擦り判定ステップ(S15)に移行し、判定手段7において手のひらの洗い方の良否を判定するために、手のひらの洗い方に対して秒数加算されていく。この秒数加算は、入力画像からオプティカルフローを抽出することにより取得される擦り回数から求めることができる。また、Noの場合は、その次の洗い方である手の甲であるか否かの判定がなされ、Yesの判定の場合は手の甲の洗い方に対し、上記と同様にして秒数加算され、以後同様の処理がなされる。
表示ステップ(S16)は、表示手段8が、擦り判定を経た手領域を、その判定結果を反映してモニタ3にアバター表示するステップである。そのアバター表示は、左右が存在する洗い方については、左右の手を識別した上で、それぞれについて表示される。上記6種の洗い方のうち左右が存在するのは、親指洗い(種類5)、指先洗い(種類3)、手の甲洗い(種類2)及び手首洗い(種類6)の4種であり、これらの洗い方の場合のアバター表示は、それぞれ下記方法によって左右の手を判別した上でなされる。
手洗い終了判定ステップ(S17)は、両手を離した状態で静止したときを終了判定条件とし、この終了判定条件が検出されたとき(S17 Yes)に、手洗いの終了と判定するステップである。なお、この終了判定条件は、予め被験者に知らせておき、あるいは、モニタ3にそのメッセージを表示することは、手洗い開始判定条件の場合と同様である。被験者は、手洗い終了まではこの動作、即ち、両手を離した状態で静止する動作を行わないので(ステップ17 No)、画像取得ステップに戻り、後続の手洗い画像について上記各ステップが実行される。
2 解析装置
3 モニタ
4 画像取得手段
5 手領域抽出手段
6 洗い方認識手段
7 判定手段
8 表示手段
Claims (8)
- 手洗い用シンクに設置された撮影手段によって撮影された手洗い画像を取り込む画像取得ステップと、
取り込んだ手洗い画像から手領域を抽出してフレーム画像を生成する手領域抽出ステップと、
前記フレーム画像から手洗いが開始されたか否かを判定する手洗い開始判定ステップと、
前記フレーム画像から手領域の形状を抽出することにより、実行された洗い方の種類を識別する洗い方認識ステップと、
識別された洗い方が所定の順番の洗い方である場合に、当該洗い方に秒数加算していくことにより当該洗い方についての擦り状態の良否を判定する擦り判定ステップと、
前記フレーム画像から手洗いの終了を判定する手洗い終了判定ステップとから成ることを特徴とする手洗い監視方法。 - 前記擦り判定ステップにおいて得られた秒数に基づいてアバターを階層的に表示するアバター表示ステップを更に含む、請求項1に記載の手洗い監視方法。
- 前記アバター表示は、左右が存在する洗い方については、左右の手を識別した上で、それぞれについて行われる、請求項2に記載の手洗い監視方法。
- 前記手領域抽出ステップは、前記手洗い画像からの肌色抽出工程と、ノイズの除去工程とを含む、請求項1乃至3のいずれかに記載の手洗い監視方法。
- 前記洗い方認識ステップにおける洗い方の識別指標として指の数を用いる、請求項1乃至4のいずれかに記載の手洗い監視方法。
- 指の数が3本以上である場合は、手の甲洗いと親指洗いのいずれかであると判定される、請求項5に記載の手洗い監視方法。
- 前記洗い方認識のために指の数を用いない洗い方の場合は、前記手領域中に存する孔の補間処理を行う、請求項5に記載の手洗い監視方法。
- 手洗い用シンクに設置される撮影手段と、前記撮影手段によって撮影される手洗い画像を読み込んで、適切な手洗い実行の成否を判定する解析装置と、解析結果及びメッセージを表示するモニタとから成り、
前記解析装置は、前記手洗い画像の取得手段と、取得された前記手洗い画像から手領域を抽出する手領域抽出手段と、前記手領域抽出手段において得られるフレーム画像から実行された洗い方の種類を識別する洗い方認識手段と、識別された洗い方が所定の順番の洗い方である場合に当該洗い方に秒数加算していくことにより擦り状態の良否を判定する擦り判定手段と、前記モニタに、手洗いに要した秒数に基づいてアバターの階層的表示を行わせる表示手段とを含むことを特徴とする手洗い監視システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016015286A JP6305448B2 (ja) | 2016-01-29 | 2016-01-29 | 手洗い監視システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016015286A JP6305448B2 (ja) | 2016-01-29 | 2016-01-29 | 手洗い監視システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017134712A true JP2017134712A (ja) | 2017-08-03 |
JP6305448B2 JP6305448B2 (ja) | 2018-04-04 |
Family
ID=59502857
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016015286A Active JP6305448B2 (ja) | 2016-01-29 | 2016-01-29 | 手洗い監視システム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6305448B2 (ja) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019191117A (ja) * | 2018-04-27 | 2019-10-31 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
CN110956117A (zh) * | 2019-11-26 | 2020-04-03 | 上海秒针网络科技有限公司 | 卫生检测方法和装置 |
JP2020091739A (ja) * | 2018-12-06 | 2020-06-11 | 株式会社 日立産業制御ソリューションズ | 手順検知装置、および手順検知プログラム |
JP2020140678A (ja) * | 2019-03-03 | 2020-09-03 | 株式会社コンピュータシステム研究所 | 監視サーバ、監視方法、監視プログラム、および、記憶媒体 |
JP2021152759A (ja) * | 2020-03-24 | 2021-09-30 | 大日本印刷株式会社 | 情報処理システム、情報処理方法及び学習モデルの生成方法 |
CN113553886A (zh) * | 2020-04-26 | 2021-10-26 | 富士通株式会社 | 用于监视洗手过程的装置、方法以及存储介质 |
JP2021174415A (ja) * | 2020-04-30 | 2021-11-01 | 株式会社コンテック | 衛生管理システム |
WO2021229710A1 (ja) | 2020-05-13 | 2021-11-18 | 富士通株式会社 | 手洗い認識システムおよび手洗い認識方法 |
WO2021234972A1 (ja) | 2020-05-22 | 2021-11-25 | 富士通株式会社 | 手洗い認識システムおよび手洗い認識方法 |
JP7490170B2 (ja) | 2020-07-29 | 2024-05-27 | 菱熱工業株式会社 | 手洗いチェックシステム |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11093886B2 (en) * | 2018-11-27 | 2021-08-17 | Fujifilm Business Innovation Corp. | Methods for real-time skill assessment of multi-step tasks performed by hand movements using a video camera |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120140054A1 (en) * | 2010-12-03 | 2012-06-07 | Wen-Hui Chen | Intelligent hand washing monitoring system |
JP2013180046A (ja) * | 2012-03-01 | 2013-09-12 | Sumitomo Electric Ind Ltd | 手洗いモニタ、手洗いモニタ方法および手洗いモニタプログラム |
-
2016
- 2016-01-29 JP JP2016015286A patent/JP6305448B2/ja active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120140054A1 (en) * | 2010-12-03 | 2012-06-07 | Wen-Hui Chen | Intelligent hand washing monitoring system |
JP2013180046A (ja) * | 2012-03-01 | 2013-09-12 | Sumitomo Electric Ind Ltd | 手洗いモニタ、手洗いモニタ方法および手洗いモニタプログラム |
Non-Patent Citations (1)
Title |
---|
東 秀賢,外2名: "カメラ映像を用いた手洗い検査システムの開発", 第76回(平成26年)全国大会, JPN6018002763, 11 March 2014 (2014-03-11), JP, pages 2 - 265, ISSN: 0003728867 * |
Cited By (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019191117A (ja) * | 2018-04-27 | 2019-10-31 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
US11521312B2 (en) | 2018-04-27 | 2022-12-06 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method, and storage medium |
JP2020091739A (ja) * | 2018-12-06 | 2020-06-11 | 株式会社 日立産業制御ソリューションズ | 手順検知装置、および手順検知プログラム |
JP2020140678A (ja) * | 2019-03-03 | 2020-09-03 | 株式会社コンピュータシステム研究所 | 監視サーバ、監視方法、監視プログラム、および、記憶媒体 |
JP7369945B2 (ja) | 2019-03-03 | 2023-10-27 | 株式会社コンピュータシステム研究所 | 監視サーバ、監視方法、監視プログラム、および、記憶媒体 |
CN110956117A (zh) * | 2019-11-26 | 2020-04-03 | 上海秒针网络科技有限公司 | 卫生检测方法和装置 |
JP2021152759A (ja) * | 2020-03-24 | 2021-09-30 | 大日本印刷株式会社 | 情報処理システム、情報処理方法及び学習モデルの生成方法 |
JP7476599B2 (ja) | 2020-03-24 | 2024-05-01 | 大日本印刷株式会社 | 情報処理システム、及び情報処理方法 |
CN113553886A (zh) * | 2020-04-26 | 2021-10-26 | 富士通株式会社 | 用于监视洗手过程的装置、方法以及存储介质 |
JP2021174415A (ja) * | 2020-04-30 | 2021-11-01 | 株式会社コンテック | 衛生管理システム |
JP7492850B2 (ja) | 2020-04-30 | 2024-05-30 | 株式会社コンテック | 衛生管理システム |
WO2021229710A1 (ja) | 2020-05-13 | 2021-11-18 | 富士通株式会社 | 手洗い認識システムおよび手洗い認識方法 |
WO2021234972A1 (ja) | 2020-05-22 | 2021-11-25 | 富士通株式会社 | 手洗い認識システムおよび手洗い認識方法 |
JP7490170B2 (ja) | 2020-07-29 | 2024-05-27 | 菱熱工業株式会社 | 手洗いチェックシステム |
Also Published As
Publication number | Publication date |
---|---|
JP6305448B2 (ja) | 2018-04-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6305448B2 (ja) | 手洗い監視システム | |
US20120288168A1 (en) | System and a method for enhancing appeareance of a face | |
KR101853006B1 (ko) | 깊이영상에서 코 검출을 이용한 얼굴 인식 | |
Aigrain et al. | Person-specific behavioural features for automatic stress detection | |
CN111212594B (zh) | 电子设备和利用电子设备确定结膜充血程度的方法 | |
JP6443842B2 (ja) | 顔検出装置、顔検出システム、及び顔検出方法 | |
US20230043484A1 (en) | Handwash monitoring system and handwash monitoring method | |
CN110930446B (zh) | 一种眼底图像定量分析的前置处理方法及存储设备 | |
KR19990016896A (ko) | 얼굴영상에서 눈영역 검출방법 | |
US20020015527A1 (en) | Computer system for relieving fatigue | |
KR101745601B1 (ko) | 영상 처리를 이용한 손가락 개수 인식 방법 및 장치 | |
US20230337913A1 (en) | Method and photographing device for acquiring side image for ocular proptosis degree analysis, and recording medium therefor | |
JP6302007B2 (ja) | クリーンルーム入室者の清浄度管理方法及び管理システム | |
US20230031042A1 (en) | Handwash monitoring system and handwash monitoring method | |
CN111341444A (zh) | 智能绘画评分方法及系统 | |
KR20210092914A (ko) | 인공지능 기반의 탈모 자가 진단 방법 및 시스템 | |
JP2007058625A (ja) | 情報処理装置、および情報処理方法、並びにコンピュータ・プログラム | |
KR101989964B1 (ko) | 대중 감성 검출 방법 이를 적용하는 시스템 | |
JP7492850B2 (ja) | 衛生管理システム | |
KR101971602B1 (ko) | 영상분석을 이용한 공감 감성 추론 방법 및 시스템 | |
JP6471924B2 (ja) | 顔認証装置及び顔認証方法 | |
CN116580839A (zh) | 一种视线社交交流行为分析系统 | |
CN111656382A (zh) | 广告提示方法及广告提示系统 | |
CN115439901A (zh) | 人员提醒方法、装置、电子设备及存储介质 | |
JPH06154171A (ja) | 眼底画像処理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180123 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180202 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180208 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180301 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180306 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6305448 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |