JP5482080B2 - 手認識装置 - Google Patents
手認識装置 Download PDFInfo
- Publication number
- JP5482080B2 JP5482080B2 JP2009237316A JP2009237316A JP5482080B2 JP 5482080 B2 JP5482080 B2 JP 5482080B2 JP 2009237316 A JP2009237316 A JP 2009237316A JP 2009237316 A JP2009237316 A JP 2009237316A JP 5482080 B2 JP5482080 B2 JP 5482080B2
- Authority
- JP
- Japan
- Prior art keywords
- face
- region
- hand
- area
- determination
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Image Processing (AREA)
- Image Analysis (AREA)
Description
(1)本実施形態にかかる手認識装置は、顔画像を取得する取得部と、顔画像のうち顔領域を認識する顔認識部と、前記顔領域に基づいて、前記顔領域内の顔内解析領域を決定する顔内領域決定部と、前記顔内領域決定部で決定された前記顔内解析領域の画素値を用いて、前記顔内解析領域内に手があるか否かを判断する第1判定部とを備える。
図1は、本実施形態にかかる手認識装置の構成例を示す機能ブロック図である。手認識装置1は、例えば、ATM等に組み込まれるかまたはこれと連動させることにより、利用者が携帯電話を使用していることを認識して、利用者や管理者等に対していわゆる振込詐欺等の注意喚起を行うことができる。
図2は、手認識装置1をコンピュータを用いて実現するためのプログラムの処理例を示すフローチャートである。図2に示す例では、取得部11がカメラ装置2から送出された1つの画像フレームを取得すると、顔認識部12は、顔位置検出を行う(Op01)。
(5)上記手認識装置において、前記取得部は、複数の撮像装置から同じ顔を撮影した複数の顔画像を取得し、前記第1判定部は、前記複数の顔画像に基づいて、前記顔内解析領域の被写体までの距離に関する情報を算出し、当該距離に関する情報をさらに用いて、前記周辺解析領域または前記顔内解析領域に手があるか否かを判断してもよい。これにより、顔の上の手は顔よりも手前に位置することに基づいて、手の認識処理を補完することができる。例えば、利用者の顔の表面にある傷やあざ等があることにより、フィルタリング処理においてエッジ成分が検出された場合であっても、傷やあざ等のある顔の表面の距離を考慮することにより、誤認識を防止することができる。このため、認識精度を向上させることができる。
図7は、本変形例にかかる手認識装置の構成例を示す機能ブロック図である。手認識装置1の取得部11は、カメラ装置2およびカメラ装置2aにおいて、対象人物を同時に撮影した顔画像を取得する。なお、カメラ装置2およびカメラ装置2aは、所定間隔距離を隔てた位置に配置されている。また、その他の機能ブロック図の構成は、上記実施形態と同様である。
本変形例において、手認識装置1をコンピュータを用いて実現するためのプログラムの処理例を示すフローチャートは、図2に示したものと同様である。但し、本変形例においては、取得部11がカメラ装置2およびカメラ装置2aのそれぞれから送出された2つの画像フレームを取得すると、顔認識部12は、顔位置検出を行う(Op01)。なお、顔位置検出(Op01)、第2判定処理(Op02)、鼻位置検出(Op04)、眼位置検出(Op04)は、カメラ装置2から取得した1つの画像フレームを用いて行うようにすればよい。
[3−1.ジェスチャー検出]
(7)上記手認識装置において、前記第1判定部および前記第2判定部の判断に基づいて、顔画像の人のジェスチャーを決定する、ジェスチャー検出部をさらに備えていてもよい。これにより、例えば、特定のジェスチャーが行われていること等を認識して、このジェスチャーに対応する処理等を実行させることができる。
上記実施形態においては、顔の耳近傍に小領域を設定するとともに、鼻と眼の位置関係から頬領域を設定する構成としたが、フィルタ処理の対象となる領域はこれに限られない。例えば、「手」認識を利用するアプリケーションに応じて適宜変更することが可能である。
上記実施形態においては、図3に示す各機能ブロックを、ソフトウェアを実行するCPUの処理によって実現している。しかし、その一部もしくは全てを、ロジック回路等のハードウェアによって実現してもよい。なお、プログラムの一部の処理をさらに、オペレーティング・システム(OS)にさせるようにしてもよい。
12 顔認識部
13 周辺領域決定部
14 第2判定部
15 顔内領域決定部
16 第1判定部
17 電話使用判断部
2 カメラ装置
3 外部装置
Claims (12)
- 顔画像を取得する取得部と、
顔画像のうち顔領域を認識する顔認識部と、
前記顔領域に基づいて、前記顔領域内の顔内解析領域を決定する顔内領域決定部と、
前記顔内領域決定部で決定された前記顔内解析領域の画素値を用いて、前記顔内解析領域内に手があるか否かを判断する第1判定部と、
前記顔領域に基づいて、前記顔領域の周辺の周辺解析領域を決定する周辺領域決定部と、
前記周辺領域決定部で決定された周辺解析領域の画素値を用いて、前記周辺解析領域内に手があるか否かを判断する第2判定部とを備え、
前記第1判定部は、前記第2判定部で、前記周辺解析領域に手がないと判断された場合に、前記顔内解析領域に手があるか否かを判断する、手認識装置。 - 顔画像を取得する取得部と、
顔画像のうち顔領域を認識する顔認識部と、
前記顔領域に基づいて、前記顔領域内の顔内解析領域を決定する顔内領域決定部と、
前記顔内領域決定部で決定された前記顔内解析領域の画素値を用いて、前記顔内解析領域内に手があるか否かを判断する第1判定部と、
前記顔領域に基づいて、前記顔領域の周辺の周辺解析領域を決定する周辺領域決定部と、
前記周辺領域決定部で決定された周辺解析領域の画素値を用いて、前記周辺解析領域内に手があるか否かを判断する第2判定部とを備え、
前記第1判定部による判断と、前記第2判定部による判断に基づいて、顔近傍の手を認識する、手認識装置。 - 前記第1判定部は、前記顔領域内の頬の領域を検出し、頬の領域を前記顔内解析領域に決定する、請求項1又は2に記載の、手顔認識装置。
- 前記第1判定部は、前記顔内解析領域をエッジ検出し、エッジ検出結果と、前記顔内解析領域の画素値とに基づいて、前記顔内解析領域内に手があるか否かを判断する、請求項1〜3のいずれか1項に記載の手認識装置。
- 前記取得部は、複数の撮像装置から同じ顔を撮影した複数の顔画像を取得し、
前記第1判定部は、前記複数の顔画像に基づいて、前記顔内解析領域の被写体までの距離に関する情報を算出し、当該距離に関する情報をさらに用いて、前記周辺解析領域または前記顔内解析領域に手があるか否かを判断する、請求項1〜4のいずれか1項に記載の手認識装置。 - 前記第1判定部および前記第2判定部の判断に基づいて、顔画像の対象人物が電話で話しているか否かを検出する、電話使用判断部をさらに備える、請求項1〜5のいずれか1項に記載の手認識装置。
- 前記第1判定部および前記第2判定部の判断に基づいて、顔画像の人のジェスチャーを決定する、ジェスチャー検出部をさらに備える、請求項1〜5のいずれか1項に記載の手認識装置。
- 前記第2判定部は、前記周辺領域決定部で決定された周辺解析領域の画素値から算出される肌色成分を用いて、前記周辺解析領域内に手があるか否かを判断する、請求項4に記載の手認識装置。
- 顔画像を取得する取得処理と、
顔画像のうち顔領域を認識する顔認識処理と、
前記顔領域に基づいて、前記顔領域内の顔内解析領域を決定する顔内領域決定処理と、
前記顔内領域決定処理で決定された前記顔内解析領域の画素値を用いて、前記顔内解析領域内に手があるか否かを判断する第1判定処理と、
前記顔領域に基づいて、前記顔領域の周辺の周辺解析領域を決定する周辺領域決定処理と、
前記周辺領域決定処理で決定された周辺解析領域の画素値を用いて、前記周辺解析領域内に手があるか否かを判断する第2判定処理と、をコンピュータに実行させ、
前記第2判定処理で、前記周辺解析領域に手がないと判断された場合に、前記顔内解析領域に手があるか否かを判断する前記第1判定処理をコンピュータに実行させる、手認識プログラム。 - 顔画像を取得する取得工程と、
顔画像のうち顔領域を認識する顔認識工程と、
前記顔領域に基づいて、前記顔領域内の顔内解析領域を決定する顔内領域決定工程と、
前記顔内領域決定工程で決定された前記顔内解析領域の画素値を用いて、前記顔内解析領域内に手があるか否かを判断する第1判定工程と、
前記顔領域に基づいて、前記顔領域の周辺の周辺解析領域を決定する周辺領域決定工程と、
前記周辺領域決定工程で決定された周辺解析領域の画素値を用いて、前記周辺解析領域内に手があるか否かを判断する第2判定工程とを含み、
前記第2判定工程で、前記周辺解析領域に手がないと判断された場合に、前記第1判定工程において、前記顔内解析領域に手があるか否かを判断する、手認識方法。 - 顔画像を取得する取得処理と、
顔画像のうち顔領域を認識する顔認識処理と、
前記顔領域に基づいて、前記顔領域内の顔内解析領域を決定する顔内領域決定処理と、
前記顔内領域決定処理で決定された前記顔内解析領域の画素値を用いて、前記顔内解析領域内に手があるか否かを判断する第1判定処理と、
前記顔領域に基づいて、前記顔領域の周辺の周辺解析領域を決定する周辺領域決定処理と、
前記周辺領域決定部で決定された周辺解析領域の画素値を用いて、前記周辺解析領域内に手があるか否かを判断する第2判定処理と、
前記第1判定処理による判断と、前記第2判定処理による判断に基づいて、顔近傍の手を認識する処理と、をコンピュータに実行させる、手認識プログラム。 - 顔画像を取得する取得工程と、
顔画像のうち顔領域を認識する顔認識工程と、
前記顔領域に基づいて、前記顔領域内の顔内解析領域を決定する顔内領域決定工程と、
前記顔内領域決定工程で決定された前記顔内解析領域の画素値を用いて、前記顔内解析領域内に手があるか否かを判断する第1判定工程と、
前記顔領域に基づいて、前記顔領域の周辺の周辺解析領域を決定する周辺領域決定工程と、
前記周辺領域決定部で決定された周辺解析領域の画素値を用いて、前記周辺解析領域内に手があるか否かを判断する第2判定工程と、
前記第1判定工程による判断と、前記第2判定処理による判断に基づいて、顔近傍の手を認識する工程と、を含む、手認識方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009237316A JP5482080B2 (ja) | 2009-10-14 | 2009-10-14 | 手認識装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009237316A JP5482080B2 (ja) | 2009-10-14 | 2009-10-14 | 手認識装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011086052A JP2011086052A (ja) | 2011-04-28 |
JP5482080B2 true JP5482080B2 (ja) | 2014-04-23 |
Family
ID=44078960
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009237316A Active JP5482080B2 (ja) | 2009-10-14 | 2009-10-14 | 手認識装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5482080B2 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014030442A1 (ja) * | 2012-08-22 | 2014-02-27 | 日本電気株式会社 | 入力装置、入力方法、プログラム、及び、電子看板 |
JP5971108B2 (ja) | 2012-12-18 | 2016-08-17 | 富士通株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
JP6318535B2 (ja) * | 2013-10-09 | 2018-05-09 | 株式会社ニコン | 撮像装置 |
JP2023518284A (ja) * | 2020-03-20 | 2023-04-28 | 華為技術有限公司 | デバイスのハンドジェスチャベースの制御のための方法及びシステム |
WO2023228732A1 (ja) * | 2022-05-26 | 2023-11-30 | 日本電気株式会社 | 検出システム、検出方法、及び非一時的なコンピュータ可読媒体 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3926507B2 (ja) * | 1999-05-28 | 2007-06-06 | 沖電気工業株式会社 | 目位置及び顔位置検出装置 |
JP2004298988A (ja) * | 2003-03-31 | 2004-10-28 | Honda Motor Co Ltd | 移動ロボットの画像送信装置 |
JP4448304B2 (ja) * | 2003-09-11 | 2010-04-07 | セコム株式会社 | 顔検知装置 |
JP4367624B2 (ja) * | 2004-01-20 | 2009-11-18 | オムロン株式会社 | 運転中における電話使用時の車輌制御装置とその方法 |
JP2007052609A (ja) * | 2005-08-17 | 2007-03-01 | Sony Corp | 手領域検出装置及び手領域検出方法、並びにプログラム |
JP4942604B2 (ja) * | 2007-10-02 | 2012-05-30 | 本田技研工業株式会社 | 車両用電話通話判定装置 |
JP5272826B2 (ja) * | 2009-03-18 | 2013-08-28 | 富士通株式会社 | 通話判定装置、その方法、及びプログラム |
-
2009
- 2009-10-14 JP JP2009237316A patent/JP5482080B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2011086052A (ja) | 2011-04-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9846802B2 (en) | Passenger counting system, passenger counting method and passenger counting program | |
US9058519B2 (en) | System and method for passive live person verification using real-time eye reflection | |
JP6544244B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
WO2019080797A1 (zh) | 一种活体检测方法、终端和存储介质 | |
JP5482080B2 (ja) | 手認識装置 | |
KR20180138300A (ko) | 관심 객체에 대한 외부 광원의 속성 정보를 제공하는 방법을 지원하는 전자 장치 | |
JP2008234208A (ja) | 顔部位検出装置及びプログラム | |
US10121089B2 (en) | Object information extraction apparatus, object information extraction program, and object information extraction method | |
CN110956061A (zh) | 动作识别方法及装置、驾驶员状态分析方法及装置 | |
JP2013009825A (ja) | 視認負荷量推定装置、運転支援装置、および視認負荷量推定プログラム | |
US10685220B2 (en) | Image detection method and image detection device for determining posture of a user | |
JP2016177393A (ja) | 情報処理装置、顔認識方法、及びプログラム | |
US10699107B2 (en) | Image detection method and image detection device for determining posture of a user | |
EP4217693A1 (en) | Systems and methods for temperature measurement | |
JP6157165B2 (ja) | 視線検出装置及び撮像装置 | |
JP6720845B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
CN111144169A (zh) | 人脸识别方法、装置和电子设备 | |
US10257414B2 (en) | Method and system for smart group portrait | |
CN109784327B (zh) | 边界框确定方法、装置、电子设备及存储介质 | |
KR101961266B1 (ko) | 시선 추적 장치 및 이의 시선 추적 방법 | |
JP2008257574A (ja) | 画像処理方法、画像処理装置、画像処理システム及びコンピュータプログラム | |
US11257201B2 (en) | Computer-implemented method and system for preventing sight deterioration caused by prolonged use of electronic visual displays in low-light conditions | |
JP5493676B2 (ja) | 眼位置認識装置 | |
JP2018151685A (ja) | 動き量算出プログラム、動き量算出方法、動き量算出装置及び業務支援システム | |
EP3809310B1 (en) | Method and electronic device for detecting open and closed states of eyes |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120720 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130517 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130613 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130809 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20130814 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20130820 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140121 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140203 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5482080 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |