JP2012150837A - ジェスチャー認識装置、ジェスチャー認識方法及びそのプログラム - Google Patents
ジェスチャー認識装置、ジェスチャー認識方法及びそのプログラム Download PDFInfo
- Publication number
- JP2012150837A JP2012150837A JP2012102198A JP2012102198A JP2012150837A JP 2012150837 A JP2012150837 A JP 2012150837A JP 2012102198 A JP2012102198 A JP 2012102198A JP 2012102198 A JP2012102198 A JP 2012102198A JP 2012150837 A JP2012150837 A JP 2012150837A
- Authority
- JP
- Japan
- Prior art keywords
- motion
- gesture
- gesture recognition
- region
- detected
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- User Interface Of Digital Computer (AREA)
- Image Analysis (AREA)
Abstract
【解決手段】撮像した対象の動作に基づくジェスチャーを認識するジェスチャー認識装置において、ジェスチャーの認識条件を設定する認識条件設定部と、撮像された画像を複数の領域に分割した分割領域毎に、分割領域内の各画素の輝度の変化量に基づいて動き量を検出する動き量検出部と、動き量検出部により検出された動き量が所定の閾値以上である分割領域を動き領域として検出する動き領域検出部と、動き領域検出部により検出された動き領域からジェスチャーの認識に採用すべき分割領域である特定領域を検出する特定領域検出部と、少なくとも、特定領域検出部により検出された特定領域と、認識条件設定部により設定されたジェスチャーの認識条件とに基づいて、ジェスチャーを認識するジェスチャー認識部と、を備える。
【選択図】図2
Description
撮像した対象の動作に基づくジェスチャーを認識するジェスチャー認識装置において、
ジェスチャーの認識条件を設定する認識条件設定手段と、
撮像された画像を複数の領域に分割した分割領域毎に、分割領域内の各画素の輝度の変化量に基づいて動き量を検出する動き量検出手段と、
前記動き量検出手段により検出された動き量が所定の閾値以上である分割領域を動き領域として検出する動き領域検出手段と、
前記動き領域検出手段により検出された動き領域が、ジェスチャーの認識に採用すべき特定領域であるか否かを判別する特定領域判別手段と、
少なくとも、前記特定領域判別手段により特定領域であると判別された動き領域と、前記認識条件設定手段により設定されたジェスチャーの認識条件とに基づいて、ジェスチャーを認識するジェスチャー認識手段と、
を備える、ことを特徴とする。
前記動き領域検出手段は、前記動き量検出手段により検出された動き量が前記閾値設定手段により設定された閾値以上である分割領域を動き領域として検出してもよい。
前記ジェスチャー認識手段は、前記中心位置検出手段により検出された中心の位置に基づいてジェスチャーを認識してもよい。
前記特定領域判別手段により特定領域であると判別された動き領域が複数存在する場合に、該特定領域であると判別された複数の動き領域のうち、前記中心位置検出手段により検出された動きの中心位置を基準として、前記動き方向判別手段により判別されたジェスチャーの動きの方向の最も離れた位置に存在する動き領域を検出する先端位置検出手段と、をさらに備え、
前記ジェスチャー認識手段は、前記先端位置検出手段により検出された最も離れた位置に存在する動き領域の画像内の位置に基づいてジェスチャーを認識してもよい。
前記ジェスチャー認識手段は、前記撮像時刻取得手段により取得された画像の撮像時刻に基づいて、前記特定領域判別手段により継続して前記動き領域が特定領域であると判別された時間を求め、該求められた時間に応じたジェスチャーとして認識してもよい。
撮像した対象の動作に基づくジェスチャーを認識するジェスチャー認識方法において、
ジェスチャーの認識条件を設定する認識条件設定ステップと、
撮像された画像を複数の領域に分割した分割領域毎に、分割領域内の各画素の輝度の変化量に基づいて動き量を検出する動き量検出ステップと、
前記動き量検出ステップで検出された動き量が所定の閾値以上である分割領域を動き領域として検出する動き領域検出ステップと、
前記動き領域検出ステップで検出された動き領域が、ジェスチャーの認識に採用すべき特定領域であるか否かを判別する特定領域判別ステップと、
少なくとも、前記特定領域判別ステップで特定領域であると判別された動き領域と、前記認識条件設定ステップで設定されたジェスチャーの認識条件とに基づいて、ジェスチャーを認識するジェスチャー認識ステップと、
を備える、ことを特徴とする。
20 CPU(Central Processing Unit)
30 ROM(Read Only Memory)
40 RAM(Random Access Memory)
50 I/O(Input Output)部
60 ハードディスク
70 入力バッファ
80 出力バッファ
90 タイマカウンタ
100 ジェスチャー認識装置
110 画像入力部
120 時刻取得部
121 撮像時刻取得部
130 認識条件設定部
131 閾値設定部
140 動き量検出部
150 動きブロック検出部
160 特定ブロック検出部
161 連続ノイズ除去部
162 微少ノイズ除去部
170 ジェスチャー認識部
171 中心位置検出部
172 先端位置検出部
173 軌跡検出部
174 パターンマッチング部
180 コマンド処理部
190 画像出力部
200 カメラ
210 撮像部
300 プロジェクタ
310 投影部
400 スクリーン
500 被撮像者
撮像した対象の動作に基づくジェスチャーを認識するジェスチャー認識装置において、
ジェスチャーの認識条件を設定する認識条件設定手段と、
撮像された画像を複数の領域に分割した分割領域毎に動き量を検出する動き量検出手段と、
撮像された画像内における特定領域に含まれ、且つ、前記動き量検出手段により検出された動き量が所定の閾値以上である分割領域を、採用領域として設定する採用領域設定手段と、
少なくとも、前記採用領域設定手段により設定された採用領域と、前記認識条件設定手段により設定されたジェスチャーの認識条件とに基づいて、ジェスチャーを認識するジェスチャー認識手段と、
を備える、ことを特徴とする。
前記動き量検出手段は、分割領域内の各画素の輝度の変化量を自乗した値の総和を動き量として検出し、
前記採用領域設定手段は、前記閾値設定手段により設定された閾値と、前記動き量検出手段により検出された動き量とを比較することにより、動き量が閾値以上か否かを判定してもよい。
前記ジェスチャー認識手段は、前記中心位置検出手段により検出された中心の位置に基づいてジェスチャーを認識してもよい。
前記中心位置検出手段により検出された中心位置を基準として、前記動き方向判別手段により判別された方向の最も離れた位置に存在する採用領域を検出する先端位置検出手段と、をさらに備え、
前記ジェスチャー認識手段は、前記先端位置検出手段により検出された採用領域の画像内での位置に基づいてジェスチャーを認識してもよい。
前記ジェスチャー認識手段は、前記撮像時刻取得手段により取得された画像の撮像時刻に基づいて、前記採用領域設定手段により継続して前記分割領域が前記採用領域であると判別された時間を求め、該求められた時間に応じたジェスチャーとして認識してもよい。
撮像した対象の動作に基づくジェスチャーを認識するジェスチャー認識方法において、
ジェスチャーの認識条件を設定する認識条件設定ステップと、
撮像された画像を複数の領域に分割した分割領域毎に動き量を検出する動き量検出ステップと、
撮像された画像内における特定領域に含まれ、且つ、前記動き量検出ステップで検出された動き量が所定の閾値以上である分割領域を、採用領域として設定する採用領域設定ステップと、
少なくとも、前記採用領域設定ステップで設定された採用領域と、前記認識条件設定ステップで設定されたジェスチャーの認識条件とに基づいて、ジェスチャーを認識するジェスチャー認識ステップと、
を備える、ことを特徴とする。
上記目的を達成するため、本発明の第3の観点に係るプログラムは、
撮像した対象の動作に基づくジェスチャーを認識するジェスチャー認識装置が有するコンピュータを、
ジェスチャーの認識条件を設定する認識条件設定手段と、
撮像された画像を複数の領域に分割した分割領域毎に動き量を検出する動き量検出手段と、
撮像された画像内における特定領域に含まれ、且つ、前記動き量検出手段により検出された動き量が所定の閾値以上である分割領域を、採用領域として設定する採用領域設定手段と、
少なくとも、前記採用領域設定手段により設定された採用領域と、前記認識条件設定手段により設定されたジェスチャーの認識条件とに基づいて、ジェスチャーを認識するジェスチャー認識手段と、
して機能させる、ことを特徴とする。
Claims (10)
- 撮像した対象の動作に基づくジェスチャーを認識するジェスチャー認識装置において、
ジェスチャーの認識条件を設定する認識条件設定手段と、
撮像された画像を複数の領域に分割した分割領域毎に、分割領域内の各画素の輝度の変化量に基づいて動き量を検出する動き量検出手段と、
前記動き量検出手段により検出された動き量が所定の閾値以上である分割領域を動き領域として検出する動き領域検出手段と、
前記動き領域検出手段により検出された動き領域が、ジェスチャーの認識に採用すべき特定領域であるか否かを判別する特定領域判別手段と、
少なくとも、前記特定領域判別手段により特定領域であると判別された動き領域と、前記認識条件設定手段により設定されたジェスチャーの認識条件とに基づいて、ジェスチャーを認識するジェスチャー認識手段と、
を備える、ことを特徴とするジェスチャー認識装置。 - 前記認識条件設定手段は、前記所定の閾値を設定する閾値設定手段を備え、
前記動き領域検出手段は、前記動き量検出手段により検出された動き量が前記閾値設定手段により設定された閾値以上である分割領域を動き領域として検出する、
ことを特徴とする請求項1に記載のジェスチャー認識装置。 - 前記閾値設定手段は、順次撮像された画像の各画素の輝度の変化量に基づいて閾値を設定する、
ことを特徴とする請求項2に記載のジェスチャー認識装置。 - 前記動き量検出手段は、分割領域内の各画素の輝度の変化量を自乗した値の総和を動き量として検出する、
ことを特徴とする請求項1に記載のジェスチャー認識装置。 - 前記特定領域判別手段は、前記動き領域検出手段により所定時間以上継続して検出された動き領域を前記特定領域であると判別しない、
ことを特徴とする請求項1に記載のジェスチャー認識装置。 - 前記特定領域判別手段は、前記動き領域検出手段により複数の動き領域が検出された場合に、前記動き領域検出手段により検出された動き領域のうち、前記複数の動き領域を含む所定の領域に含まれる動き領域を前記特定領域であると判別する、
ことを特徴とする請求項1に記載のジェスチャー認識装置。 - 前記特定領域判別手段により特定領域であると判別された動き領域が複数存在する場合に、該特定領域であると判別された複数の動き領域の画像内の位置から、画像内におけるジェスチャーの動きの中心の位置を検出する中心位置検出手段、をさらに備え、
前記ジェスチャー認識手段は、前記中心位置検出手段により検出された中心の位置に基づいてジェスチャーを認識する、
ことを特徴とする請求項1に記載のジェスチャー認識装置。 - 撮像された複数の画像からジェスチャーの動きの方向を判別する動き方向判別手段と、
前記特定領域判別手段により特定領域であると判別された動き領域が複数存在する場合に、該特定領域であると判別された複数の動き領域のうち、前記中心位置検出手段により検出された動きの中心位置を基準として、前記動き方向判別手段により判別されたジェスチャーの動きの方向の最も離れた位置に存在する動き領域を検出する先端位置検出手段と、をさらに備え、
前記ジェスチャー認識手段は、前記先端位置検出手段により検出された最も離れた位置に存在する動き領域の画像内の位置に基づいてジェスチャーを認識する、
ことを特徴とする請求項7に記載のジェスチャー認識装置。 - 順次撮像された画像の撮像時刻を取得する撮像時刻取得手段、をさらに備え、
前記ジェスチャー認識手段は、前記撮像時刻取得手段により取得された画像の撮像時刻に基づいて、前記特定領域判別手段により継続して前記動き領域が特定領域であると判別された時間を求め、該求められた時間に応じたジェスチャーとして認識する、
ことを特徴とする請求項1に記載のジェスチャー認識装置。 - 撮像した対象の動作に基づくジェスチャーを認識するジェスチャー認識方法において、
ジェスチャーの認識条件を設定する認識条件設定ステップと、
撮像された画像を複数の領域に分割した分割領域毎に、分割領域内の各画素の輝度の変化量に基づいて動き量を検出する動き量検出ステップと、
前記動き量検出ステップで検出された動き量が所定の閾値以上である分割領域を動き領域として検出する動き領域検出ステップと、
前記動き領域検出ステップで検出された動き領域が、ジェスチャーの認識に採用すべき特定領域であるか否かを判別する特定領域判別ステップと、
少なくとも、前記特定領域判別ステップで特定領域であると判別された動き領域と、前記認識条件設定ステップで設定されたジェスチャーの認識条件とに基づいて、ジェスチャーを認識するジェスチャー認識ステップと、
を備える、ことを特徴とするジェスチャー認識方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012102198A JP5278576B2 (ja) | 2012-04-27 | 2012-04-27 | ジェスチャー認識装置、ジェスチャー認識方法及びそのプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012102198A JP5278576B2 (ja) | 2012-04-27 | 2012-04-27 | ジェスチャー認識装置、ジェスチャー認識方法及びそのプログラム |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007230846A Division JP4992618B2 (ja) | 2007-09-05 | 2007-09-05 | ジェスチャー認識装置及びジェスチャー認識方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012150837A true JP2012150837A (ja) | 2012-08-09 |
JP5278576B2 JP5278576B2 (ja) | 2013-09-04 |
Family
ID=46792960
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012102198A Active JP5278576B2 (ja) | 2012-04-27 | 2012-04-27 | ジェスチャー認識装置、ジェスチャー認識方法及びそのプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5278576B2 (ja) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014115802A (ja) * | 2012-12-10 | 2014-06-26 | Seiko Epson Corp | 表示装置、及び、表示装置の制御方法 |
JP2014215634A (ja) * | 2013-04-22 | 2014-11-17 | シャープ株式会社 | 入力装置、および、画像表示装置 |
CN104392442A (zh) * | 2014-11-18 | 2015-03-04 | 西北工业大学 | 基于非下采样Contourlet变换与主动轮廓的遥感图像变化检测方法 |
JP2015195020A (ja) * | 2014-03-20 | 2015-11-05 | 国立研究開発法人産業技術総合研究所 | ジェスチャ認識装置、システム及びそのプログラム |
JPWO2017130504A1 (ja) * | 2016-01-25 | 2018-11-22 | 裕行 池田 | 画像投影装置 |
JPWO2020017448A1 (ja) * | 2018-07-20 | 2021-06-24 | 国立研究開発法人産業技術総合研究所 | 入力装置、入力方法及び入力システム |
WO2022157880A1 (ja) * | 2021-01-21 | 2022-07-28 | 三菱電機株式会社 | 手検出装置、ジェスチャー認識装置および手検出方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002170121A (ja) * | 2000-12-04 | 2002-06-14 | Sony Corp | 画像処理装置および方法、並びに記録媒体 |
JP2006235771A (ja) * | 2005-02-23 | 2006-09-07 | Victor Co Of Japan Ltd | 遠隔操作装置 |
-
2012
- 2012-04-27 JP JP2012102198A patent/JP5278576B2/ja active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002170121A (ja) * | 2000-12-04 | 2002-06-14 | Sony Corp | 画像処理装置および方法、並びに記録媒体 |
JP2006235771A (ja) * | 2005-02-23 | 2006-09-07 | Victor Co Of Japan Ltd | 遠隔操作装置 |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014115802A (ja) * | 2012-12-10 | 2014-06-26 | Seiko Epson Corp | 表示装置、及び、表示装置の制御方法 |
JP2014215634A (ja) * | 2013-04-22 | 2014-11-17 | シャープ株式会社 | 入力装置、および、画像表示装置 |
JP2015195020A (ja) * | 2014-03-20 | 2015-11-05 | 国立研究開発法人産業技術総合研究所 | ジェスチャ認識装置、システム及びそのプログラム |
CN104392442A (zh) * | 2014-11-18 | 2015-03-04 | 西北工业大学 | 基于非下采样Contourlet变换与主动轮廓的遥感图像变化检测方法 |
JPWO2017130504A1 (ja) * | 2016-01-25 | 2018-11-22 | 裕行 池田 | 画像投影装置 |
US11513637B2 (en) | 2016-01-25 | 2022-11-29 | Hiroyuki Ikeda | Image projection device |
US11928291B2 (en) | 2016-01-25 | 2024-03-12 | Hiroyuki Ikeda | Image projection device |
JPWO2020017448A1 (ja) * | 2018-07-20 | 2021-06-24 | 国立研究開発法人産業技術総合研究所 | 入力装置、入力方法及び入力システム |
US11493994B2 (en) | 2018-07-20 | 2022-11-08 | National Institute Of Advanced Industrial Science And Technology | Input device using bioelectric potential |
WO2022157880A1 (ja) * | 2021-01-21 | 2022-07-28 | 三菱電機株式会社 | 手検出装置、ジェスチャー認識装置および手検出方法 |
JP7483060B2 (ja) | 2021-01-21 | 2024-05-14 | 三菱電機株式会社 | 手検出装置、ジェスチャー認識装置および手検出方法 |
Also Published As
Publication number | Publication date |
---|---|
JP5278576B2 (ja) | 2013-09-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4992618B2 (ja) | ジェスチャー認識装置及びジェスチャー認識方法 | |
JP5278576B2 (ja) | ジェスチャー認識装置、ジェスチャー認識方法及びそのプログラム | |
US10445887B2 (en) | Tracking processing device and tracking processing system provided with same, and tracking processing method | |
CN112217998B (zh) | 拍摄装置、信息处理装置及其控制方法、存储介质 | |
JP5925068B2 (ja) | 映像処理装置、映像処理方法、およびプログラム | |
US20170076465A1 (en) | Image processing apparatus and image processing method | |
JP5547139B2 (ja) | 認識装置、方法及びプログラム | |
JP2018005881A (ja) | 顔検出追跡方法、ロボットヘッドの回動制御方法、及びロボット | |
EP3153990A1 (en) | Display control apparatus, display control method, and program | |
US9971411B2 (en) | Method, interactive device, and computer readable medium storing corresponding instructions for recognizing user behavior without user touching on input portion of display screen | |
JP2008009849A (ja) | 人物追跡装置 | |
US11609638B2 (en) | Recognizing and tracking gestures | |
JP2013215549A (ja) | 画像処理装置、画像処理プログラムおよび画像処理方法 | |
JP2012238293A (ja) | 入力装置 | |
US20190139229A1 (en) | Image-processing apparatus, image-processing system, image-processing method, and storage medium | |
US9842260B2 (en) | Image processing apparatus and image processing method of performing image segmentation | |
JP2016099643A (ja) | 画像処理装置、画像処理方法および画像処理プログラム | |
US9727145B2 (en) | Detecting device and detecting method | |
US20130265420A1 (en) | Video processing apparatus, video processing method, and recording medium | |
US20200074612A1 (en) | Image analysis apparatus, image analysis method, and recording medium | |
US10824237B2 (en) | Screen display control method and screen display control system | |
US10416814B2 (en) | Information processing apparatus to display an image on a flat surface, method of controlling the same, and storage medium | |
JP5951966B2 (ja) | 画像処理装置、画像処理システム、画像処理方法、及びプログラム | |
JP2021056899A (ja) | 画像処理装置、画像処理方法およびプログラム | |
US20240069647A1 (en) | Detecting method, detecting device, and recording medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120525 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120525 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130319 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130423 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130506 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 Ref document number: 5278576 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |