JP2010040052A - 画像処理装置、画像処理方法、画像処理プログラム - Google Patents
画像処理装置、画像処理方法、画像処理プログラム Download PDFInfo
- Publication number
- JP2010040052A JP2010040052A JP2009216870A JP2009216870A JP2010040052A JP 2010040052 A JP2010040052 A JP 2010040052A JP 2009216870 A JP2009216870 A JP 2009216870A JP 2009216870 A JP2009216870 A JP 2009216870A JP 2010040052 A JP2010040052 A JP 2010040052A
- Authority
- JP
- Japan
- Prior art keywords
- image
- area
- object area
- color information
- color
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Abstract
【課題】認識対象の個体差や撮影環境の変動などの不安定要因があったとしても、精度良く画像中の対象オブジェクトを認識する。
【解決手段】オブジェクト認識エンジン31は、画像変換部30により変換された白黒画像から顔画像と手画像に相当するオブジェクト領域を検出する。色平均抽出部34は、顔画像オブジェクト領域の色情報を抽出し、この色情報をもとに基準色データを設定する。また、色平均抽出部34は、手画像オブジェクト領域の候補のそれぞれから色情報を抽出する。フィルタリング部35は、手画像オブジェクト領域の候補のそれぞれについて、基準色データと色情報とを比較し、この比較結果に基づいて手画像オブジェクト領域を絞り込み、最終的に手画像オブジェクト領域の候補の何れかを認識対象のオブジェクトとして出力する。
【選択図】図3
Description
まず、図1および図2を参照して、本発明の一実施形態に係る画像処理装置の構成について説明する。この画像処理装置は、例えば、ノートブック型パーソナルコンピュータ10として実現されている。
色平均抽出部34は、オブジェクト認識エンジン31によって画像中から検出されたオブジェクト領域のカラー画像データをもとにオブジェクト領域毎の色情報を抽出する。本実施形態では、オブジェクト領域について色平均を算出して色情報とする。なお、オブジェクト領域の色平均ではなく、オブジェクト領域の特徴を表す他の色情報を算出するようにしても良い。色平均抽出部34は、顔画像オブジェクト領域の画像の色情報を抽出して基準色データを設定してフィルタリング部35に出力すると共に基準色データ記憶部36に記憶させる(基準色データ設定処理)。また、色平均抽出部34は、手画像オブジェクト領域の候補のそれぞれについて色情報を抽出してフィルタリング部35に出力する。
図4に示すように、本実施形態におけるパーソナルコンピュータ10では、ジェスチャ認識プログラム112cが起動されると、カメラ21によってカラー画像を撮影して、この画像をもとにしてユーザの手の形や動きを認識するオブジェクト認識処理を実行する。
図5は、基準色データを設定するための基準色データ設定処理を説明するためのフローチャートである。
まず、カメラ21によって撮影されたカラー画像は、画像変換部30に出力されて白黒画像に変換される。オブジェクト認識エンジン31は、画像変換部30から出力される白黒画像について、オブジェクト辞書32aに登録された辞書データをもとに顔画像オブジェクト領域を検出する(ステップA1)。例えば、白黒画像から顔の形状(輪郭、目、鼻、口の組み合わせ等)に該当する領域を、辞書データとのマッチングにより検出していく。顔画像については、手画像と比較して特徴的な要素を含むために、より確実に検出することができる。
オブジェクト認識エンジン31は、画像変換部30から出力される白黒画像について、オブジェクト辞書32bに登録された辞書データをもとに、例えば辞書データとのマッチングにより手画像オブジェクト領域を検出する。オブジェクト辞書32bには、ハンド・ジェスチャを認識するための各種の手の形(握りこぶし、開く、指を立てる/差すなど)に対応する辞書データが登録されているため、ユーザが何らかの操作を指示するために予め決められた所定の手の形にすることで、この手の画像を手画像オブジェクト領域として検出することができる。
Claims (12)
- 予め設定された色情報に基づき画像中の領域を特定した第1のオブジェクトの形状をもとにして第1オブジェクト領域を検出する第1オブジェクト領域検出手段と、
前記第1オブジェクト領域の画像の色情報を抽出して基準色データを設定する色情報抽出手段と、
前記第1のオブジェクトとは異なる認識対象とする第2のオブジェクトの形状をもとにして第2オブジェクト領域の候補を検出する第2オブジェクト領域検出手段と、
前記第2オブジェクト領域検出手段により検出された前記第2オブジェクト領域の候補のうち、前記色情報抽出手段により設定された前記基準色データを持つ前記第2オブジェクト領域を認識対象として出力する出力手段と
を具備したことを特徴とする画像処理装置。 - 前記色情報抽出手段は、前記色情報として前記第1オブジェクト領域における色平均を求めることを特徴とする請求項1記載の画像処理装置。
- 前記色情報抽出手段によって設定された前記基準色データを、複数枚の画像分記憶する基準色データ記憶手段をさらに具備し、
前記出力手段は、前記画像から前記第1オブジェクト領域が検出されなかった場合に、前記基準色データ記憶手段により記憶された直近の画像に対応する前記基準色データをもとに前記第2オブジェクト領域を出力することを特徴とする請求項1記載の画像処理装置。 - 前記第1オブジェクト領域検出手段は、前記画像から人物の顔画像に相当する領域を前記第1オブジェクト領域として検出し、
前記第2オブジェクト領域検出手段は、前記画像から人物の手画像に相当する領域を前記第2オブジェクト領域として検出することを特徴とする請求項1記載の画像処理装置。 - 予め設定された色情報に基づき画像中の領域を特定した第1のオブジェクトの形状をもとにして第1オブジェクト領域を検出する第1オブジェクト領域検出ステップと、
前記第1オブジェクト領域の画像の色情報を抽出して基準色データを設定する色情報抽出ステップと、
前記第1のオブジェクトとは異なる認識対象とする第2のオブジェクトの形状をもとにして第2オブジェクト領域の候補を検出する第2オブジェクト領域検出ステップと、
前記第2オブジェクト領域検出ステップにより検出された前記第2オブジェクト領域の候補のうち、前記色情報抽出ステップにより設定された前記基準色データ前記第2オブジェクト領域を認識対象として出力する出力ステップと
を具備したことを特徴とする画像処理方法。 - 前記色情報抽出ステップは、前記色情報として前記第1オブジェクト領域における色平均を求めることを特徴とする請求項5記載の画像処理方法。
- 前記色情報抽出ステップによって設定された前記基準色データを、複数枚の画像分記憶する基準色データ記憶ステップをさらに具備し、
前記出力ステップは、前記画像から前記第1オブジェクト領域が検出されなかった場合に、前記基準色データ記憶ステップにより記憶された直近の画像に対応する前記基準色データをもとに前記第2オブジェクト領域を出力することを特徴とする請求項5記載の画像処理方法。 - 前記第1オブジェクト領域検出ステップは、前記画像から人物の顔画像に相当する領域を前記第1オブジェクト領域として検出し、
前記第2オブジェクト領域検出ステップは、前記画像から人物の手画像に相当する領域を前記第2オブジェクト領域として検出することを特徴とする請求項5記載の画像処理方法。 - コンピュータを、
予め設定された色情報に基づき画像中の領域を特定した第1のオブジェクトの形状をもとにして第1オブジェクト領域を検出する第1オブジェクト領域検出手段と、
前記第1オブジェクト領域の画像の色情報を抽出して基準色データを設定する色情報抽出手段と、
前記第1のオブジェクトとは異なる認識対象とする第2のオブジェクトの形状をもとにして第2オブジェクト領域の候補を検出する第2オブジェクト領域検出手段と、
前記第2オブジェクト領域検出手段により検出された前記第2オブジェクト領域の候補のうち、前記色情報抽出手段により設定された前記基準色データ前記第2オブジェクト領域を認識対象として出力する出力手段として機能させることを特徴とする画像処理プログラム。 - 前記色情報抽出手段は、前記色情報として前記第1オブジェクト領域における色平均を求めることを特徴とする請求項9記載の画像処理プログラム。
- 前記色情報抽出手段によって設定された前記基準色データを、複数枚の画像分記憶する基準色データ記憶手段としてさらに機能させ、
前記出力手段は、前記画像から前記第1オブジェクト領域が検出されなかった場合に、前記基準色データ記憶手段により記憶された直近の画像に対応する前記基準色データをもとに前記第2オブジェクト領域を出力することを特徴とする請求項9記載の画像処理プログラム。 - 前記第1オブジェクト領域検出手段は、前記画像から人物の顔画像に相当する領域を前記第1オブジェクト領域として検出し、
前記第2オブジェクト領域検出手段は、前記画像から人物の手画像に相当する領域を前記第2オブジェクト領域として検出することを特徴とする請求項9記載の画像処理プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009216870A JP4945617B2 (ja) | 2009-09-18 | 2009-09-18 | 画像処理装置、画像処理方法、画像処理プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009216870A JP4945617B2 (ja) | 2009-09-18 | 2009-09-18 | 画像処理装置、画像処理方法、画像処理プログラム |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008139553A Division JP4384240B2 (ja) | 2008-05-28 | 2008-05-28 | 画像処理装置、画像処理方法、画像処理プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010040052A true JP2010040052A (ja) | 2010-02-18 |
JP4945617B2 JP4945617B2 (ja) | 2012-06-06 |
Family
ID=42012467
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009216870A Expired - Fee Related JP4945617B2 (ja) | 2009-09-18 | 2009-09-18 | 画像処理装置、画像処理方法、画像処理プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4945617B2 (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2011142313A1 (ja) * | 2010-05-11 | 2011-11-17 | 日本システムウエア株式会社 | 物体認識装置、方法、プログラム、および該ソフトウェアを格納したコンピュータ可読媒体 |
KR20150054087A (ko) * | 2013-11-11 | 2015-05-20 | 엘지전자 주식회사 | 객체를 포인터로 이용하는 안경형 이동 단말기 및 그 제어방법 |
JP2015211471A (ja) * | 2014-04-24 | 2015-11-24 | 富士通株式会社 | 画像処理装置及び方法 |
CN111429394A (zh) * | 2019-01-08 | 2020-07-17 | 阿里巴巴集团控股有限公司 | 基于图像的检测方法、装置、电子设备和存储介质 |
CN111753791A (zh) * | 2020-06-30 | 2020-10-09 | 联想(北京)有限公司 | 一种检测方法及检测设备 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003216955A (ja) * | 2002-01-23 | 2003-07-31 | Sharp Corp | ジェスチャ認識方法、ジェスチャ認識装置、対話装置及びジェスチャ認識プログラムを記録した記録媒体 |
JP2005202653A (ja) * | 2004-01-15 | 2005-07-28 | Canon Inc | 動作認識装置及び方法、動物体認識装置及び方法、機器制御装置及び方法、並びにプログラム |
JP2006155563A (ja) * | 2004-11-05 | 2006-06-15 | Fuji Xerox Co Ltd | 動作分析装置 |
JP2007042072A (ja) * | 2005-07-05 | 2007-02-15 | Omron Corp | 追跡装置 |
JP2007316882A (ja) * | 2006-05-25 | 2007-12-06 | Mitsubishi Electric Corp | 遠隔操作装置及び方法 |
-
2009
- 2009-09-18 JP JP2009216870A patent/JP4945617B2/ja not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003216955A (ja) * | 2002-01-23 | 2003-07-31 | Sharp Corp | ジェスチャ認識方法、ジェスチャ認識装置、対話装置及びジェスチャ認識プログラムを記録した記録媒体 |
JP2005202653A (ja) * | 2004-01-15 | 2005-07-28 | Canon Inc | 動作認識装置及び方法、動物体認識装置及び方法、機器制御装置及び方法、並びにプログラム |
JP2006155563A (ja) * | 2004-11-05 | 2006-06-15 | Fuji Xerox Co Ltd | 動作分析装置 |
JP2007042072A (ja) * | 2005-07-05 | 2007-02-15 | Omron Corp | 追跡装置 |
JP2007316882A (ja) * | 2006-05-25 | 2007-12-06 | Mitsubishi Electric Corp | 遠隔操作装置及び方法 |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2011142313A1 (ja) * | 2010-05-11 | 2011-11-17 | 日本システムウエア株式会社 | 物体認識装置、方法、プログラム、および該ソフトウェアを格納したコンピュータ可読媒体 |
JP5887264B2 (ja) * | 2010-05-11 | 2016-03-16 | 日本システムウエア株式会社 | 物体認識装置、方法、プログラム、および該ソフトウェアを格納したコンピュータ可読媒体 |
KR20150054087A (ko) * | 2013-11-11 | 2015-05-20 | 엘지전자 주식회사 | 객체를 포인터로 이용하는 안경형 이동 단말기 및 그 제어방법 |
KR102148648B1 (ko) * | 2013-11-11 | 2020-08-27 | 엘지전자 주식회사 | 객체를 포인터로 이용하는 안경형 이동 단말기 및 그 제어방법 |
JP2015211471A (ja) * | 2014-04-24 | 2015-11-24 | 富士通株式会社 | 画像処理装置及び方法 |
CN111429394A (zh) * | 2019-01-08 | 2020-07-17 | 阿里巴巴集团控股有限公司 | 基于图像的检测方法、装置、电子设备和存储介质 |
CN111429394B (zh) * | 2019-01-08 | 2024-03-01 | 阿里巴巴集团控股有限公司 | 基于图像的检测方法、装置、电子设备和存储介质 |
CN111753791A (zh) * | 2020-06-30 | 2020-10-09 | 联想(北京)有限公司 | 一种检测方法及检测设备 |
Also Published As
Publication number | Publication date |
---|---|
JP4945617B2 (ja) | 2012-06-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4384240B2 (ja) | 画像処理装置、画像処理方法、画像処理プログラム | |
TWI751161B (zh) | 終端設備、智慧型手機、基於臉部識別的認證方法和系統 | |
CN112911182B (zh) | 游戏互动方法、装置、终端及存储介质 | |
CN108509037B (zh) | 一种信息显示方法及移动终端 | |
US9507420B2 (en) | System and method for providing haptic feedback to assist in capturing images | |
WO2019185003A1 (zh) | 一种显示控制方法及设备 | |
CN105765516A (zh) | 通过使用已知的和有待穿戴的传感器的手势检测系统的分类 | |
CN108712603B (zh) | 一种图像处理方法及移动终端 | |
CN111726536A (zh) | 视频生成方法、装置、存储介质及计算机设备 | |
WO2016177154A1 (zh) | 一种切换移动终端工作模式的方法及装置 | |
WO2021147434A1 (zh) | 基于人工智能的人脸识别方法、装置、设备及介质 | |
US8400532B2 (en) | Digital image capturing device providing photographing composition and method thereof | |
US9971411B2 (en) | Method, interactive device, and computer readable medium storing corresponding instructions for recognizing user behavior without user touching on input portion of display screen | |
WO2019011098A1 (zh) | 解锁控制方法及相关产品 | |
JP4945617B2 (ja) | 画像処理装置、画像処理方法、画像処理プログラム | |
JP6504058B2 (ja) | 情報処理システム、情報処理方法およびプログラム | |
CN113723144A (zh) | 一种人脸注视解锁方法及电子设备 | |
US20140300535A1 (en) | Method and electronic device for improving performance of non-contact type recognition function | |
CN111566693A (zh) | 一种皱纹检测方法及电子设备 | |
US10389947B2 (en) | Omnidirectional camera display image changing system, omnidirectional camera display image changing method, and program | |
KR20180074124A (ko) | 얼굴 인식을 통해 전자 장치를 제어하는 방법 및 이를 수행하는 전자 장치 | |
US20220284738A1 (en) | Target user locking method and electronic device | |
CN111557007B (zh) | 一种检测眼睛睁闭状态的方法及电子设备 | |
JP2013197827A (ja) | 撮影補助装置、方法、並びに該撮影補助装置を搭載した撮影装置及びカメラ付き携帯端末 | |
CN107872619B (zh) | 一种拍照处理方法、装置及设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110422 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110426 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110627 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110719 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110920 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120207 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120305 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150309 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |