JP4470434B2 - 動作識別装置、及び対象物の姿勢識別装置 - Google Patents
動作識別装置、及び対象物の姿勢識別装置 Download PDFInfo
- Publication number
- JP4470434B2 JP4470434B2 JP2003347146A JP2003347146A JP4470434B2 JP 4470434 B2 JP4470434 B2 JP 4470434B2 JP 2003347146 A JP2003347146 A JP 2003347146A JP 2003347146 A JP2003347146 A JP 2003347146A JP 4470434 B2 JP4470434 B2 JP 4470434B2
- Authority
- JP
- Japan
- Prior art keywords
- image data
- face
- target
- image
- color
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/162—Detection; Localisation; Normalisation using pixel segmentation or colour matching
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Description
本発明の第1の実施の形態について図面を参照しながら説明する。本実施の形態に係る動作識別装置は、図1に示すように、制御部11と、記憶部12と、入出力インタフェース13と、表示部14と、を含んで構成されている。
以上説明した第1の実施の形態に係る認識装置は、所定の条件が満足される場合に、肌色の情報など、対象に固有な色を用いて対象物を認識する処理を行うものとしていたが、動きのある対象物(人物の顔部分などはその典型である)については、肌色等の色の情報ではなく、一連の画像データ間での動きに基づいて対象物を認識することもできる。
また第1実施形態における肌色(対象固有色)を利用した処理と、第2実施形態における動領域検出とを、第1顔特定処理部22の処理に組み合せてもよい。すなわち、制御部11は、所定の条件に基づいて、第1、第2、第3の顔特定処理部による処理を組み合せて用いてもよい。
これらの処理によって特定された顔部分を含む画像領域の情報は、他の処理、例えばカメラの雲台を制御して当該画像領域が画像データの中心となるようにカメラの視線方向を制御する処理等に供される。
第1(及び第3)の実施形態の説明における第2顔特定処理部25においては、その探索領域の起点として、直前に入力された画像データ内で特定された顔部分を含む画像領域を用いる例を示したが、第2の実施の形態における顔領域追跡部32の処理を制御部11に行わせ、上記探索領域の起点、すなわち初期値となる画像領域として、顔領域追跡部32によって得られる候補領域を用いてもよい。
Claims (5)
- 人物の顔を含む少なくとも一部を撮像して生成された一連の画像データを取得し、各画像データに撮像された人物の顔部分を認識する認識装置であって、
前記一連の画像データの各々を順次注目画像データとして、当該注目画像データから、人物の顔部分を含む画像領域を特定する顔部分特定手段と、
前記特定した画像領域内の画素値の平均で表される色を、当該人物に固有の対象固有色として、当該対象固有色を表す情報を取得する手段と、
を含み、
前記顔部分特定手段が、
現在の注目画像データから、対象固有色を表す情報を用いない第1の認識方法によって、前記顔部分を含む画像領域を特定する処理を行い、当該処理により画像領域が特定できない場合に、過去の注目画像データにおいて、前記第1の認識方法によって特定した領域内の色情報に基づいて対象固有色を求め、現在の注目画像データから当該対象固有色の部分の重心を求め、当該重心を中心として新たな探索領域を画定し、当該新たな探索領域内で、前記対象固有色の部分の重心を求める処理を、新たに求めた重心と前回求めた重心との距離が予め定めた値以下になって収束するまで繰り返し行い、収束の結果得られた探索領域を、顔部分を含む画像領域として特定する第2の認識方法に係る処理を行う
ことを特徴とする認識装置。 - 請求項1に記載の認識装置において、
前記第2の認識方法によって顔部分を含む画像領域を特定できないときに、顔部分が検出されなかったと判断することを特徴とする認識装置。 - 請求項1または2記載の認識装置において、
前記顔部分特定手段が第2の認識方法に係る処理を行う際に、過去の注目画像データにおいて、前記第1の認識方法によって特定した領域内の画素値の平均色を対象固有色とする
ことを特徴とする認識装置。 - 人物の顔を含む少なくとも一部を撮像して生成された一連の画像データを取得し、各画像データに撮像された人物の顔部分を認識する認識方法であって、コンピュータを用い、
前記一連の画像データの各々を順次注目画像データとして、当該注目画像データから、人物の顔部分を含む画像領域を特定する顔部分特定工程と、
前記特定した画像領域内の画素値の平均で表される色を、当該人物に固有の対象固有色として、当該対象固有色を表す情報を取得する工程と、
を含み、
前記顔部分特定工程にて、
現在の注目画像データから、対象固有色を表す情報を用いない第1の認識方法によって、前記顔部分を含む画像領域を特定する処理を行い、当該処理により画像領域が特定できない場合に、過去の注目画像データにおいて、前記第1の認識方法によって特定した領域内の色情報に基づいて対象固有色を求め、現在の注目画像データから当該対象固有色の部分の重心を求め、当該重心を中心として新たな探索領域を画定し、当該新たな探索領域内で、前記対象固有色の部分の重心を求める処理を、新たに求めた重心と前回求めた重心との距離が予め定めた値以下になって収束するまで繰り返し行い、収束の結果得られた探索領域を、顔部分を含む画像領域として特定する第2の認識方法に係る処理を行う
ことを特徴とする認識方法。 - コンピュータを、人物の顔を含む少なくとも一部を撮像して生成された一連の画像データを取得し、各画像データに撮像された人物の顔部分を認識する認識装置として機能させるプログラムであって、
コンピュータを、
前記一連の画像データの各々を順次注目画像データとして、当該注目画像データから、人物の顔部分を含む画像領域を特定する顔部分特定手段と、
前記特定した画像領域内の画素値の平均で表される色を、当該人物に固有の対象固有色として、当該対象固有色を表す情報を取得する手段と、
として機能させ、
前記顔部分特定手段として機能させる際に、
現在の注目画像データから、対象固有色を表す情報を用いない第1の認識方法によって、前記顔部分を含む画像領域を特定する処理を行い、当該処理により画像領域が特定できない場合に、過去の注目画像データにおいて、前記第1の認識方法によって特定した領域内の色情報に基づいて対象固有色を求め、現在の注目画像データから当該対象固有色の部分の重心を求め、当該重心を中心として新たな探索領域を画定し、当該新たな探索領域内で、前記対象固有色の部分の重心を求める処理を、新たに求めた重心と前回求めた重心との距離が予め定めた値以下になって収束するまで繰り返し行い、収束の結果得られた探索領域を、顔部分を含む画像領域として特定する第2の認識方法に係る処理を行う、
ことを特徴とするプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003347146A JP4470434B2 (ja) | 2003-10-06 | 2003-10-06 | 動作識別装置、及び対象物の姿勢識別装置 |
US10/958,430 US7813533B2 (en) | 2003-10-06 | 2004-10-06 | Operation-discerning apparatus and apparatus for discerning posture of subject |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003347146A JP4470434B2 (ja) | 2003-10-06 | 2003-10-06 | 動作識別装置、及び対象物の姿勢識別装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2005115544A JP2005115544A (ja) | 2005-04-28 |
JP4470434B2 true JP4470434B2 (ja) | 2010-06-02 |
Family
ID=34386393
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2003347146A Expired - Fee Related JP4470434B2 (ja) | 2003-10-06 | 2003-10-06 | 動作識別装置、及び対象物の姿勢識別装置 |
Country Status (2)
Country | Link |
---|---|
US (1) | US7813533B2 (ja) |
JP (1) | JP4470434B2 (ja) |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4830650B2 (ja) * | 2005-07-05 | 2011-12-07 | オムロン株式会社 | 追跡装置 |
US20080231726A1 (en) * | 2007-03-23 | 2008-09-25 | Motorola, Inc. | Apparatus and method for image color correction in a portable device |
JP4946729B2 (ja) * | 2007-08-27 | 2012-06-06 | セイコーエプソン株式会社 | 画像処理装置 |
JP2009199417A (ja) * | 2008-02-22 | 2009-09-03 | Denso Corp | 顔追跡装置及び顔追跡方法 |
US8306262B2 (en) * | 2008-05-15 | 2012-11-06 | Arcsoft, Inc. | Face tracking method for electronic camera device |
US8548257B2 (en) * | 2009-01-05 | 2013-10-01 | Apple Inc. | Distinguishing between faces and non-faces |
US8385638B2 (en) | 2009-01-05 | 2013-02-26 | Apple Inc. | Detecting skin tone in images |
US20100278395A1 (en) * | 2009-05-04 | 2010-11-04 | Jonathan Yen | Automatic backlit face detection |
CN101719222B (zh) * | 2009-11-27 | 2014-02-12 | 北京中星微电子有限公司 | 分类器训练方法和装置以及人脸认证方法和装置 |
US8922661B2 (en) * | 2009-11-30 | 2014-12-30 | Hewlett-Packard Development Company, L.P. | Stabilizing a subject of interest in captured video |
US8903132B2 (en) * | 2011-09-12 | 2014-12-02 | 2343127 Ontario Inc. | Efficient system and method for body part detection and tracking |
US20130329043A1 (en) * | 2012-06-11 | 2013-12-12 | Motorola Solutions, Inc. | Transmissions of images in a remote recognition system |
US10452894B2 (en) | 2012-06-26 | 2019-10-22 | Qualcomm Incorporated | Systems and method for facial verification |
US9996726B2 (en) | 2013-08-02 | 2018-06-12 | Qualcomm Incorporated | Feature identification using an RGB-NIR camera pair |
JP5808371B2 (ja) * | 2013-08-28 | 2015-11-10 | ヤフー株式会社 | 画像認識装置、画像認識方法及び画像認識プログラム |
US11930476B2 (en) | 2018-10-29 | 2024-03-12 | Nec Corporation | Sensor information integration system, sensor information integration method, program, and recording medium |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB9215102D0 (en) | 1992-07-16 | 1992-08-26 | Philips Electronics Uk Ltd | Tracking moving objects |
CA2145914A1 (en) * | 1994-05-27 | 1995-11-28 | Alexandros Eleftheriadis | Model-assisted coding of video sequences at low bit rates |
US5912980A (en) * | 1995-07-13 | 1999-06-15 | Hunke; H. Martin | Target acquisition and tracking |
JPH0944680A (ja) | 1995-07-26 | 1997-02-14 | Mitsubishi Electric Corp | 動画像の目領域抽出装置 |
JPH1051755A (ja) * | 1996-05-30 | 1998-02-20 | Fujitsu Ltd | テレビ会議端末の画面表示制御装置 |
JP3490910B2 (ja) | 1998-09-28 | 2004-01-26 | 三洋電機株式会社 | 顔領域検出装置 |
US6298145B1 (en) * | 1999-01-19 | 2001-10-02 | Hewlett-Packard Company | Extracting image frames suitable for printing and visual presentation from the compressed image data |
US6940545B1 (en) * | 2000-02-28 | 2005-09-06 | Eastman Kodak Company | Face detecting camera and method |
US6680745B2 (en) * | 2000-11-10 | 2004-01-20 | Perceptive Network Technologies, Inc. | Videoconferencing method with tracking of face and dynamic bandwidth allocation |
JP4590717B2 (ja) | 2000-11-17 | 2010-12-01 | ソニー株式会社 | 顔識別装置及び顔識別方法 |
TW505892B (en) * | 2001-05-25 | 2002-10-11 | Ind Tech Res Inst | System and method for promptly tracking multiple faces |
US7423686B2 (en) * | 2002-03-14 | 2008-09-09 | Canon Kabushiki Kaisha | Image pickup apparatus having auto-focus control and image pickup method |
JP2003281539A (ja) | 2002-03-25 | 2003-10-03 | Oki Electric Ind Co Ltd | 顔部品探索装置および顔部品探索方法 |
KR100474848B1 (ko) * | 2002-07-19 | 2005-03-10 | 삼성전자주식회사 | 영상시각 정보를 결합하여 실시간으로 복수의 얼굴을검출하고 추적하는 얼굴 검출 및 추적 시스템 및 방법 |
US7095786B1 (en) * | 2003-01-11 | 2006-08-22 | Neo Magic Corp. | Object tracking using adaptive block-size matching along object boundary and frame-skipping when object motion is low |
US7508961B2 (en) * | 2003-03-12 | 2009-03-24 | Eastman Kodak Company | Method and system for face detection in digital images |
US7454040B2 (en) * | 2003-08-29 | 2008-11-18 | Hewlett-Packard Development Company, L.P. | Systems and methods of detecting and correcting redeye in an image suitable for embedded applications |
JP4479194B2 (ja) * | 2003-08-29 | 2010-06-09 | 富士ゼロックス株式会社 | 動作識別装置、及び対象物の姿勢識別装置 |
-
2003
- 2003-10-06 JP JP2003347146A patent/JP4470434B2/ja not_active Expired - Fee Related
-
2004
- 2004-10-06 US US10/958,430 patent/US7813533B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2005115544A (ja) | 2005-04-28 |
US7813533B2 (en) | 2010-10-12 |
US20050074167A1 (en) | 2005-04-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4470434B2 (ja) | 動作識別装置、及び対象物の姿勢識別装置 | |
JP4792824B2 (ja) | 動作分析装置 | |
JP4372051B2 (ja) | 手形状認識装置及びその方法 | |
JP4479194B2 (ja) | 動作識別装置、及び対象物の姿勢識別装置 | |
JP4687265B2 (ja) | 画像分析装置 | |
US10146992B2 (en) | Image processing apparatus, image processing method, and storage medium that recognize an image based on a designated object type | |
JP5262705B2 (ja) | 運動推定装置及びプログラム | |
JP6492746B2 (ja) | 画像処理プログラム、画像処理装置、及び画像処理方法 | |
JP2007233871A (ja) | 画像処理装置、コンピュータの制御方法及びプログラム | |
JP7151875B2 (ja) | 画像処理装置、画像処理方法、およびプログラム | |
JP5887264B2 (ja) | 物体認識装置、方法、プログラム、および該ソフトウェアを格納したコンピュータ可読媒体 | |
JPWO2012046426A1 (ja) | 物体検出装置、物体検出方法および物体検出プログラム | |
US20200342224A1 (en) | Article Recognition System and Article Recognition Method | |
JP2011089784A (ja) | 物体方向推定装置 | |
US11544926B2 (en) | Image processing apparatus, method of processing image, and storage medium | |
JP2007304721A (ja) | 画像処理装置及び画像処理方法 | |
JP2010079651A (ja) | 動作認識装置、方法及びプログラム | |
JP2022111704A5 (ja) | ||
JP2006323779A (ja) | 画像処理方法、画像処理装置 | |
JP2005025568A (ja) | 頭部領域抽出装置 | |
JP2021144359A (ja) | 学習装置、推定装置、学習方法、及びプログラム | |
JP2008158776A (ja) | 特徴検出方法及び装置、プログラム、記憶媒体 | |
JP4867771B2 (ja) | テンプレートマッチング装置 | |
JP2006343989A (ja) | 画像処理装置、画像処理方法及び画像処理プログラム | |
JP2010110500A (ja) | 撮像装置及び撮像方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060921 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20071112 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20071115 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090810 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090818 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20091019 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20091110 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100106 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100209 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100222 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130312 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4470434 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130312 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140312 Year of fee payment: 4 |
|
LAPS | Cancellation because of no payment of annual fees |