JP5555193B2 - データ処理装置、データ処理システム、及びプログラム - Google Patents
データ処理装置、データ処理システム、及びプログラム Download PDFInfo
- Publication number
- JP5555193B2 JP5555193B2 JP2011043705A JP2011043705A JP5555193B2 JP 5555193 B2 JP5555193 B2 JP 5555193B2 JP 2011043705 A JP2011043705 A JP 2011043705A JP 2011043705 A JP2011043705 A JP 2011043705A JP 5555193 B2 JP5555193 B2 JP 5555193B2
- Authority
- JP
- Japan
- Prior art keywords
- face
- person
- image
- dimensional image
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/24—Aligning, centring, orientation detection or correction of the image
- G06V10/242—Aligning, centring, orientation detection or correction of the image by image rotation, e.g. by 90 degrees
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
- G06T7/248—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments involving reference images or patches
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/164—Detection; Localisation; Normalisation using holistic features
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/165—Detection; Localisation; Normalisation using facial parts and geometric relationships
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/213—Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods
- G06F18/2137—Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods based on criteria of topology preservation, e.g. multidimensional scaling or self-organising maps
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
- G06T2207/30201—Face
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- General Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Geometry (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Description
また、第4の態様に係るデータ処理システムによれば、作成手段は、取得手段が取得した人物の顔の二次元画像に基づいてその人物の顔の三次元画像を推定し、その三次元画像に基づいて顔方向マップを作成する。従って、その人物の顔の三次元画像を撮影するための専用の装置は不要であり、二次元画像を撮影する一般的なCCDカメラなどがあれば足りるため、装置構成を簡略化できるとともに、製品コストを低減することが可能となる。また、顔方向マップの作成のために複数の方向の顔画像を撮影する必要がないため、ユーザの利便性を向上することが可能となる。
また、第4の態様に係るデータ処理システムによれば、作成手段は、ニューラルネットワークを用いて二次元画像から三次元画像を推定する。これにより、三次元画像の推定を簡易に行うことが可能となる。
また、第5の態様に係るプログラムによれば、作成手段は、取得手段が取得した人物の顔の二次元画像に基づいてその人物の顔の三次元画像を推定し、その三次元画像に基づいて顔方向マップを作成する。従って、その人物の顔の三次元画像を撮影するための専用の装置は不要であり、二次元画像を撮影する一般的なCCDカメラなどがあれば足りるため、装置構成を簡略化できるとともに、製品コストを低減することが可能となる。また、顔方向マップの作成のために複数の方向の顔画像を撮影する必要がないため、ユーザの利便性を向上することが可能となる。
また、第5の態様に係るプログラムによれば、作成手段は、ニューラルネットワークを用いて二次元画像から三次元画像を推定する。これにより、三次元画像の推定を簡易に行うことが可能となる。
11 撮影部
12 データ処理部
14 記憶部
20 プログラム
31 取得部
33 作成部
34 判定部
40 顔方向マップ
51 階層型ニューラルネットワーク
53 コホーネン型ニューラルネットワーク
Claims (5)
- 人物の顔を撮影した画像を取得する取得手段と、
前記取得手段が取得したその人物の顔の画像に基づいて、その人物が複数の方向を向いた際の各方向における顔の画像を並べた顔方向マップを作成する作成手段と、
前記顔方向マップと、前記取得手段が取得したその人物の顔の動画像とに基づいて、その人物の顔の動作を判定する判定手段と、
を備え、
前記作成手段は、前記取得手段が取得したその人物の顔の二次元画像に基づいてその人物の顔の三次元画像を推定し、その三次元画像に基づいて前記顔方向マップを作成し、
前記作成手段は、ニューラルネットワークを用いて前記三次元画像を推定する、データ処理装置。 - 前記作成手段は、前記三次元画像を複数の方向に段階的に回転することによって、各方向におけるその人物の顔の画像を作成する、請求項1に記載のデータ処理装置。
- 前記作成手段は、前記三次元画像を複数の特定方向に回転することによって、各特定方向におけるその人物の顔の画像を作成し、複数の特定方向における複数の画像間の中間画像を、ニューラルネットワークを用いて作成する、請求項1に記載のデータ処理装置。
- 撮影装置と、
データ処理装置と、
を備え、
前記データ処理装置は、
人物の顔を撮影した画像を前記撮影装置から取得する取得手段と、
前記取得手段が取得したその人物の顔の画像に基づいて、その人物が複数の方向を向いた際の各方向における顔の画像を並べた顔方向マップを作成する作成手段と、
前記顔方向マップと、前記取得手段が前記撮影装置から取得したその人物の顔の動画像とに基づいて、その人物の顔の動作を判定する判定手段と、
を有し、
前記作成手段は、前記取得手段が取得したその人物の顔の二次元画像に基づいてその人物の顔の三次元画像を推定し、その三次元画像に基づいて前記顔方向マップを作成し、
前記作成手段は、ニューラルネットワークを用いて前記三次元画像を推定する、データ処理システム。 - データ処理装置に搭載されるコンピュータを、
人物の顔を撮影した画像を取得する取得手段と、
前記取得手段が取得したその人物の顔の画像に基づいて、その人物が複数の方向を向いた際の各方向における顔の画像を並べた顔方向マップを作成する作成手段と、
前記顔方向マップと、前記取得手段が取得したその人物の顔の動画像とに基づいて、その人物の顔の動作を判定する判定手段と、
として機能させるためのプログラムであって、
前記作成手段は、前記取得手段が取得したその人物の顔の二次元画像に基づいてその人物の顔の三次元画像を推定し、その三次元画像に基づいて前記顔方向マップを作成し、
前記作成手段は、ニューラルネットワークを用いて前記三次元画像を推定する、プログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011043705A JP5555193B2 (ja) | 2011-03-01 | 2011-03-01 | データ処理装置、データ処理システム、及びプログラム |
PCT/JP2012/054171 WO2012117901A1 (ja) | 2011-03-01 | 2012-02-21 | データ処理装置、データ処理システム、及びプログラム |
US14/002,591 US9230156B2 (en) | 2011-03-01 | 2012-02-21 | Data processor, data processing system, and computer-readable recording medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011043705A JP5555193B2 (ja) | 2011-03-01 | 2011-03-01 | データ処理装置、データ処理システム、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012181646A JP2012181646A (ja) | 2012-09-20 |
JP5555193B2 true JP5555193B2 (ja) | 2014-07-23 |
Family
ID=46757840
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011043705A Expired - Fee Related JP5555193B2 (ja) | 2011-03-01 | 2011-03-01 | データ処理装置、データ処理システム、及びプログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US9230156B2 (ja) |
JP (1) | JP5555193B2 (ja) |
WO (1) | WO2012117901A1 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6628494B2 (ja) * | 2015-04-17 | 2020-01-08 | Kddi株式会社 | 実空間情報によって学習する識別器を用いて物体を追跡する装置、プログラム及び方法 |
US10540768B2 (en) * | 2015-09-30 | 2020-01-21 | Samsung Electronics Co., Ltd. | Apparatus and method to segment object from image |
US10860887B2 (en) * | 2015-11-16 | 2020-12-08 | Samsung Electronics Co., Ltd. | Method and apparatus for recognizing object, and method and apparatus for training recognition model |
CN105975960B (zh) * | 2016-06-16 | 2019-03-15 | 湖北润宏科技股份有限公司 | 基于纹理方向能量特征的虹膜识别方法 |
US9943225B1 (en) * | 2016-09-23 | 2018-04-17 | International Business Machines Corporation | Early prediction of age related macular degeneration by image reconstruction |
JP7020264B2 (ja) | 2018-04-18 | 2022-02-16 | 富士通株式会社 | 動作判定プログラム、動作判定装置及び動作判定方法 |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3226641B2 (ja) * | 1992-02-04 | 2001-11-05 | 富士写真フイルム株式会社 | パターン学習方法 |
US6108440A (en) * | 1996-06-28 | 2000-08-22 | Sony Corporation | Image data converting method |
JP4526639B2 (ja) * | 2000-03-02 | 2010-08-18 | 本田技研工業株式会社 | 顔認識装置およびその方法 |
US7221809B2 (en) * | 2001-12-17 | 2007-05-22 | Genex Technologies, Inc. | Face recognition system and method |
AU2003280516A1 (en) * | 2002-07-01 | 2004-01-19 | The Regents Of The University Of California | Digital processing of video images |
JP3950802B2 (ja) * | 2003-01-31 | 2007-08-01 | 株式会社エヌ・ティ・ティ・ドコモ | 顔情報送信システム、顔情報送信方法、顔情報送信プログラム、及びコンピュータ読取可能な記録媒体 |
US7492924B2 (en) * | 2003-07-18 | 2009-02-17 | Intel Corporation | Face tracking |
JP2006146479A (ja) * | 2004-11-18 | 2006-06-08 | Yasuhiro Fukui | 入力装置 |
JP4824411B2 (ja) * | 2005-01-20 | 2011-11-30 | パナソニック株式会社 | 顔抽出装置、半導体集積回路 |
JP4516516B2 (ja) * | 2005-12-07 | 2010-08-04 | 本田技研工業株式会社 | 人物検出装置、人物検出方法及び人物検出プログラム |
JP4655235B2 (ja) * | 2008-03-14 | 2011-03-23 | ソニー株式会社 | 情報処理装置および方法、並びにプログラム |
US8306267B1 (en) * | 2011-05-09 | 2012-11-06 | Google Inc. | Object tracking |
-
2011
- 2011-03-01 JP JP2011043705A patent/JP5555193B2/ja not_active Expired - Fee Related
-
2012
- 2012-02-21 US US14/002,591 patent/US9230156B2/en not_active Expired - Fee Related
- 2012-02-21 WO PCT/JP2012/054171 patent/WO2012117901A1/ja active Application Filing
Also Published As
Publication number | Publication date |
---|---|
US9230156B2 (en) | 2016-01-05 |
JP2012181646A (ja) | 2012-09-20 |
WO2012117901A1 (ja) | 2012-09-07 |
US20140003664A1 (en) | 2014-01-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10990191B2 (en) | Information processing device and method, program and recording medium for identifying a gesture of a person from captured image data | |
US9129155B2 (en) | Systems and methods for initializing motion tracking of human hands using template matching within bounded regions determined using a depth map | |
US9111135B2 (en) | Systems and methods for tracking human hands using parts based template matching using corresponding pixels in bounded regions of a sequence of frames that are a specified distance interval from a reference camera | |
US9092665B2 (en) | Systems and methods for initializing motion tracking of human hands | |
US9098739B2 (en) | Systems and methods for tracking human hands using parts based template matching | |
JP5555193B2 (ja) | データ処理装置、データ処理システム、及びプログラム | |
CN109583304A (zh) | 一种基于结构光模组的快速3d人脸点云生成方法及装置 | |
Boutellaa et al. | On the use of Kinect depth data for identity, gender and ethnicity classification from facial images | |
CN104246793A (zh) | 移动设备的三维脸部识别 | |
US9727776B2 (en) | Object orientation estimation | |
WO2016107638A1 (en) | An image face processing method and apparatus | |
WO2013074153A1 (en) | Generating three dimensional models from range sensor data | |
KR20170092533A (ko) | 얼굴 포즈 교정 방법 및 장치 | |
CN113474816A (zh) | 弹性动态投影映射系统和方法 | |
Hernandez et al. | Near laser-scan quality 3-D face reconstruction from a low-quality depth stream | |
Luna et al. | Fast heuristic method to detect people in frontal depth images | |
JP5416489B2 (ja) | 三次元指先位置検出方法、三次元指先位置検出装置、およびプログラム | |
JP5217917B2 (ja) | 物体検知追跡装置,物体検知追跡方法および物体検知追跡プログラム | |
US20150063631A1 (en) | Dynamic image analyzing system and operating method thereof | |
CN112016495A (zh) | 人脸识别的方法、装置和电子设备 | |
JP2021022185A (ja) | 画像処理装置、画像処理プログラム、及び画像処理方法 | |
JPH11283040A (ja) | 操作制御装置および動作解析プログラムを記録したコンピュ―タ読み取り可能な記録媒体 | |
Mikhisor | 3D Face Tracking Using Stereo Cameras with Whole Body View | |
Shen et al. | Depth Sensor-Based Facial and Body Animation Control | |
JP5528172B2 (ja) | 顔画像処理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130329 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140218 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140416 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140509 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140530 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5555193 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |