KR101156547B1 - 알지비 이미지 및 깊이 이미지를 이용한 얼굴 및 손 탐색 방법 - Google Patents
알지비 이미지 및 깊이 이미지를 이용한 얼굴 및 손 탐색 방법 Download PDFInfo
- Publication number
- KR101156547B1 KR101156547B1 KR1020100138588A KR20100138588A KR101156547B1 KR 101156547 B1 KR101156547 B1 KR 101156547B1 KR 1020100138588 A KR1020100138588 A KR 1020100138588A KR 20100138588 A KR20100138588 A KR 20100138588A KR 101156547 B1 KR101156547 B1 KR 101156547B1
- Authority
- KR
- South Korea
- Prior art keywords
- image
- depth
- algibi
- camera
- face
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 51
- 238000012937 correction Methods 0.000 claims abstract description 18
- 230000003247 decreasing effect Effects 0.000 claims 1
- 238000000605 extraction Methods 0.000 description 5
- 238000001514 detection method Methods 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 3
- 238000012549 training Methods 0.000 description 2
- 241000405217 Viola <butterfly> Species 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000013527 convolutional neural network Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000630 rising effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/55—Depth or shape recovery from multiple images
- G06T7/571—Depth or shape recovery from multiple images from focus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/90—Determination of colour characteristics
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/194—Segmentation; Edge detection involving foreground-background segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/107—Static hand or arm
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
Landscapes
- Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Image Analysis (AREA)
Abstract
Description
도 2는 본 발명에 따른 얼굴 및 손 탐색 방법에서 수행하는 제1차 위치보정단계를 설명한다.
도 3은 제1차 위치 보정단계가 적용되는 예를 나타낸다.
도 4는 본 발명에 따른 얼굴 및 손 탐색 방법에서 수행하는 제2차 위치보정단계 중 깊이 바이너리 이미지가 생성되는 과정을 나타낸다.
도 5는 본 발명에 따른 얼굴 및 손 탐색 방법에서 수행하는 제2차 위치보정단계 중 알지비 바이너리 이미지가 생성되는 과정을 나타낸다.
도 6은 2개의 정렬방법을 사용하여 정렬한 결과를 나타낸다.
도 7은 하르 라이크 피쳐스를 이용한 얼굴 추출 결과를 나타낸다.
도 8은 시프트를 이용하여 손을 추출한 결과를 나타낸다.
도 9는 여러 명의 사람이 하나의 화면에 존재하는 경우에 대한 예를 나타낸다.
z: 깊이 카메라(Depth)와 중앙의 큰 물체와의 거리
f: 깊이 카메라(Depth)의 초점
f': 알지비 카메라(RGB)의 초점
k: 거리 z와 비례한 깊이 카메라(Depth) 내부의 거리
Claims (11)
- 대상물체에 대하여 알지비(RGB) 이미지 및 깊이(depth) 이미지를 생성하는 이미지 생성단계;
삼각기법을 이용하여 알지비 카메라와 깊이 카메라의 간격에 따른 상기 알지비 이미지와 상기 깊이 이미지의 위치를 보정하는 제1차 위치보정 단계; 및
상기 알지비 이미지 및 상기 깊이 이미지를 상기 대상물체에 포함된 특정 부위에 대하여 매칭시키는 매칭단계를 구비하며,
상기 위치보정 단계에 적용되는 삼각기법은,
상기 알지비 카메라와 상기 깊이 카메라 사이의 간격,
상기 알지비 카메라와 상기 깊이 카메라의 각각의 초점,
상기 알지비 카메라 및 상기 깊이 카메라와 상기 대상물체와의 각각의 거리; 및
상기 알지비 카메라 및 상기 깊이 카메라와 상기 대상물체와의 각각의 거리와 비례한 상기 알지비 카메라와 상기 깊이 카메라의 각각의 내부거리를 이용하며,
상기 깊이 이미지의 임의의 지점(x, y)에 대응되는 상기 알지비 이미지의 대응되는 지점(x', y')은,
상기 알지비 카메라와 상기 깊이 카메라 사이의 간격이 d이고,
상기 알지비 카메라와 상기 깊이 카메라의 각각의 초점이 f 및 f'이며,
상기 깊이 카메라와 상기 대상물체와의 각각의 거리가 z이고,
상기 깊이 카메라와 상기 대상물체와의 거리와 비례한 상기 깊이 카메라의 각각의 내부거리를 k라고 할 때,
로 표현되며, 여기서,
, , , 이며,
z'는 상기 대상물체로부터 상기 2개의 카메라를 연결하는 직선의 수직성분이고,
U는 상기 대상물체로부터 상기 2개의 카메라를 연결하는 직선이 만나는 지점으로부터 상기 깊이 카메라까지의 거리, 그리고
V는 상기 대상물체로부터 상기 2개의 카메라를 연결하는 직선이 만나는 지점으로부터 상기 알지비 카메라까지의 거리인 얼굴 및 손 탐색 방법. - 제1항에 있어서,
상기 대상물체는 적어도 하나의 사람과 배경이며,
상기 알지비 이미지 및 상기 깊이 이미지 각각은 상기 적어도 하나의 사람과 상기 배경을 구분하여 촬영하고 이를 중첩시킨 이미지인 얼굴 및 손 탐색 방법. - 제2항에 있어서, 상기 특정 부위는,
상기 적어도 하나의 사람의 얼굴 및 손 중 적어도 하나인 얼굴 및 손 탐색 방법. - 삭제
- 삭제
- 제3항에 있어서,
상기 2개의 카메라가 평행하지 않거나 높이가 서로 다른 상태에서 상기 이미지를 생성한 경우,
상기 알지비 이미지 및 상기 깊이 이미지를 보정하는 제2차 위치보정 단계를 더 포함하는 얼굴 및 손 탐색 방법. - 제6항에 있어서, 상기 제2차 위치보정 단계는,
상기 알지비 이미지 및 상기 깊이 이미지에 일정한 기준값을 적용하여 알지비 바이너리 이미지 및 깊이 바이너리 이미지를 각각 생성하는 바이너리 이미지 생성단계; 및
상기 알지비 바이너리 이미지와 상기 깊이 바이너리 이미지를 정렬(alignment) 시키는 이미지 정렬 단계를 포함하는 얼굴 및 손 탐색 방법. - 제7항에 있어서,
상기 알지비 바이너리 이미지 및 상기 깊이 바이너리 이미지 각각은 상기 배경과 상기 적어도 하나의 사람과의 이미지의 차이가 상기 기준값 보다 큰 경우에는 '1(one)'을 할당하고 작은 경우에는 '0(zero)'을 할당하여 생성되는 얼굴 및 손 탐색 방법. - 제7항에 있어서, 상기 이미지 정렬 단계는,
상기 바이너리 이미지 중 하나의 크기를 증감시키면서 다른 하나의 바이너리 이미지와 크기를 일치시키는 크기 조절 단계; 및
상기 바이너리 이미지 중 하나의 위치를 상하좌우로 이동시키면서 다른 하나의 바이너리 이미지와 일치시키는 이동 조절 단계 중
적어도 하나의 단계를 수행하는 얼굴 및 손 탐색 방법. - 제9항에 있어서, 상기 이미지 정렬 단계는,
상기 2개의 바이너리 이미지의 크기를 일정한 스케일로 감소시킨 후 상기 크기 조절 단계 및 상기 이동 조절 단계 중 적어도 하나를 수행하고,
상기 크기 조절 단계에서 결정된 크기조절비율 및 상기 이동 조절 단계에서 결정된 이동조절비율을 감소시키기 전의 원본 바이너리 이미지에 대응되는 비율로 변환한 후, 상기 비율을 상기 감소시키지 않은 원본 바이너리 이미지에 적용하여 상기 이미지 정렬 단계를 수행하는 얼굴 및 손 탐색 방법. - 제1항에 있어서, 상기 매칭단계는,
상기 특정 부위에 대응되는 상기 알지비 이미지 및 상기 깊이 이미지에 대한 정보를 포함하는 매칭 이미지를 더 생성하는 얼굴 및 손 탐색 방법.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020100138588A KR101156547B1 (ko) | 2010-12-30 | 2010-12-30 | 알지비 이미지 및 깊이 이미지를 이용한 얼굴 및 손 탐색 방법 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020100138588A KR101156547B1 (ko) | 2010-12-30 | 2010-12-30 | 알지비 이미지 및 깊이 이미지를 이용한 얼굴 및 손 탐색 방법 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR101156547B1 true KR101156547B1 (ko) | 2012-06-20 |
Family
ID=46688980
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020100138588A KR101156547B1 (ko) | 2010-12-30 | 2010-12-30 | 알지비 이미지 및 깊이 이미지를 이용한 얼굴 및 손 탐색 방법 |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101156547B1 (ko) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113743191A (zh) * | 2021-07-16 | 2021-12-03 | 深圳云天励飞技术股份有限公司 | 人脸图像对齐检测方法、装置、电子设备及存储介质 |
CN115475349A (zh) * | 2021-06-15 | 2022-12-16 | 丰田自动车株式会社 | 步行状态测量系统、步行状态测量方法和非暂时性计算机可读介质 |
US12094134B2 (en) | 2021-08-04 | 2024-09-17 | Hyundai Motor Company | Electronic device and method for tracking object thereof |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20090027003A (ko) * | 2007-09-11 | 2009-03-16 | 삼성전자주식회사 | 영상 매칭 장치 및 방법 |
KR20090087638A (ko) * | 2008-02-13 | 2009-08-18 | 삼성전자주식회사 | 컬러 영상과 깊이 영상을 매칭하는 방법 및 장치 |
KR100916836B1 (ko) * | 2008-05-29 | 2009-09-14 | 고려대학교 산학협력단 | 지시형 제스처를 인식하는 방법 및 장치 |
-
2010
- 2010-12-30 KR KR1020100138588A patent/KR101156547B1/ko active IP Right Grant
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20090027003A (ko) * | 2007-09-11 | 2009-03-16 | 삼성전자주식회사 | 영상 매칭 장치 및 방법 |
KR20090087638A (ko) * | 2008-02-13 | 2009-08-18 | 삼성전자주식회사 | 컬러 영상과 깊이 영상을 매칭하는 방법 및 장치 |
KR100916836B1 (ko) * | 2008-05-29 | 2009-09-14 | 고려대학교 산학협력단 | 지시형 제스처를 인식하는 방법 및 장치 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115475349A (zh) * | 2021-06-15 | 2022-12-16 | 丰田自动车株式会社 | 步行状态测量系统、步行状态测量方法和非暂时性计算机可读介质 |
CN113743191A (zh) * | 2021-07-16 | 2021-12-03 | 深圳云天励飞技术股份有限公司 | 人脸图像对齐检测方法、装置、电子设备及存储介质 |
CN113743191B (zh) * | 2021-07-16 | 2023-08-01 | 深圳云天励飞技术股份有限公司 | 人脸图像对齐检测方法、装置、电子设备及存储介质 |
US12094134B2 (en) | 2021-08-04 | 2024-09-17 | Hyundai Motor Company | Electronic device and method for tracking object thereof |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106940704B (zh) | 一种基于栅格地图的定位方法及装置 | |
CN104848858B (zh) | 二维码以及用于机器人的视觉-惯性组合导航系统及方法 | |
JP5952001B2 (ja) | 深さ情報を用いたカメラモーションの推定方法および装置、拡張現実システム | |
KR101865655B1 (ko) | 증강현실 상호 작용 서비스 제공 장치 및 방법 | |
JP6348093B2 (ja) | 入力データから検出対象物の像を検出する画像処理装置および方法 | |
US6671399B1 (en) | Fast epipolar line adjustment of stereo pairs | |
US10444617B2 (en) | Image processing apparatus and image processing method | |
US20130051626A1 (en) | Method And Apparatus For Object Pose Estimation | |
WO2017041731A1 (en) | Markerless multi-user multi-object augmented reality on mobile devices | |
WO2015037178A1 (ja) | 姿勢推定方法及びロボット | |
EP3182371A1 (en) | Threshold determination in for example a type ransac algorithm | |
KR101261409B1 (ko) | 영상 내 노면표시 인식시스템 | |
CN103839258A (zh) | 一种二值化激光散斑图像的深度感知方法 | |
CN103252778A (zh) | 用于估计机器人位置的设备及其方法 | |
WO2014017006A1 (ja) | 姿勢推定装置、姿勢推定方法、および姿勢推定プログラム | |
EP3239933A1 (en) | Authoring device and authoring method | |
CN103020988A (zh) | 一种激光散斑图像的运动向量生成方法 | |
KR101478709B1 (ko) | Rgb-d 영상 특징점 추출 및 특징 기술자 생성 방법 및 장치 | |
EP3185212B1 (en) | Dynamic particle filter parameterization | |
JP2016177491A (ja) | 入力装置、指先位置検出方法及び指先位置検出用コンピュータプログラム | |
JP6410231B2 (ja) | 位置合わせ装置、位置合わせ方法及び位置合わせ用コンピュータプログラム | |
KR101156547B1 (ko) | 알지비 이미지 및 깊이 이미지를 이용한 얼굴 및 손 탐색 방법 | |
JPH07103715A (ja) | 視覚に基く三次元位置および姿勢の認識方法ならびに視覚に基く三次元位置および姿勢の認識装置 | |
KR20120020711A (ko) | 물체 인식 시스템 및 그 물체 인식 방법 | |
JP6016242B2 (ja) | 視点推定装置及びその分類器学習方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
PA0109 | Patent application |
Patent event code: PA01091R01D Comment text: Patent Application Patent event date: 20101230 |
|
PA0201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
PE0902 | Notice of grounds for rejection |
Comment text: Notification of reason for refusal Patent event date: 20120119 Patent event code: PE09021S01D |
|
E701 | Decision to grant or registration of patent right | ||
PE0701 | Decision of registration |
Patent event code: PE07011S01D Comment text: Decision to Grant Registration Patent event date: 20120515 |
|
GRNT | Written decision to grant | ||
PR0701 | Registration of establishment |
Comment text: Registration of Establishment Patent event date: 20120608 Patent event code: PR07011E01D |
|
PR1002 | Payment of registration fee |
Payment date: 20120608 End annual number: 3 Start annual number: 1 |
|
PG1601 | Publication of registration | ||
FPAY | Annual fee payment |
Payment date: 20160510 Year of fee payment: 5 |
|
PR1001 | Payment of annual fee |
Payment date: 20160510 Start annual number: 5 End annual number: 5 |
|
FPAY | Annual fee payment |
Payment date: 20180625 Year of fee payment: 7 |
|
PR1001 | Payment of annual fee |
Payment date: 20180625 Start annual number: 7 End annual number: 7 |
|
PR1001 | Payment of annual fee |
Payment date: 20201208 Start annual number: 9 End annual number: 9 |
|
PR1001 | Payment of annual fee |
Payment date: 20210531 Start annual number: 10 End annual number: 10 |
|
PR1001 | Payment of annual fee |
Payment date: 20240522 Start annual number: 13 End annual number: 13 |