KR20090050567A - Tof 카메라를 이용한 로봇의 물체 자세 인식 방법 - Google Patents
Tof 카메라를 이용한 로봇의 물체 자세 인식 방법 Download PDFInfo
- Publication number
- KR20090050567A KR20090050567A KR1020070117082A KR20070117082A KR20090050567A KR 20090050567 A KR20090050567 A KR 20090050567A KR 1020070117082 A KR1020070117082 A KR 1020070117082A KR 20070117082 A KR20070117082 A KR 20070117082A KR 20090050567 A KR20090050567 A KR 20090050567A
- Authority
- KR
- South Korea
- Prior art keywords
- recognized
- image
- group data
- point group
- camera
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 40
- 239000013598 vector Substances 0.000 claims description 12
- 230000008569 process Effects 0.000 claims description 11
- 238000013519 translation Methods 0.000 claims description 5
- 238000001514 detection method Methods 0.000 claims description 2
- 230000001629 suppression Effects 0.000 claims description 2
- NIXOWILDQLNWCW-UHFFFAOYSA-N acrylic acid group Chemical group C(C=C)(=O)O NIXOWILDQLNWCW-UHFFFAOYSA-N 0.000 abstract description 4
- 239000011521 glass Substances 0.000 abstract description 4
- 238000005516 engineering process Methods 0.000 description 10
- 230000008901 benefit Effects 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 235000008429 bread Nutrition 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- 230000007423 decrease Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 238000012067 mathematical method Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000000691 measurement method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000000513 principal component analysis Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/13—Edge detection
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03K—PULSE TECHNIQUE
- H03K19/00—Logic circuits, i.e. having at least two inputs acting on one output; Inverting circuits
- H03K19/20—Logic circuits, i.e. having at least two inputs acting on one output; Inverting circuits characterised by logic function, e.g. AND, OR, NOR, NOT circuits
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20024—Filtering details
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Computing Systems (AREA)
- Computer Hardware Design (AREA)
- Mathematical Physics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computer Graphics (AREA)
- Geometry (AREA)
- Software Systems (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
Description
Claims (7)
- 인식 대상 물체 전체의 3차원 점군 데이터(3D Point Cloud)를 획득하여 데이터 베이스에 저장하는 단계;TOF(Time of Flight) 카메라 및 일반 영상 카메라로 상기 인식 대상 물체를 각각 촬영한 후, 상기 촬영한 영상으로부터 3차원 점군 데이터를 획득하는 단계; 및상기 데이터 베이스에 저장된 물체 전체의 3차원 점군 데이터와 상기 촬영한 영상으로부터 획득한 3차원 점군 데이터를 정합하여 상기 촬영한 인식 대상 물체의 자세를 인식하는 단계를 포함하여 이루어지며,상기 3차원 점군 데이터는 상기 인식 대상 물체의 실효성 있는 특징점(Constrained Feature)들로 이루어지는 것을 특징으로 하는 TOF 카메라를 이용한 로봇의 물체 자세 인식 방법.
- 제1항에 있어서,상기 인식 대상 물체 전체의 3차원 점군 데이터(3D Point Cloud)를 획득하는 단계는,상기 인식 대상 물체의 전면부의 3차원 점군 데이터를 획득하는 단계;상기 인식 대상 물체의 후면부의 3차원 점군 데이터를 획득하는 단계; 및상기 인식 대상 물체의 전면부의 3차원 점군 데이터와 상기 인식 대상 물체의 후면부의 3차원 점군 데이터를 병합(Merge)하는 단계를 포함하여 이루어지는 것을 특징으로 하는 TOF 카메라를 이용한 로봇의 물체 자세 인식 방법.
- 제1항에 있어서,상기 데이터 베이스에 저장된 물체 전체의 3차원 점군 데이터와 상기 촬영한 영상으로부터 획득한 3차원 점군 데이터의 정합은 ICP(Iterative Closest Point) 알고리즘을 이용하여 수행하는 것을 특징으로 하는 TOF 카메라를 이용한 로봇의 물체 자세 인식 방법.
- 제3항에 있어서,상기 촬영한 인식 대상 물체의 자세를 인식하는 단계는,상기 ICP(Iterative Closest Point) 알고리즘을 수행한 결과 얻어진 회전 벡터(Rotation Vector) 및 병진 벡터(Translation Vector)를 이용하는 것을 특징으로 하는 TOF 카메라를 이용한 로봇의 물체 자세 인식 방법.
- 제1항 내지 제3항 중 어느 하나의 항에 있어서,상기 3차원 점군 데이터의 획득은,상기 TOF 카메라를 이용하여 상기 인식 대상 물체의 거리 정보 이미지를 획득하는 단계;상기 일반 영상 카메라를 통해 촬영한 영상 이미지에서 상기 인식 대상 물체의 에지(Edge) 이미지를 검출하는 단계; 및상기 거리 정보 이미지와 상기 에지 이미지를 AND 연산하는 단계를 포함하여 이루어지는 것을 특징으로 하는 TOF 카메라를 이용한 로봇의 물체 자세 인식 방법.
- 제5항에 있어서,상기 에지(Edge) 이미지의 검출은,캐니 에지 알고리즘(Canny Edge Algorithm)을 이용하는 것을 특징으로 하는 TOF 카메라를 이용한 로봇의 물체 자세 인식 방법.
- 제5항에 있어서,상기 에지(Edge) 이미지를 검출하는 단계는,상기 인식 대상 물체의 영상에 가우시안 필터(Gaussian Filter)를 이용하여 평활화(Equalization)를 실시하는 단계;미분 연산자를 이용하여 상기 영상의 기울기(Gradient) 크기 및 기울기 방향 을 구하는 단계;상기 기울기 방향에 따라 상기 영상에 비 최대치 억제(non-maximum suppression)과정을 적용하는 단계; 및히스테리시스(Hystersis) 기법을 사용하여 상기 영상의 에지를 검출하는 단계를 포함하여 이루어지는 것을 특징으로 하는 TOF 카메라를 이용한 로봇의 물체 자세 인식 방법.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020070117082A KR100920931B1 (ko) | 2007-11-16 | 2007-11-16 | Tof 카메라를 이용한 로봇의 물체 자세 인식 방법 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020070117082A KR100920931B1 (ko) | 2007-11-16 | 2007-11-16 | Tof 카메라를 이용한 로봇의 물체 자세 인식 방법 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20090050567A true KR20090050567A (ko) | 2009-05-20 |
KR100920931B1 KR100920931B1 (ko) | 2009-10-12 |
Family
ID=40859013
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020070117082A KR100920931B1 (ko) | 2007-11-16 | 2007-11-16 | Tof 카메라를 이용한 로봇의 물체 자세 인식 방법 |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR100920931B1 (ko) |
Cited By (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20110080327A (ko) * | 2010-01-05 | 2011-07-13 | 삼성전자주식회사 | 얼굴 인식 장치 및 그 방법 |
KR101120632B1 (ko) * | 2010-04-21 | 2012-03-20 | 주식회사 매크로그래프 | 움직임이 있는 점 데이터의 정합 방법과 상기 방법을 수행할 수 있는 장치 |
WO2012111976A3 (ko) * | 2011-02-16 | 2012-12-20 | Kim Seok-Joong | 표시면에 포인터를 사용하지 않는 가상 터치 장치 |
WO2013009040A3 (ko) * | 2011-07-11 | 2013-03-07 | Kim Seok-Joong | 3차원 모델링된 전자기기의 가상터치를 이용한 원격 조작 장치 및 방법 |
KR101272458B1 (ko) * | 2012-05-11 | 2013-06-07 | 김석중 | 포인터를 사용하지 않는 가상 터치 장치 및 방법 |
US8670593B2 (en) | 2010-11-03 | 2014-03-11 | Samsung Electronics Co., Ltd. | Apparatus and method for dynamically controlling integration time of depth camera for accuracy improvement |
KR101387892B1 (ko) * | 2012-06-29 | 2014-04-21 | 인텔렉추얼디스커버리 주식회사 | 온도 정보를 사용한 동작 인식 장치 및 방법 |
US9165211B2 (en) | 2010-10-20 | 2015-10-20 | Samsung Electronics Co., Ltd. | Image processing apparatus and method |
US9258548B2 (en) | 2010-12-27 | 2016-02-09 | Samsung Electronics Co., Ltd. | Apparatus and method for generating depth image |
KR20160147196A (ko) * | 2015-06-12 | 2016-12-22 | 삼성전자주식회사 | 엑스선 장치 및 엑스선 촬영 방법 |
KR102063845B1 (ko) * | 2019-06-21 | 2020-01-08 | 국방과학연구소 | 영상 기반 계측 장치 및 그 방법 |
KR20200043941A (ko) * | 2014-01-29 | 2020-04-28 | 엘지이노텍 주식회사 | 깊이 정보 추출 장치 |
US10943401B2 (en) | 2019-02-01 | 2021-03-09 | International Business Machines Corporation | Active visual recognition in mobile augmented reality |
US11023730B1 (en) | 2020-01-02 | 2021-06-01 | International Business Machines Corporation | Fine-grained visual recognition in mobile augmented reality |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101791590B1 (ko) | 2010-11-05 | 2017-10-30 | 삼성전자주식회사 | 물체 자세 인식장치 및 이를 이용한 물체 자세 인식방법 |
KR101888564B1 (ko) | 2011-12-29 | 2018-08-16 | 삼성전자주식회사 | 깊이 센서, 및 이의 깊이 계산 방법 |
KR20200050246A (ko) | 2018-11-01 | 2020-05-11 | 삼성전자주식회사 | 2차원 영상으로부터 3차원 객체를 검출하는 방법 및 장치 |
KR102252866B1 (ko) | 2019-05-08 | 2021-05-18 | 주식회사 바이오로그디바이스 | ToF 카메라를 이용한 안면인식 방법 |
KR102426744B1 (ko) | 2020-12-10 | 2022-07-29 | 주식회사 리페어코리아 | Tof 카메라와 머신러닝 알고리즘을 활용한 자율주행 팔로잉 모빌리티의 동작 방법 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09128550A (ja) * | 1995-10-31 | 1997-05-16 | Omron Corp | 画像処理方法およびその装置 |
JP3377465B2 (ja) | 1999-04-08 | 2003-02-17 | ファナック株式会社 | 画像処理装置 |
JP3834297B2 (ja) * | 2003-05-12 | 2006-10-18 | ファナック株式会社 | 画像処理装置 |
KR100585709B1 (ko) | 2004-12-29 | 2006-06-07 | 엘지전자 주식회사 | 로봇청소기의 움직임 추적장치 및 방법 |
-
2007
- 2007-11-16 KR KR1020070117082A patent/KR100920931B1/ko active IP Right Grant
Cited By (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20110080327A (ko) * | 2010-01-05 | 2011-07-13 | 삼성전자주식회사 | 얼굴 인식 장치 및 그 방법 |
KR101120632B1 (ko) * | 2010-04-21 | 2012-03-20 | 주식회사 매크로그래프 | 움직임이 있는 점 데이터의 정합 방법과 상기 방법을 수행할 수 있는 장치 |
US9165211B2 (en) | 2010-10-20 | 2015-10-20 | Samsung Electronics Co., Ltd. | Image processing apparatus and method |
US8670593B2 (en) | 2010-11-03 | 2014-03-11 | Samsung Electronics Co., Ltd. | Apparatus and method for dynamically controlling integration time of depth camera for accuracy improvement |
US9258548B2 (en) | 2010-12-27 | 2016-02-09 | Samsung Electronics Co., Ltd. | Apparatus and method for generating depth image |
WO2012111976A3 (ko) * | 2011-02-16 | 2012-12-20 | Kim Seok-Joong | 표시면에 포인터를 사용하지 않는 가상 터치 장치 |
US9367138B2 (en) | 2011-07-11 | 2016-06-14 | VTouch Co., Ltd. | Remote manipulation device and method using a virtual touch of a three-dimensionally modeled electronic device |
EP2733585A2 (en) * | 2011-07-11 | 2014-05-21 | VTouch Co., Ltd. | Remote manipulation device and method using a virtual touch of a three-dimensionally modeled electronic device |
EP2733585A4 (en) * | 2011-07-11 | 2015-01-14 | Vtouch Co Ltd | TELEMANIPULATION DEVICE AND METHOD USING A VIRTUAL CONTACT OF A THREE-DIMENSIONALLY MODELED ELECTRONIC DEVICE |
CN103688236A (zh) * | 2011-07-11 | 2014-03-26 | 维塔驰有限公司 | 利用三维模拟电子设备的虚拟触摸的远程操作装置及方法 |
WO2013009040A3 (ko) * | 2011-07-11 | 2013-03-07 | Kim Seok-Joong | 3차원 모델링된 전자기기의 가상터치를 이용한 원격 조작 장치 및 방법 |
CN103688236B (zh) * | 2011-07-11 | 2017-03-22 | 维塔驰有限公司 | 利用三维模拟电子设备的虚拟触摸的远程操作装置及方法 |
KR101272458B1 (ko) * | 2012-05-11 | 2013-06-07 | 김석중 | 포인터를 사용하지 않는 가상 터치 장치 및 방법 |
KR101387892B1 (ko) * | 2012-06-29 | 2014-04-21 | 인텔렉추얼디스커버리 주식회사 | 온도 정보를 사용한 동작 인식 장치 및 방법 |
KR20200043941A (ko) * | 2014-01-29 | 2020-04-28 | 엘지이노텍 주식회사 | 깊이 정보 추출 장치 |
KR20160147196A (ko) * | 2015-06-12 | 2016-12-22 | 삼성전자주식회사 | 엑스선 장치 및 엑스선 촬영 방법 |
US10943401B2 (en) | 2019-02-01 | 2021-03-09 | International Business Machines Corporation | Active visual recognition in mobile augmented reality |
KR102063845B1 (ko) * | 2019-06-21 | 2020-01-08 | 국방과학연구소 | 영상 기반 계측 장치 및 그 방법 |
US11023730B1 (en) | 2020-01-02 | 2021-06-01 | International Business Machines Corporation | Fine-grained visual recognition in mobile augmented reality |
Also Published As
Publication number | Publication date |
---|---|
KR100920931B1 (ko) | 2009-10-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR100920931B1 (ko) | Tof 카메라를 이용한 로봇의 물체 자세 인식 방법 | |
KR100930626B1 (ko) | 스테레오 카메라를 구비한 로봇의 물체 자세 인식 방법 | |
US10456918B2 (en) | Information processing apparatus, information processing method, and program | |
US10083512B2 (en) | Information processing apparatus, information processing method, position and orientation estimation apparatus, and robot system | |
US8265425B2 (en) | Rectangular table detection using hybrid RGB and depth camera sensors | |
JP4923101B2 (ja) | 画像間の空間対応を判別して三次元再構成をする方法および装置 | |
JP6983828B2 (ja) | ビジョンシステムにより画像特徴におけるエッジと法線を同時に考慮するためのシステム及び方法 | |
JP2011123071A (ja) | 撮像装置、オクルージョン領域の探索方法、及びプログラム | |
KR102011564B1 (ko) | 비전 시스템에서 3d 정렬 알고리즘의 자동 선택을 위한 시스템 및 방법 | |
US9886769B1 (en) | Use of 3D depth map with low and high resolution 2D images for gesture recognition and object tracking systems | |
Tran et al. | Non-contact gap and flush measurement using monocular structured multi-line light vision for vehicle assembly | |
Huang et al. | Mobile robot localization using ceiling landmarks and images captured from an rgb-d camera | |
JP6817742B2 (ja) | 情報処理装置およびその制御方法 | |
Dune et al. | One click focus with eye-in-hand/eye-to-hand cooperation | |
WO2018065757A1 (en) | Proximity sensor and corresponding distance measuring method | |
Ciliberto et al. | A heteroscedastic approach to independent motion detection for actuated visual sensors | |
Hadi et al. | Fusion of thermal and depth images for occlusion handling for human detection from mobile robot | |
Wang et al. | An automatic self-calibration approach for wide baseline stereo cameras using sea surface images | |
KR20090070258A (ko) | 3차원 기하학 정보를 이용한 실시간 지시 영역 추정 방법 | |
JP5293429B2 (ja) | 移動物体検出装置、及び移動物体検出方法 | |
JP6606340B2 (ja) | 画像検出装置、画像検出方法およびプログラム | |
Chakravorty et al. | Automatic image registration in infrared-visible videos using polygon vertices | |
KR101668649B1 (ko) | 주변 환경 모델링 방법 및 이를 수행하는 장치 | |
KR101669850B1 (ko) | 센서 켈리브레이션 방법 및 이를 위한 전자 장치와 마커 보드 장치 | |
KR101747350B1 (ko) | 비주얼 서보잉을 위한 객체의 좌표 인식 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E90F | Notification of reason for final refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20130621 Year of fee payment: 5 |
|
FPAY | Annual fee payment |
Payment date: 20140708 Year of fee payment: 6 |
|
FPAY | Annual fee payment |
Payment date: 20150626 Year of fee payment: 7 |
|
FPAY | Annual fee payment |
Payment date: 20170523 Year of fee payment: 8 |
|
R401 | Registration of restoration | ||
FPAY | Annual fee payment |
Payment date: 20181001 Year of fee payment: 10 |
|
FPAY | Annual fee payment |
Payment date: 20190930 Year of fee payment: 11 |