JP2021117130A - 3次元位置推定装置および3次元位置推定方法 - Google Patents
3次元位置推定装置および3次元位置推定方法 Download PDFInfo
- Publication number
- JP2021117130A JP2021117130A JP2020011295A JP2020011295A JP2021117130A JP 2021117130 A JP2021117130 A JP 2021117130A JP 2020011295 A JP2020011295 A JP 2020011295A JP 2020011295 A JP2020011295 A JP 2020011295A JP 2021117130 A JP2021117130 A JP 2021117130A
- Authority
- JP
- Japan
- Prior art keywords
- image data
- dimensional position
- imaging
- camera
- dimensional
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 11
- 238000003384 imaging method Methods 0.000 claims abstract description 35
- 238000012937 correction Methods 0.000 claims abstract description 22
- 238000013527 convolutional neural network Methods 0.000 claims description 24
- 230000004075 alteration Effects 0.000 claims description 4
- 238000012545 processing Methods 0.000 description 23
- 238000000605 extraction Methods 0.000 description 9
- 238000004364 calculation method Methods 0.000 description 6
- 210000005069 ears Anatomy 0.000 description 5
- 238000010801 machine learning Methods 0.000 description 5
- 238000007796 conventional method Methods 0.000 description 4
- 230000001815 facial effect Effects 0.000 description 4
- 238000001514 detection method Methods 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 210000001508 eye Anatomy 0.000 description 2
- 210000004709 eyebrow Anatomy 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 210000000214 mouth Anatomy 0.000 description 2
- 210000001331 nose Anatomy 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000036544 posture Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000011176 pooling Methods 0.000 description 1
Images
Landscapes
- Length Measuring Devices By Optical Means (AREA)
- Image Analysis (AREA)
Abstract
Description
Z2=Z1×W1/W2
ここで、Z1を基準距離、Z2を測定したい物体までの距離、物体がZ1、Z2にあるときの画像上の長さをそれぞれW1、W2とすると、Z1とW1が既知であれば、距離Z2を上記式により求めることができる。
120:単眼カメラ 130:画像処理部
140:学習部 142:画像データ入力部
144:特徴抽出処理部 146:学習モデル生成部
150:推定部 152:画像データ入力部
154:特徴抽出処理部 156:3次元位置推定部
158:3次元位置補正部 210:畳み込みニューラルネットワーク部
Claims (8)
- 物体を撮像した画像データを撮像手段から入力し、教師データとして深度情報付きの特徴点マップを用いて前記画像データから物体の3次元座標を推定する学習モデルを生成する学習手段と、
物体を撮像した画像データを単眼カメラから前記学習モデルに入力し、物体の3次元座標を推定する推定手段と、
前記単眼カメラと前記撮像手段との撮像特性の差異に基づき前記推定手段で推定された3次元座標の深度を補正する補正手段と、
を有する3次元位置推定装置。 - 前記学習モデルは、畳み込みニューラルネットワークを含む、請求項1に記載の3次元位置推定装置。
- 前記撮像特性は、解像度、歪み、レンズ収差または焦点深度のいずれか1つを含む、請求項1に記載の3次元位置推定装置。
- 前記撮像手段はステレオカメラを含み、前記深度情報付きの特徴点マップは、前記ステレオカメラのステレオ画像データから生成され、前記学習モデルには、前記ステレオカメラの一方のカメラで撮像された画像データが入力される、請求項1に記載の3次元位置推定装置。
- 前記推定手段は、顔の3次元位置を推定する、請求項1ないし4いずれか1つに記載の3次元位置推定装置。
- 前記推定手段は、耳の3次元位置を推定する、請求項5に記載の3次元位置推定装置。
- 物体を撮像した画像データを撮像手段から入力し、教師データとして深度情報付きの特徴点マップを用いて前記画像データから物体の3次元座標を推定する学習モデルを生成するステップと、
物体を撮像した画像データを単眼カメラから前記学習モデルに入力し、物体の3次元座標を推定するステップと、
前記単眼カメラと前記撮像手段との撮像特性の差異に基づき前記推定された3次元座標の深度を補正するステップと、
を含む3次元位置推定方法。 - 前記学習モデルは、畳み込みニューラルネットワークを含む、請求項7に記載の3次元位置推定方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020011295A JP7337458B2 (ja) | 2020-01-28 | 2020-01-28 | 3次元位置推定装置および3次元位置推定方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020011295A JP7337458B2 (ja) | 2020-01-28 | 2020-01-28 | 3次元位置推定装置および3次元位置推定方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021117130A true JP2021117130A (ja) | 2021-08-10 |
JP7337458B2 JP7337458B2 (ja) | 2023-09-04 |
Family
ID=77174620
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020011295A Active JP7337458B2 (ja) | 2020-01-28 | 2020-01-28 | 3次元位置推定装置および3次元位置推定方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7337458B2 (ja) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013186042A (ja) * | 2012-03-09 | 2013-09-19 | Hitachi Automotive Systems Ltd | 距離算出装置及び距離算出方法 |
JP2015231063A (ja) * | 2014-06-03 | 2015-12-21 | 矢崎総業株式会社 | 車載音響装置 |
JP2018139084A (ja) * | 2017-02-24 | 2018-09-06 | 株式会社リコー | 装置、移動体装置及び方法 |
JP2019125116A (ja) * | 2018-01-15 | 2019-07-25 | キヤノン株式会社 | 情報処理装置、情報処理方法、およびプログラム |
JP2019124537A (ja) * | 2018-01-15 | 2019-07-25 | キヤノン株式会社 | 情報処理装置及びその制御方法及びプログラム、並びに、車両の運転支援システム |
JP2019124538A (ja) * | 2018-01-15 | 2019-07-25 | キヤノン株式会社 | 情報処理装置、システム、情報処理方法 |
-
2020
- 2020-01-28 JP JP2020011295A patent/JP7337458B2/ja active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013186042A (ja) * | 2012-03-09 | 2013-09-19 | Hitachi Automotive Systems Ltd | 距離算出装置及び距離算出方法 |
JP2015231063A (ja) * | 2014-06-03 | 2015-12-21 | 矢崎総業株式会社 | 車載音響装置 |
JP2018139084A (ja) * | 2017-02-24 | 2018-09-06 | 株式会社リコー | 装置、移動体装置及び方法 |
JP2019125116A (ja) * | 2018-01-15 | 2019-07-25 | キヤノン株式会社 | 情報処理装置、情報処理方法、およびプログラム |
JP2019124537A (ja) * | 2018-01-15 | 2019-07-25 | キヤノン株式会社 | 情報処理装置及びその制御方法及びプログラム、並びに、車両の運転支援システム |
JP2019124538A (ja) * | 2018-01-15 | 2019-07-25 | キヤノン株式会社 | 情報処理装置、システム、情報処理方法 |
Also Published As
Publication number | Publication date |
---|---|
JP7337458B2 (ja) | 2023-09-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101771339B1 (ko) | 자체 적응 서라운드 사운드를 구현하는 방법 및 시스템 | |
US11778403B2 (en) | Personalized HRTFs via optical capture | |
JP5049300B2 (ja) | 障害物検出表示装置 | |
JP6570327B2 (ja) | 制御装置、撮像装置、制御方法、プログラム、および、記憶媒体 | |
JP6561512B2 (ja) | 視差値導出装置、移動体、ロボット、視差値導出方法、視差値生産方法及びプログラム | |
US8144974B2 (en) | Image processing apparatus, method, and program | |
JP2001091245A (ja) | ステレオ画像処理装置 | |
JP6577703B2 (ja) | 画像処理装置及び画像処理方法、プログラム、記憶媒体 | |
JP2008039491A (ja) | ステレオ画像処理装置 | |
JP2008522268A (ja) | 物体の位置をディジタル画像から特定する方法 | |
JP2015179063A (ja) | 視差値導出装置、機器制御システム、移動体、ロボット、視差値導出方法、およびプログラム | |
WO2012029658A1 (ja) | 撮像装置、画像処理装置、画像処理方法及び画像処理プログラム | |
JP2021051347A (ja) | 距離画像生成装置及び距離画像生成方法 | |
JP7337458B2 (ja) | 3次元位置推定装置および3次元位置推定方法 | |
KR102177878B1 (ko) | 영상 처리 장치 및 방법 | |
JP2013206328A (ja) | 物体検出装置 | |
JP3447461B2 (ja) | 移動障害物検出装置及びその方法 | |
KR102479253B1 (ko) | 차량용 카메라 영상 기반 공차 보정 방법 | |
KR101599434B1 (ko) | 자동 초점 조절을 이용한 영상촬상장치의 공간감지장치 및 공간감지방법 | |
US11445106B2 (en) | Imaging apparatus | |
JP4265927B2 (ja) | ステレオ画像処理装置 | |
WO2020237441A1 (en) | User equipment and method of oblique view correction | |
JP3706642B2 (ja) | 撮像再生装置及び再生方法 | |
JP6174114B2 (ja) | 音声入力装置およびその音声入力装置を備えた画像表示装置 | |
CN116208861A (zh) | 图像补偿服务 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221222 |
|
TRDD | Decision of grant or rejection written | ||
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230809 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230822 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230822 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7337458 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |