JP6830656B2 - 対象物判定装置および対象物判定プログラム - Google Patents
対象物判定装置および対象物判定プログラム Download PDFInfo
- Publication number
- JP6830656B2 JP6830656B2 JP2017066802A JP2017066802A JP6830656B2 JP 6830656 B2 JP6830656 B2 JP 6830656B2 JP 2017066802 A JP2017066802 A JP 2017066802A JP 2017066802 A JP2017066802 A JP 2017066802A JP 6830656 B2 JP6830656 B2 JP 6830656B2
- Authority
- JP
- Japan
- Prior art keywords
- distance measurement
- likelihood
- image
- image recognition
- distance
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/103—Static body considered as a whole, e.g. static pedestrian or occupant recognition
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/23—Clustering techniques
- G06F18/232—Non-hierarchical techniques
- G06F18/2321—Non-hierarchical techniques using statistics or function optimisation, e.g. modelling of probability density functions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/25—Fusion techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/25—Fusion techniques
- G06F18/251—Fusion techniques of input or preprocessed data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/77—Determining position or orientation of objects or cameras using statistical methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/26—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/764—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/77—Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
- G06V10/80—Fusion, i.e. combining data from various sources at the sensor level, preprocessing level, feature extraction level or classification level
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- Data Mining & Analysis (AREA)
- Bioinformatics & Computational Biology (AREA)
- Medical Informatics (AREA)
- Computing Systems (AREA)
- Software Systems (AREA)
- Health & Medical Sciences (AREA)
- Evolutionary Biology (AREA)
- General Health & Medical Sciences (AREA)
- Databases & Information Systems (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Cheminformatics (AREA)
- General Engineering & Computer Science (AREA)
- Probability & Statistics with Applications (AREA)
- Human Computer Interaction (AREA)
- Image Analysis (AREA)
- Length Measuring Devices By Optical Means (AREA)
Description
3 カメラ(撮影手段)
4 測距センサ(測距手段)
7a 制御プログラム(対象物判定プログラム)
8c オブジェクトテーブル(位置認識手段の一部)
d1 端点間距離
d2 積分距離
S2 画像認識手段
S4 画認対応付手段
S5 グループ化手段
S7 尤度算出手段の一部、測距尤度算出手段
S8 マッチ率算出手段
S9 尤度算出手段の一部、画像尤度算出手段
S20〜S28 判定手段
S29 位置認識手段の一部
α 画像認識尤度(画像尤度)
β 測距尤度
γ マッチ率
Claims (10)
- 画像を撮影する撮影手段と、
対象物までの距離を測距する測距手段と、
前記撮影手段により撮影された画像中の前記対象物について画像認識を実行する画像認識手段と、
その画像認識手段による画像認識の結果を、前記測距手段により測距された測距データに対応付けする画認対応付手段と、
所定条件下にある複数の前記測距データを1の対象物としてグループ化するグループ化手段と、
そのグループ化手段によりグループ化された1の対象物を構成する測距データまたは、その測距データに前記画認対応付手段により対応付けされた画像認識の結果に基づいて、所定物の尤度を算出する尤度算出手段と、
前記グループ化手段によりグループ化された1の対象物を構成する測距データに前記画認対応付手段により対応付けされた画像認識の結果に基づいて前記所定物のマッチ率を算出するマッチ率算出手段と、
そのマッチ率算出手段により算出されたマッチ率と、前記尤度算出手段により算出された尤度とに基づいて、前記グループ化手段によりグループ化された1の対象物が前記所定物であるかを判定する判定手段とを備えていることを特徴とする対象物判定装置。
- 前記尤度算出手段は、前記グループ化手段によりグループ化された1の対象物を構成する測距データに基づいて前記所定物の測距尤度を算出する測距尤度算出手段を備え、
前記判定手段は、その測距尤度算出手段により算出された測距尤度と、前記マッチ率算出手段により算出されたマッチ率とに基づいて、前記グループ化手段によりグループ化された1の対象物が前記所定物であるかを判定するものであることを特徴とする請求項1記載の対象物判定装置。 - 前記測距尤度算出手段は、前記グループ化手段によりグループ化された1の対象物を構成する測距データの端点間距離と積分距離とに基づいて前記所定物の測距尤度を算出するものであることを特徴とする請求項2記載の対象物判定装置。
- 前記尤度算出手段は、前記グループ化手段によりグループ化された1の対象物を構成する測距データに前記画認対応付手段により対応付けされた画像認識の結果に基づいて前記所定物の画像尤度を算出する画像尤度算出手段を備え、
前記判定手段は、その画像尤度算出手段により算出された画像尤度と、前記測距尤度算出手段により算出された測距尤度と、前記マッチ率算出手段により算出されたマッチ率とに基づいて、前記グループ化手段によりグループ化された1の対象物が前記所定物であるかを判定するものであることを特徴とする請求項2又は3に記載の対象物判定装置。 - 前記判定手段は、前記尤度算出手段により算出された尤度が所定の閾値以上である場合には、前記マッチ率算出手段により算出されたマッチ率に関わらず、前記グループ化手段によりグループ化された1の対象物が前記所定物であると判定するものであることを特徴とする請求項1から4のいずれかに記載の対象物判定装置。
- 前記グループ化手段は、前記測距手段により測距された測距データのうち、隣り合う測距データが所定距離内にある場合に、それらの測距データを1の対象物としてグループ化するものであることを特徴とする請求項1から5のいずれかに記載の対象物判定装置。
- 前記画認対応付手段は、1の測距データに対応する画像認識の結果が2以上ある場合、その2以上の画像認識の結果のうち、前記所定物としての認識度の最も高い画像認識の結果を前記測距データに対応付けするものであることを特徴とする請求項1から6のいずれかに記載の対象物判定装置。
- 前記グループ化手段によりグループ化された対象物を、前記判定手段による判定結果に基づいて前記所定物とそれ以外とに区別して、その対象物の位置を認識する位置認識手段を備えていることを特徴とする請求項1から7のいずれかに記載の対象物判定装置。
- 前記判定手段による判定対象となる所定物は人物であることを特徴とする請求項1から8のいずれかに記載の対象物判定装置。
- 画像を取得する画像取得機能と、
対象物までの測距データを取得する測距データ取得機能と、
前記画像取得機能により取得された画像中の前記対象物について画像認識を実行する画像認識機能と、
その画像認識機能による画像認識の結果を、前記測距データ取得機能により取得された測距データに対応付けする画認対応付機能と、
所定条件下にある複数の前記測距データを1の対象物としてグループ化するグループ化機能と、
そのグループ化機能によりグループ化された1の対象物を構成する測距データまたは、その測距データに前記画認対応付機能により対応付けされた画像認識の結果に基づいて、所定物の尤度を算出する尤度算出機能と、
前記グループ化機能によりグループ化された1の対象物を構成する測距データに前記画認対応付機能により対応付けされた画像認識の結果に基づいて前記所定物のマッチ率を算出するマッチ率算出機能と、
そのマッチ率算出機能により算出されたマッチ率と、前記尤度算出機能により算出された尤度とに基づいて、前記グループ化機能によりグループ化された1の対象物が前記所定物であるかを判定する判定機能と、をコンピュータに実現させることを特徴とする対象物判定プログラム。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017066802A JP6830656B2 (ja) | 2017-03-30 | 2017-03-30 | 対象物判定装置および対象物判定プログラム |
US16/499,614 US20200110963A1 (en) | 2017-03-30 | 2018-03-14 | Object determination device and object determination program |
PCT/JP2018/010039 WO2018180501A1 (ja) | 2017-03-30 | 2018-03-14 | 対象物判定装置および対象物判定プログラム |
EP18777146.4A EP3605458A4 (en) | 2017-03-30 | 2018-03-14 | OBJECT DETERMINATION DEVICE AND OBJECT DETERMINATION PROGRAM |
CN201880022195.6A CN110546683A (zh) | 2017-03-30 | 2018-03-14 | 对象物判定装置以及对象物判定程序 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017066802A JP6830656B2 (ja) | 2017-03-30 | 2017-03-30 | 対象物判定装置および対象物判定プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018169811A JP2018169811A (ja) | 2018-11-01 |
JP6830656B2 true JP6830656B2 (ja) | 2021-02-17 |
Family
ID=63675413
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017066802A Active JP6830656B2 (ja) | 2017-03-30 | 2017-03-30 | 対象物判定装置および対象物判定プログラム |
Country Status (5)
Country | Link |
---|---|
US (1) | US20200110963A1 (ja) |
EP (1) | EP3605458A4 (ja) |
JP (1) | JP6830656B2 (ja) |
CN (1) | CN110546683A (ja) |
WO (1) | WO2018180501A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114495509B (zh) * | 2022-04-08 | 2022-07-12 | 四川九通智路科技有限公司 | 基于深度神经网络监控隧道运行状态的方法 |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3879848B2 (ja) * | 2003-03-14 | 2007-02-14 | 松下電工株式会社 | 自律移動装置 |
JP2007187618A (ja) * | 2006-01-16 | 2007-07-26 | Omron Corp | 物体識別装置 |
JP4717760B2 (ja) * | 2006-08-31 | 2011-07-06 | 三菱電機株式会社 | 物体認識装置および映像物体測位装置 |
JP4871160B2 (ja) * | 2007-02-16 | 2012-02-08 | 株式会社東芝 | ロボットおよびその制御方法 |
JP4413957B2 (ja) * | 2007-08-24 | 2010-02-10 | 株式会社東芝 | 移動物体検出装置および自律移動物体 |
JP4876080B2 (ja) * | 2008-01-25 | 2012-02-15 | 富士重工業株式会社 | 環境認識装置 |
JP5283967B2 (ja) | 2008-05-14 | 2013-09-04 | 日立オートモティブシステムズ株式会社 | 車載用物体検知装置 |
JP5385752B2 (ja) * | 2009-10-20 | 2014-01-08 | キヤノン株式会社 | 画像認識装置、その処理方法及びプログラム |
US8867790B2 (en) * | 2010-08-03 | 2014-10-21 | Panasonic Corporation | Object detection device, object detection method, and program |
JP2012118698A (ja) * | 2010-11-30 | 2012-06-21 | Fuji Heavy Ind Ltd | 画像処理装置 |
KR20120072131A (ko) * | 2010-12-23 | 2012-07-03 | 한국전자통신연구원 | 이미지 센서와 거리센서의 데이터 융합에 의한 상황인식 방법 및 그 장치 |
JP6332937B2 (ja) * | 2013-10-23 | 2018-05-30 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
-
2017
- 2017-03-30 JP JP2017066802A patent/JP6830656B2/ja active Active
-
2018
- 2018-03-14 CN CN201880022195.6A patent/CN110546683A/zh active Pending
- 2018-03-14 WO PCT/JP2018/010039 patent/WO2018180501A1/ja unknown
- 2018-03-14 EP EP18777146.4A patent/EP3605458A4/en not_active Withdrawn
- 2018-03-14 US US16/499,614 patent/US20200110963A1/en not_active Abandoned
Also Published As
Publication number | Publication date |
---|---|
CN110546683A (zh) | 2019-12-06 |
EP3605458A4 (en) | 2021-01-06 |
EP3605458A1 (en) | 2020-02-05 |
WO2018180501A1 (ja) | 2018-10-04 |
US20200110963A1 (en) | 2020-04-09 |
JP2018169811A (ja) | 2018-11-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US6002808A (en) | Hand gesture control system | |
JP5221436B2 (ja) | 顔特徴点検出装置及びプログラム | |
JP2007087346A5 (ja) | ||
JP2007087345A5 (ja) | ||
JP2018532199A5 (ja) | ||
CN108568804A (zh) | 机器人系统、测量数据处理装置及测量数据处理方法 | |
US9734416B2 (en) | Object detection method, information processing device, and storage medium | |
US20160232399A1 (en) | System and method of detecting a gaze of a viewer | |
KR102225620B1 (ko) | 카메라 모델링 시스템 | |
JP6803525B2 (ja) | 顔検出装置およびこれを備えた顔検出システムならびに顔検出方法 | |
CN107818290A (zh) | 基于深度图的启发式手指检测方法 | |
JPWO2013061952A1 (ja) | 円柱状物体の直径測定装置及び測定方法、測定プログラム | |
JP6830656B2 (ja) | 対象物判定装置および対象物判定プログラム | |
US20220226710A1 (en) | Mark for club head measurement and image processing device | |
JP4659722B2 (ja) | 人体特定領域抽出・判定装置、人体特定領域抽出・判定方法、人体特定領域抽出・判定プログラム | |
EP3942526B1 (en) | Electronic apparatus for identifying object through warped image and control method thereof | |
JP6713619B2 (ja) | 身体向推定装置および身体向推定プログラム | |
JP2017138645A (ja) | 視線検出装置 | |
JP2020162759A (ja) | 視線計測装置 | |
KR20190079503A (ko) | 얼굴 인식을 위한 얼굴 자세 등록 장치 및 방법 | |
US10769803B2 (en) | Sight vector detecting method and device | |
CN113269761A (zh) | 一种倒影检测方法、装置及设备 | |
JP2017227687A (ja) | カメラアセンブリ、そのカメラアセンブリを用いる手指形状検出システム、そのカメラアセンブリを用いる手指形状検出方法、その検出方法を実施するプログラム、及び、そのプログラムの記憶媒体 | |
JP6699136B2 (ja) | 画像処理装置、画像処理プログラムおよび画像処理方法 | |
JP2009044631A (ja) | 物体検出装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200313 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201006 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201203 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201215 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210113 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6830656 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |