JP5794255B2 - 物体検出装置 - Google Patents
物体検出装置 Download PDFInfo
- Publication number
- JP5794255B2 JP5794255B2 JP2013107119A JP2013107119A JP5794255B2 JP 5794255 B2 JP5794255 B2 JP 5794255B2 JP 2013107119 A JP2013107119 A JP 2013107119A JP 2013107119 A JP2013107119 A JP 2013107119A JP 5794255 B2 JP5794255 B2 JP 5794255B2
- Authority
- JP
- Japan
- Prior art keywords
- score
- dictionary
- integrated
- calculating
- parts
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/28—Determining representative reference patterns, e.g. by averaging or distorting; Generating dictionaries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/77—Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
- G06V10/772—Determining representative reference patterns, e.g. averaging or distorting patterns; Generating dictionaries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/166—Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
Description
[第1実施形態]
<全体構成>
実施形態の物体検出システムは、車両等に搭載され、車両の前方に存在する人や車両、標識等の特定の検出対象物を検出するために用いられる。図1に示すように、物体検出システムは、物体検出装置1を備え、この物体検出装置1に対して、画像入力部2、車両情報入力部3、及び、検出結果出力部4等を接続して構成されている。
車両情報入力部3は、車両の挙動や車両周囲の状況を検出するために車両に設備された各種センサや、各種車載機器(例えば、灯火装置やワイパー)の作動状態等を特定するための各種情報を物体検出装置1に入力する各種操作機器類(例えば、スイッチ,レバー等)からなる。以下では、これらセンサや機器類にて生成される情報を車両情報という。
物体検出装置1は、演算処理部10と記憶部11とを備える。演算処理部10は、図示しないCPU,ROM,RAM,出入力インタフェース等を備えた情報処理装置(例えば、マイクロコンピュータ)で構成され、画像入力部2からの入力画像の中から検出対象物の画像を検出し、その検出結果に基づいて生成される物標情報を出力する画像認識処理を実行する。記憶部11は、情報処理部が実行する画像認識処理に関するプログラムや、その画像認識処理で用いる認識辞書、認識辞書の絞り込みや、後述する重みの設定に使用する各種テーブル等を記憶する記憶装置である。
物体検出装置1の演算処理部10が実行する画像認識処理の内容を、図3に示すフローチャートに沿って説明する。本処理は、演算処理部10が画像入力部2から入力画像を取得する毎に別途実行される入力画像についての特徴量を算出する処理の終了後に起動する。
S200では、演算処理部10は、入力画像について、切出領域の切り出しを全て終了したか否かを判断し、終了していなければS130に戻って、新たに切り出した切出領域を対象領域としてS130〜S190の処理を繰り返し実行する。一方、切出領域の切り出しが全て終了していれば、S210に進む。
<効果>
以上説明したように物体検出装置1では、全体辞書Aから求めた全身スコアと、パーツ領域毎にパーツ辞書から求めたパーツスコアとを、パーツの組合せの妥当性に応じた値を有する重みを用いて統合(重み付け加算)することで対象領域の統合スコアを求めている。しかも、パーツ領域のそれぞれについて、パーツの見え方の違いに応じた複数のパーツ辞書を用意し、パーツ辞書毎に仮パーツスコアを求め、その最大値をパーツ領域のパーツスコアにしている。
第2実施形態について説明する。
本実施形態では、画像認識処理の内容が第1実施形態のものとは一部異なるだけであるため、この相違する部分を中心に説明する。
本実施形態では、演算処理部10が実行する画像認識処理は、図5に示すように、図4と比較して、S110〜S120が省略され、S160,S220がS165,S225に置き換えられ、S210とS220の間にS215が追加されている。
本実施形態によれば、第1実施形態の場合と同様に、見た目のバリエーションが膨大な検出対象物を、そのバリエーションの数より少ない認識辞書によって検出することができると共に、検出精度を向上させることができる。
[第3実施形態]
第3実施形態について説明する。
<画像認識処理>
本実施形態では、演算処理部10が実行する画像認識処理は、図7に示すように、図4と比較して、S170がS175に、S190がS192〜194に置き換えられている。
<効果>
本実施形態によれば、第1実施形態の場合と同様に、見た目のバリエーションが膨大な検出対象物を、そのバリエーションの数より少ない認識辞書によって検出することができると共に、検出精度を向上させることができる。
以上、本発明の実施形態について説明したが、本発明は、上記実施形態に限定されることなく、種々の形態を採り得ることは言うまでもない。例えば、1つの構成要素が有する機能を複数の構成要素に分散させたり、複数の構成要素が有する機能を1つの構成要素に統合したりしてもよい。また、上記実施形態の構成の少なくとも一部を、同様の機能を有する公知の構成に置き換えてもよい。
Claims (6)
- 検出対象物の認識に使用する認識辞書を、認識処理の対象となる対象領域中に設定された複数のパーツ領域別、且つ該パーツ領域にて検出されるパーツの見た目の違いを表すタイプ別に記憶する記憶手段(11)と、
入力画像から切り出された領域を前記対象領域とし、前記記憶手段に記憶された認識辞書の少なくとも一部を用いて、前記パーツ領域のそれぞれについて、前記タイプ毎に前記認識辞書との類似度を表すパーツスコアを算出するパーツスコア算出手段(S160,S165)と、
前記パーツスコア算出手段にて算出されたパーツスコアを、前記パーツ領域のそれぞれから一つずつ選択し重み付けして統合した統合スコアを算出する統合スコア算出手段(S170,S175,S190,S192,S194)と、
前記統合スコア算出手段にて算出された統合スコアを用いて前記対象領域に検出対象物が存在するか否かを判断する判断手段(S210)と、
を備えることを特徴とする物体検出装置。 - 前記統合スコア算出手段は、前記統合スコアの算出に関わる前記認識辞書の組合せに従って、前記パーツスコアを統合する際に使用する重みを可変設定することで、前記統合スコア算出手段が算出する統合スコアを調節することを特徴とする請求項1に記載の物体検出装置。
- 前記統合スコア算出手段は、
前記パーツ領域毎に、前記パーツスコアが最大のものを該パーツ領域の代表スコアとして選択する代表スコア選択手段(S170)と、
前記代表スコア選択手段によって選択された代表スコアを重み付け加算することによって、前記統合スコアを算出するスコア統合手段(S190)と、
を備えることを特徴とする請求項1又は請求項2に記載の物体検出装置。 - 前記統合スコア算出手段は、
前記パーツ領域毎に、前記パーツスコアが予め設定された閾値以上のものを候補スコアとして抽出し、該候補スコアの算出に用いたパーツ辞書を特定する候補スコア抽出手段(S175)と、
前記パーツ領域のそれぞれで適用される前記パーツ辞書を、一つずつ選択して組み合わせたものをパーツ組合せとして、前記候補スコア抽出手段で特定されたパーツ辞書によって生成される全てのパーツ組合せについて、前記候補スコアを重み付け加算した仮統合スコアを算出する仮統合スコア算出手段(S192)と、
前記仮統合スコア算出手段にて算出された仮統合スコアの中で最大のものを前記統合スコアとして選択する統合スコア選択手段(S194)と、
を備えることを特徴とする請求項1又は請求項2に記載の物体検出装置。 - 前記統合スコアの算出に使用された前記パーツスコアに対応する前記認識辞書の組合せに基づいて前記入力画像に示されたシーン、又は前記検出対象物の状態のうち少なくとも一方を推定する推定手段(S215)を備えることを特徴とする請求項1乃至請求項4のいずれか1項に記載の物体検出装置。
- 車両に搭載されたセンサまたは機器から得られる情報に従って、前記入力画像に示されたシーンを推定し、その推定結果に従って、前記パーツスコア算出手段で使用する前記認識辞書を選択する辞書選択手段(S120)と、
を備えることを特徴とする請求項1乃至請求項4のいずれか1項に記載の物体検出装置。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013107119A JP5794255B2 (ja) | 2013-05-21 | 2013-05-21 | 物体検出装置 |
US14/282,316 US9501720B2 (en) | 2013-05-21 | 2014-05-20 | Object detection apparatus |
DE102014209584.0A DE102014209584A1 (de) | 2013-05-21 | 2014-05-20 | Objekterfassungsvorrichtung |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013107119A JP5794255B2 (ja) | 2013-05-21 | 2013-05-21 | 物体検出装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014229010A JP2014229010A (ja) | 2014-12-08 |
JP5794255B2 true JP5794255B2 (ja) | 2015-10-14 |
Family
ID=51863388
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013107119A Active JP5794255B2 (ja) | 2013-05-21 | 2013-05-21 | 物体検出装置 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9501720B2 (ja) |
JP (1) | JP5794255B2 (ja) |
DE (1) | DE102014209584A1 (ja) |
Families Citing this family (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5720627B2 (ja) * | 2012-06-11 | 2015-05-20 | 株式会社デンソー | 人検出装置 |
CN103679743B (zh) * | 2012-09-06 | 2016-09-14 | 索尼公司 | 目标跟踪装置和方法,以及照相机 |
US10346465B2 (en) | 2013-12-20 | 2019-07-09 | Qualcomm Incorporated | Systems, methods, and apparatus for digital composition and/or retrieval |
JP6253467B2 (ja) * | 2014-03-24 | 2017-12-27 | 東芝アルパイン・オートモティブテクノロジー株式会社 | 画像処理装置および画像処理プログラム |
JP6256239B2 (ja) * | 2014-07-25 | 2018-01-10 | 株式会社デンソー | 歩行者検出装置および歩行者検出方法 |
CN104392223B (zh) * | 2014-12-05 | 2017-07-11 | 青岛科技大学 | 二维视频图像中的人体姿态识别方法 |
JP2016171526A (ja) * | 2015-03-13 | 2016-09-23 | 株式会社東芝 | 画像センサ、人検出方法、制御システム、制御方法及びコンピュータプログラム |
JP6582474B2 (ja) * | 2015-03-20 | 2019-10-02 | 株式会社デンソー | 衝突余裕時間算出装置及び衝突回避システム |
US20170213080A1 (en) * | 2015-11-19 | 2017-07-27 | Intelli-Vision | Methods and systems for automatically and accurately detecting human bodies in videos and/or images |
US10949983B2 (en) | 2015-12-18 | 2021-03-16 | Ricoh Company, Ltd. | Image processing apparatus, image processing system, image processing method, and computer-readable recording medium |
JP2017165345A (ja) * | 2016-03-18 | 2017-09-21 | 株式会社Jvcケンウッド | 物体認識装置、物体認識方法、及び物体認識プログラム |
US10235786B2 (en) * | 2016-10-14 | 2019-03-19 | Adobe Inc. | Context aware clipping mask |
US10628960B2 (en) * | 2016-11-24 | 2020-04-21 | Ricoh Company, Ltd. | Information processing apparatus, imaging apparatus, device control system, moving object, information processing method, and recording medium |
US10614604B2 (en) | 2017-12-04 | 2020-04-07 | International Business Machines Corporation | Filling in an entity within an image |
US10636186B2 (en) | 2017-12-04 | 2020-04-28 | International Business Machines Corporation | Filling in an entity within a video |
WO2020003510A1 (ja) * | 2018-06-29 | 2020-01-02 | 富士通株式会社 | 特定方法、判定方法、特定プログラム、判定プログラムおよび情報処理装置 |
US11514703B2 (en) | 2018-08-07 | 2022-11-29 | Canon Kabushiki Kaisha | Detection device and control method of the same |
JP7204421B2 (ja) | 2018-10-25 | 2023-01-16 | キヤノン株式会社 | 検知装置およびその制御方法 |
JP6745465B1 (ja) * | 2019-03-06 | 2020-08-26 | パナソニックIpマネジメント株式会社 | 車両及びカメラモジュール |
US11948303B2 (en) * | 2021-02-26 | 2024-04-02 | Capsovision Inc. | Method and apparatus for objective assessment of gastrointestinal conditions based on images captured in the GI tract |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5214717A (en) * | 1990-02-26 | 1993-05-25 | Fujitsu Limited | Pattern recognition data processing device using an associative matching method |
JP2003006642A (ja) | 2001-06-22 | 2003-01-10 | Toshihiko Shimizu | 熱画像を利用した画像処理装置 |
JP3987048B2 (ja) | 2003-03-20 | 2007-10-03 | 本田技研工業株式会社 | 車両周辺監視装置 |
JP3934119B2 (ja) | 2004-06-14 | 2007-06-20 | 本田技研工業株式会社 | 車両周辺監視装置 |
US7945099B2 (en) * | 2005-05-09 | 2011-05-17 | Like.Com | System and method for use of images with recognition analysis |
JP2007206833A (ja) * | 2006-01-31 | 2007-08-16 | Toshiba Corp | 生体照合方法および生体照合装置 |
JP4203512B2 (ja) | 2006-06-16 | 2009-01-07 | 本田技研工業株式会社 | 車両周辺監視装置 |
JP2008181423A (ja) | 2007-01-25 | 2008-08-07 | Fujitsu Ten Ltd | 歩行者認識装置および歩行者認識方法 |
JP5478928B2 (ja) * | 2009-03-31 | 2014-04-23 | 綜合警備保障株式会社 | 人物同定装置、人物同定方法、及び人物同定プログラム |
EP2490171B1 (en) | 2009-10-16 | 2020-11-25 | Nec Corporation | Person image search starting from clothing query text. |
JP5385752B2 (ja) * | 2009-10-20 | 2014-01-08 | キヤノン株式会社 | 画像認識装置、その処理方法及びプログラム |
JP5671224B2 (ja) * | 2009-10-20 | 2015-02-18 | キヤノン株式会社 | 画像処理装置、画像処理方法 |
US20120063689A1 (en) * | 2010-09-15 | 2012-03-15 | The Johns Hopkins University | Object recognition in an image |
JP2012108785A (ja) * | 2010-11-18 | 2012-06-07 | Panasonic Corp | 人数カウント装置、人数カウント方法及び人数カウントプログラム |
CN103164713B (zh) * | 2011-12-12 | 2016-04-06 | 阿里巴巴集团控股有限公司 | 图像分类方法和装置 |
JP5918996B2 (ja) * | 2011-12-27 | 2016-05-18 | キヤノン株式会社 | 被写体認識装置および辞書データ登録方法 |
US9443137B2 (en) * | 2012-05-08 | 2016-09-13 | Samsung Electronics Co., Ltd. | Apparatus and method for detecting body parts |
-
2013
- 2013-05-21 JP JP2013107119A patent/JP5794255B2/ja active Active
-
2014
- 2014-05-20 US US14/282,316 patent/US9501720B2/en active Active
- 2014-05-20 DE DE102014209584.0A patent/DE102014209584A1/de not_active Ceased
Also Published As
Publication number | Publication date |
---|---|
US20140348383A1 (en) | 2014-11-27 |
DE102014209584A1 (de) | 2014-11-27 |
US9501720B2 (en) | 2016-11-22 |
JP2014229010A (ja) | 2014-12-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5794255B2 (ja) | 物体検出装置 | |
EP3367084B1 (en) | Road surface state determination device and method | |
JP4263737B2 (ja) | 歩行者検知装置 | |
JP4708124B2 (ja) | 画像処理装置 | |
JP6158779B2 (ja) | 画像処理装置 | |
JP5482737B2 (ja) | 視認負荷量推定装置、運転支援装置、および視認負荷量推定プログラム | |
JP2014215877A (ja) | 物体検出装置 | |
EP2919159A2 (en) | Image processing device and image processing method | |
CN105426863B (zh) | 检测车道线的方法和装置 | |
JP2013537661A (ja) | ステレオビジョン技術を使用することによる移動物体の自動検出 | |
KR101483742B1 (ko) | 지능형 차량의 차선 검출방법 | |
JP4645433B2 (ja) | 図形中心検出方法、楕円検出方法、画像認識装置、制御装置 | |
KR101866381B1 (ko) | 변형 가능한 파트 모델을 사용한 보행자 검출 장치 및 방법 | |
JP2005311691A (ja) | 物体検出装置及び方法 | |
JP2012221162A (ja) | 対象物検出装置及びプログラム | |
JP2007334511A (ja) | 対象物検出装置、車両、対象物検出方法、並びに対象物検出用プログラム | |
JP6375911B2 (ja) | カーブミラー検出装置 | |
US9727792B2 (en) | Method and device for tracking-based visibility range estimation | |
CN104517099A (zh) | 滤波装置和环境识别系统 | |
JP2007011490A (ja) | 道路パラメータ検出装置および道路パラメータ検出方法 | |
CN108629227B (zh) | 在图像中确定车辆左右边界的方法及系统 | |
Lakmal et al. | Pothole detection with image segmentation for advanced driver assisted systems | |
JP4823753B2 (ja) | 車両の周辺監視装置 | |
JP4627305B2 (ja) | 車両周辺監視装置、車両周辺監視方法、及び車両周辺監視用プログラム | |
KR100976142B1 (ko) | 차량검출방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20141118 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150403 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150428 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150714 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150727 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5794255 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |