JP2019185616A - 画像抽出装置、画像抽出方法及び画像抽出プログラム - Google Patents
画像抽出装置、画像抽出方法及び画像抽出プログラム Download PDFInfo
- Publication number
- JP2019185616A JP2019185616A JP2018078648A JP2018078648A JP2019185616A JP 2019185616 A JP2019185616 A JP 2019185616A JP 2018078648 A JP2018078648 A JP 2018078648A JP 2018078648 A JP2018078648 A JP 2018078648A JP 2019185616 A JP2019185616 A JP 2019185616A
- Authority
- JP
- Japan
- Prior art keywords
- image
- rectangular area
- area
- rectangular
- region
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
- Image Analysis (AREA)
Abstract
Description
前記矩形領域特定部は、特定した前記オブジェクトの輪郭領域から、前記オブジェクトの輪郭を構成する点群を近似する矩形として矩形領域を特定してもよい。
前記矩形領域特定部は、前記オブジェクトの輪郭を構成する点群を内包する複数の矩形候補のうち、当該矩形の面積が相対的に小さい矩形領域を前記矩形領域として特定してもよい。
[画像抽出装置1の概要]
図1は、第1実施形態に係る画像抽出装置1の概要を示す図である。画像抽出装置1は、撮像装置が撮像した画像から機械学習に用いるオブジェクトを示す画像を抽出するコンピュータである。
続いて、画像抽出装置1の構成を説明する。図2は、第1実施形態に係る画像抽出装置1の構成を示す図である。図2に示すように、画像抽出装置1は、入力部11と、表示部12と、記憶部13と、制御部14とを備える。なお、表示部12については、オブジェクト特定部142で、画像上でのユーザの指定操作を受け付ける場合には必要になるが、受け付けない場合は不要である。
表示部12は、例えば、液晶ディスプレイや有機EL(Electro-Luminescence)ディスプレイ等により構成される。表示部12は、制御部14の制御に応じて各種情報を表示する。
以上説明したように、第1実施形態に係る画像抽出装置1は、所定エリアを撮像する撮像装置が撮像した画像に含まれる所定の属性の一以上のオブジェクトを特定し、当該画像における、特定したオブジェクトの輪郭を示す輪郭領域と、特定したオブジェクトに対応する矩形領域とを特定する。画像抽出装置1は、特定した矩形領域のうち、当該矩形領域に囲まれているオブジェクトとは異なる他のオブジェクトに対応する輪郭領域との重複率が所定値以下の矩形領域を示す非重複矩形領域を特定し、特定した非重複矩形領域を示す画像を、機械学習におけるオブジェクトの正例を示す正例画像として抽出する。このようにすることで、画像抽出装置1は、機械学習に適した画像を効率よく収集することができる。
[撮像時刻が異なる複数の画像に基づいて正例画像を抽出する]
続いて、第2実施形態について説明する。第1実施形態に係る画像抽出装置1は、動線情報に対応するオブジェクトが着席等により長時間にわたって移動していない場合に、同等の画像が正例画像として抽出されてしまう。そこで、第2実施形態に係る画像抽出装置1は、撮像時刻が異なる複数の画像に基づいて、同等の画像が正例画像として抽出されないようにする点で第1実施形態と異なる。以下に、第2実施形態に係る画像抽出装置1について説明する。なお、第1実施形態と同じ部分については適宜説明を省略する。
以上説明したように、第2実施形態に係る画像抽出装置1は、第1画像と、第1画像よりも後に撮像された第2画像とを重ねた場合に、第1画像に含まれる第1オブジェクトに対応する輪郭領域又は矩形領域のうち、第2画像に含まれる第2オブジェクトに対応する輪郭領域又は矩形領域との重複率が所定値以下の非重複矩形領域を特定し、非重複矩形領域を示す画像を、機械学習におけるオブジェクトの正例を示す正例画像として抽出する。
Claims (17)
- 所定エリアを撮像する撮像装置が撮像した画像に含まれる所定の属性の一以上のオブジェクトを特定するオブジェクト特定部と、
前記画像における、特定した前記オブジェクトの輪郭を示す輪郭領域を特定する輪郭領域特定部と、
前記画像における、特定した前記オブジェクトに対応する矩形領域を特定する矩形領域特定部と、
前記矩形領域のうち、当該矩形領域に囲まれているオブジェクトとは異なる他のオブジェクトに対応する前記輪郭領域との重複率が所定値以下の矩形領域を示す非重複矩形領域を特定し、特定した前記非重複矩形領域を示す画像を、機械学習における前記オブジェクトの正例を示す正例画像として抽出する抽出部と、
を備える画像抽出装置。 - 前記矩形領域特定部は、特定した前記オブジェクトの輪郭領域に基づいて、前記矩形領域を特定する、
請求項1に記載の画像抽出装置。 - 前記矩形領域特定部は、特定した前記オブジェクトの輪郭領域から、前記オブジェクトの輪郭を構成する点群を近似する矩形として矩形領域を特定する、
請求項2に記載の画像抽出装置。 - 前記矩形領域特定部は、前記オブジェクトの輪郭を構成する点群を内包する複数の矩形候補のうち、当該矩形の面積が相対的に小さい矩形領域を前記矩形領域として特定する、
請求項3に記載の画像抽出装置。 - 前記矩形領域特定部は、前記撮像装置が全方位画像を撮像する撮像装置である場合に、前記輪郭領域に対応する一点と、当該撮像装置が撮像した画像の中心との位置関係に基づいて、基準軸に対する前記矩形領域の回転成分を算出し、当該回転成分を有する矩形領域のうち、面積が相対的に小さい矩形領域を前記オブジェクトに対応する矩形領域として特定する、
請求項2から4のいずれか1項に記載の画像抽出装置。 - 前記オブジェクト特定部は、前記所定エリアにおける一以上の前記オブジェクトのそれぞれの位置を示す位置情報を取得することにより前記オブジェクトを特定し、
前記輪郭領域特定部は、前記所定エリアにおける前記位置情報が示す位置に前記オブジェクトに対応する三次元モデルを仮想的に配置した場合に前記撮像装置が撮像した画像に含まれる前記三次元モデルに対応する輪郭領域を特定する、
請求項1から5のいずれか1項に記載の画像抽出装置。 - 前記撮像装置が撮像する画像における複数の位置のそれぞれと、当該複数の位置のそれぞれに前記三次元モデルを仮想的に配置したときの前記輪郭領域を示す情報とを関連付けた位置別領域情報を記憶する記憶部を備え、
前記輪郭領域特定部は、前記位置別領域情報を参照し、前記オブジェクト特定部が取得した位置情報が示す位置に関連付けられている輪郭領域を、当該三次元モデルの輪郭領域と特定する、
請求項6に記載の画像抽出装置。 - 前記三次元モデルを構成する点群を示す点群情報と、前記撮像装置のキャリブレーションに関するパラメータとを記憶する記憶部を備え、
前記輪郭領域特定部は、前記記憶部から当該点群情報と当該パラメータとを取得し、前記三次元モデルを仮想的に配置した場合に、当該点群情報が示す点群の少なくとも一部について、当該パラメータに基づいて、前記撮像装置が撮像する画像上への投影点を算出し、当該投影点の点群を近似する多角形領域を、当該三次元モデルの輪郭領域として特定する、
請求項6に記載の画像抽出装置。 - 前記オブジェクト特定部は、前記撮像装置が撮像した第1画像に含まれる第1オブジェクトを特定するとともに、前記第1画像に含まれる一以上の第2オブジェクトを特定し、
前記抽出部は、前記第1オブジェクトに対応する前記矩形領域と、前記一以上の第2オブジェクトのそれぞれに対応する前記輪郭領域との重複率が前記所定値以下である場合、前記第1オブジェクトに対応する前記矩形領域を前記非重複矩形領域に特定する、
請求項1から8のいずれか1項に記載の画像抽出装置。 - 前記オブジェクト特定部は、前記撮像装置が撮像した第1画像に含まれる前記オブジェクトである第1オブジェクトを特定するとともに、前記第1画像よりも後に撮像された第2画像に含まれる前記オブジェクトである第2オブジェクトを特定し、
前記抽出部は、前記第1画像と前記第2画像とを重ねた場合に、前記第1オブジェクトに対応する前記輪郭領域又は前記矩形領域のうち、前記第2オブジェクトに対応する前記輪郭領域又は前記矩形領域との重複率が前記所定値以下の前記非重複矩形領域を特定する、
請求項1から8のいずれか1項に記載の画像抽出装置。 - 前記矩形領域特定部は、前記画像において、前記オブジェクトに対応しない矩形領域であって、特定した全ての前記オブジェクトの輪郭領域との重複率が所定値以下となる矩形領域である第2矩形領域を特定し、
前記抽出部は、前記第2矩形領域を示す画像を、前記機械学習における前記オブジェクトの負例を示す負例画像として抽出する、
請求項1から10のいずれか1項に記載の画像抽出装置。 - 前記抽出部は、特定した前記非重複矩形領域を示す画像を、入力された画像が前記オブジェクトを示しているか否かを判定する判定器に入力し、前記判定器により、当該画像が前記オブジェクトを示していると判定されると、当該画像を前記正例画像として抽出する、
請求項1から11のいずれか1項に記載の画像抽出装置。 - 前記抽出部は、特定した前記非重複矩形領域に対応する位置と、前記撮像装置に対応する位置との間の距離を算出し、当該距離に基づいて、前記非重複矩形領域を示す画像を前記正例画像として抽出するか否かを判定する、
請求項1から12のいずれか1項に記載の画像抽出装置。 - 前記撮像装置は、全方位画像を撮像する撮像装置であり、
前記抽出部は、特定した前記非重複矩形領域に対応する位置と、前記撮像装置が撮像した画像の中心との距離を算出し、当該距離が第1距離よりも大きい場合、前記非重複矩形領域を示す画像を前記正例画像として抽出し、当該距離が前記第1距離以下である場合、前記非重複矩形領域を示す画像を前記正例画像として抽出しないように制御する、
請求項13に記載の画像抽出装置。 - 前記抽出部は、特定した前記非重複矩形領域に対応する位置と、前記撮像装置が撮像した画像の中心との距離を算出し、当該距離が第2距離よりも小さい場合、前記非重複矩形領域を示す画像を前記正例画像として抽出し、当該距離が前記第2距離以上である場合、前記非重複矩形領域を示す画像を前記正例画像として抽出しないように制御する、
請求項13又は14に記載の画像抽出装置。 - コンピュータが実行する、
所定エリアを撮像する撮像装置が撮像した画像に含まれる所定の属性の一以上のオブジェクトを特定するステップと、
前記画像における、特定した前記オブジェクトの輪郭を示す輪郭領域を特定するステップと、
前記画像における、特定した前記オブジェクトに対応する矩形領域を特定するステップと、
前記矩形領域のうち、当該矩形領域に囲まれているオブジェクトとは異なる他のオブジェクトに対応する前記輪郭領域との重複率が所定値以下の矩形領域を示す非重複矩形領域を特定し、特定した前記非重複矩形領域を示す画像を、機械学習における前記オブジェクトの正例を示す正例画像として抽出するステップと、
を備える画像抽出方法。 - コンピュータを、
所定エリアを撮像する撮像装置が撮像した画像に含まれる所定の属性の一以上のオブジェクトを特定するオブジェクト特定部、
前記画像における、特定した前記オブジェクトの輪郭を示す輪郭領域を特定する輪郭領域特定部、
前記画像における、特定した前記オブジェクトに対応する矩形領域を特定する矩形領域特定部、及び、
前記矩形領域のうち、当該矩形領域に囲まれているオブジェクトとは異なる他のオブジェクトに対応する前記輪郭領域との重複率が所定値以下の矩形領域を示す非重複矩形領域を特定し、特定した前記非重複矩形領域を示す画像を、機械学習における前記オブジェクトの正例を示す正例画像として抽出する抽出部、
として機能させる画像抽出プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018078648A JP7073179B2 (ja) | 2018-04-16 | 2018-04-16 | 画像抽出装置、画像抽出方法及び画像抽出プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018078648A JP7073179B2 (ja) | 2018-04-16 | 2018-04-16 | 画像抽出装置、画像抽出方法及び画像抽出プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019185616A true JP2019185616A (ja) | 2019-10-24 |
JP7073179B2 JP7073179B2 (ja) | 2022-05-23 |
Family
ID=68341466
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018078648A Active JP7073179B2 (ja) | 2018-04-16 | 2018-04-16 | 画像抽出装置、画像抽出方法及び画像抽出プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7073179B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111882497A (zh) * | 2020-07-10 | 2020-11-03 | 深圳传音控股股份有限公司 | 一种图像矫正方法、拍摄方法、终端及计算机存储介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009110486A (ja) * | 2007-11-01 | 2009-05-21 | Sony Corp | 画像処理装置、画像処理方法および画像処理プログラム、並びに、撮像装置および撮像装置の制御方法 |
JP2010102396A (ja) * | 2008-10-21 | 2010-05-06 | Nec Soft Ltd | 人物検出装置、人物検出方法及びプログラム |
JP2013210968A (ja) * | 2012-03-30 | 2013-10-10 | Canon Inc | 物体検出装置及びその方法、プログラム |
JP2014093023A (ja) * | 2012-11-06 | 2014-05-19 | Canon Inc | 物体検出装置、物体検出方法及びプログラム |
JP2017059207A (ja) * | 2015-09-18 | 2017-03-23 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 画像認識方法 |
JP2018032078A (ja) * | 2016-08-22 | 2018-03-01 | Kddi株式会社 | 他の物体の画像領域も考慮して物体を追跡する装置、プログラム及び方法 |
-
2018
- 2018-04-16 JP JP2018078648A patent/JP7073179B2/ja active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009110486A (ja) * | 2007-11-01 | 2009-05-21 | Sony Corp | 画像処理装置、画像処理方法および画像処理プログラム、並びに、撮像装置および撮像装置の制御方法 |
JP2010102396A (ja) * | 2008-10-21 | 2010-05-06 | Nec Soft Ltd | 人物検出装置、人物検出方法及びプログラム |
JP2013210968A (ja) * | 2012-03-30 | 2013-10-10 | Canon Inc | 物体検出装置及びその方法、プログラム |
JP2014093023A (ja) * | 2012-11-06 | 2014-05-19 | Canon Inc | 物体検出装置、物体検出方法及びプログラム |
JP2017059207A (ja) * | 2015-09-18 | 2017-03-23 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 画像認識方法 |
JP2018032078A (ja) * | 2016-08-22 | 2018-03-01 | Kddi株式会社 | 他の物体の画像領域も考慮して物体を追跡する装置、プログラム及び方法 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111882497A (zh) * | 2020-07-10 | 2020-11-03 | 深圳传音控股股份有限公司 | 一种图像矫正方法、拍摄方法、终端及计算机存储介质 |
Also Published As
Publication number | Publication date |
---|---|
JP7073179B2 (ja) | 2022-05-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10373244B2 (en) | System and method for virtual clothes fitting based on video augmented reality in mobile phone | |
WO2019237976A1 (zh) | 基于差分图像的异物检测方法及装置、设备及存储介质 | |
WO2014144408A2 (en) | Systems, methods, and software for detecting an object in an image | |
CN110793431A (zh) | 工件测量装置、工件测量方法以及计算机可读介质 | |
CN110832542B (zh) | 识别处理设备、识别处理方法和程序 | |
CN110222641B (zh) | 用于识别图像的方法和装置 | |
WO2015074521A1 (en) | Devices and methods for positioning based on image detection | |
JP2018091656A (ja) | 情報処理装置、計測装置、システム、算出方法、プログラムおよび物品の製造方法 | |
US11694331B2 (en) | Capture and storage of magnified images | |
US20170109932A1 (en) | Content projection apparatus, content projection method, and computer readable storage medium | |
CN111191644A (zh) | 身份识别方法、系统及装置 | |
JP7209657B2 (ja) | 情報処理装置及び方法 | |
JP2005310101A (ja) | 視線誘導度算出システム、視線誘導度算出プログラムおよび記憶媒体、並びに視線誘導度算出方法 | |
US20200342224A1 (en) | Article Recognition System and Article Recognition Method | |
KR101597915B1 (ko) | 화상 처리 장치 및 화상 처리 방법 | |
JP2019185616A (ja) | 画像抽出装置、画像抽出方法及び画像抽出プログラム | |
US11205091B2 (en) | Object information registration apparatus and object information registration method | |
EP3955207A1 (en) | Object detection device | |
CN115546219B (zh) | 检测板式生成方法、板卡缺陷检测方法、装置及产品 | |
CN109753958A (zh) | 图像字符识别方法 | |
EP3518521B1 (en) | Method for realizing effect of photo being taken by others through selfie, and photographing device | |
JP5051671B2 (ja) | 情報処理装置、情報処理方法およびプログラム | |
US20220129660A1 (en) | System and method of acquiring coordinates of pupil center point | |
JP7385416B2 (ja) | 画像処理装置、画像処理システム、画像処理方法及び画像処理プログラム | |
US20230147924A1 (en) | Image processing system, imaging system, image processing method, and non-transitory computer-readable medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200529 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210713 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210825 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211130 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211202 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220510 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220511 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7073179 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |