JP6764012B1 - 画像処理装置、画像処理方法、及びプログラム - Google Patents
画像処理装置、画像処理方法、及びプログラム Download PDFInfo
- Publication number
- JP6764012B1 JP6764012B1 JP2019208593A JP2019208593A JP6764012B1 JP 6764012 B1 JP6764012 B1 JP 6764012B1 JP 2019208593 A JP2019208593 A JP 2019208593A JP 2019208593 A JP2019208593 A JP 2019208593A JP 6764012 B1 JP6764012 B1 JP 6764012B1
- Authority
- JP
- Japan
- Prior art keywords
- track data
- target
- area
- feature amount
- moving image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Image Analysis (AREA)
Abstract
Description
図1(a)−(c)は、実施の形態に係る画像処理装置が実行する画像処理の概要を説明するための図である。実施の形態に係る画像処理装置は、2つの異なる動画それぞれに含まれる同一の被写体を検出対象として、その被写体が含まれるフレーム画像を紐づける。実施の形態に係る画像処理装置が扱う検出対象は、人物、車両、飛行体、商品等、種々の物を設定できる。以下では、図1を参照して、検出対象が人物であることを前提として実施の形態の概要を述べる。
図2は、実施の形態に係る画像処理装置1の機能構成を模式的に示す図である。画像処理装置1は、記憶部2と制御部3とを備える。図2において、矢印は主なデータの流れを示しており、図2に示していないデータの流れがあってもよい。図2において、各機能ブロックはハードウェア(装置)単位の構成ではなく、機能単位の構成を示している。そのため、図2に示す機能ブロックは単一の装置内に実装されてもよく、あるいは複数の装置内に分かれて実装されてもよい。機能ブロック間のデータの授受は、データバス、ネットワーク、可搬記憶媒体等、任意の手段を介して行われてもよい。
図4(a)−(b)は、実施の形態に係る検出対象領域、第1領域、及び第2領域の一例を示す模式図である。具体的に、図4(a)は、画像取得部30が取得した動画Mを構成するフレーム画像Fの一例を示す図である。また、図4(b)は、図4(a)に示すフレーム画像Fから抽出された対象領域R、第1領域R1、及び第2領域R2を示す図である。
図8は、実施の形態に係る画像処理装置1が実行する画像処理の流れを説明するためのフローチャートである。本フローチャートにおける処理は、例えば画像処理装置1が起動したときに開始する。
以上説明したように、実施の形態に係る画像処理装置1によれば、動画Mにおける対象の追跡技術の精度を向上させることができる。
上記では、画像処理装置1が処理対象画像の領域抽出処理及び領域分割処理を実行することにより、被写体S以外の背景領域の影響を低減して検出対象の追跡の精度を向上する場合について説明した。これに代えて、領域抽出処理及び領域分割処理は、例えば、処理対象画像を撮像する撮像機器が実行してもよいし、処理対象画像を格納する画像ストレージ(不図示)を管理する画像サーバ(不図示)が実行してもよい。領域抽出処理及び領域分割処理をあらかじめ実行しておくことになるため、画像処理装置1による追跡処理を高速し、画像処理装置1が消費する計算リソースを削減することができる。
上記では、トラックデータ作成部31が同一の動画Mに由来する二つの異なるフレーム間の類比を判定し、判定部33が2つの異なる動画Mそれぞれのフレーム画像間の類比を判定する場合について主に説明した。これに代えて、あるいはこれに加えて、判定部33が、同一の動画Mに由来する二つの異なるフレーム間の類比を判定してもよい。あるいは、トラックデータ作成部31と判定部33とを統合して一つの画像比較部としてもよい。
2・・・記憶部
3・・・制御部
30・・・画像取得部
31・・・トラックデータ作成部
310・・・フレーム分類部
311・・・トラック生成部
32・・・トラックデータ取得部
33・・・判定部
330・・・組生成部
331・・・類似度取得部
332・・・類比決定部
34・・・トラックデータ出力部
35・・・検索対象指定部
350・・・受付部
351・・・機器情報取得部
352・・・移動方向取得部
353・・・撮像日取得部
40・・・領域抽出部
41・・・領域分割部
42・・・特徴量抽出部
Claims (9)
- 動画を構成する複数のフレーム画像のそれぞれから、検出対象を含む領域である対象領域を抽出する領域抽出部と、
前記対象領域を検索対象が映る第1領域とそれ以外の領域である第2領域とに分割する領域分割部と、
抽出された対象領域それぞれについて、各対象領域に含まれる検出対象同士の異同を判定するための特徴量を前記第1領域から抽出する特徴量抽出部と、
前記特徴量に基づいて、前記動画を構成する複数のフレーム画像を、同一の検出対象を連続して含む1又は複数のフレーム群に分類するフレーム分類部と、
前記1又は複数のフレーム群に含まれる前記特徴量に基づいて、前記1又は複数のフレーム群のうち、同一の検出対象を含むフレーム群を対応づけたデータであるトラックデータを生成するトラック生成部と、
を備える画像処理装置。 - 前記特徴量抽出部は、前記第2領域に相当する画素に対して所定の係数を乗じた後に前記対象領域にフィルタ処理を実行して前記特徴量を抽出する、
請求項1に記載の画像処理装置。 - 前記トラック生成部が生成した前記動画に由来する前記トラックデータである第1トラックデータと、前記動画とは異なる動画であって、前記検出対象が含まれるか否かの判定の対象となる第2動画に由来する前記トラックデータである第2トラックデータとを取得するトラックデータ取得部と、
前記第1トラックデータを構成する各フレーム画像から抽出された前記特徴量である第1特徴量群と、前記第2トラックデータを構成する各フレーム画像から抽出された前記特徴量である第2特徴量群とに基づいて、前記第2トラックデータに含まれる検出対象が、前記第1トラックデータに含まれる検出対象と同一の検出対象か否かを判定する判定部と、
同一の検出対象が含まれると判定された前記第1トラックデータと前記第2トラックデータとの組を出力するトラックデータ出力部と、
をさらに備える請求項1又は2に記載の画像処理装置。 - 前記トラック生成部が生成した前記動画に由来する前記トラックデータである第1トラックデータと、前記動画と同一の撮像機器が撮像した前記動画とは異なる動画であって、前記検出対象が含まれるか否かの判定の対象となる第2動画に由来する前記トラックデータである第2トラックデータとを取得するトラックデータ取得部と、
前記第1トラックデータと前記第2トラックデータとのそれぞれに含まれる前記検出対象の移動方向を示す第1移動方向と第2移動方向とを取得する移動方向取得部と、をさらに備え、
前記判定部は、第1移動方向と第2移動方向とがあらかじめ定めた所定の範囲に含まれることを条件として、前記第2トラックデータに含まれる検出対象が、前記第1トラックデータに含まれる検出対象と同一の検出対象か否かを判定する、
請求項3に記載の画像処理装置。 - 前記判定部は、
前記第1トラックデータに含まれる複数のフレーム画像のうちのいずれかのフレーム画像と、前記第2トラックデータに含まれる複数のフレーム画像のうちのいずれかのフレーム画像と、の組み合わせによって構成される複数の画像組を生成する組生成部と、
前記画像組を構成するフレーム画像から抽出された前記特徴量に基づいて、各画像組を構成するフレーム画像間の類似度を取得する類似度取得部と、
画像組毎の前記類似度に基づいて、前記第2トラックデータに含まれる検出対象が、前記第1トラックデータに含まれる検出対象と同一の検出対象か否かを決定する類比決定部と、
を備える請求項3又は4に記載の画像処理装置。 - 前記動画と前記第2動画とのそれぞれを撮像した撮像機器を示す情報である第1機器情報と第2機器情報とを取得する機器情報取得部をさらに備え、
前記トラックデータ取得部は、前記第1機器情報と前記第2機器情報とが一致することを条件として、前記第2トラックデータを取得する、
請求項3から5のいずれか1項に記載の画像処理装置。 - 前記動画と前記第2動画とのそれぞれの撮像日を取得する撮像日取得部をさらに備え、
前記特徴量抽出部は、前記動画の撮像日と前記第2動画の撮像日とが同一の場合と異なる場合とで、前記特徴量の抽出手法を変更する、
請求項3から6のいずれか1項に記載の画像処理装置。 - プロセッサが、
動画を構成する複数のフレーム画像のそれぞれから、検出対象を含む領域である対象領域を抽出するステップと、
前記対象領域を検索対象が映る第1領域とそれ以外の領域である第2領域とに分割するステップと、
抽出された対象領域それぞれについて、各対象領域に含まれる検出対象同士の異同を判定するための特徴量を前記第1領域から抽出するステップと、
前記特徴量に基づいて、前記動画を構成する複数のフレーム画像を、同一の検出対象を連続して含む1又は複数のフレーム群に分類するステップと、
前記1又は複数のフレーム群に含まれる前記特徴量に基づいて、前記1又は複数のフレーム群のうち、同一の検出対象を含むフレーム群を対応づけたデータであるトラックデータを生成するステップと、
を実行する画像処理方法。 - コンピュータに、
動画を構成する複数のフレーム画像のそれぞれから、検出対象を含む領域である対象領域を抽出する機能と、
前記対象領域を検索対象が映る第1領域とそれ以外の領域である第2領域とに分割する機能と、
抽出された対象領域それぞれについて、各対象領域に含まれる検出対象同士の異同を判定するための特徴量を前記第1領域から抽出する機能と、
前記特徴量に基づいて、前記動画を構成する複数のフレーム画像を、同一の検出対象を連続して含む1又は複数のフレーム群に分類する機能と、
前記1又は複数のフレーム群に含まれる前記特徴量に基づいて、前記1又は複数のフレーム群のうち、同一の検出対象を含むフレーム群を対応づけたデータであるトラックデータを生成する機能と、
を実現させるプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019208593A JP6764012B1 (ja) | 2019-11-19 | 2019-11-19 | 画像処理装置、画像処理方法、及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019208593A JP6764012B1 (ja) | 2019-11-19 | 2019-11-19 | 画像処理装置、画像処理方法、及びプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020152219A Division JP7157784B2 (ja) | 2020-09-10 | 2020-09-10 | 画像処理装置、画像処理方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6764012B1 true JP6764012B1 (ja) | 2020-09-30 |
JP2021081966A JP2021081966A (ja) | 2021-05-27 |
Family
ID=72614687
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019208593A Active JP6764012B1 (ja) | 2019-11-19 | 2019-11-19 | 画像処理装置、画像処理方法、及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6764012B1 (ja) |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4241763B2 (ja) * | 2006-05-29 | 2009-03-18 | 株式会社東芝 | 人物認識装置及びその方法 |
JP5937823B2 (ja) * | 2011-12-28 | 2016-06-22 | グローリー株式会社 | 画像照合処理装置、画像照合処理方法及び画像照合処理プログラム |
JP5940862B2 (ja) * | 2012-03-30 | 2016-06-29 | セコム株式会社 | 画像処理装置 |
EP3321880B9 (en) * | 2015-07-01 | 2021-06-16 | Hitachi Kokusai Electric Inc. | Monitoring system, photography-side device, and verification-side device |
US11200683B2 (en) * | 2017-08-22 | 2021-12-14 | Mitsubishi Electric Corporation | Image processing device and image processing method |
-
2019
- 2019-11-19 JP JP2019208593A patent/JP6764012B1/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2021081966A (ja) | 2021-05-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2023145558A (ja) | 外観検索のシステムおよび方法 | |
JP7044898B2 (ja) | ナンバープレート認識方法、および、そのシステム | |
US11663502B2 (en) | Information processing apparatus and rule generation method | |
Chen et al. | Asynchronous tracking-by-detection on adaptive time surfaces for event-based object tracking | |
CN112419368A (zh) | 运动目标的轨迹跟踪方法、装置、设备及存储介质 | |
KR20210094784A (ko) | Cctv의 위치 정보 및 객체의 움직임 정보에 기초한 타겟 객체 재식별 시스템 및 방법 | |
CN108875456B (zh) | 目标检测方法、目标检测装置和计算机可读存储介质 | |
CN110827320B (zh) | 基于时序预测的目标跟踪方法和装置 | |
JP7330708B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP7313828B2 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
Wang et al. | UAV target detection algorithm based on improved YOLOv8 | |
KR20190088087A (ko) | 움직임 정보를 이용한 인공지능 학습기반의 이동객체 영상 분류처리 방법 | |
JP2020127194A (ja) | コンピュータシステムおよびプログラム | |
JP7180590B2 (ja) | オブジェクト特徴量抽出装置、オブジェクト特徴量抽出方法及びオブジェクト特徴量抽出プログラム | |
US11544926B2 (en) | Image processing apparatus, method of processing image, and storage medium | |
Krithika et al. | MAFONN-EP: A minimal angular feature oriented neural network based emotion prediction system in image processing | |
Delibasoglu et al. | Motion detection in moving camera videos using background modeling and FlowNet | |
JP6764012B1 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP6768913B1 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
Park et al. | Intensity classification background model based on the tracing scheme for deep learning based CCTV pedestrian detection | |
JP7157784B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
Persia et al. | Labeling the frames of a video stream with interval events | |
CN115311518A (zh) | 一种获取视觉属性信息的方法、装置、介质及电子设备 | |
JP7202995B2 (ja) | 時空間事象予測装置、時空間事象予測方法及び時空間事象予測システム | |
Li et al. | A fall detection network by 2d/3d spatio-temporal joint models with tensor compression on edge |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191125 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20191125 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20200311 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200312 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200317 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200515 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200818 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200910 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6764012 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |