JP2021106305A - データ圧縮装置、モデル生成装置、データ圧縮方法、モデル生成方法及びコンピュータプログラム - Google Patents
データ圧縮装置、モデル生成装置、データ圧縮方法、モデル生成方法及びコンピュータプログラム Download PDFInfo
- Publication number
- JP2021106305A JP2021106305A JP2019235655A JP2019235655A JP2021106305A JP 2021106305 A JP2021106305 A JP 2021106305A JP 2019235655 A JP2019235655 A JP 2019235655A JP 2019235655 A JP2019235655 A JP 2019235655A JP 2021106305 A JP2021106305 A JP 2021106305A
- Authority
- JP
- Japan
- Prior art keywords
- data
- compression
- compression rate
- output
- image data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000013144 data compression Methods 0.000 title claims abstract description 174
- 238000000034 method Methods 0.000 title claims description 179
- 238000004590 computer program Methods 0.000 title claims description 35
- 238000007906 compression Methods 0.000 claims abstract description 498
- 230000006835 compression Effects 0.000 claims abstract description 473
- 238000001514 detection method Methods 0.000 claims abstract description 416
- 238000012545 processing Methods 0.000 claims abstract description 153
- 238000012544 monitoring process Methods 0.000 claims abstract description 46
- 238000012806 monitoring device Methods 0.000 claims abstract description 30
- 238000004891 communication Methods 0.000 claims description 51
- 238000004364 calculation method Methods 0.000 claims description 26
- 238000012549 training Methods 0.000 claims description 17
- 238000012986 modification Methods 0.000 description 23
- 230000004048 modification Effects 0.000 description 23
- 238000010586 diagram Methods 0.000 description 17
- 230000005540 biological transmission Effects 0.000 description 11
- 230000000694 effects Effects 0.000 description 7
- 230000006870 function Effects 0.000 description 4
- 238000013528 artificial neural network Methods 0.000 description 3
- 238000004422 calculation algorithm Methods 0.000 description 3
- 230000001186 cumulative effect Effects 0.000 description 3
- 238000005315 distribution function Methods 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 238000013527 convolutional neural network Methods 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 239000000470 constituent Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000013468 resource allocation Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/045—Combinations of networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/115—Selection of the code volume for a coding unit prior to coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
- H04N19/149—Data rate or code amount at the encoder output by estimating the code amount by means of a model, e.g. mathematical model or statistical model
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/167—Position within a video image, e.g. region of interest [ROI]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Artificial Intelligence (AREA)
- General Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Evolutionary Computation (AREA)
- Mathematical Physics (AREA)
- Computing Systems (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Medical Informatics (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- General Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Biophysics (AREA)
- Algebra (AREA)
- Mathematical Analysis (AREA)
- Mathematical Optimization (AREA)
- Pure & Applied Mathematics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Health & Medical Sciences (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
Description
<1−1>データ圧縮システムSYSの全体構成
はじめに、図1を参照しながら、本実施形態のデータ圧縮システムSYSの全体構成について説明する。図1は、本実施形態のデータ圧縮システムSYSの全体構成を例示するブロック図である。
続いて、図3を参照しながら、データ圧縮装置2の構成について説明する。図3は、データ圧縮装置2の構成を示すブロック図である。
続いて、図4を参照しながら、データ処理装置3の構成について説明する。図4は、データ処理装置3の構成を例示するブロック図である。
<1−4>モデル生成装置4の構成
続いて、図5を参照しながら、モデル生成装置4の構成について説明する。図5は、データ処理装置3の構成を例示するブロック図である。
<2>データ圧縮システムSYSの動作
続いて、データ圧縮システムSYSの動作について説明する。以下では、データ圧縮システムSYSが行う動作の少なくとも一部として、モデル生成装置4が行うモデル生成動作と、データ圧縮装置2が行うデータ圧縮動作とについて順に説明する。
初めに、図6を参照しながら、モデル生成装置4が行うモデル生成動作の流れについて説明する。図6は、モデル生成装置4が行うモデル生成動作の流れを例示するフローチャートである。
(2)第1の圧縮率とは異なる第2の圧縮率で圧縮された同じ一の画像データに対して物体検出処理が行われた場合に、当該一の画像データが示す画像のある位置に表現されていると推定される物体が検出される確率と、・・・、
(N−1)第1から第N−2の圧縮率とは異なる第N−2の圧縮率で圧縮された一の画像データに対して物体検出処理が行われた場合に、当該一の画像データが示す画像のある位置に表現されていると推定される物体が検出される確率と、
(N)第1から第N−1の圧縮率とは異なる第Nの圧縮率で圧縮された一の画像データに対して物体検出処理が行われた場合に、当該一の画像データが示す画像のある位置に表現されていると推定される物体が検出される確率。
(1−2)30%の圧縮率で圧縮された一の画像データに対して物体検出処理が行われた場合に、物体推定位置(xmin#11、ymin#11、xmax#11、ymax#11)に表現されていると推定される物体#11が検出される確率が、90%であり、
(1−3)50%の圧縮率で圧縮された一の画像データに対して物体検出処理が行われた場合に、物体推定位置(xmin#11、ymin#11、xmax#11、ymax#11)に表現されていると推定される物体#11が検出される確率が、50%であり、
(1−4)80%の圧縮率で圧縮された一の画像データに対して物体検出処理が行われた場合に、物体推定位置(xmin#11、ymin#11、xmax#11、ymax#11)に表現されていると推定される物体#11が検出される確率が、20%であり、
(2−1)10%の圧縮率で圧縮された一の画像データに対して物体検出処理が行われた場合に、物体推定位置(xmin#12、ymin#12、xmax#12、ymax#12)に表現されていると推定される物体#12が検出される確率が、100%であり、
(2−2)30%の圧縮率で圧縮された一の画像データに対して物体検出処理が行われた場合に、物体推定位置(xmin#12、ymin#12、xmax#12、ymax#12)に表現されていると推定される物体#12が検出される確率が、95%であり、
(2−3)50%の圧縮率で圧縮された一の画像データに対して物体検出処理が行われた場合に、物体推定位置(xmin#12、ymin#12、xmax#12、ymax#12)に表現されていると推定される物体#12が検出される確率が、90%であり、
(2−4)80%の圧縮率で圧縮された一の画像データに対して物体検出処理が行われた場合に、物体推定位置(xmin#12、ymin#12、xmax#12、ymax#12)に表現されていると推定される物体#12が検出される確率が、90%であり、
(3−1)10%の圧縮率で圧縮された一の画像データに対して物体検出処理が行われた場合に、物体推定位置(xmin#13、ymin#13、xmax#13、ymax#13)に表現されていると推定される物体#13が検出される確率が、90%である。
続いて、図13を参照しながら、データ圧縮装置2が行うデータ圧縮動作の流れについて説明する。図13は、データ圧縮装置2が行うデータ圧縮動作の流れを例示するフローチャートである。
以上説明したように、本実施形態のデータ圧縮システムSYSによれば、データ圧縮装置2は、データ処理装置3による物体の検出確率と画像データの圧縮率との相関関係(例えば、図14に例示する相関関係であり、検出確率推定モデル221の出力)に基づいて、画像データの圧縮率を設定することができる。このため、データ圧縮装置2は、圧縮された画像データに対して物体検出処理が行われる場合において、画像データを適切に圧縮することができる。つまり、データ圧縮装置2は、データ処理装置3が行う物体検出処理の特性を考慮した適切な圧縮態様で、画像データを圧縮することができる。
続いて、データ圧縮システムSYSの変形例について説明する。尚、以下では、既に説明済みの構成要件については、同一の参照符号を付してその詳細な説明を省略する。同様に、既に説明済みの処理については、同一のステップ番号を付してその詳細な説明を省略する。
上述した説明では、モデル生成装置4(特に、モデル生成部413)は、記憶装置42が記憶している物体検出位置と圧縮率とを含むラベルデータ423の全てを用いて、検出確率推定モデル221を生成している。一方で、第1変形例では、モデル生成部413は、検出確率推定モデル221を生成するために、記憶装置42が記憶している物体検出位置と圧縮率とを含むラベルデータ423の一部を用いなくてもよい。
(2)第1の範囲とは異なる第2の範囲内の圧縮率よりも大きい圧縮率で圧縮された一の画像データに対して物体検出処理が行われた場合に物体が検出されない一方で、第2の範囲内の圧縮率で圧縮された一の画像データに対して物体検出処理が行われた場合に初めて物体が検出される確率と、・・・、
(L−1)第1から第L−2の範囲内の圧縮率よりも大きい圧縮率で圧縮された一の画像データに対して物体検出処理が行われた場合に物体が検出されない一方で、第L−1の範囲内の圧縮率で圧縮された一の画像データに対して物体検出処理が行われた場合に初めて物体が検出される確率と、
(L)第1の範囲から第L−1の範囲とは異なる第Lの範囲内の圧縮率よりも大きい圧縮率で圧縮された一の画像データに対して物体検出処理が行われた場合に物体が検出されない一方で、第Lの範囲内の圧縮率で圧縮された一の画像データに対して物体検出処理が行われた場合に初めて物体が検出される確率。
(2)30%よりも大きい圧縮率で圧縮された一の画像データに対して物体検出処理が行われた場合に、物体推定位置(xmin#11、ymin#11、xmax#11、ymax#11)に表現されていると推定される物体が検出されない一方で、10%から30%の間の圧縮率で圧縮された一の画像データに対して物体検出処理が行われた場合に、物体推定位置(xmin#11、ymin#11、xmax#11、ymax#11)に表現されていると推定される物体が初めて検出される確率が、30%であり、
(3)50%よりも大きい圧縮率で圧縮された一の画像データに対して物体検出処理が行われた場合に、物体推定位置(xmin#11、ymin#11、xmax#11、ymax#11)に表現されていると推定される物体が検出されない一方で、30%から50%の間の圧縮率で圧縮された一の画像データに対して物体検出処理が行われた場合に、物体推定位置(xmin#11、ymin#11、xmax#11、ymax#11)に表現されていると推定される物体が初めて検出される確率が、40%であり、
(4)80%よりも大きい圧縮率で圧縮された一の画像データに対して物体検出処理が行われた場合に、物体推定位置(xmin#11、ymin#11、xmax#11、ymax#11)に表現されていると推定される物体が検出されない一方で、50%から80%の間の圧縮率で圧縮された一の画像データに対して物体検出処理が行われた場合に、物体推定位置(xmin#11、ymin#11、xmax#11、ymax#11)に表現されていると推定される物体が初めて検出される確率が、10%であり、
(5)80%から100%の間の圧縮率で圧縮された一の画像データに対して物体検出処理が行われた場合に、物体推定位置(xmin#11、ymin#11、xmax#11、ymax#11)に表現されていると推定される物体が初めて検出される確率が、10%である。
上述した説明では、データ圧縮装置2(特に、圧縮率設定部211)は、検出確率推定モデル221に対して、カメラ1から取得した画像データを入力している。一方で、第2変形例では、図19に例示するように、圧縮率設定部211は、カメラ1から取得した画像データに対して物体検出処理を行い、画像データのうち検出された物体に関するデータ部分を検出確率推定モデル221に入力してもよい。或いは、圧縮率設定部211は、カメラ1から取得した画像データに対して物体検出処理を行い、物体検出処理によって検出された物体の位置に関する情報を画像データと共に検出確率推定モデル221に入力してもよい。
上述した説明では、データ圧縮装置2は、カメラ1から取得した画像データ(動画データ)を圧縮している。ここで、カメラ1は、撮影範囲を撮影することで撮影範囲を監視する監視装置の一例であるとも言える。このため、データ圧縮装置2は、カメラ1から取得した画像データ(動画データ)に加えて又は代えて、所定の監視対象範囲を監視する監視装置が時系列データとして逐次出力する出力データを圧縮してもよい。この場合、監視装置は、監視対象範囲に存在する物体を監視する監視装置であることが好ましい。従って、監視装置が出力する出力データは、監視対象範囲に存在する物体に関する情報を含んでいることが好ましい。尚、カメラ1の撮影範囲は、監視対象範囲の一例である。
第4変形例では、データ圧縮システムSYSは、モデル生成装置4に代えて、モデル生成装置4aを備える。モデル生成装置4aは、図21に例示するように、モデル生成装置4と比較して、演算装置41内に、圧縮率リスト422に含まれる圧縮率を決定する機能ブロックとしてのリスト生成部415aが実現されるという点で異なる。モデル生成装置4aのその他の特徴は、モデル生成装置4のその他の特徴と同一であってもよい。
以上説明した実施形態に関して、更に以下の付記を開示する。
[付記1]
監視対象範囲を監視する監視装置が時系列データとして逐次出力する出力データを圧縮する圧縮手段と、
前記圧縮手段による圧縮が行われた前記出力データを、前記出力データを用いて前記監視対象範囲に存在する物体を検出するデータ処理装置に対して出力する出力手段と、
前記出力データを圧縮する圧縮率と、前記圧縮率で圧縮された前記出力データを用いて前記データ処理装置による物体の検出精度との間の関係を示す精度情報に基づいて、前記圧縮手段で用いられる圧縮率を設定する設定手段と
を備えるデータ圧縮装置。
[付記2]
前記設定手段は、前記圧縮手段による圧縮が行われた前記出力データのデータサイズが許容サイズ以下になることと、前記検出精度が許容精度以上になることとを満足するように、前記圧縮率を設定する
付記1に記載のデータ圧縮装置。
[付記3]
前記精度情報は、
前記出力データのうちの第1の位置に位置する第1の物体に関する第1のデータ部分を圧縮する圧縮率と、前記圧縮率で圧縮された前記第1のデータ部分を用いた前記データ処理装置による前記第1の物体の検出精度との関係を示す第1の情報と、
前記出力データのうちの前記第1の位置とは異なる第2の位置に位置する第2の物体に関する第2のデータ部分を圧縮する圧縮率と、前記圧縮率で圧縮された前記第2のデータ部分を用いた前記データ処理装置による前記第2の物体の検出精度との関係を示す第2の情報と
を含み、
前記設定手段は、前記精度情報に基づいて、前記第1のデータ部分に対して前記圧縮手段によって用いられる圧縮率と、前記第2のデータ部分に対して前記圧縮手段によって用いられる圧縮率とを別々に設定する
付記1又は2に記載のデータ圧縮装置。
[付記4]
前記設定手段は、前記圧縮手段による圧縮が行われた前記第1及び第2のデータ部分のデータサイズの総和が許容サイズ以下になることと、前記第1の物体の検出精度と前記第2の物体の検出精度の総和が最大になることとを満足するように、前記圧縮率を設定する
付記3に記載のデータ圧縮装置。
[付記5]
前記出力手段は、前記圧縮手段による圧縮が行われた前記出力データを、通信ネットワーク網を介して前記データ処理装置に送信し、
前記設定手段は、前記通信ネットワーク網において前記出力手段が利用可能な可用帯域の制限内で前記圧縮手段による圧縮が行われた前記出力データを送信することと、前記検出精度が最大になることとを満足するように、前記圧縮率を設定する
付記1から4のいずれか一項に記載のデータ圧縮装置。
[付記6]
前記設定手段は、前記出力データの少なくとも一部が入力されると前記圧縮率と前記検出精度との関係を出力する演算モデルを用いて前記精度情報を取得し、前記取得した精度情報に基づいて前記圧縮率を設定する
付記1から5のいずれか一項に記載のデータ圧縮装置。
[付記7]
前記監視装置は、カメラ及び3次元スキャナの少なくとも一方を含み、
前記出力データは、動画データを構成する画像データ、及び、点群データの少なくとも一方を含む
付記1から6のいずれか一項に記載のデータ圧縮装置。
[付記8]
監視対象範囲を監視する監視装置が時系列データとして逐次出力する出力データ及び前記出力データとデータ種類が同じである同種データの少なくとも一方を含む学習用データを、圧縮率リストに含まれる複数の異なる圧縮率の夫々で圧縮する圧縮手段と、
前記複数の異なる圧縮率の夫々で前記圧縮手段による圧縮が行われた前記学習用データを用いて、前記監視対象範囲に存在する物体を検出する検出手段と、
前記検出手段による検出結果と、前記圧縮手段による圧縮で用いられた前記複数の異なる圧縮率とに基づいて、前記学習用データを圧縮する圧縮率と、前記圧縮率で圧縮された前記学習用データを用いた前記検出手段による物体の検出精度との間の関係に関する精度の推定に用いる演算モデルを生成する生成手段と、
前記生成手段が生成した前記演算モデルを、前記演算モデルを用いて前記出力データを圧縮するための圧縮率を設定し且つ前記設定した圧縮率で前記出力データを圧縮するデータ圧縮装置に対して出力する出力手段と
を備えるモデル生成装置。
[付記9]
前記圧縮率リストに含まれる前記複数の異なる圧縮率を設定する設定手段を更に備え、
前記設定手段は、(i)前記圧縮率リストに含まれる圧縮率の候補となる複数の異なる圧縮率候補の夫々で前記学習用データを圧縮するように前記圧縮手段を制御し、(ii)前記複数の異なる圧縮率候補の夫々で圧縮された前記学習用データを用いて前記監視対象範囲に存在する物体を検出するように前記検出手段を制御し、(iii)前記複数の異なる圧縮率候補の中に前記検出手段による検出結果が同じになる少なくとも二つの圧縮率候補が存在する場合には、前記少なくとも二つの圧縮率候補のうち最も大きい圧縮率候補を前記圧縮率リストに含める圧縮率として設定する
付記8に記載のモデル生成装置。
[付記10]
コンピュータによって、
監視対象範囲を監視する監視装置が時系列データとして逐次出力する出力データを圧縮する圧縮処理を行い、
前記圧縮処理が行われた前記出力データを、前記出力データを用いて前記監視対象範囲に存在する物体を検出するための物体検出処理を行うデータ処理装置に出力し、
前記出力データを圧縮する圧縮率と、前記圧縮率で圧縮された前記出力データを用いて行われる前記物体検出処理による前記物体の検出精度との間の関係を示す精度情報に基づいて、前記圧縮処理で用いられる圧縮率を設定する
データ圧縮方法。
[付記11]
コンピュータによって、
監視対象範囲を監視する監視装置が時系列データとして逐次出力する出力データ及び前記出力データとデータ種類が同じである同種データの少なくとも一方を含む学習用データを、圧縮率リストに含まれる複数の異なる圧縮率の夫々で圧縮する圧縮処理を行い、
前記複数の異なる圧縮率の夫々で前記圧縮処理が行われた前記学習用データを用いて、前記監視対象範囲に存在する物体を検出するための物体検出処理を行い、
前記物体検出処理の結果と、前記圧縮処理で用いられた前記複数の異なる圧縮率とに基づいて、前記学習用データを圧縮する圧縮率と、前記圧縮率で圧縮された前記学習用データを用いて行われる前記物体検出処理による前記物体の検出精度との間の関係に関する精度情報を推定するための演算モデルを生成し、
前記生成手段が生成した前記演算モデルを、前記演算モデルを用いて前記出力データを圧縮するための圧縮率を設定し且つ前記設定した圧縮率で前記出力データを圧縮するデータ圧縮装置に出力する
モデル生成方法。
[付記12]
コンピュータに、データ圧縮方法を実行させるプログラムであって、
前記データ圧縮方法は、
監視対象範囲を監視する監視装置が時系列データとして逐次出力する出力データを圧縮する圧縮処理を行い、
前記圧縮処理が行われた前記出力データを、前記出力データを用いて前記監視対象範囲に存在する物体を検出するための物体検出処理を行うデータ処理装置に出力し、
前記出力データを圧縮する圧縮率と、前記圧縮率で圧縮された前記出力データを用いて行われる前記物体検出処理による前記物体の検出精度との間の関係を示す精度情報に基づいて、前記圧縮処理で用いられる圧縮率を設定する
コンピュータプログラム。
[付記13]
コンピュータに、モデル生成方法を実行させるプログラムであって、
前記モデル生成方法は、
監視対象範囲を監視する監視装置が時系列データとして逐次出力する出力データ及び前記出力データとデータ種類が同じである同種データの少なくとも一方を含む学習用データを、圧縮率リストに含まれる複数の異なる圧縮率の夫々で圧縮する圧縮処理を行い、
前記複数の異なる圧縮率の夫々で前記圧縮処理が行われた前記学習用データを用いて、前記監視対象範囲に存在する物体を検出するための物体検出処理を行い、
前記物体検出処理の結果と、前記圧縮処理で用いられた前記複数の異なる圧縮率とに基づいて、前記学習用データを圧縮する圧縮率と、前記圧縮率で圧縮された前記学習用データを用いて行われる前記物体検出処理による前記物体の検出精度との間の関係に関する精度情報を推定するための演算モデルを生成し、
前記生成手段が生成した前記演算モデルを、前記演算モデルを用いて前記出力データを圧縮するための圧縮率を設定し且つ前記設定した圧縮率で前記出力データを圧縮するデータ圧縮装置に出力する
コンピュータプログラム。
[付記14]
付記12又は13に記載のコンピュータプログラムが記録された、コンピュータ読み取り可能な一時的でない記録媒体。
2 データ圧縮装置
21 演算装置
211 圧縮率設定部
212 データ圧縮部
213 送信制御部
22 記憶装置
221 検出確率推定モデル
3 データ処理装置
4 モデル生成装置
41 演算装置
411 データ圧縮部
412 検出処理部
413 モデル生成部
414 送信制御部
42 記憶装置
421 学習用データセット
422 圧縮率リスト
423 ラベルデータ
SYS データ圧縮システム
Claims (10)
- 監視対象範囲を監視する監視装置が時系列データとして逐次出力する出力データを圧縮する圧縮手段と、
前記圧縮手段による圧縮が行われた前記出力データを、前記出力データを用いて前記監視対象範囲に存在する物体を検出するデータ処理装置に対して出力する出力手段と、
前記出力データを圧縮する圧縮率と、前記圧縮率で圧縮された前記出力データを用いて前記データ処理装置による物体の検出精度との間の関係を示す精度情報に基づいて、前記圧縮手段で用いられる圧縮率を設定する設定手段と
を備えるデータ圧縮装置。 - 前記設定手段は、前記圧縮手段による圧縮が行われた前記出力データのデータサイズが許容サイズ以下になることと、前記検出精度が許容精度以上になることとを満足するように、前記圧縮率を設定する
請求項1に記載のデータ圧縮装置。 - 前記精度情報は、
前記出力データのうちの第1の位置に位置する第1の物体に関する第1のデータ部分を圧縮する圧縮率と、前記圧縮率で圧縮された前記第1のデータ部分を用いた前記データ処理装置による前記第1の物体の検出精度との関係を示す第1の情報と、
前記出力データのうちの前記第1の位置とは異なる第2の位置に位置する第2の物体に関する第2のデータ部分を圧縮する圧縮率と、前記圧縮率で圧縮された前記第2のデータ部分を用いた前記データ処理装置による前記第2の物体の検出精度との関係を示す第2の情報と
を含み、
前記設定手段は、前記精度情報に基づいて、前記第1のデータ部分に対して前記圧縮手段によって用いられる圧縮率と、前記第2のデータ部分に対して前記圧縮手段によって用いられる圧縮率とを別々に設定する
請求項1又は2に記載のデータ圧縮装置。 - 前記設定手段は、前記圧縮手段による圧縮が行われた前記第1及び第2のデータ部分のデータサイズの総和が許容サイズ以下になることと、前記第1の物体の検出精度と前記第2の物体の検出精度の総和が最大になることとを満足するように、前記圧縮率を設定する
請求項3に記載のデータ圧縮装置。 - 前記出力手段は、前記圧縮手段による圧縮が行われた前記出力データを、通信ネットワーク網を介して前記データ処理装置に送信し、
前記設定手段は、前記通信ネットワーク網において前記出力手段が利用可能な可用帯域の制限内で前記圧縮手段による圧縮が行われた前記出力データを送信することと、前記検出精度が最大になることとを満足するように、前記圧縮率を設定する
請求項1から4のいずれか一項に記載のデータ圧縮装置。 - 監視対象範囲を監視する監視装置が時系列データとして逐次出力する出力データ及び前記出力データとデータ種類が同じである同種データの少なくとも一方を含む学習用データを、圧縮率リストに含まれる複数の異なる圧縮率の夫々で圧縮する圧縮手段と、
前記複数の異なる圧縮率の夫々で前記圧縮手段による圧縮が行われた前記学習用データを用いて、前記監視対象範囲に存在する物体を検出する検出手段と、
前記検出手段による検出結果と、前記圧縮手段による圧縮で用いられた前記複数の異なる圧縮率とに基づいて、前記学習用データを圧縮する圧縮率と、前記圧縮率で圧縮された前記学習用データを用いた前記検出手段による物体の検出精度との間の関係に関する精度の推定に用いる演算モデルを生成する生成手段と、
前記生成手段が生成した前記演算モデルを、前記演算モデルを用いて前記出力データを圧縮するための圧縮率を設定し且つ前記設定した圧縮率で前記出力データを圧縮するデータ圧縮装置に対して出力する出力手段と
を備えるモデル生成装置。 - コンピュータによって、
監視対象範囲を監視する監視装置が時系列データとして逐次出力する出力データを圧縮する圧縮処理を行い、
前記圧縮処理が行われた前記出力データを、前記出力データを用いて前記監視対象範囲に存在する物体を検出するための物体検出処理を行うデータ処理装置に出力し、
前記出力データを圧縮する圧縮率と、前記圧縮率で圧縮された前記出力データを用いて行われる前記物体検出処理による前記物体の検出精度との間の関係を示す精度情報に基づいて、前記圧縮処理で用いられる圧縮率を設定する
データ圧縮方法。 - コンピュータによって、
監視対象範囲を監視する監視装置が時系列データとして逐次出力する出力データ及び前記出力データとデータ種類が同じである同種データの少なくとも一方を含む学習用データを、圧縮率リストに含まれる複数の異なる圧縮率の夫々で圧縮する圧縮処理を行い、
前記複数の異なる圧縮率の夫々で前記圧縮処理が行われた前記学習用データを用いて、前記監視対象範囲に存在する物体を検出するための物体検出処理を行い、
前記物体検出処理の結果と、前記圧縮処理で用いられた前記複数の異なる圧縮率とに基づいて、前記学習用データを圧縮する圧縮率と、前記圧縮率で圧縮された前記学習用データを用いて行われる前記物体検出処理による前記物体の検出精度との間の関係に関する精度情報を推定するための演算モデルを生成し、
前記生成手段が生成した前記演算モデルを、前記演算モデルを用いて前記出力データを圧縮するための圧縮率を設定し且つ前記設定した圧縮率で前記出力データを圧縮するデータ圧縮装置に出力する
モデル生成方法。 - コンピュータに、データ圧縮方法を実行させるプログラムであって、
前記データ圧縮方法は、
監視対象範囲を監視する監視装置が時系列データとして逐次出力する出力データを圧縮する圧縮処理を行い、
前記圧縮処理が行われた前記出力データを、前記出力データを用いて前記監視対象範囲に存在する物体を検出するための物体検出処理を行うデータ処理装置に出力し、
前記出力データを圧縮する圧縮率と、前記圧縮率で圧縮された前記出力データを用いて行われる前記物体検出処理による前記物体の検出精度との間の関係を示す精度情報に基づいて、前記圧縮処理で用いられる圧縮率を設定する
コンピュータプログラム。 - コンピュータに、モデル生成方法を実行させるプログラムであって、
前記モデル生成方法は、
監視対象範囲を監視する監視装置が時系列データとして逐次出力する出力データ及び前記出力データとデータ種類が同じである同種データの少なくとも一方を含む学習用データを、圧縮率リストに含まれる複数の異なる圧縮率の夫々で圧縮する圧縮処理を行い、
前記複数の異なる圧縮率の夫々で前記圧縮処理が行われた前記学習用データを用いて、前記監視対象範囲に存在する物体を検出するための物体検出処理を行い、
前記物体検出処理の結果と、前記圧縮処理で用いられた前記複数の異なる圧縮率とに基づいて、前記学習用データを圧縮する圧縮率と、前記圧縮率で圧縮された前記学習用データを用いて行われる前記物体検出処理による前記物体の検出精度との間の関係に関する精度情報を推定するための演算モデルを生成し、
前記生成手段が生成した前記演算モデルを、前記演算モデルを用いて前記出力データを圧縮するための圧縮率を設定し且つ前記設定した圧縮率で前記出力データを圧縮するデータ圧縮装置に出力する
コンピュータプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019235655A JP2021106305A (ja) | 2019-12-26 | 2019-12-26 | データ圧縮装置、モデル生成装置、データ圧縮方法、モデル生成方法及びコンピュータプログラム |
US17/131,002 US11470248B2 (en) | 2019-12-26 | 2020-12-22 | Data compression apparatus, model generation apparatus, data compression method, model generation method and program recording medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019235655A JP2021106305A (ja) | 2019-12-26 | 2019-12-26 | データ圧縮装置、モデル生成装置、データ圧縮方法、モデル生成方法及びコンピュータプログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2021106305A true JP2021106305A (ja) | 2021-07-26 |
Family
ID=76546737
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019235655A Pending JP2021106305A (ja) | 2019-12-26 | 2019-12-26 | データ圧縮装置、モデル生成装置、データ圧縮方法、モデル生成方法及びコンピュータプログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US11470248B2 (ja) |
JP (1) | JP2021106305A (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023013070A1 (ja) * | 2021-08-06 | 2023-02-09 | 日本電信電話株式会社 | データ処理装置、データ処理方法、及びプログラム |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113627245B (zh) * | 2021-07-02 | 2024-01-19 | 武汉纺织大学 | Crts目标检测方法 |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10499091B2 (en) * | 2002-09-17 | 2019-12-03 | Kinya Washino | High-quality, reduced data rate streaming video production and monitoring system |
JP2006101063A (ja) | 2004-09-29 | 2006-04-13 | Seiko Epson Corp | 再生側の環境を考慮した動画像データの送信 |
JP5531327B2 (ja) | 2007-09-10 | 2014-06-25 | 富士フイルム株式会社 | 画像処理装置、画像処理方法、およびプログラム |
AU2012201684A1 (en) * | 2012-03-21 | 2013-10-10 | Canon Kabushiki Kaisha | Image compression |
US9721169B2 (en) * | 2012-07-27 | 2017-08-01 | Clarion Co., Ltd. | Image processing device for detecting vehicle in consideration of sun position |
JP6282193B2 (ja) * | 2014-07-28 | 2018-02-21 | クラリオン株式会社 | 物体検出装置 |
JP6357385B2 (ja) | 2014-08-25 | 2018-07-11 | ルネサスエレクトロニクス株式会社 | 画像通信装置、画像送信装置および画像受信装置 |
GB201508074D0 (en) * | 2015-05-12 | 2015-06-24 | Apical Ltd | People detection |
CN105407352A (zh) | 2015-11-23 | 2016-03-16 | 小米科技有限责任公司 | 图像压缩方法、装置及服务器 |
US10627887B2 (en) * | 2016-07-01 | 2020-04-21 | Microsoft Technology Licensing, Llc | Face detection circuit |
JP6860433B2 (ja) * | 2017-06-19 | 2021-04-14 | 株式会社東芝 | 処理装置、処理システム、方法及びプログラム |
US10970555B2 (en) * | 2019-08-27 | 2021-04-06 | At&T Intellectual Property I, L.P. | Data-driven event detection for compressed video |
-
2019
- 2019-12-26 JP JP2019235655A patent/JP2021106305A/ja active Pending
-
2020
- 2020-12-22 US US17/131,002 patent/US11470248B2/en active Active
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023013070A1 (ja) * | 2021-08-06 | 2023-02-09 | 日本電信電話株式会社 | データ処理装置、データ処理方法、及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
US11470248B2 (en) | 2022-10-11 |
US20210203840A1 (en) | 2021-07-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10769531B2 (en) | Methods and systems for counting people | |
JP6024952B2 (ja) | 画像送信装置、画像送信方法、画像送信プログラム及び画像認識認証システム | |
US10499082B2 (en) | Optimized coding method for omnidirectional video, computer readable storage medium and computer device | |
US11727255B2 (en) | Systems and methods for edge assisted real-time object detection for mobile augmented reality | |
US11847816B2 (en) | Resource optimization based on video frame analysis | |
JP2021106305A (ja) | データ圧縮装置、モデル生成装置、データ圧縮方法、モデル生成方法及びコンピュータプログラム | |
JP2008283230A (ja) | 画像処理システム | |
US20160173787A1 (en) | Surveillance camera with heat map function | |
JP5190968B2 (ja) | 動画像の圧縮方法及び圧縮装置 | |
US20190114783A1 (en) | Image processing apparatus, image processing method, and non-transitory computer-readable storage medium | |
US9319676B2 (en) | Motion estimator and system on chip comprising the same | |
US11205257B2 (en) | Method and apparatus for measuring video quality based on detection of change in perceptually sensitive region | |
JP6995083B2 (ja) | 原映像ストリームから有意映像ストリームを生成するプログラム、装置及び方法 | |
He et al. | Real-time deep video analytics on mobile devices | |
KR20210038156A (ko) | 전술 상황 기반 적응형 영상 압축 장치 및 방법 | |
JP6641448B2 (ja) | 監視カメラシステム | |
JP6916224B2 (ja) | 画像圧縮パラメータ決定装置、画像伝送システム、方法およびプログラム | |
CN113706573B (zh) | 一种运动物体的检测方法、装置及存储介质 | |
US8965171B2 (en) | Recording control apparatus, recording control method, storage medium storing recording control program | |
KR102401340B1 (ko) | 인지 민감 영역의 변화의 검출에 기반하는 비디오 화질 측정 방법 및 장치 | |
US20240013426A1 (en) | Image processing system and method for image processing | |
JP6149534B2 (ja) | 画像送信装置、画像伝送システム、画像送信方法および画像送信プログラム | |
KR102427570B1 (ko) | 영상 기록 장치를 모니터링하기 위한 모니터링 서버 | |
US11570492B2 (en) | Image capturing system, distribution apparatus, image capturing apparatus, control method, and non-transitory computer-readable storage medium | |
KR102513803B1 (ko) | 인공신경망을 이용한 객체 카운팅 방법 및 이를 수행하기 위한 컴퓨팅 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221107 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20231213 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231219 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240215 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240402 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240528 |