JP7495833B2 - Dnnモデル圧縮システム - Google Patents
Dnnモデル圧縮システム Download PDFInfo
- Publication number
- JP7495833B2 JP7495833B2 JP2020116945A JP2020116945A JP7495833B2 JP 7495833 B2 JP7495833 B2 JP 7495833B2 JP 2020116945 A JP2020116945 A JP 2020116945A JP 2020116945 A JP2020116945 A JP 2020116945A JP 7495833 B2 JP7495833 B2 JP 7495833B2
- Authority
- JP
- Japan
- Prior art keywords
- pruning
- model
- unit
- sub
- neurons
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000006835 compression Effects 0.000 title claims description 30
- 238000007906 compression Methods 0.000 title claims description 30
- 238000013138 pruning Methods 0.000 claims description 142
- 210000002569 neuron Anatomy 0.000 claims description 73
- 238000010206 sensitivity analysis Methods 0.000 claims description 26
- 230000035945 sensitivity Effects 0.000 claims description 23
- 238000003384 imaging method Methods 0.000 claims description 3
- 238000013528 artificial neural network Methods 0.000 claims description 2
- 238000010304 firing Methods 0.000 description 19
- 238000011156 evaluation Methods 0.000 description 17
- 238000010586 diagram Methods 0.000 description 10
- 238000000034 method Methods 0.000 description 10
- 239000000284 extract Substances 0.000 description 8
- 238000004364 calculation method Methods 0.000 description 7
- 238000013527 convolutional neural network Methods 0.000 description 7
- 238000012545 processing Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 4
- 238000007796 conventional method Methods 0.000 description 3
- 230000000717 retained effect Effects 0.000 description 2
- 238000012876 topography Methods 0.000 description 2
- 238000004891 communication Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
Images
Landscapes
- Image Analysis (AREA)
- Traffic Control Systems (AREA)
Description
<DNNモデル圧縮システムの構成>
図1は、本発明の一実施の形態に係るDNNモデル圧縮システムの一例を示すブロック図である。DNNモデル圧縮システム1は、DNNモデルが搭載される装置の要求仕様に応じて、DNNのベースモデルを圧縮するシステムである。図2は、DNNモデル圧縮方法を説明する図である。
図3は、本発明の実施の形態1に係るDNNモデル圧縮方法の一例を示すフロー図である。図3では、各ステップS10~40とともに、各種情報やデータの流れが示されている。
本実施の形態によれば、プルーニング部30は、プルーニング仕様情報105に含まれるプルーニング優先度105aに基づき削減対象のニューロンを選択する。この構成によれば、プルーニング優先度の高いクラスと関連付けられたニューロンを残しつつ、ニューロンを削減することができるので、装置の要求仕様に応じたモデル圧縮を行うことが可能となる。
次に、実施の形態2について説明する。本実施の形態では、プルーニング部モデル55に対する評価結果に応じてプルーニング仕様情報105を自動で変更する場合について説明する。なお、以下では、前述の実施の形態と重複する箇所については、説明を適宜省略する。
Claims (4)
- データセットから認識対象種の物体のみを切り出したサブデータセットを生成するサブデータセット生成部と、
前記サブデータセットを用いてDNN(Deep Neural Network)の内部のニューロンの前記物体に対する感度情報を取得する感度解析部と、
前記感度情報およびプルーニング仕様情報を用いてプルーニング前モデルからニューロンを削減したプルーニング後モデルを生成するプルーニング部と、
前記データセットを用いて前記プルーニング後モデルにおける前記物体の認識精度を評価する推論部と、
前記サブデータセット、前記感度情報、前記プルーニング後モデルを格納する格納部と、 を備え、
前記プルーニング部は、前記プルーニング仕様情報に含まれる前記認識対象種ごとの優先度を示すプルーニング優先度に基づき削減対象の前記ニューロンを選択し、
前記推論部は、前記プルーニング優先度が高い前記認識対象種の前記物体の認識精度を評価する、
DNNモデル圧縮システム。 - 請求項1に記載のDNNモデル圧縮システムにおいて、
前記プルーニング部は、前記プルーニング仕様情報に含まれる前記プルーニング前モデルのニューロン数に対し削除されるニューロン数の割合を示すプルーニング率に基づき削減対象の前記ニューロンを選択する、
DNNモデル圧縮システム。 - 請求項1に記載のDNNモデル圧縮システムにおいて、
前記感度解析部は、前記データセットに含まれる画像データにおける注視領域ごとに前記ニューロンの前記物体に対する感度情報を取得する、
DNNモデル圧縮システム。 - 請求項3に記載のDNNモデル圧縮システムにおいて、
前記注視領域は、前記画像データにおける前記物体の方向、または撮像位置から前記物体までの距離である、
DNNモデル圧縮システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020116945A JP7495833B2 (ja) | 2020-07-07 | 2020-07-07 | Dnnモデル圧縮システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020116945A JP7495833B2 (ja) | 2020-07-07 | 2020-07-07 | Dnnモデル圧縮システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022014569A JP2022014569A (ja) | 2022-01-20 |
JP7495833B2 true JP7495833B2 (ja) | 2024-06-05 |
Family
ID=80120286
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020116945A Active JP7495833B2 (ja) | 2020-07-07 | 2020-07-07 | Dnnモデル圧縮システム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7495833B2 (ja) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016031564A (ja) | 2014-07-25 | 2016-03-07 | 株式会社デンソー | 歩行者検出装置および歩行者検出方法 |
JP2018129033A (ja) | 2016-12-21 | 2018-08-16 | アクシス アーベー | 人工ニューラルネットワークのクラスに基づく枝刈り |
JP2018207222A (ja) | 2017-05-31 | 2018-12-27 | パナソニックIpマネジメント株式会社 | カメラ及びパラメータ登録方法 |
JP2020098455A (ja) | 2018-12-18 | 2020-06-25 | 国立大学法人豊橋技術科学大学 | 物体識別システム、物体識別方法、並びに、画像識別プログラム |
-
2020
- 2020-07-07 JP JP2020116945A patent/JP7495833B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016031564A (ja) | 2014-07-25 | 2016-03-07 | 株式会社デンソー | 歩行者検出装置および歩行者検出方法 |
JP2018129033A (ja) | 2016-12-21 | 2018-08-16 | アクシス アーベー | 人工ニューラルネットワークのクラスに基づく枝刈り |
JP2018207222A (ja) | 2017-05-31 | 2018-12-27 | パナソニックIpマネジメント株式会社 | カメラ及びパラメータ登録方法 |
JP2020098455A (ja) | 2018-12-18 | 2020-06-25 | 国立大学法人豊橋技術科学大学 | 物体識別システム、物体識別方法、並びに、画像識別プログラム |
Non-Patent Citations (1)
Title |
---|
山本 康平 外,ディープラーニングのモデル軽量化技術,OKIテクニカルレビュー 第233号 Vol.86 No.1,2019年05月20日,第86巻 |
Also Published As
Publication number | Publication date |
---|---|
JP2022014569A (ja) | 2022-01-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112232293B (zh) | 图像处理模型训练、图像处理方法及相关设备 | |
KR102008290B1 (ko) | 영상에서 객체의 행동을 인식하는 방법 및 그 장치 | |
US11068754B1 (en) | Systems and methods regarding image distification and prediction models | |
US10262226B1 (en) | Systems and methods regarding 2D image and 3D image ensemble prediction models | |
US11670097B2 (en) | Systems and methods for 3D image distification | |
US9563822B2 (en) | Learning apparatus, density measuring apparatus, learning method, computer program product, and density measuring system | |
CN111797983A (zh) | 一种神经网络构建方法以及装置 | |
US11727277B2 (en) | Method and apparatus for automatically producing an artificial neural network | |
US20140294293A1 (en) | Image processing circuit and image detection device | |
US9619729B2 (en) | Density measuring device, density measuring method, and computer program product | |
US20200250544A1 (en) | Learning method, storage medium, and learning apparatus | |
CN111160481B (zh) | 基于深度学习的adas目标检测方法及系统 | |
CN114997393A (zh) | 利用空间表示学习和对抗生成的对可移动对象的功能测试 | |
CN111292377A (zh) | 目标检测方法、装置、计算机设备和存储介质 | |
CN109978058B (zh) | 确定图像分类的方法、装置、终端及存储介质 | |
JP7495833B2 (ja) | Dnnモデル圧縮システム | |
CN112749617A (zh) | 通过聚集父实例确定输出信号 | |
US10997493B2 (en) | Information processing device and information processing method | |
US20220270351A1 (en) | Image recognition evaluation program, image recognition evaluation method, evaluation apparatus, and evaluation system | |
CN112614199A (zh) | 语义分割图像转换方法、装置、计算机设备和存储介质 | |
KR20210089044A (ko) | 물체 인식을 위한 학습 데이터를 선택하는 방법 및 상기 방법을 이용하여 학습된 물체 인식 모델을 이용하여 물체를 인식하는 물체 인식 장치 | |
US20240212361A1 (en) | Method and apparatus for determining driving risks by using deep learning algorithms | |
US20230252763A1 (en) | Model generation method, model generation device, and inference device | |
EP4318318A1 (en) | Information processing device for improving quality of generator of generative adversarial network (gan) | |
US20220139071A1 (en) | Information processing device, information processing method, information processing program, and information processing system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230228 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20231225 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240116 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240312 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240507 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240524 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7495833 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |