JP2020098589A - 幾何学的先行物を用いる曲線オブジェクトセグメンテーション - Google Patents
幾何学的先行物を用いる曲線オブジェクトセグメンテーション Download PDFInfo
- Publication number
- JP2020098589A JP2020098589A JP2019212351A JP2019212351A JP2020098589A JP 2020098589 A JP2020098589 A JP 2020098589A JP 2019212351 A JP2019212351 A JP 2019212351A JP 2019212351 A JP2019212351 A JP 2019212351A JP 2020098589 A JP2020098589 A JP 2020098589A
- Authority
- JP
- Japan
- Prior art keywords
- training
- image
- segmentation
- learnable
- filter
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000011218 segmentation Effects 0.000 title claims abstract description 98
- 238000012549 training Methods 0.000 claims abstract description 106
- 238000000034 method Methods 0.000 claims abstract description 54
- 230000009467 reduction Effects 0.000 claims abstract description 15
- 238000013507 mapping Methods 0.000 claims abstract description 11
- 230000001131 transforming effect Effects 0.000 claims abstract description 7
- 230000006870 function Effects 0.000 claims description 16
- 238000004590 computer program Methods 0.000 claims description 13
- 230000008569 process Effects 0.000 claims description 12
- 230000004044 response Effects 0.000 claims description 10
- 230000008859 change Effects 0.000 claims description 6
- 238000013528 artificial neural network Methods 0.000 claims description 4
- 210000004204 blood vessel Anatomy 0.000 claims description 4
- 230000037303 wrinkles Effects 0.000 claims description 3
- 230000014509 gene expression Effects 0.000 description 11
- 238000003709 image segmentation Methods 0.000 description 9
- 230000001629 suppression Effects 0.000 description 6
- 238000004364 calculation method Methods 0.000 description 5
- 238000013135 deep learning Methods 0.000 description 5
- 238000012800 visualization Methods 0.000 description 5
- 239000002243 precursor Substances 0.000 description 4
- 238000013459 approach Methods 0.000 description 3
- 230000004256 retinal image Effects 0.000 description 3
- ORILYTVJVMAKLC-UHFFFAOYSA-N Adamantane Natural products C1C(C2)CC3CC1CC2C3 ORILYTVJVMAKLC-UHFFFAOYSA-N 0.000 description 2
- 230000003247 decreasing effect Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000011478 gradient descent method Methods 0.000 description 2
- 238000012804 iterative process Methods 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 241000699670 Mus sp. Species 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000002860 competitive effect Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000013527 convolutional neural network Methods 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 238000002059 diagnostic imaging Methods 0.000 description 1
- 201000010099 disease Diseases 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000007170 pathology Effects 0.000 description 1
- 230000037361 pathway Effects 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
- 238000004321 preservation Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000033458 reproduction Effects 0.000 description 1
- 210000001525 retina Anatomy 0.000 description 1
- 230000002207 retinal effect Effects 0.000 description 1
- 210000001210 retinal vessel Anatomy 0.000 description 1
- 238000005204 segregation Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000010200 validation analysis Methods 0.000 description 1
- 230000002792 vascular Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
- G06N3/084—Backpropagation, e.g. using gradient descent
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/20—Image enhancement or restoration using local operators
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/168—Segmentation; Edge detection involving transform domain methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/174—Segmentation; Edge detection involving the use of two or more images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20081—Training; Learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20084—Artificial neural networks [ANN]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20112—Image segmentation details
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30041—Eye; Retina; Ophthalmic
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Software Systems (AREA)
- Artificial Intelligence (AREA)
- Data Mining & Analysis (AREA)
- Evolutionary Computation (AREA)
- Computing Systems (AREA)
- General Engineering & Computer Science (AREA)
- Mathematical Physics (AREA)
- Medical Informatics (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Biomedical Technology (AREA)
- Biophysics (AREA)
- Computational Linguistics (AREA)
- General Health & Medical Sciences (AREA)
- Molecular Biology (AREA)
- Image Analysis (AREA)
Abstract
Description
Claims (22)
- 曲線オブジェクトセグメンテーションのための方法であって、
曲線特徴を含む少なくとも1つの入力画像を受信することと、
プロセッサを使用して、前記少なくとも1つの画像を、表現モジュール及びタスクモジュールを有するディープネットワークを使用して、前記曲線特徴のセグメンテーションマップにマッピングすることと、を含み、前記マッピングが、
曲線形状の認識と訓練誤差の減少とのバランスをとるように構成された学習可能フィルタを使用して、前記表現モジュールにおいて前記入力画像を変換することと、
前記タスクモジュールにおいて前記変換された入力画像を使用して前記セグメンテーションマップを生成することと、を含む、方法。 - 前記入力画像が、道路、血管、機械亀裂、及び皮膚のしわのうちの1つ以上を含む、請求項1に記載の方法。
- 前記マッピングが、損失関数を最小化することを含む訓練プロセスによって導出され、前記損失関数が、曲線形状の認識と訓練誤差の減少とのバランスをとるように構成されている、請求項1に記載の方法。
- 前記損失関数が、訓練誤差と曲線セグメンテーションの前記タスクに関する事前知識を組み込んだ幾何学的正則化項との合計を含む、請求項3に記載の方法。
- 前記学習可能フィルタのうちの少なくとも1つが、ガボールフィルタとして初期化される、請求項3に記載の方法。
- 前記ガボールフィルタが、訓練プロセス中に変化して、曲線形状の認識と訓練誤差の減少とのバランスをとるように構成されている、請求項5に記載の方法。
- 前記少なくとも1つの学習可能フィルタが、少なくとも1つの学習可能なパラメータを有する、請求項3に記載の方法。
- 前記少なくとも1つの学習可能パラメータが、搬送周波数、偏心、向き、及びスケールのうちの1つ以上を含む、請求項7に記載の方法。
- 少なくとも1つの訓練幾何学的パターン画像を用いて前記学習可能フィルタを訓練することを更に含む、請求項3に記載の方法。
- 前記少なくとも1つの訓練幾何学的パターン画像が、第1の訓練幾何学的パターン画像及び第2の訓練幾何学的パターン画像のうちの少なくとも1つを含み、前記第1の訓練幾何学的パターン画像が第1の向きのパターンを有し、前記第2の訓練幾何学的パターン画像が第2の向きのパターンを有し、前記第1の向きが前記第2の向きとは異なる、請求項9に記載の方法。
- 前記第1の向きが、前記第2の向きに直交する、請求項10に記載の方法。
- 前記少なくとも1つの学習可能フィルタが、前記第1の訓練画像に対する高応答と、前記第2の訓練画像に対する低応答とを生成するように構成されている、請求項10に記載の方法。
- 前記学習可能フィルタが、複数の空間スケールで導出される、請求項3に記載の方法。
- 前記タスクモジュールが、U−Netディープニューラルネットワークである、請求項1に記載の方法。
- 曲線オブジェクトセグメンテーションのためのシステムであって、
プロセッサと、
コンピュータプログラム命令を記憶するメモリと、を含み、前記コンピュータプログラム命令が、前記プロセッサによって実行されると、前記プロセッサに、
曲線特徴を含む少なくとも1つの入力画像を受信することと、
表現モジュール及びタスクモジュールを有するディープネットワークを使用して、前記曲線特徴のセグメンテーションマップを生成するために、プロセッサを使用して前記少なくとも1つの画像をマッピングすることと、を含む動作を行わせ、前記マッピングが、
曲線形状の認識と訓練誤差の減少とのバランスをとるように構成された学習可能フィルタを使用して、前記表現モジュールにおいて前記入力画像を変換することと、
前記タスクモジュールにおいて前記変換された入力画像を使用して前記セグメンテーションマップを生成することと、を含む、システム。 - 訓練画像の第1のセット及び訓練画像の第2のセットを用いて前記学習可能フィルタを訓練することを更に含み、前記訓練画像の第1のセットが、第1の向きのパターンを有し、前記訓練画像の第2のセットが、第2の向きのパターンを有し、前記第1の向きが、前記第2の向きとは異なる、請求項15に記載のシステム。
- 前記少なくとも1つの学習可能フィルタが、前記第1の訓練画像に対する高応答と、前記第2の訓練画像に対する低応答とを生成するように構成されている、請求項16に記載の方法。
- 前記プロセッサが、損失関数を最小化するように構成され、前記損失関数が、曲線形状の認識と訓練誤差の減少とのバランスをとるように構成されている、請求項15に記載のシステム。
- 前記損失関数が、訓練誤差と曲線セグメンテーションの前記タスクに関する事前知識を組み込んだ幾何学的正則化項との合計を含む、請求項18に記載のシステム。
- 前記学習可能フィルタのうちの少なくとも1つが、ガボールフィルタとして初期化される、請求項18に記載の方法。
- 前記少なくとも1つの学習可能フィルタが、少なくとも1つの学習可能なパラメータを有する、請求項18に記載の方法。
- 曲線オブジェクトセグメンテーションのためのコンピュータプログラム命令を記憶する非一時的コンピュータ可読媒体であって、前記コンピュータプログラム命令が、プロセッサによって実行されると、前記プロセッサに、
曲線特徴を含む少なくとも1つの入力画像を受信することと、
表現モジュール及びタスクモジュールを有するディープネットワークを使用して、前記曲線特徴のセグメンテーションマップを生成するために、プロセッサを使用して前記少なくとも1つの画像をマッピングすることと、を含む動作を行わせ、前記マッピングが、
曲線形状の認識と訓練誤差の減少とのバランスをとるように構成された学習可能フィルタを使用して、前記表現モジュールにおいて前記入力画像を変換することと、
前記タスクモジュールにおいて前記変換された入力画像を使用して前記セグメンテーションマップを生成することと、を含む、非一時的コンピュータ可読媒体。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US16/223,519 US10832413B2 (en) | 2018-12-18 | 2018-12-18 | Curvilinear object segmentation with geometric priors |
US16/223,519 | 2018-12-18 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020098589A true JP2020098589A (ja) | 2020-06-25 |
JP7277342B2 JP7277342B2 (ja) | 2023-05-18 |
Family
ID=68917734
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019212351A Active JP7277342B2 (ja) | 2018-12-18 | 2019-11-25 | 幾何学的先行物を用いる曲線オブジェクトセグメンテーション |
Country Status (3)
Country | Link |
---|---|
US (1) | US10832413B2 (ja) |
EP (1) | EP3671634B1 (ja) |
JP (1) | JP7277342B2 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112257622B (zh) * | 2020-10-28 | 2022-08-16 | 汕头大学 | 基于遗传算法和u型神经网络的道路裂缝分割的方法 |
CN112508827B (zh) * | 2020-11-06 | 2022-04-22 | 中南大学湘雅医院 | 一种基于深度学习的融合多场景的危及器官的分割方法 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8861844B2 (en) * | 2010-03-29 | 2014-10-14 | Ebay Inc. | Pre-computing digests for image similarity searching of image-based listings in a network-based publication system |
US8737728B2 (en) * | 2011-09-30 | 2014-05-27 | Ebay Inc. | Complementary item recommendations using image feature data |
US9454713B2 (en) * | 2014-12-30 | 2016-09-27 | Ebay Inc. | Similar item detection |
US10762425B2 (en) * | 2017-09-26 | 2020-09-01 | Nvidia Corporation | Learning affinity via a spatial propagation neural network |
CN109345538B (zh) * | 2018-08-30 | 2021-08-10 | 华南理工大学 | 一种基于卷积神经网络的视网膜血管分割方法 |
US10782136B2 (en) * | 2018-09-28 | 2020-09-22 | Zoox, Inc. | Modifying map elements associated with map data |
CN109816661B (zh) * | 2019-03-22 | 2022-07-01 | 电子科技大学 | 一种基于深度学习的牙齿ct图像分割方法 |
-
2018
- 2018-12-18 US US16/223,519 patent/US10832413B2/en active Active
-
2019
- 2019-11-25 JP JP2019212351A patent/JP7277342B2/ja active Active
- 2019-12-16 EP EP19216742.7A patent/EP3671634B1/en active Active
Non-Patent Citations (1)
Title |
---|
NICOLA STRISCIUGLIO ET AL.: "Supervised vessel delineation in retinal fundus images with the automatic selection of B-COSFIRE fil", MACHINE VISION AND APPLICATIONS, vol. 27, no. 8, JPN6022054723, 24 June 2016 (2016-06-24), US, pages 1137 - 1149, XP036113129, ISSN: 0005031472, DOI: 10.1007/s00138-016-0781-7 * |
Also Published As
Publication number | Publication date |
---|---|
US20200193605A1 (en) | 2020-06-18 |
JP7277342B2 (ja) | 2023-05-18 |
EP3671634A1 (en) | 2020-06-24 |
EP3671634B1 (en) | 2022-02-09 |
US10832413B2 (en) | 2020-11-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2020224403A1 (zh) | 分类任务模型的训练方法、装置、设备及存储介质 | |
EP3295374B1 (en) | Method and system for landmark detection in medical images using deep neural networks | |
CN108537794B (zh) | 医学图像数据处理方法、装置和计算机可读存储介质 | |
Shaw et al. | MRI k-space motion artefact augmentation: model robustness and task-specific uncertainty | |
JP7277341B2 (ja) | ノイズ先行物を用いる曲線オブジェクトセグメンテーション | |
US11017210B2 (en) | Image processing apparatus and method | |
KR20210048523A (ko) | 이미지 처리 방법, 장치, 전자 기기 및 컴퓨터 판독 가능 기억 매체 | |
CN109949349B (zh) | 一种多模态三维图像的配准及融合显示方法 | |
CN107301643B (zh) | 基于鲁棒稀疏表示与拉普拉斯正则项的显著目标检测方法 | |
CN111626379B (zh) | 肺炎x光图像检测方法 | |
JP7277342B2 (ja) | 幾何学的先行物を用いる曲線オブジェクトセグメンテーション | |
CN111862040B (zh) | 人像图片质量评价方法、装置、设备及存储介质 | |
EP4107662A1 (en) | Out-of-distribution detection of input instances to a model | |
CN117094917A (zh) | 一种心血管3d打印数据处理方法 | |
CN114638891A (zh) | 基于图像和点云融合的目标检测定位方法与系统 | |
CN112541900B (zh) | 基于卷积神经网络的检测方法、装置、计算机设备及存储介质 | |
EP4343680A1 (en) | De-noising data | |
CN110197100B (zh) | 物体定位方法和装置 | |
CN115294351A (zh) | 图像特征提取方法、装置和电子设备 | |
CN110148194B (zh) | 图像重建方法和装置 | |
CN114359945A (zh) | 生成快递异常面单的方法、装置、计算机设备和存储介质 | |
CN110570417A (zh) | 肺结节分类方法、装置及图像处理设备 | |
WO2024108438A1 (zh) | 一种速度编码磁共振成像的运动伪影校正方法 | |
WO2024055493A1 (zh) | 基于深度相位相关的异构三维观测配准方法、介质及设备 | |
WO2024061664A1 (en) | De-noising data |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20191129 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20191129 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221125 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20221125 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221226 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230327 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230406 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230508 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7277342 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |