RU2014113071A - Интерактивная сегментация в режиме реального времени с автоматическим отбором оптимального томографического среза - Google Patents

Интерактивная сегментация в режиме реального времени с автоматическим отбором оптимального томографического среза Download PDF

Info

Publication number
RU2014113071A
RU2014113071A RU2014113071/08A RU2014113071A RU2014113071A RU 2014113071 A RU2014113071 A RU 2014113071A RU 2014113071/08 A RU2014113071/08 A RU 2014113071/08A RU 2014113071 A RU2014113071 A RU 2014113071A RU 2014113071 A RU2014113071 A RU 2014113071A
Authority
RU
Russia
Prior art keywords
segmentation
slices
starting point
window widget
displayed
Prior art date
Application number
RU2014113071/08A
Other languages
English (en)
Inventor
Рафаэль ВИМКЕР
Харальд Зепп ХЕЗЕ
Андре ГОССЕН
Клаус Эрхард
Original Assignee
Конинклейке Филипс Н.В.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Конинклейке Филипс Н.В. filed Critical Конинклейке Филипс Н.В.
Publication of RU2014113071A publication Critical patent/RU2014113071A/ru

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/187Segmentation; Edge detection involving region growing; involving region merging; involving connected component labelling
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/24Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20092Interactive image processing based on input by user
    • G06T2207/20101Interactive definition of point of interest, landmark or seed
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30068Mammography; Breast

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Medical Informatics (AREA)
  • Quality & Reliability (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Image Processing (AREA)

Abstract

1. Устройство для постобработки 2D-изображений (110a-d) поперечных срезов, причем устройство содержит:контроллер (160) графического интерфейса пользователя;блок (170) сегментатора; иблок (180) оценки качества сегментации;при этом контроллер графического интерфейса пользователя выполнен с возможностью создания графического интерфейса (155) пользователя для отображения на экране (150), при этом интерфейс пользователя, отображенный таким образом, содержит интерактивный первый оконный виджет (114a), отображающий на экране начальный срез (110a), основанный на одном или более 2D-срезов, причем оконный виджет выполнен с возможностью позволять пользователю задать данные позиционирования исходной точки (109) сегментации в любом месте на отображенном начальном срезе (110a);при этом блок сегментатора выполнен с возможностью доступа, в ответ на задание пользователем данных позиционирования, к 2D-срезам и сегментации каждого из множества 2D-срезов, используя исходную точку сегментации в качестве общей исходной точки (111) для каждой из сегментаций;при этом блок оценки качества сегментации выполнен с возможностью установления из множества сегментированных 2D-срезов наилучшего среза (110c), имеющего сегментацию с наивысшим показателям качества сегментации; ипри этом контроллер графического интерфейса пользователя дополнительно выполнен с возможностью коррекции первого оконного виджета для отображения в нем наилучшего среза вместо начального среза или для отображения в нем наилучшего среза с наилучшей наложенной сегментацией, либо создания для отображения на экране во втором оконном виджете наилучшей сегментации, наложенной на второе изоб

Claims (17)

1. Устройство для постобработки 2D-изображений (110a-d) поперечных срезов, причем устройство содержит:
контроллер (160) графического интерфейса пользователя;
блок (170) сегментатора; и
блок (180) оценки качества сегментации;
при этом контроллер графического интерфейса пользователя выполнен с возможностью создания графического интерфейса (155) пользователя для отображения на экране (150), при этом интерфейс пользователя, отображенный таким образом, содержит интерактивный первый оконный виджет (114a), отображающий на экране начальный срез (110a), основанный на одном или более 2D-срезов, причем оконный виджет выполнен с возможностью позволять пользователю задать данные позиционирования исходной точки (109) сегментации в любом месте на отображенном начальном срезе (110a);
при этом блок сегментатора выполнен с возможностью доступа, в ответ на задание пользователем данных позиционирования, к 2D-срезам и сегментации каждого из множества 2D-срезов, используя исходную точку сегментации в качестве общей исходной точки (111) для каждой из сегментаций;
при этом блок оценки качества сегментации выполнен с возможностью установления из множества сегментированных 2D-срезов наилучшего среза (110c), имеющего сегментацию с наивысшим показателям качества сегментации; и
при этом контроллер графического интерфейса пользователя дополнительно выполнен с возможностью коррекции первого оконного виджета для отображения в нем наилучшего среза вместо начального среза или для отображения в нем наилучшего среза с наилучшей наложенной сегментацией, либо создания для отображения на экране во втором оконном виджете наилучшей сегментации, наложенной на второе изображение (112) на основе всех или отобранных 2D-срезов.
2. Устройство по п. 1, при этом второе изображение представляет собой смоделированное маммографическое изображение, сгенерированное путем переднего проецирования 3D-объема, реконструированного из всех или выбранных 2D-срезов (110a-d).
3. Устройство по п. 1, при этом первый оконный виджет корректируется путем плавного увеличения четкости изображения наилучшего среза.
4. Устройство по п. 1, при этом данные позиционирования общей исходной точки сегментации получают путем задания пользователем с помощью инструмента-указателя (195) положения на отображаемом первом срезе или на отображаемом втором изображении (112), при этом, когда пользователь задает новое положение указателя для новой общей исходной точки, используя новую общую исходную точку для повторной сегментации и повторного установления нового наилучшего среза и новой наилучшей сегментации, а затем коррекции первого оконного виджета путем отображения нового наилучшего среза вместо ранее отображенного наилучшего среза (110c) либо путем отображения нового наилучшего среза с новой наложенной наилучшей сегментацией, либо путем наложения новой наилучшей сегментации на второе изображение (112) во втором оконном виджете (114b).
5. Устройство по п. 4, при этом инструмент-указатель (195) представляет собой компьютерную мышь, и причем задание данных позиционирования или новых данных позиционирования выполняется без использования щелчка кнопкой мыши, а путем использования данных регистрации положения, генерируемых мышью, когда мышь перемещается пользователем.
6. Устройство по п. 1, дополнительно содержащее отслеживающий блок (115) для отслеживания исходной точки (109) сегментации по множеству 2D-срезов (110b-d) с использованием проекционного наложения (p) для проецирования исходной точки сегментации на каждый из множества 2D-срезов, формируя тем самым общую исходную точку, при этом отслеживающий блок выполнен с возможностью считывания метаданных с 2D-срезов и изменения проекционного наложения в зависимости от считанных метаданных.
7. Графический интерфейс пользователя, когда он отображен на экране устройством по любому из пп. 1-6.
8. Способ постобработки 2D-изображений поперечных срезов, при этом способ содержит:
отображение (S305) в первом оконном виджете на экране начального изображения, основанного на одном или более 2D-срезов;
получение (S310) данных позиционирования исходной точки сегментации в любом месте на отображенном начальном изображении;
сегментацию (S320) каждого из множества 2D-срезов посредством использования полученной исходной точки в качестве общей исходной точки для каждой из сегментаций;
установление (S330) из множества сегментированных 2D-срезов наилучшего среза, имеющего сегментацию с наивысшим показателем качества сегментации; и
отображение (S340) на экране в первом оконном виджете наилучшего среза или отображение в первом оконном виджете наилучшего среза с наилучшей наложенной сегментацией.
9. Способ по п. 8, дополнительно содержащий: отображение вместе с первым оконным виджетом второго оконного виджета, отображающего на нем общее изображение, имеющее наилучшую наложенную сегментацию.
10. Способ по п. 8 или 9, при этом разбиение на сегменты содержит:
получение множества выборочных точек;
в каждом из множества 2D-срезов решение задачи построения на множестве выборочных точек кратчайшего замкнутого пути, используя функцию затрат, обратную радиальному градиенту серых тонов относительно общей исходной точки, при этом общая исходная точка находится внутри любой из замкнутых траекторий; и
вывод набора выборочных точек в качестве решения задачи построения кратчайшего замкнутого пути, при этом выданные выборочные точки образуют границу соответствующей сегментации.
11. Способ по п. 10, в котором полученное множество выборочных точек выбирается
i) для определения в целом заданного среднего радиуса вокруг общей исходной точки; и
ii) для получения в целом, по меньшей мере, заданного значения средне-серого тона или значения градиента средне-серого тона.
12. Способ по п. 8, при этом установление наивысшего показателя качества сегментации содержит:
по меньшей мере, для двух срезов вычисление для каждого из срезов показателя качества сегментации для сегментов в каждом из двух срезов, при этом этап вычисления содержит:
суммирование проекции градиента серых тонов на срезе вдоль границы сегментации; и/или
установление среднего значения проекции градиента серых тонов на срезе вдоль границы сегментации; и
после вычисления показателя качества сегментации
сравнение значений для установления наилучшего показателя сегментации;
выбор среза, имеющего наилучший или улучшенный показатель сегментации.
13. Способ по п. 8, при этом 2D-срезы представляют собой срезы при проведении цифрового томосинтеза молочной железы (DBT).
14. Медицинская система для постобработки 2D-изображений поперечных срезов, при этом устройство содержит:
базу данных (105) для хранения 2D-срезов-изображений;
устройство по любому из пп. 1-6;
экран (150) для отображения первого и/или второго оконного виджета, выдаваемого устройством.
15. Элемент компьютерной программы для управления устройством по любому из пп. 1-6, который при его реализации блоком обработки выполнен с возможностью выполнения этапов способа по любому из пп. 8-13.
16. Машиночитаемый носитель, на котором хранится программный элемент по п. 15.
17. Графический интерфейс (155) пользователя для содействия постобработке 2D-изображений (110a-d) поперечных срезов, при этом интерфейс пользователя, будучи отображенным на экране (150), содержит:
интерактивный первый оконный виджет (11a), отображающий на экране начальное изображение (110a), основанное на одном или более 2D-срезов (110a-d), при этом оконный виджет выполнен с возможностью позволять пользователю задать данные (109) позиционирования общей исходной точки (111) сегментации в любом месте на отображенном начальном изображении (110a);
после того, как пользователь задал данные позиционирования, коррекцию первого оконного виджета (114a), чтобы затем вместо начального среза (110a) отобразить путем плавного увеличения четкости изображения наилучший срез (110c) или наилучший срез с наилучшей наложенной сегментацией (113).
RU2014113071/08A 2011-09-07 2012-09-03 Интерактивная сегментация в режиме реального времени с автоматическим отбором оптимального томографического среза RU2014113071A (ru)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201161531666P 2011-09-07 2011-09-07
US61/531,666 2011-09-07
PCT/IB2012/054536 WO2013035026A1 (en) 2011-09-07 2012-09-03 Interactive live segmentation with automatic selection of optimal tomography slice

Publications (1)

Publication Number Publication Date
RU2014113071A true RU2014113071A (ru) 2015-10-20

Family

ID=47003162

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2014113071/08A RU2014113071A (ru) 2011-09-07 2012-09-03 Интерактивная сегментация в режиме реального времени с автоматическим отбором оптимального томографического среза

Country Status (6)

Country Link
US (1) US9269141B2 (ru)
EP (1) EP2745266B1 (ru)
JP (1) JP6118325B2 (ru)
CN (1) CN103765475B (ru)
RU (1) RU2014113071A (ru)
WO (1) WO2013035026A1 (ru)

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013078476A1 (en) 2011-11-27 2013-05-30 Hologic, Inc. System and method for generating a 2d image using mammography and/or tomosynthesis image data
US8532745B2 (en) 2006-02-15 2013-09-10 Hologic, Inc. Breast biopsy and needle localization using tomosynthesis systems
WO2011043838A1 (en) 2009-10-08 2011-04-14 Hologic, Inc . Needle breast biopsy system and method of use
US11439362B2 (en) * 2010-07-19 2022-09-13 Qview Medical, Inc. Automated ultrasound equipment and methods using enhanced navigator aids
WO2012071429A1 (en) 2010-11-26 2012-05-31 Hologic, Inc. User interface for medical image review workstation
CN103477346A (zh) 2011-03-08 2013-12-25 霍洛吉克公司 用于筛查、诊断和活检的双能和/或造影增强乳房成像的系统和方法
EP2814396B1 (en) 2012-02-13 2017-06-21 Hologic Inc. System and method for navigating a tomosynthesis stack using synthesized image data
JP6366905B2 (ja) * 2012-05-22 2018-08-01 キヤノンメディカルシステムズ株式会社 磁気共鳴イメージング装置及び医用画像診断装置
EP3366217B1 (en) 2013-03-15 2019-12-25 Hologic, Inc. Tomosynthesis-guided biopsy in prone
JP6392309B2 (ja) * 2013-03-15 2018-09-19 ホロジック インコーポレイティッド 自動合焦を含む、トモシンセシススタックをナビゲートするためのシステム
EP2976746B1 (en) * 2013-03-21 2019-01-09 Koninklijke Philips N.V. A method and x-ray system for computer aided detection of structures in x-ray images
US9189860B2 (en) * 2013-04-22 2015-11-17 General Electric Company Real-time, interactive image analysis
US9047664B2 (en) * 2013-05-31 2015-06-02 Kathryn Pearson Peyton Apparatus and method for utilizing mammogram images for verification
JP2016533803A (ja) 2013-10-24 2016-11-04 アンドリュー ピー. スミス, X線誘導胸部生検をナビゲートするためのシステムおよび方法
CA2937379C (en) 2014-02-28 2022-08-09 Hologic, Inc. System and method for generating and displaying tomosynthesis image slabs
WO2016044465A1 (en) * 2014-09-16 2016-03-24 Sirona Dental, Inc. Methods, systems, apparatuses, and computer programs for processing tomographic images
JP6126058B2 (ja) * 2014-09-30 2017-05-10 富士フイルム株式会社 画像表示装置、画像処理装置、放射線画像撮影システム、断層画像表示方法、及び断層画像表示プログラム。
WO2016142492A1 (en) 2015-03-10 2016-09-15 Koninklijke Philips N.V. Retrieval of corresponding structures in pairs of medical images
US10881358B2 (en) 2015-10-05 2021-01-05 Koninklijke Philips N.V. Tomosynthesis apparatus and method for characterizing a lesion in a breast
RU2616583C1 (ru) * 2016-03-01 2017-04-18 Максим Михайлович Никитин Способ проведения томосинтеза органов грудной полости
EP3423968B1 (en) * 2016-03-03 2021-08-18 Koninklijke Philips N.V. Medical image navigation system
WO2018183548A1 (en) 2017-03-30 2018-10-04 Hologic, Inc. System and method for hierarchical multi-level feature image synthesis and representation
EP3600052A1 (en) 2017-03-30 2020-02-05 Hologic, Inc. System and method for targeted object enhancement to generate synthetic breast tissue images
US11455754B2 (en) 2017-03-30 2022-09-27 Hologic, Inc. System and method for synthesizing low-dimensional image data from high-dimensional image data using an object grid enhancement
WO2018236565A1 (en) 2017-06-20 2018-12-27 Hologic, Inc. METHOD AND SYSTEM FOR MEDICAL IMAGING WITH DYNAMIC SELF-LEARNING
US11344371B2 (en) 2018-10-19 2022-05-31 Canon U.S.A., Inc. Visualization of three-dimensional image data on a two-dimensional image

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5903664A (en) * 1996-11-01 1999-05-11 General Electric Company Fast segmentation of cardiac images
CA2466811A1 (en) * 2001-11-21 2003-06-05 Viatronix Incorporated Imaging system and method for cardiac analysis
US20070276214A1 (en) * 2003-11-26 2007-11-29 Dachille Frank C Systems and Methods for Automated Segmentation, Visualization and Analysis of Medical Images
US7545979B2 (en) * 2005-04-12 2009-06-09 General Electric Company Method and system for automatically segmenting organs from three dimensional computed tomography images
WO2007031936A2 (en) * 2005-09-13 2007-03-22 Koninklijke Philips Electronics, N.V. Automatic generation of optimal views for computed tomography thoracic diagnosis
US7953265B2 (en) * 2006-11-22 2011-05-31 General Electric Company Method and system for automatic algorithm selection for segmenting lesions on pet images
US7773791B2 (en) * 2006-12-07 2010-08-10 Carestream Health, Inc. Analyzing lesions in a medical digital image
US20080281182A1 (en) * 2007-05-07 2008-11-13 General Electric Company Method and apparatus for improving and/or validating 3D segmentations
JP2009018048A (ja) * 2007-07-12 2009-01-29 Fujifilm Corp 医用画像表示装置、方法及びプログラム
FR2919747B1 (fr) * 2007-08-02 2009-11-06 Gen Electric Procede et systeme d'affichage d'images de tomosynthese
US9436798B2 (en) * 2007-12-13 2016-09-06 Koninklijke Philips N.V. Method of retrieving data from a medical image data set
CN101334895B (zh) * 2008-08-07 2011-09-14 清华大学 一种针对动态增强乳腺磁共振影像序列的影像分割方法
US20100033501A1 (en) * 2008-08-11 2010-02-11 Sti Medical Systems, Llc Method of image manipulation to fade between two images
US8547402B2 (en) * 2009-10-07 2013-10-01 Hologic, Inc. Displaying computer-aided detection information with associated breast tomosynthesis image information
EP2459070B1 (en) * 2009-07-31 2020-03-25 Dental Imaging Technologies Corporation Panoramic dental imaging using segmentation and a master arch
CN101639935B (zh) * 2009-09-07 2012-07-04 南京理工大学 基于几何活动轮廓目标跟踪的数字人连续切片图像分割方法
US8520923B2 (en) * 2011-08-06 2013-08-27 Carestream Health, Inc. Reporting organ volume for a medical digital image
KR101185727B1 (ko) * 2011-09-14 2012-09-25 주식회사 인피니트헬스케어 의료영상에서의 세그멘테이션 방법 및 그 장치
MX2014002938A (es) * 2011-09-19 2014-04-25 Koninkl Philips Nv Indicador de estado para sub-volumenes de imagenes multidimensionales en interfaces graficas de usuario utilizadas en procesamiento de imagenes.
US9678620B2 (en) * 2011-10-11 2017-06-13 Koninklijke Philips N.V. Workflow for ambiguity guided interactive segmentation of lung lobes
DE102012213981A1 (de) * 2012-08-07 2014-02-13 General Electric Co. Verfahren und Vorrichtung zur Anzeige von radiologischen Bildern

Also Published As

Publication number Publication date
CN103765475B (zh) 2017-05-10
JP6118325B2 (ja) 2017-04-19
US9269141B2 (en) 2016-02-23
WO2013035026A1 (en) 2013-03-14
US20140219534A1 (en) 2014-08-07
CN103765475A (zh) 2014-04-30
EP2745266B1 (en) 2020-05-13
JP2014525335A (ja) 2014-09-29
EP2745266A1 (en) 2014-06-25

Similar Documents

Publication Publication Date Title
RU2014113071A (ru) Интерактивная сегментация в режиме реального времени с автоматическим отбором оптимального томографического среза
US20220292739A1 (en) Enhancements for displaying and viewing tomosynthesis images
JP6392309B2 (ja) 自動合焦を含む、トモシンセシススタックをナビゲートするためのシステム
US9959261B2 (en) Method and apparatus for displaying 3D image
RU2686953C2 (ru) Способ и устройство для отображения медицинских изображений
JP2016510669A5 (ru)
WO2009147841A1 (ja) 投影画像作成装置、方法およびプログラム
US9261441B2 (en) Generating a slicing scheme for slicing a specimen
JP2015506794A5 (ru)
US9406163B2 (en) Volume rendering apparatus and method of operating same
JP2013089228A (ja) 病変修正装置及び方法
JP5726646B2 (ja) 画像処理装置、方法、及びプログラム
Wang et al. Stereoscopic image retargeting based on 3D saliency detection
US20140306961A1 (en) Medical image processing system, recording medium having recorded thereon a medical image processing program and medical image processing method
JPWO2015186439A1 (ja) 画像処理装置及び立体視表示方法
US9508143B2 (en) Apparatus and method for marking region of interest
US9262835B2 (en) Method, apparatus, and medical imaging system for segmenting image of object from image of organ
JP5755122B2 (ja) 画像処理装置、方法、及びプログラム
US10324582B2 (en) Medical image display apparatus, method for controlling the same
JP5307051B2 (ja) 立体映像調整装置及び調整方法
JP2019512284A (ja) 組織変形の存在下において手術を支援するためのシステム及び方法
US20170281111A1 (en) Device for visualizing a 3d object
JP2017162179A5 (ru)
US11727629B2 (en) Un-occluded visualization of focus with depth continuity with context in volume rendering
WO2013081235A1 (ko) 3d 스테레오스코픽 영상에서 시각 피로도를 시각화하는 장치

Legal Events

Date Code Title Description
FA92 Acknowledgement of application withdrawn (lack of supplementary materials submitted)

Effective date: 20170203