RU2601212C2 - Процесс интерактивной сегментации долей легкого, проводимой с учетом неоднозначности - Google Patents
Процесс интерактивной сегментации долей легкого, проводимой с учетом неоднозначности Download PDFInfo
- Publication number
- RU2601212C2 RU2601212C2 RU2014118566/28A RU2014118566A RU2601212C2 RU 2601212 C2 RU2601212 C2 RU 2601212C2 RU 2014118566/28 A RU2014118566/28 A RU 2014118566/28A RU 2014118566 A RU2014118566 A RU 2014118566A RU 2601212 C2 RU2601212 C2 RU 2601212C2
- Authority
- RU
- Russia
- Prior art keywords
- dimensional
- segmentation
- slice
- new
- calculated
- Prior art date
Links
- 230000011218 segmentation Effects 0.000 title claims abstract description 183
- 210000004072 lung Anatomy 0.000 title claims description 42
- 238000000034 method Methods 0.000 title claims description 24
- 230000002452 interceptive effect Effects 0.000 title claims description 5
- 230000008569 process Effects 0.000 title description 3
- 238000012545 processing Methods 0.000 claims abstract description 20
- 238000004364 calculation method Methods 0.000 claims description 10
- 230000004044 response Effects 0.000 claims description 8
- 230000003139 buffering effect Effects 0.000 claims description 7
- 239000000126 substance Substances 0.000 abstract 1
- 239000012634 fragment Substances 0.000 description 16
- 238000004422 calculation algorithm Methods 0.000 description 15
- 238000004590 computer program Methods 0.000 description 13
- 238000012800 visualization Methods 0.000 description 9
- 230000003993 interaction Effects 0.000 description 7
- 230000036961 partial effect Effects 0.000 description 5
- 238000012790 confirmation Methods 0.000 description 4
- 238000004458 analytical method Methods 0.000 description 3
- 210000004204 blood vessel Anatomy 0.000 description 3
- 238000003066 decision tree Methods 0.000 description 3
- 230000001419 dependent effect Effects 0.000 description 3
- 238000012805 post-processing Methods 0.000 description 3
- 208000006545 Chronic Obstructive Pulmonary Disease Diseases 0.000 description 2
- 206010058467 Lung neoplasm malignant Diseases 0.000 description 2
- 239000003795 chemical substances by application Substances 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000013467 fragmentation Methods 0.000 description 2
- 238000006062 fragmentation reaction Methods 0.000 description 2
- 230000000670 limiting effect Effects 0.000 description 2
- 201000005202 lung cancer Diseases 0.000 description 2
- 208000020816 lung neoplasm Diseases 0.000 description 2
- 238000000638 solvent extraction Methods 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000002860 competitive effect Effects 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000003708 edge detection Methods 0.000 description 1
- 238000003709 image segmentation Methods 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 210000000056 organ Anatomy 0.000 description 1
- 231100000915 pathological change Toxicity 0.000 description 1
- 230000036285 pathological change Effects 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 238000012567 pattern recognition method Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000002195 synergetic effect Effects 0.000 description 1
- 239000013598 vector Substances 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/46—Arrangements for interfacing with the operator or the patient
- A61B6/461—Displaying means of special interest
- A61B6/466—Displaying means of special interest adapted to display 3D data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/174—Segmentation; Edge detection involving the use of two or more images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
- G06T2207/10081—Computed x-ray tomography [CT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20092—Interactive image processing based on input by user
- G06T2207/20101—Interactive definition of point of interest, landmark or seed
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30061—Lung
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Medical Informatics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Radiology & Medical Imaging (AREA)
- Animal Behavior & Ethology (AREA)
- Optics & Photonics (AREA)
- Pathology (AREA)
- High Energy & Nuclear Physics (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Biophysics (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Image Processing (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Magnetic Resonance Imaging Apparatus (AREA)
Abstract
Использование: для обработки двухмерных изображений срезов, определяющих объем трехмерного изображения. Сущность изобретения заключается в том, что устройство содержит контроллер графического пользовательского интерфейса, блок двухмерной сегментации и блок трехмерной сегментации. Устройство позволяет пользователю производить вычисление и отображение двухмерной сегментации поперечного сечения объекта, показанного в срезе, и вычисление и отображение трехмерной сегментации объекта в объеме трехмерного изображения, причем трехмерная сегментация основана на ранее вычисленной двухмерной сегментации объекта. Технический результат: обеспечение возможности улучшения сегментации объектов, представленных медицинскими данными изображения. 5 н. и 9 з.п. ф-лы, 3 ил.
Description
Область техники, к которой относится изобретение
Настоящее изобретение относится к устройству для последующей обработки двухмерных (2D) изображений поперечных срезов, к способу последующей обработки двухмерных изображений поперечных срезов, к компьютерному программному элементу и к машиночитаемому носителю.
Уровень техники
В компьютерной медицинской диагностике инструменты сегментации используются для сегментации изображений медицинских объектов на подобъекты, представляющие соответствующие физиологические признаки объекта. Примерами являются инструменты сегментации для диагностики хронической обструктивной болезни легких (COPD) и рака легких, которые используются для сегментирования объема компьютерного томографического (CT) изображения левого или правого легкого на доли легкого.
Известны полностью автоматизированные алгоритмы сегментации, но они не всегда приводят к желаемым результатам. Сегментация, произведенная таким образом, затем должна быть просмотрена и скорректирована или отредактирована, что нередко может быть затруднительным. Это особенно справедливо для сегментации в более чем двух измерениях.
WO2009157946 описывает автоматическую сегментацию изображений с использованием распространения контура.
US2008/0260221 раскрывает сегментацию патологических изменений на трехмерных (3D) цифровых изображениях.
Раскрытие изобретения
Таким образом, может существовать потребность в обеспечении врачам улучшенной поддержки при обработке сформированных компьютером (или иным образом) сегментаций объектов, представленных медицинскими данными изображения.
Задача настоящего изобретения решается объектами независимых пунктов формулы изобретения. Дополнительные варианты осуществления включены в зависимые пункты формулы изобретения.
Следует отметить, что следующие описанные аспекты изобретения одинаково применяются к способу обработки двухмерных изображений поперечных срезов, к медицинской системе для последующей обработки двухмерных изображений поперечных срезов, к компьютерному программному элементу и к машиночитаемому носителю.
В соответствии с одним аспектом предложено устройство для последующей обработки двухмерных изображений поперечных срезов, определяющих набор данных объема трехмерного изображения. Устройство содержит:
- контроллер графического пользовательского интерфейса;
- блок двухмерной сегментации; и
- блок трехмерной сегментации.
Контроллер графического пользовательского интерфейса выполнен с возможностью формировать графический пользовательский интерфейс для отображения на экране. Отображенный пользовательский интерфейс содержит интерактивный первый оконный интерфейсный элемент, отображающий на экране начальный срез из двухмерных срезов; срез показывает поперечное сечение интересующего объекта, оконный интерфейсный элемент выполнен с возможностью позволять пользователю указывать посредством указательного инструмента данные положения одной начальной точки в любом месте на отображенном начальном срезе.
Блок двухмерной сегментации выполнен с возможностью в ответ на указание пользователем данных положения выполнять двухмерную сегментацию отображенного начального среза посредством вычисления в срезе кривой линии сегментации, проходящей через указанную одну начальную точку или начинающуюся в указанной одной начальной точке.
Контроллер графического пользовательского интерфейса дополнительно выполнен с возможностью формировать вычисленную линию сегментации, наложенную на начальный срез, для отображения в первом оконном интерфейсном элементе.
Блок трехмерной сегментации выполнен с возможностью в ответ на запрос пользователя вычислять трехмерный сегмент объекта по множеству двухмерных срезов, составляющих объем трехмерного изображения, посредством использования вычисленной линии сегментации в качестве (геометрического или поперечного) ограничения.
Контроллер графического пользовательского интерфейса дополнительно выполнен с возможностью формировать по меньшей мере часть вычисленного трехмерного сегмента для отображения на экране.
Устройство обеспечивает интерактивный обзор двухмерного и трехмерного сегментов для случаев, когда предложенные устройством результаты сегментации оказались неудовлетворительными.
Устройство также позволяет легко производить двухмерную сегментацию, например, изображения среза легкого на участки изображения, представляющие отпечатки долей легкого. Трехмерная сегментация трехмерного отпечатка легкого по объему трехмерного изображения затем вычисляется на основе граничных ограничений, определенных ранее вычисленным двухмерным сегментом. Двухмерный сегмент может включать в себя линии сегментации, представляющие линии щели легкого, и контур, очерчивающий границу отпечатка легкого. Линии сегментации вместе с частями контура формируют сегменты отпечатка доли легкого.
Двухмерные сегменты вычисляются, и затем контроллер графического пользовательского интерфейса (GUI) производит их отображение в оконном интерфейсном элементе. Только когда пользовательское нажатие кнопки мыши одобряет полуавтоматически сформированный двухмерный сегмент, трехмерный сегмент вычисляется на основе одобренного двухмерного сегмента. Таким образом, устройство предоставляет пользователю возможность определить, из каких двухмерных сегментов должен быть создан трехмерный сегмент. Устройство является полуавтоматическим, а не полностью автоматическим, поскольку пользователь должен обеспечить начальную точку для двухмерного сегмента. Однако имеется только одна точка, которая должна быть определена пользователем. Поскольку устройство реализует двухмерную сегментацию на основе этой одной начальной точки, требуется небольшое пользовательское взаимодействие и обеспечивается быстрый процесс со сведенным к минимуму отвлечением внимания пользователя.
В соответствии с одним вариантом осуществления настоящего изобретения вычисленная линия сегментации сохраняется в буфере при запросе пользователем трехмерной сегментации. После указания пользователем новой начальной точки блок сегментации вычисляет новую линию сегментации, проходящую через новую начальную точку. Вновь вычисленная линия сегментации затем отображается наложенной на начальный срез вместе с ранее вычисленной линией сегментации в первом оконном интерфейсном элементе. При запросе пользователем вычисления нового трехмерного сегмента новая линия сегментации также сохраняется вместе с предыдущей линией сегментации в буфере. Блок сегментации использует в качестве ограничений обе буферизованные линии сегментации для вычисления нового трехмерного сегмента объекта. Затем контроллер графического пользовательского интерфейса обновляет экран для отображения вновь вычисленного трехмерного сегмента доли легкого.
После того как пользователь размещает курсор мыши на отображаемом срезе около видимой линии щели, нажатие кнопки мыши приводит к вычислению подраздела и расходу процессорного времени и запросу графической визуализации вычисленной линии двухмерной сегментации в первом оконном интерфейсном элементе. Когда пользователь снова изменяет положение мыши, предлагается и отображается новое решение для двухмерной сегментации.
Если пользователь удовлетворен результатами двухмерной сегментации, он может одобрить показываемый в настоящий момент двухмерный сегмент нажатием кнопки мыши. Нажатие кнопки мыши производит добавление двухмерного сегмента видимого в настоящий момент среза к буферу подтвержденных двухмерных сегментов. Буферизация двухмерного сегмента позволяет пользователю позже просмотреть сегментации и позволяет каждой трехмерной сегментации учитывать все одобренные на данный момент пользователем двухмерные сегменты. В соответствии с одним вариантом осуществления двухмерный сегмент включает в себя линию сегментации линии щели вместе с контуром легкого. Буферизация двухмерного сегмента включает в себя буферизацию ссылки на срез, который подвергнут двухмерной сегментации посредством вычисленного двухмерного сегмента.
При одобрении пользователем предложенных двухмерных сегментов щели обновленное трехмерное решение для трехмерной сегментации отображается для каждого вновь принятого двухмерного сегмента. Таким образом, посредством одобрения шаг за шагом все большего количества двухмерных сегментов пользователь может последовательно улучшать качество или «точность» решения для трехмерной сегментации истинной геометрии легкого и его долей. Таким образом, в сравнительно короткое время достижима правильная трехмерная сегментация для отпечатка реального легкого.
В соответствии с одним аспектом контроллер графического пользовательского интерфейса выполнен с возможностью формировать вычисленный трехмерный сегмент для отображения во втором оконном интерфейсном элементе. Контроллер производит отображение трехмерного сегмента во втором оконном интерфейсном элементе, отличающемся от первого оконного интерфейсного элемента, используемого для отображения двухмерной сегментации по срезам.
Сформированный графический пользовательский интерфейс имеет «две панели» и включает в себя первый и второй оконные интерфейсные элементы в качестве компонентов графического пользовательского интерфейса (GUI), отображаемых в оконном интерфейсном элементе более высокого уровня (в «контейнере»), или они могут быть отображены без такого общего окна на экране как два отдельных окна, каждое из которых может передвигаться посредством взаимодействия нажатия кнопки и перетаскивания мышью независимо друг от друга по плоскости экрана. В другом варианте осуществления одно окно графического пользовательского интерфейса используется, поочередно отображающее либо один двухмерный сегмент, либо срез как часть трехмерного сегмента.
В соответствии с одним вариантом осуществления контроллер графического пользовательского интерфейса выполнен с возможностью формировать для отображения трехмерную визуализацию вычисленного трехмерного сегмента.
Отображение трехмерного сегмента может быть полным, в котором отображается полная трехмерная интерактивно вращаемая визуализация, или отображение может быть частичным, в котором отображается одно двухмерное сечение трехмерного сегмента по срезам.
В соответствии с одним вариантом осуществления указательный инструмент представляет собой компьютерную мышь, и указание данных положения или новых данных положения производится без использования события нажатия кнопки мыши, а посредством использования записей положения, формируемых мышью, когда мышь перемещается пользователем. Напротив, пользовательский запрос трехмерной сегментации и буферизации двухмерных сегментов производится посредством нажатия кнопки мыши и посредством использования считывания положения.
Запрашиваемое пользователем взаимодействие через указательный инструмент (компьютерную мышь, световое перо и т. п.) с устройством дополнительно минимизировано посредством реализации без нажатия кнопки мыши, тем самым способствуя еще более быстрому процессу во все более конкурентном медицинском оборудовании. Двухмерные сегменты предлагаются пользователю лишь посредством размещения курсора мыши над выбранными проекциями среза.
Трехмерная сегментация отпечатка легкого в объеме трехмерного изображения, инициируемая нажатием кнопки мыши для одобрения отображаемого в настоящий момент двухмерного сегмента, вычисляется и по меньшей мере частично отображается, и для пользователя это происходит в значительной степени в один и тот же момент.
В соответствии с одним вариантом осуществления блок сегментации выполнен с возможностью вычислять в дополнение к запрашиваемому трехмерному сегменту по меньшей мере один дополнительный выборочный трехмерный сегмент. Выборочный трехмерный сегмент основан по меньшей мере на одной выборочной области в трехмерном объеме, не используемой при вычислении или не являющейся частью запрашиваемого трехмерного сегмента. Устройство дополнительно содержит компаратор, выполненный с возможностью сравнивать запрашиваемый трехмерный сегмент с выборочным трехмерным сегментом, чтобы установить значение отклонения. Компаратор выполнен с возможностью выдавать команду контроллеру графического пользовательского интерфейса обновить первый оконный интерфейсный элемент для отображения среза, показывающего поперечное сечение идентифицированной выборочной области, когда значение отклонения превышает конфигурируемое пороговое значение.
Эта функциональность обеспечивает автоматическое привлечение внимания пользователя к срезу или проекции из срезов трехмерного объема, который содержит трехмерную область с высокой или самой высокой «алгоритмической неоднозначностью». Это область, которая вызвала бы самое большое (больше предварительно установленного значения) отклонение от отображаемого в настоящий момент трехмерного сегмента, если бы эта область была включена в трехмерное вычисление отображаемого в настоящий момент трехмерного сегмента. Отклонение измеряется относительно подходящего показателя отклонения, который позволяет сравнивать участки объема трехмерного изображения, формирующие соответствующие трехмерные сегменты.
Внутренние узлы или точки решения в дереве решений используемого алгоритма трехмерного сегментирования анализируются для идентификации области легкого, имеющей большую или наибольшую логарифмическую неоднозначность. Соответствующими внутренними точками принятия решения в алгоритме являются те, которые привели бы к изменению выдаваемого в результате трехмерного сегмента, если бы алгоритм в этой точке был выполнен вдоль ветви, отличающейся от той, которая привела к рассматриваемому в настоящий момент трехмерному сегменту. В соответствии с одним вариантом осуществления анализ точки принятия решения может быть реализован посредством исследования не только одного решения, а множества решений трехмерных сегментов, соответствующих разным локальным минимумам функционала, для которого алгоритм ищет решения.
Анализ алгоритма трехмерного сегментирования выполняется в фоновом режиме, и, когда он завершается, первый оконный интерфейсный элемент для отображения срезов обновляется или сбрасывается, чтобы вместо предыдущего среза отобразить срез через область с высокой неоднозначностью. В соответствии с одним вариантом осуществления срез выбирается таким образом, чтобы он пересекал область в ее центре. Этот выбор включает в себя прокрутку и возможно вращение, чтобы произвести отображение области с наибольшей неоднозначностью. Затем пользователь может одобрить посредством нажатия кнопки мыши и добавить к буферу показываемый срез, указывающий область высокой или наиболее высокой неоднозначности. Тогда секция используется в качестве допустимого ограничения для трехмерного сегмента.
Устройство позволяет пользователю выбирать некоторые или все другие решения трехмерного сегмента, таким образом, окончательное решение относительно наиболее подходящего с медицинской точки зрения решения лежит на пользователе. Фактически пользователь может управлять выполнением алгоритма трехмерной сегментации, чтобы выполнять более полный выбор «образцов» из всего объема трехмерного изображения для решений текущей задачи трехмерного сегментирования.
Устройство в соответствии с настоящим изобретением позволяет пользователю удобно просматривать предложенную трехмерную сегментацию среза, выполняя насколько возможно меньше пользовательских действий. Осуществляется поддержка пользователя при обнаружении возможно лучшего решения трехмерного сегмента посредством устройства, предлагающего срезы для двухмерного сегмента, который в ином случае мог быть не рассмотрен. Вероятность того, что пользователь запечатлевает всю физиологическую геометрию исследуемого легкого, таким образом, может быть увеличена, поскольку лучше выполняется выборка в пространстве решений по множеству в трехмерном объеме. Пользователя направляют для обоснованного ограничения вычисления трехмерного сегмента посредством двухмерных срезов, которые фактически добавляют информацию об истинной геометрии легкого или интересующего объекта. Одним словом, устройство обеспечивает интерактивную алгоритмическую трехмерную сегментацию, проводимую с учетом неоднозначности.
Устройство может использоваться в рабочих станциях обработки изображений и системах PACS для скрининговой диагностики и отслеживания лечения для применений в случае хронической обструктивной болезни легких и рака легких.
Определения
Сегментация - это разделение пока еще неструктурированной информации пикселей или вокселов (элементов объемного изображения) в срезе на области пикселей или вокселов. Области затем могут обрабатываться как объекты сами по себе. Каждый пиксель или воксел в изображении затем может упоминаться как находящийся внутри или снаружи объекта. Каждый объект или объекты, на которые изображение было разделено, упоминаются как «сегмент».
Сегмент называется двухмерным (2D), если области ограничены плоскостью изображения единственного среза. Тогда сегменты могут быть определены одной или несколькими криволинейными границами.
Сегмент называется трехмерным (3D), если области простираются по коллекции срезов в объеме трехмерного изображения, тогда трехмерный сегмент определен двухмерным сегментом в каждом из этих сечений. Тогда трехмерный сегмент может быть определен одной или несколькими поверхностями. Поверхности или криволинейные линии, определяющие трехмерный или двухмерный сегмент, аналогично упоминаются как «сегмент», или «поверхность сегментации», или «линия сегментации».
Отпечаток реального объекта в изображении - это множество пикселей или вокселов, которые вместе представляют этот объект.
Узел решения в дереве решений алгоритма является неоднозначным, если в этом узле существует более одного решения для подходящего трехмерного сегмента, и алгоритм проходит вдоль одной по меньшей мере из двух возможных ветвей выполнения и выдает одно из решений.
В расширении концепции неоднозначных точек решения область объема трехмерного изображения называется неоднозначной, если она формирует часть одного из решений трехмерного сегмента, но не формирует часть другого решения. И, наконец, область имеет более высокую неоднозначность, чем другая область, если трехмерный сегмент, имеющий эту область, больше отклоняется от отображаемого в настоящий момент трехмерного сегмента, чем какой-либо другой трехмерный сегмент, не имеющий эту область.
Краткое описание чертежей
Иллюстративные варианты осуществления изобретения будут описаны далее со ссылкой на приведенные ниже чертежи.
Фиг. 1 схематично показывает блок-схему устройства для последующей обработки двухмерных изображений поперечных срезов.
Фиг. 2 показывает графический пользовательский интерфейс для последующей обработки двухмерных изображений поперечных срезов.
Фиг. 3 схематично показывает блок-схему последовательности операций для способа последующей обработки двухмерных изображений поперечных срезов.
Осуществление изобретения
Как показано на фиг. 1, устройство последующей обработки содержит базу 105 данных, содержащую компьютерные томографические (CT) изображения 110a-c поперечных срезов, определяющих объем трехмерного изображения. Один из срезов, например срез 110a, может быть отображен в графическом пользовательском интерфейсе 155 с двумя панелями на мониторе 150. Внешним видом и функциональностью взаимодействия с пользователем, обеспечиваемой графическим пользовательским интерфейсом (GUI) 155, управляет контроллер 160 GUI. Устройство дополнительно содержит блок 170 двухмерной сегментации и блок 180 трехмерной сегментации. Также имеется компаратор 185, взаимодействующий с блоком 180 трехмерной сегментации. Устройство дополнительно содержит блок 190 обработки, такой как рабочая станция, взаимодействующий с контроллером 160 GUI, блоком 170 двухмерной сегментации, блоком 180 трехмерной сегментации и компаратором 185. Также обеспечен указательный инструмент, такой как компьютерная мышь 195, взаимодействующий с блоком 190 обработки, который позволяет пользователю взаимодействовать с интерфейсом 155 GUI под управлением контроллера 160 GUI.
Компоненты устройства показаны на фиг. 1 отдельно. Однако это сделано только для ясности иллюстрации. Компоненты устройства - блок 190 обработки, блок 170 двухмерной сегментации, блок 180 трехмерной сегментации и компаратор 185 - действительно могут быть локально распределены и соединены в подходящей сети связи. Однако в других вариантах осуществления компоненты 170, 180 и 185 выполняются как программы в блоке 190 обработки. Компоненты также могут быть организованы как специализированные программируемые пользователем вентильные матрицы (FPGA) или аппаратно реализованные автономные микросхемы. Компоненты могут быть запрограммированы в подходящей платформе научных вычислений, такой как Matlab® или Simulink®, и затем преобразованы в программы на языке C++ или C, сохранены в библиотеке и скомпонованы при их вызове блоком 190 обработки.
Вообще говоря, устройство на фиг. 1 помогает пользователю, например радиологу, при формировании двухмерных и трехмерных сегментов интересующего объекта, такого как левое или правое легкое человека или животного. Сегмент в этом случае может включать в себя сегмент полного контура поперечного среза, например левого легкого, и сегменты верхней и нижней долей легкого, составляющих левое легкое. Однако понятно, что интересующий объект может представлять собой другую физиологическую часть животного или человеческого организма, и тогда сегмент будет направлен на другие физиологические признаки.
Трехмерный сегмент основан на двухмерных сегментах одного или нескольких изображений 110a-с срезов. Устройство также помогает пользователю при двухмерной сегментации одного или нескольких изображений срезов. Срез 110a вместе со своим двухмерным сегментом может отображаться на левой панели, сформированной первым оконным интерфейсным элементом 114a. По меньшей мере частичное представление трехмерного сегмента доли легкого, основанное на ранее вычисленных одном или нескольких двухмерных сегментах, может отображаться на второй панели, сформированной вторым оконным интерфейсным элементом 114b. Пользователь может взаимодействовать через мышь 195 с графическим пользовательским интерфейсом 155, выдавая события взаимодействия. Тогда контроллер GUI перехватывает эти события взаимодействия и выдает соответствующие команды системной видеокарте (не показана), чтобы таким образом управлять отображением на экране двух оконных интерфейсных элементов 114a, 114b GUI.
Пользователь может привести в действие кнопку 205 загрузки (см. фиг. 2) для загрузки и просмотра подходящего среза 110a в первом оконном интерфейсном элементе 114a. Затем пользователь может скорректировать угол проекции через трехмерный объем, приводя в действие кнопку 215 «альфа», или он может выполнить прокрутку посредством ползунка 156 через срезы 110a-c, сохраненные в базе 105 данных, для просмотра другого среза из срезов 110a-c. Посредством использования ползунка 156 графического пользовательского интерфейса 155 радиолог выполняет прокрутку по изображениям 110a-b срезов, которые затем по одному отображаются в окне 114a левой панели. Срезы предпочтительно отображаются как сагиттальные проекции с толщиной среза приблизительно 1-5 мм. Предпочтительно угол альфа вращения вокруг кранио-кардиальной оси, сформированной пересечением между сагиттальной плоскостью и фронтальной плоскостью, и толщина среза могут быть скорректированы посредством приведения в действие кнопки 215 «альфа» или кнопки 210 «конфигурация». Вызов кнопки 210 «конфигурация» или кнопки 215 «альфа» выводит раскрывающееся окно «конфигурация», которое временно накладывается на графический пользовательский интерфейс 155. Затем пользователь может отметить прямоугольник или ввести требуемый параметр конфигурации, например толщину среза, угол вращения или положение, в трехмерном объеме среза 110a-b, который он хочет рассмотреть.
Устройство позволяет пользователю инициировать двухмерную сегментацию посредством выбора одной точки на отображаемом в настоящий момент срезе 110a. Данные положения одной точки формируются посредством перемещения указателя мыши и затем передаются через контроллер 160 GUI блоку 170 двухмерной сегментации. Затем блок 170 двухмерной сегментации формирует линию 108 сегментации (см. фиг. 2), начинающуюся в начальной одной точке 109 или проходящую через нее, которая определена пользователем посредством размещения курсора 195a мыши в виде «перекрестия», как иллюстративно показано на фиг. 2.
Эта полуавтоматическая двухмерная сегментация показанного легкого на две доли (то есть части выше (верхняя доля) и ниже (нижняя доля) линии 108 сегментации) также включает в себя формирования линии 107 внешнего контура отпечатка левого легкого, показываемого в настоящий момент на срезе 110a. Линия 108 сегментации вычерчивает более или менее видимую линию долевой щели, как показано на срезе 110a. Спецификация начальной одной точки 109 производится посредством взаимодействия без нажатия кнопки мыши. Другими словами, когда курсор 195a мыши не перемещается после его размещения в течение заданного времени, линия 108 сегментации 108 автоматически формируется блоком 170 двухмерной сегментации на основании текущего положения. Пользователю не требуется выполнять нажатие кнопки мыши для выполнения двухмерной сегментации. Пользователь просто оставляет курсор 195a мыши над панелью изображения. Тогда линия 108 сегментации основана на указанной одной точке 109. Предопределенная задержка может быть сконфигурирована посредством использования кнопки 210 «конфигурация».
Сформированная линия 108 двухмерной сегментации либо начинается в начальной точке 109 и идет налево или направо и пересекает контур 108 легкого только в одной точке, либо проходит через начальную точку 109 и пересекает линию 107 внешнего контура в двух противоположных точках. Устройство может быть сконфигурировано соответствующим образом посредством нажатия кнопки 205 «конфигурация».
Графическая визуализация вычисленного двухмерного сегмента затем отображается наложенной на отображаемый в настоящий момент срез 110a в окне 114a. Графическая визуализация включает в себя компоненты для линии 108 сегментации и контура 107. Если автоматически сформированный двухмерный сегмент, показанный окне 114a левой панели, удовлетворяет пользователя, пользователь выдает подтверждающее событие нажатия кнопки мыши, после чего отображаемый в настоящий момент двухмерный сегмент, который представляет собой внешний контур 107 и линию 108 сегментации, сохраняется в буфере. Наряду с сохранением двухмерного сегмента в буфере также сохраняется ссылка на срез (в этом случае срез 110a), который сегментирован посредством вычисленной двухмерной сегментации. Если пользователь изменяет положение мыши без выдачи подтверждающего события нажатия кнопки мыши, отображаемый в настоящий момент двухмерный сегмент отбрасывается, и вычисляется и визуализируется новый сегмент для отображения, если курсор мыши находится в новом положении дольше заданной задержки.
После подтверждения нажатием кнопки мыши двухмерного сегмента формируется трехмерный сегмент по набору данных трехмерного объема посредством блока 180 трехмерной сегментации, трехмерный сегмент основывается на подтвержденном двухмерном сегменте. Трехмерный сегмент 113 или по меньшей мере его частичное представление затем показывается во втором оконном интерфейсном элементе 114b. Затем пользователь может выполнить прокрутку посредством использования ползунка 156 или нажатий клавиш к другому срезу 110b и выполнить аналогичные двухмерные сегментации показываемого среза 110b в оконном интерфейсном элементе 114a. Снова, как только пользователь удовлетворен предлагаемой системой двухмерной сегментацией, показанной на отображаемом новом срезе 110b, соответствующая линия сегментации и ее контур аналогичным образом сохраняются в буфере при нажатии кнопки мыши. После сохранения двухмерного сегмента для второго среза 110b в буфере окно 114b трехмерного сегмента обновляется, и показывается новый трехмерный сегмент, в этот раз на основе всех двухмерных сегментов, сохраненных в буфере. Буферизованные двухмерные сегменты определяют геометрические ограничения для трехмерного алгоритма, реализованного блоком 180 трехмерной сегментации.
Трехмерный сегмент 113 из отпечатка легкого может быть отображен как трехмерная визуализация посредством блока визуализации (не показан) или может быть представлен одним из срезов из трехмерного объема, формирующего трехмерный сегмент, срез наложен на соответствующий частный двухмерный сегмент полного трехмерного сегмента. В этом варианте осуществления графический пользовательский интерфейс 155 может включать в себя дополнительный ползунок, который позволяет пользователю просматривать посредством прокрутки коллекцию срезов, формирующих трехмерный сегмент. Каждый срез, когда он отображается на правой панели 114b, имеет свое соответствующее частное наложение на двухмерный сегмент. В еще одном варианте осуществления графический пользовательский интерфейс 155 содержит один оконный интерфейсный элемент, который в качестве варианта показывает двухмерный сегмент либо одного среза, либо срезов из коллекции срезов, формирующих трехмерный сегмент, и каждый срез с соответствующим наложенным двухмерным сегментом. В качестве альтернативы трехмерная визуализация трехмерного сегмента отображается в одном окне. В варианте осуществления с одним окном пользователь может переключаться между ракурсом двухмерного сегмента одного среза или ракурсом трехмерного сегмента.
Посредством просмотра и подтверждения срез за срезом двухмерных сегментов, показываемых в окне 114a, пользователь может в «фазе сбора» собрать и накопить подходящие двухмерные сегменты, чтобы таким образом определить «запас» геометрических ограничений, которые затем в комбинации используются блоком 180 трехмерной сегментации. Это позволяет пользователю постепенно выбрать более хорошие или более подходящие двухмерные сегменты, отображаемые по одному на левой панели графического пользовательского интерфейса 155, и постепенно сформировать улучшенные трехмерные сегменты 113, отображаемые на правой панели 114b графического пользовательского интерфейса 155. Качество каждого из ограничений двухмерных сечений для трехмерного сегмента, собранных в «фазе сбора», визуально отслеживается на левой панели 114a, и фактический трехмерный сегмент затем выполняется в более поздней «фазе трехмерного сегмента» и отображается для визуального отслеживания на правой панели 114b.
Работа
Текущее положение мыши, определяющее данные положения одной точки 109, передается блоку 170 двухмерной сегментации в качестве начальной или промежуточной точки для вычисления линии щели, проходящей по линии сегментации 108. Блок 170 двухмерной сегментации использует методы распознавания образов и/или градиентные методы для определения подходящих направлений от указанной одной точки 109 через плоскость изображения, отображаемого в настоящий момент в срезе 110a. С этой целью задаются потенциальные направления, образующие звездообразное семейство векторов, исходящих от одной начальной точки 109. Ожидается, что линия долевой щели будет иметь более низкую интенсивность вокселов по сравнению с областями вокселов по обе стороны от линии щели. Этот образец интенсивности вокселов предусматривает крутое повышение градиента поперек направления линии щели в каждую из сторон. Блок двухмерной сегментации выбирает из коллекции потенциальных направлений то направление, которое лучше всего соответствует этой ожидаемой характеристике градиента.
Как только найдено подходящее направление, которое наилучшим образом соответствует ожидаемой характеристике градиента, на подходящем расстоянии вдоль этого направления выбирается новая точка для вычисляемой линии сегментации, и ранее описанная процедура для выбора подходящего потенциального направления повторяется. Расстояние представляет собой «ширину шага», которая может быть конфигурирована и отражает разрешение, требуемое при вычислении двухмерного сегмента. Таким образом блок 170 двухмерной сегментации точка за точкой вычисляет и итерационно вычерчивает линию долевой щели и производит описание координат линии 108 сегментации.
Блок двухмерной сегментации подобным образом проводит вычисление линии 107 контура, определяя подходящие потенциальные точки линии контура и используя значения градиента интенсивности вокселов для отслеживания границы отпечатка легкого. В одном варианте осуществления регистрируются интенсивности градаций вокселов вдоль вычисленной линии сегментации. Точка на линии, в которой происходит внезапное понижение интенсивности градаций, интерпретируется как точка пересечения между линией сегментации и границей отпечатка легкого в срезе. На основе этой точки пересечения затем может быть вычислен контур 107 с использованием известных алгоритмов обнаружения края.
Вычисленные таким образом координаты линии 108 сегментации и контур 107, вместе формирующие двухмерный сегмент, затем передаются контроллеру 160 GUI, который производит отображение двухмерного сегмента в качестве графического элемента в оконном интерфейсном элементе 114a. Двухмерный сегмент, который является внешним контуром 107, и линия 108 сегментации отображается как графика, наложенная на отображаемый в настоящий момент срез 110a.
Событие нажатия кнопки мыши, соответствующее двухмерному сегменту, также производит сохранение описаний координат двухмерного сегмента в буфере ограничений трехмерного сегмента. Таким образом, буфер определяет «буфер обмена» для списка подтвержденных двухмерных сегментов. В соответствии с одним вариантом осуществления графический пользовательский интерфейс 155 обеспечивает кнопки для обеспечения пользователю возможности просматривать буфер обмена. Буфер постепенно обновляется и строит коллекцию одобренных пользователем двухмерных сегментов по мере того, как пользователь изменяет положение мыши через левую оконную панель 114a и вызывает подтверждающие события нажатия кнопки мыши.
Каждое событие нажатия кнопки мыши для сохранения в рассматриваемом в настоящий момент двухмерном сегменте инициирует трехмерную сегментацию, выполняемую блоком 180 трехмерной сегментации. Блок 180 трехмерной сегментации использует все буферизованные в настоящий момент по срезам двухмерные сегменты в качестве комбинированного ограничения для вычисления трехмерного сегмента легкого по набору данных трехмерного объема, определенных коллекцией срезов 110a-d. Таким образом, изменение положения мыши и выбор новой начальной одной точки сегментации на левой панели 114a производят обновление трехмерного сегмента, отображенного на правой панели 114b, если пользователь одобряет рассматриваемый в настоящий момент двухмерный сегмент 114a нажатием кнопки мыши на левой панели 114a.
Блок 180 трехмерной сегментации реализует подходящие алгоритмы трехмерной сегментации. Алгоритмы могут быть выражены как обнаружение решений функционала, заданного на наборе данных трехмерного объема, ограниченном буферизованными двухмерными сегментами. Каждый возможный трехмерный сегмент должен иметь любой из буферизованных двухмерных сегментов в качестве его поперечного сечения в соответствующих срезах 110a-c. Блок трехмерной сегментации выполняет экстраполяцию из поперечных сечений, определенных буферизованными двухмерными сегментами, в другие срезы в наборе трехмерного объема, чтобы установить «недостающие» поперечные сечения в этих других срезах. Блок трехмерной сегментации использует методики распознавания образов для поиска срезов, имеющих отпечатки, наилучшим образом согласующиеся с буферизованными двухмерными сегментами по интенсивности вокселов и форме. Отпечатки в согласующихся срезах затем подвергаются двухмерной сегментации.
Таким образом, каждое решение для трехмерного сегмента формируется посредством коллекции двухмерных сегментов. Коллекция включает в себя ранее буферизованные двухмерные сегменты и двухмерные сегменты согласующихся срезов. Коллекция срезов определяет трехмерную область вокселов, составляющую трехмерный сегмент. Эта трехмерная область вокселов может быть выражена как «точка» локального минимума функционала. Локальные минимумы могут быть найдены посредством нахождения нулевых значений градиента функционала. Функционал представляет собой вещественную функцию, определенную на объеме трехмерного изображения или на версии объема с грубой фрагментацией. Аспект грубой фрагментации будет разъяснен более подробно ниже.
Обычно имеется большое количество решений. Поэтому алгоритм трехмерной сегментации использует дерево решений для вывода единственного из решений. Ссылка на выданное решение затем передается контроллеру 160 GUI. Затем контроллер 160 GUI производит отображение выданного решения трехмерной сегментации на правой панели 114b.
В соответствии с одним вариантом осуществления блок 180 трехмерной сегментации ищет решение локальных минимумов функционала по всей подходящей области вокселов набора данных трехмерного объема.
Однако в соответствии с предпочтительным вариантом осуществления, чтобы сэкономить время центрального процессора, пространство возможного решения ограничивается сферой, соразмерной с ожидаемыми размерами (длина, ширина и толщина) легкого, которое подвергается трехмерной сегментации.
В еще одном варианте осуществления вокселы в определенной таким образом сфере или во всем трехмерном объеме являются разбитыми или разбиваются на грубые «фрагменты» вокселов или отдельные трехмерные области, из которых затем может быть построен трехмерный сегмент трехмерного отпечатка легкого. В соответствии с одним вариантом осуществления блок 180 трехмерной сегментации выполняет грубое разбиение данных трехмерного объема в фазе дискретизации перед вычислением трехмерного сегмента. Блок 180 трехмерной сегментации выполняет анализ для каждого фрагмента, включает ли он в себя поперечный срез, для которого может быть создан двухмерный сегмент, согласующийся по интенсивности градаций вокселов и по форме с коллекцией буферизованных двухмерных сегментов. Если двухмерный сегмент может быть согласован, фрагмент помечается и затем образует часть решения для трехмерного сегмента.
Такое грубое разбиение, например, может быть произведено с использованием физиологических фактов о легких или конкретном рассматриваемом органе. Один способ определения трехмерных фрагментов состоит в том, чтобы предварительно сегментировать объем трехмерного изображения вокруг отпечатка легкого на участки, представляющие кровеносные сосуды легкого. Кровеносные сосуды, как известно, не проходят через линии щели, а ограничены для случая левого легкого каждой из двух долей. Ограничения, определенные линиями сегментации в буферизованных двухмерных сегментах, могут использоваться для грубого разбиения, и фрагментам не позволено пересекать линии щели, представляющие линии сегментации. Тогда решение функционала трехмерной сегментации по этим трехмерным фрагментам с учетом кровеносных сосудов гарантирует, что соблюдается физиологическая достоверность.
В соответствии с одним вариантом осуществления настоящего изобретения устройство направляет пользователя при выборе ограничений двухмерного сегмента на левой панели 114a, чтобы наилучшим образом запечатлеть геометрию легкого, подвергаемого трехмерной сегментации. С этой целью блок 180 сегментации не только выдает для отображения один трехмерный сегмент, но также вычисляет дополнительные потенциальные решения трехмерных сегментов для конфигурируемого количества других локальных минимумов. Потенциальные решения трехмерных сегментов, соответствующие другим локальным минимумам, вычисляются в фоновом режиме и в данный момент не отображаются, а вместо этого передаются компаратору 185. Компаратор 185 устанавливает отклонение между отображаемым в настоящий момент решением трехмерного сегмента и каждым из потенциальных трехмерных сегментов, вычисленных в фоновом режиме. В соответствии с одним вариантом осуществления количественный показатель отклонения достигается посредством установления для каждого потенциального решения и отображаемого в настоящий момент решения отношения объема отпечатков доли легкого, определенного соответствующими внешними контурами и линиями сегментации в срезе, составляющем соответствующие трехмерные сегменты.
Соответствующие отношения объема доли легкого затем сравниваются с отношением объема доли легкого отображаемого в настоящий момент решения. Если обнаружено, что одно из отношений объема потенциального решения отклоняется от отношения объема доли легкого отображаемого в настоящий момент решения больше предварительно установленного порогового отклонения, фрагменты, составляющие решение с отклонением, и фрагменты, составляющие отображаемое в настоящий момент решение, сравниваются. Затем в решении с отклонением идентифицируется по меньшей мере один фрагмент, который не является частью рассматриваемого в настоящий момент трехмерного сегмента. Затем блок 190 обработки выполняет доступ к базе 105 данных и выбирает срез, пересекающий этот фрагмент. Ссылка на идентифицированный срез, например срез 110c из срезов 110a-c трехмерного объема, передается контроллеру 160 GUI. Контроллер 160 GUI обновляет левую панель 114a, чтобы теперь отобразить срез 110c вместо среза 110a, срез 110c теперь показывает поперечное сечение идентифицированного фрагмента, который мог вызвать отклонение. В соответствии с другим вариантом осуществления фрагмент с отклонением может быть просто выбран как самый дальний от фрагментов, составляющих отображаемое в настоящий момент решение трехмерного сегмента.
Таким образом, устройство позволяет пользователю знать о «неоднозначной» области легкого, которая вызвала отображение в значительной степени другого трехмерного сегмента, если алгоритм трехмерной сегментации решил выдать решение, содержащее этот фрагмент. Таким образом, устройство поддерживает пользователя и побуждает его к более широкому выбору ограничений двухмерных сегментов по всему трехмерному объему, чтобы получить более хорошую возможность запечатлеть истинную геометрию легкого, подвергаемого трехмерному сегментированию на доли. Пользователь может перейти к предложенному двухмерному сегменту и отображаемому теперь срезу 110c, показывающему фрагмент с высокой неоднозначностью, и добавить этот срез в буфер. После такой буферизации нового двухмерного сегмента во втором оконном интерфейсном элементе вместо предыдущего трехмерного сегмента отображается вычисленный в фоновом режиме потенциальный трехмерный сегмент. Если пользователь не удовлетворен предложенным трехмерным сегментом, может быть приведена в действие кнопка буфера (не показана) графического пользовательского интерфейса 155, производящая отображение наложенного окна как буфера обмена. Наложенное окно буфера обмена включает в себя список ссылок на буферизованные двухмерные сегменты, и нажатие кнопки мыши по ссылкам производит отображение в окне 144a соответствующего двухмерного сегмента, наложенного на соответствующие срезы. Пользователь может вычеркнуть из буфера ссылку предложенного двухмерного сегмента среза, показывающего фрагмент с высокой неоднозначностью. Тогда отображение во втором оконном интерфейсном элементе 114b возвращается к ранее показанному трехмерному сегменту. В соответствии с одним вариантом осуществления пользователь может всегда и на любом этапе вызывать окно буфера и удалять из буфера ограничения двухмерных сегментов, и такое удаление затем производит обновление второго оконного интерфейсного элемента 114b, чтобы показать трехмерный сегмент на основе ограничений, оставшихся в буфере.
На фиг. 3 показана блок-схема последовательности операций для способа последующей обработки двухмерных изображений поперечных срезов.
На этапе S305 начальное изображение среза отображается в первом оконном интерфейсном элементе графического пользовательского интерфейса.
На этапе S310 в ответ на указание пользователем положения одной начальной точки в отображенном начальном срезе данных вычисляется двухмерный сегмент отображенного среза на основе кривой линии сегментации, проходящей через одну начальную точку или начинающейся в ней.
На этапе S320 вычисленный двухмерный сегмент визуализируется для отображения в виде графики, наложенной на начальный срез, и накладывается вдоль отпечатка объекта, который должен быть сегментирован.
На этапе S330 в ответ на запрос пользователя двухмерный сегмент сохраняется в буфере, и вычисляется трехмерный сегмент трехмерного отпечатка объекта в объеме трехмерного изображения. Вычисление трехмерного сегмента основано на ранее вычисленном двухмерном сегменте в отображенном двухмерном срезе.
На этапе S340 по меньшей мере частичная графическая визуализация вычисленного трехмерного сегмента отображается на экране либо во втором оконном интерфейсном элементе, либо вместо среза в первом оконном интерфейсном элементе.
В дополнение к запрашиваемому визуализируемому трехмерному сегменту в фоновом режиме вычисляется дополнительный трехмерный сегмент. Дополнительный трехмерный сегмент основан по меньшей мере на одной выборочной области в трехмерном объеме изображения, которая не использовалась при вычислении фактически запрашиваемого трехмерного сегмента. Эти два трехмерных сегмента сравниваются на этапе S350, и устанавливается значение отклонения между этими двумя сегментами. Если значение отклонения превышает предварительно установленное и конфигурируемое пороговое значение, первый оконный интерфейсный элемент обновляется посредством отображения среза, показывающего поперечное сечение идентифицированной выборочной области.
Затем этапы S305-S350 могут быть повторены при указании пользователем еще одной дополнительной начальной точки в показываемом теперь срезе или в дополнительном срезе для сегментации, чтобы тем самым последовательно собрать набор двухмерных сегментов в качестве ограничений и последовательно повторно вычислить трехмерные сегменты на основе всех или конфигурируемого количества собранных к настоящему моменту двухмерных сегментов.
В другом иллюстративном варианте осуществления настоящего изобретения предложена компьютерная программа или компьютерный программный элемент, которые отличаются тем, что выполнены с возможностью исполнять этапы способа в соответствии с одним из предыдущих вариантов осуществления на соответствующей системе.
Компьютерный программный элемент может быть сохранен в компьютерном блоке, который также может являться частью варианта осуществления настоящего изобретения. Этот вычислительный блок может быть выполнен с возможностью выполнять или вызывать выполнение этапов описанного выше способа. Кроме того, он может быть выполнен с возможностью управлять компонентами описанного выше устройства. Компьютерный блок может быть выполнен с возможностью работать автоматически и/или исполнять команды пользователя. Компьютерная программа может быть загружена в оперативную память процессора. Процессор может тем самым быть оборудован для выполнения способа изобретения.
Этот иллюстративный вариант осуществления изобретения охватывает и компьютерную программу, которая с самого начала использует изобретение, и компьютерную программу, которая посредством обновления превращает существующую программу в программу, которая использует изобретение.
Кроме того, компьютерный программный элемент может обеспечить все необходимые этапы для выполнения процедуры иллюстративного варианта осуществления описанного выше способа.
В соответствии с дополнительным иллюстративным вариантом осуществления настоящего изобретения представлен машиночитаемый носитель, такой как компакт-диск (CD-ROM), причем машиночитаемый носитель имеет сохраненный на нем компьютерный программный элемент, который описан в предыдущем разделе.
Компьютерная программа может быть сохранена и/или распространена в подходящей среде, такой как оптический носитель или твердотельный носитель, предоставленный вместе или как часть других аппаратных средств, но также может быть распространена в других формах, например через Интернет или другие проводные или беспроводные системы связи.
Однако компьютерная программа также может быть предоставлена по сети, например по сети Интернет, и может быть загружена в оперативную память процессора из такой сети. В соответствии с дополнительным иллюстративным вариантом осуществления настоящего изобретения обеспечена среда для того, чтобы сделать доступным для загрузки компьютерный программный элемент, который выполнен с возможностью выполнять способ в соответствии с одним из описанных ранее вариантов осуществления изобретения.
Следует отметить, что варианты осуществления изобретения описаны со ссылкой на разные предметы. В частности, некоторые варианты осуществления описаны со ссылкой на пункты формулы изобретения типа способа, тогда как другие варианты осуществления описаны со ссылкой на пункты формулы изобретения типа устройства. Однако специалист в области техники сможет понять из предыдущего и последующего описания, что, если не указано иначе, в дополнение к любой комбинации признаков, принадлежащих одному типу предмета, также предполагается раскрытой с помощью этой заявки любая комбинация между признаками, имеющими отношение к разным предметам, в частности между признаками аспектов типа устройства и признаками аспектов типа способа. Однако все признаки могут быть объединены, что обеспечивает синергетические эффекты, которые являются более чем простым суммированием признаков.
Хотя изобретение было проиллюстрировано и подробно описано на чертежах и в вышеприведенном описании, такую иллюстрацию и описание следует считать иллюстративными, но не ограничивающими. Изобретение не ограничено раскрытыми вариантами осуществления. Другие изменения для раскрытых вариантов осуществления могут быть поняты и выполнены специалистами в области техники при осуществлении заявленного изобретения на основе изучения чертежей, описания и зависимых пунктов формулы изобретения.
В формуле изобретения слово «содержит» не исключает другие элементы или этапы, и употребление единственного числа не исключает множество. Единственный процессор или другой блок может выполнить функции нескольких элементов, описанных в формуле изобретения. Тот лишь факт, что некоторые средства описаны во взаимно различных зависимых пунктах формулы изобретения, не указывает, что комбинация этих средств не может использоваться для получения преимуществ. Номера для ссылок в формуле изобретения не должны рассматриваться как ограничение объема.
Claims (14)
1. Устройство для последующей обработки двухмерных изображений (110a-d) поперечных срезов, определяющих набор данных объема трехмерного изображения, причем устройство содержит:
- контроллер (160) графического пользовательского интерфейса;
- блок (170) двухмерной сегментации;
- блок (180) трехмерной сегментации; и
при этом контроллер графического пользовательского интерфейса выполнен с возможностью формирования графического пользовательского интерфейса (155) для отображения на экране (150), причем пользовательский интерфейс, отображаемый таким образом, содержит интерактивный первый оконный интерфейсный элемент (114а), отображающий на экране начальный срез (110а) из двухмерных срезов, причем срез показывает поперечное сечение интересующего объекта, причем оконный интерфейсный элемент выполнен с возможностью позволять пользователю указывать посредством указательного инструмента (195) данные положения одной начальной точки (109) в любом месте на отображенном начальном срезе (110а);
причем блок двухмерной сегментации выполнен с возможностью выполнения в ответ на указание пользователем данных положения двухмерной сегментации отображенного начального среза посредством вычисления в срезе кривой линии (108) сегментации, проходящей через указанную одну начальную точку (109) или начинающейся в указанной одной начальной точке (109);
причем контроллер графического пользовательского интерфейса дополнительно выполнен с возможностью формирования вычисленной линии сегментации, наложенной на начальный срез, для отображения в первом оконном интерфейсном элементе;
причем блок трехмерной сегментации выполнен с возможностью вычисления, в ответ на запрос пользователя, трехмерной сегментации объекта по множеству срезов посредством использования вычисленной линии сегментации в качестве геометрического ограничения для трехмерной сегментации; и
причем контроллер графического пользовательского интерфейса дополнительно выполнен с возможностью формирования по меньшей мере части вычисленной трехмерной сегментации для отображения на экране.
- контроллер (160) графического пользовательского интерфейса;
- блок (170) двухмерной сегментации;
- блок (180) трехмерной сегментации; и
при этом контроллер графического пользовательского интерфейса выполнен с возможностью формирования графического пользовательского интерфейса (155) для отображения на экране (150), причем пользовательский интерфейс, отображаемый таким образом, содержит интерактивный первый оконный интерфейсный элемент (114а), отображающий на экране начальный срез (110а) из двухмерных срезов, причем срез показывает поперечное сечение интересующего объекта, причем оконный интерфейсный элемент выполнен с возможностью позволять пользователю указывать посредством указательного инструмента (195) данные положения одной начальной точки (109) в любом месте на отображенном начальном срезе (110а);
причем блок двухмерной сегментации выполнен с возможностью выполнения в ответ на указание пользователем данных положения двухмерной сегментации отображенного начального среза посредством вычисления в срезе кривой линии (108) сегментации, проходящей через указанную одну начальную точку (109) или начинающейся в указанной одной начальной точке (109);
причем контроллер графического пользовательского интерфейса дополнительно выполнен с возможностью формирования вычисленной линии сегментации, наложенной на начальный срез, для отображения в первом оконном интерфейсном элементе;
причем блок трехмерной сегментации выполнен с возможностью вычисления, в ответ на запрос пользователя, трехмерной сегментации объекта по множеству срезов посредством использования вычисленной линии сегментации в качестве геометрического ограничения для трехмерной сегментации; и
причем контроллер графического пользовательского интерфейса дополнительно выполнен с возможностью формирования по меньшей мере части вычисленной трехмерной сегментации для отображения на экране.
2. Устройство по п. 1, в котором вычисленная линия сегментации сохраняется в буфере при запросе пользователем трехмерной сегментации, причем при указании пользователем новой начальной точки блок сегментации вычисляет новую линию сегментации, начинающуюся в новой начальной точке или проходящую через новую начальную точку, причем вновь вычисленная линия сегментации затем отображается в первом оконном интерфейсном элементе наложенной на начальный срез, причем при запросе пользователем вычисления новой трехмерной сегментации новая линия сегментации сохраняется вместе с предыдущей линией сегментации в буфере, причем блок сегментации затем использует в качестве ограничений обе буферизованные линии сегментации для вычисления новой трехмерной сегментации объекта, причем контроллер графического пользовательского интерфейса обновляет экран для отображения по меньшей мере части новой трехмерной сегментации объекта.
3. Устройство по п. 1 или 2, в котором указательный инструмент (195) является компьютерной мышью, причем определение данных положения или новых данных положения производится без использования события нажатия кнопки мыши, а посредством использования записей положения, сформированных мышью, когда мышь перемещается пользователем, причем пользовательский запрос трехмерной сегментации и буферизации линий сегментации производится посредством нажатия кнопки мыши и посредством использования считываний положения.
4. Устройство по п. 1, в котором блок сегментации выполнен с возможностью вычисления в дополнение к запрашиваемой трехмерной сегментации по меньшей мере одной дополнительной выборочной трехмерной сегментации на основании по меньшей мере одной выборочной области в трехмерном объеме, не используемой при вычислении или не являющейся частью запрашиваемой трехмерной сегментации, причем устройство дополнительно содержит:
компаратор (185), выполненный с возможностью сравнения запрашиваемой трехмерной сегментации с выборочной трехмерной сегментацией, чтобы установить значение отклонения, и когда значение отклонения превышает конфигурируемое пороговое значение, выдавать команду контроллеру графического пользовательского интерфейса обновить первый оконный интерфейсный элемент для отображения среза, показывающего поперечное сечение выборочной области.
компаратор (185), выполненный с возможностью сравнения запрашиваемой трехмерной сегментации с выборочной трехмерной сегментацией, чтобы установить значение отклонения, и когда значение отклонения превышает конфигурируемое пороговое значение, выдавать команду контроллеру графического пользовательского интерфейса обновить первый оконный интерфейсный элемент для отображения среза, показывающего поперечное сечение выборочной области.
5. Устройство по п. 1, в котором ограничение или ограничения включают в себя кривую (107) контура, выделяющую поперечное сечение объекта в начальном или новом начальном срезе.
6. Устройство по п. 1, в котором контроллер графического пользовательского интерфейса дополнительно выполнен с возможностью формирования вычисленной трехмерной сегментации для отображения во втором оконном интерфейсном элементе (114b).
7. Устройство по п. 1, в котором интересующий объект является частью легкого человека или животного и линия сегментации представляет линию щели между двумя долями легкого.
8. Графический пользовательский интерфейс, отображаемый на экране посредством устройства по любому из пп. 1-7.
9. Способ последующей обработки двухмерных изображений поперечных срезов, причем способ содержит этапы, на которых:
отображают (S305) на экране начальный срез (110а) из двухмерных срезов, причем указанный срез показывает поперечное сечение интересующего объекта, при этом оконный интерфейсный элемент выполнен с возможностью позволять пользователю указывать посредством указательного инструмента (195) данные положения одной начальной точки (109) в любом месте на отображенном начальном срезе (110а);
в ответ на указание пользователем данных положения одной начальной точки (109) на отображенном срезе вычисляют (S310) в срезе кривую линию сегментации, проходящую через указанную одну начальную точку (109) или начинающуюся в указанной одной начальной точке (109);
отображают (S320) в первом оконном интерфейсном элементе вычисленную линию сегментации наложенной на начальный срез;
в ответ на запрос пользователя вычисляют (S330) трехмерную сегментацию объекта по множеству срезов посредством использования вычисленной линии сегментации в качестве геометрического ограничения для трехмерной сегментации;
отображают (S340) на экране по меньшей мере часть вычисленной трехмерной сегментации.
отображают (S305) на экране начальный срез (110а) из двухмерных срезов, причем указанный срез показывает поперечное сечение интересующего объекта, при этом оконный интерфейсный элемент выполнен с возможностью позволять пользователю указывать посредством указательного инструмента (195) данные положения одной начальной точки (109) в любом месте на отображенном начальном срезе (110а);
в ответ на указание пользователем данных положения одной начальной точки (109) на отображенном срезе вычисляют (S310) в срезе кривую линию сегментации, проходящую через указанную одну начальную точку (109) или начинающуюся в указанной одной начальной точке (109);
отображают (S320) в первом оконном интерфейсном элементе вычисленную линию сегментации наложенной на начальный срез;
в ответ на запрос пользователя вычисляют (S330) трехмерную сегментацию объекта по множеству срезов посредством использования вычисленной линии сегментации в качестве геометрического ограничения для трехмерной сегментации;
отображают (S340) на экране по меньшей мере часть вычисленной трехмерной сегментации.
10. Способ по п. 9, дополнительно содержащий этапы, на которых
сохраняют в буфере вычисленную двухмерную сегментацию, включающую в себя линию (108) сегментации;
при указании пользователем новой начальной точки вычисляют новую линию сегментации, начинающуюся в новой начальной точке или проходящую через новую начальную точку;
отображают в первом оконном интерфейсном элементе вновь вычисленную линию сегментации наложенной на начальный срез;
при запросе пользователем вычисления новой трехмерной сегментации сохраняют новую линию сегментации вместе с предыдущей линий сегментации в буфере;
используют в качестве ограничений обе буферизованные линии сегментации для вычисления новой трехмерной сегментации объекта;
отображают по меньшей мере часть новой трехмерной сегментации объекта.
сохраняют в буфере вычисленную двухмерную сегментацию, включающую в себя линию (108) сегментации;
при указании пользователем новой начальной точки вычисляют новую линию сегментации, начинающуюся в новой начальной точке или проходящую через новую начальную точку;
отображают в первом оконном интерфейсном элементе вновь вычисленную линию сегментации наложенной на начальный срез;
при запросе пользователем вычисления новой трехмерной сегментации сохраняют новую линию сегментации вместе с предыдущей линий сегментации в буфере;
используют в качестве ограничений обе буферизованные линии сегментации для вычисления новой трехмерной сегментации объекта;
отображают по меньшей мере часть новой трехмерной сегментации объекта.
11. Способ по п. 9 или 10, в котором указательный инструмент (195) является компьютерной мышью, причем определение данных положения или новых данных положения производится без использования события нажатия кнопки мыши, а посредством использования записей положения, сформированных мышью, когда мышь перемещается пользователем, причем пользовательский запрос трехмерного сегмента и буферизации линий сегментации производится посредством нажатия кнопки мыши и использования считываний положения.
12. Способ по п. 9, дополнительно содержащий этапы, на которых:
вычисляют в дополнение к запрашиваемой трехмерной сегментации по меньшей мере одну дополнительную выборочную трехмерную сегментацию на основе по меньшей мере одной выборочной области в трехмерном объеме, не используемой при вычислении или не являющейся частью запрашиваемой трехмерной сегментации;
сравнивают (S350) запрашиваемую трехмерную сегментацию с выборочной трехмерной сегментацией, чтобы установить значение отклонения;
когда значение отклонения превышает конфигурируемое пороговое значение, отображают срез, показывающий поперечное сечение выборочной области.
вычисляют в дополнение к запрашиваемой трехмерной сегментации по меньшей мере одну дополнительную выборочную трехмерную сегментацию на основе по меньшей мере одной выборочной области в трехмерном объеме, не используемой при вычислении или не являющейся частью запрашиваемой трехмерной сегментации;
сравнивают (S350) запрашиваемую трехмерную сегментацию с выборочной трехмерной сегментацией, чтобы установить значение отклонения;
когда значение отклонения превышает конфигурируемое пороговое значение, отображают срез, показывающий поперечное сечение выборочной области.
13. Медицинская система для последующей обработки двухмерных изображений поперечных срезов, причем система содержит:
- базу (10 5) данных для хранения двухмерных изображений срезов;
- устройство по любому из пп. 1-7;
- экран (150) для отображения первого и/или второго оконных интерфейсных элементов в качестве вывода устройства.
- базу (10 5) данных для хранения двухмерных изображений срезов;
- устройство по любому из пп. 1-7;
- экран (150) для отображения первого и/или второго оконных интерфейсных элементов в качестве вывода устройства.
14. Машиночитаемый носитель, на котором сохранен программный элемент для управления устройством по любому из пп. 1-7, который при его исполнении блоком обработки выполнен с возможностью выполнения этапов способа по любому из пп. 8-12.
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201161545605P | 2011-10-11 | 2011-10-11 | |
US61/545,605 | 2011-10-11 | ||
PCT/IB2012/055241 WO2013054224A1 (en) | 2011-10-11 | 2012-10-01 | A workflow for ambiguity guided interactive segmentation of lung lobes |
Publications (2)
Publication Number | Publication Date |
---|---|
RU2014118566A RU2014118566A (ru) | 2015-11-20 |
RU2601212C2 true RU2601212C2 (ru) | 2016-10-27 |
Family
ID=47178241
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
RU2014118566/28A RU2601212C2 (ru) | 2011-10-11 | 2012-10-01 | Процесс интерактивной сегментации долей легкого, проводимой с учетом неоднозначности |
Country Status (8)
Country | Link |
---|---|
US (1) | US9678620B2 (ru) |
EP (1) | EP2751779B1 (ru) |
JP (1) | JP6208670B2 (ru) |
CN (1) | CN103959331B (ru) |
BR (1) | BR112014008461A2 (ru) |
IN (1) | IN2014CN02389A (ru) |
RU (1) | RU2601212C2 (ru) |
WO (1) | WO2013054224A1 (ru) |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9269141B2 (en) * | 2011-09-07 | 2016-02-23 | Koninklijke Philips N.V. | Interactive live segmentation with automatic selection of optimal tomography slice |
EP2745273B1 (en) * | 2011-09-19 | 2020-03-25 | Koninklijke Philips N.V. | Status-indicator for sub-volumes of multi-dimensional images in guis used in image processing |
EP2916738B1 (en) * | 2012-09-13 | 2018-07-11 | The Regents of the University of California | Lung, lobe, and fissure imaging systems and methods |
US20150348309A1 (en) * | 2014-06-03 | 2015-12-03 | Schlumberger Technology Corporation | Cross section creation and modification |
US9603668B2 (en) | 2014-07-02 | 2017-03-28 | Covidien Lp | Dynamic 3D lung map view for tool navigation inside the lung |
CN108352067B (zh) * | 2015-11-19 | 2022-01-25 | 皇家飞利浦有限公司 | 用于优化分割中的用户交互的系统和方法 |
JP6900180B2 (ja) * | 2016-08-12 | 2021-07-07 | キヤノンメディカルシステムズ株式会社 | 画像処理装置及び画像処理方法 |
US10991102B2 (en) * | 2016-08-12 | 2021-04-27 | Canon Medical Systems Corporation | Image processing apparatus and image processing method |
US10013781B1 (en) * | 2017-06-13 | 2018-07-03 | Google Llc | Sewing machine-style polygon drawing method |
US10607114B2 (en) * | 2018-01-16 | 2020-03-31 | Siemens Healthcare Gmbh | Trained generative network for lung segmentation in medical imaging |
CN109658425B (zh) * | 2018-12-12 | 2021-12-28 | 上海联影医疗科技股份有限公司 | 一种肺叶分割方法、装置、计算机设备及存储介质 |
CN110110617B (zh) * | 2019-04-22 | 2021-04-20 | 腾讯科技(深圳)有限公司 | 医学影像分割方法、装置、电子设备和存储介质 |
US11348250B2 (en) * | 2019-11-11 | 2022-05-31 | Ceevra, Inc. | Image analysis system for identifying lung features |
CN111627028B (zh) * | 2020-05-22 | 2024-09-24 | 深圳前海微众银行股份有限公司 | 图像区域划分、装置、设备及存储介质 |
US20230196698A1 (en) * | 2021-12-20 | 2023-06-22 | GE Precision Healthcare LLC | Interactive 3d annotation tool with slice interpolation |
CN114332087B (zh) * | 2022-03-15 | 2022-07-12 | 杭州电子科技大学 | Octa图像的三维皮层表面分割方法及系统 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6246784B1 (en) * | 1997-08-19 | 2001-06-12 | The United States Of America As Represented By The Department Of Health And Human Services | Method for segmenting medical images and detecting surface anomalies in anatomical structures |
EP1225542A2 (en) * | 2000-11-22 | 2002-07-24 | General Electric Company | Tomographic segmentation |
WO2002103065A2 (en) * | 2001-06-20 | 2002-12-27 | Koninklijke Philips Electronics N.V. | Method for segmentation of digital images |
US20090226083A1 (en) * | 2008-03-07 | 2009-09-10 | Samsung Electro-Mechanics Co., Ltd | 2d image segmentation apparatus and method, and apparatus and method for removing red-eye in the image |
WO2009157946A1 (en) * | 2008-06-27 | 2009-12-30 | Mako Surgical Corp. | Automatic image segmentation using contour propagation |
RU2009102657A (ru) * | 2006-06-28 | 2010-08-10 | Конинклейке Филипс Электроникс Н.В. (Nl) | Сегментация изображения на основе модели с переменным разрешением |
Family Cites Families (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2002086797A1 (en) * | 2001-03-06 | 2002-10-31 | The John Hopkins University School Of Medicine | Simulation method for designing customized medical devices |
GB2374776A (en) * | 2001-04-19 | 2002-10-23 | Discreet Logic Inc | 3D Text objects |
WO2003005298A2 (en) * | 2001-07-06 | 2003-01-16 | Koninklijke Philips Electronics N.V. | Image processing method for interacting with a 3-d surface represented in a 3-d image |
US6993174B2 (en) * | 2001-09-07 | 2006-01-31 | Siemens Corporate Research, Inc | Real time interactive segmentation of pulmonary nodules with control parameters |
US20030095696A1 (en) | 2001-09-14 | 2003-05-22 | Reeves Anthony P. | System, method and apparatus for small pulmonary nodule computer aided diagnosis from computed tomography scans |
US7739623B2 (en) * | 2004-04-15 | 2010-06-15 | Edda Technology, Inc. | Interactive 3D data editing via 2D graphical drawing tools |
US7388973B2 (en) * | 2004-06-01 | 2008-06-17 | General Electric Company | Systems and methods for segmenting an organ in a plurality of images |
JP2008521462A (ja) | 2004-11-27 | 2008-06-26 | ブラッコ イメージング エス.ピー.エー. | 2次元/3次元の統合されたコンターエディター |
US7548649B2 (en) | 2005-01-25 | 2009-06-16 | Siemens Medical Solutions Usa, Inc. | Multidimensional segmentation based on adaptive bounding box and ellipsoid models |
US8805034B2 (en) * | 2006-08-11 | 2014-08-12 | Koninklijke Philips N.V. | Selection of datasets from 3D renderings for viewing |
CN101529475B (zh) * | 2006-10-17 | 2013-12-25 | 皇家飞利浦电子股份有限公司 | 3d图像结合2d投影图像的呈现 |
JP2010515472A (ja) * | 2006-11-27 | 2010-05-13 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 事前収集された医用画像に実時間超音波画像を融合させるシステム及び方法 |
JP2008142481A (ja) * | 2006-12-13 | 2008-06-26 | Med Solution Kk | 肺を肺区域の単位に自動的にセグメンテーションする装置およびプログラム |
US20100153081A1 (en) * | 2008-12-11 | 2010-06-17 | Mako Surgical Corp. | Implant planning for multiple implant components using constraints |
US8155405B2 (en) * | 2007-04-20 | 2012-04-10 | Siemens Aktiengsellschaft | System and method for lesion segmentation in whole body magnetic resonance images |
US8023734B2 (en) * | 2007-10-10 | 2011-09-20 | Siemens Aktiengesellschaft | 3D general lesion segmentation in CT |
US8131036B2 (en) * | 2008-07-25 | 2012-03-06 | Icad, Inc. | Computer-aided detection and display of colonic residue in medical imagery of the colon |
JP2010035635A (ja) * | 2008-07-31 | 2010-02-18 | Takeshi Joko | Ardsの重症度のスコアを算出する方法、装置およびプログラム |
WO2011128791A1 (en) * | 2010-04-16 | 2011-10-20 | Koninklijke Philips Electronics N.V. | Image data segmentation |
-
2012
- 2012-10-01 JP JP2014535189A patent/JP6208670B2/ja active Active
- 2012-10-01 IN IN2389CHN2014 patent/IN2014CN02389A/en unknown
- 2012-10-01 US US14/349,096 patent/US9678620B2/en active Active
- 2012-10-01 WO PCT/IB2012/055241 patent/WO2013054224A1/en active Application Filing
- 2012-10-01 CN CN201280049998.3A patent/CN103959331B/zh active Active
- 2012-10-01 RU RU2014118566/28A patent/RU2601212C2/ru not_active IP Right Cessation
- 2012-10-01 EP EP12784723.4A patent/EP2751779B1/en active Active
- 2012-10-01 BR BR112014008461A patent/BR112014008461A2/pt not_active IP Right Cessation
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6246784B1 (en) * | 1997-08-19 | 2001-06-12 | The United States Of America As Represented By The Department Of Health And Human Services | Method for segmenting medical images and detecting surface anomalies in anatomical structures |
EP1225542A2 (en) * | 2000-11-22 | 2002-07-24 | General Electric Company | Tomographic segmentation |
WO2002103065A2 (en) * | 2001-06-20 | 2002-12-27 | Koninklijke Philips Electronics N.V. | Method for segmentation of digital images |
RU2009102657A (ru) * | 2006-06-28 | 2010-08-10 | Конинклейке Филипс Электроникс Н.В. (Nl) | Сегментация изображения на основе модели с переменным разрешением |
US20090226083A1 (en) * | 2008-03-07 | 2009-09-10 | Samsung Electro-Mechanics Co., Ltd | 2d image segmentation apparatus and method, and apparatus and method for removing red-eye in the image |
WO2009157946A1 (en) * | 2008-06-27 | 2009-12-30 | Mako Surgical Corp. | Automatic image segmentation using contour propagation |
Also Published As
Publication number | Publication date |
---|---|
EP2751779B1 (en) | 2018-09-05 |
JP6208670B2 (ja) | 2017-10-04 |
CN103959331A (zh) | 2014-07-30 |
WO2013054224A1 (en) | 2013-04-18 |
RU2014118566A (ru) | 2015-11-20 |
JP2014528341A (ja) | 2014-10-27 |
US9678620B2 (en) | 2017-06-13 |
BR112014008461A2 (pt) | 2017-04-11 |
US20140298270A1 (en) | 2014-10-02 |
EP2751779A1 (en) | 2014-07-09 |
IN2014CN02389A (ru) | 2015-06-19 |
CN103959331B (zh) | 2016-12-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
RU2601212C2 (ru) | Процесс интерактивной сегментации долей легкого, проводимой с учетом неоднозначности | |
EP3451343B1 (en) | Systems and methods for validating and correcting automated medical image annotations | |
JP6530371B2 (ja) | インタラクティブな経過観察の可視化 | |
EP1751550B1 (en) | Liver disease diagnosis system, method and graphical user interface | |
US9443317B2 (en) | Image display of a centerline of tubular structure | |
US20140324400A1 (en) | Gesture-Based Visualization System for Biomedical Imaging and Scientific Datasets | |
US20070276214A1 (en) | Systems and Methods for Automated Segmentation, Visualization and Analysis of Medical Images | |
US10535189B2 (en) | Image display of a centerline of tubular structure | |
JP2015080720A (ja) | コンピュータ補助診断方法及び装置 | |
JP2008529578A (ja) | 医用画像ビューイングプロトコル | |
JP2008529578A5 (ru) | ||
JP2010528750A (ja) | 管状構造の検査 | |
US20160012614A1 (en) | Image processing device and region extraction method | |
JP2009000153A (ja) | 画像診断支援装置、方法及びプログラム | |
Mirhosseini et al. | Benefits of 3D immersion for virtual colonoscopy | |
JP7391348B2 (ja) | 医用画像処理システム、医用画像処理方法および医用画像処理プログラム | |
Gopala Krishnan et al. | Two dimensional and gesture based medical visualization interface and image processing methodologies to aid and diagnose of lung cancer | |
JP6920477B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
US20240036719A1 (en) | Method and system for multi-range slider user interface control of medical images | |
CN112740285B (zh) | 在虚拟环境中对医学图像的叠加和操纵 | |
EP4181152A1 (en) | Processing image data for assessing a clinical question | |
Cui et al. | Three-Dimensional Coronary Artery Centerline Extraction and Cross Sectional Lumen Quantification from CT Angiography Images | |
CN112740285A (zh) | 在虚拟环境中对医学图像的叠加和操纵 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
MM4A | The patent is invalid due to non-payment of fees |
Effective date: 20171002 |