RU2018121964A - Оптимизация взаимодействий пользователя при сегментации - Google Patents
Оптимизация взаимодействий пользователя при сегментации Download PDFInfo
- Publication number
- RU2018121964A RU2018121964A RU2018121964A RU2018121964A RU2018121964A RU 2018121964 A RU2018121964 A RU 2018121964A RU 2018121964 A RU2018121964 A RU 2018121964A RU 2018121964 A RU2018121964 A RU 2018121964A RU 2018121964 A RU2018121964 A RU 2018121964A
- Authority
- RU
- Russia
- Prior art keywords
- segmentation
- user
- user interactions
- processor
- potentially suitable
- Prior art date
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0485—Scrolling or panning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
- G06T2207/10081—Computed x-ray tomography [CT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10116—X-ray image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20092—Interactive image processing based on input by user
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20092—Interactive image processing based on input by user
- G06T2207/20096—Interactive definition of curve of interest
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20092—Interactive image processing based on input by user
- G06T2207/20101—Interactive definition of point of interest, landmark or seed
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20092—Interactive image processing based on input by user
- G06T2207/20104—Interactive definition of region of interest [ROI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20092—Interactive image processing based on input by user
- G06T2207/20108—Interactive selection of 2D slice in a 3D data set
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Human Computer Interaction (AREA)
- Medical Informatics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Quality & Reliability (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Image Processing (AREA)
- User Interface Of Digital Computer (AREA)
- Image Analysis (AREA)
Claims (31)
1. Система (100) для сегментирования объекта на изображении, содержащая:
подсистему (160) пользовательского интерфейса, содержащую:
i) выход (180) устройства отображения для установления на устройстве (080) отображения графического интерфейса (300) сегментации, который содержит набор средств (310) сегментации, позволяющих пользователю получать первую сегментацию объекта на изображении, при этом первая сегментация представлена данными сегментации;
ii) пользовательский входной интерфейс (170), выполненный с возможностью приема данных (072) взаимодействия от пользовательского устройства (070), выполненного с возможностью управления пользователем, при этом данные взаимодействия дают представление о наборе взаимодействий пользователя с графическим интерфейсом сегментации, посредством которых была получена первая сегментация объекта;
память, содержащую данные инструкций, представляющие набор инструкций;
процессор (140), выполненный с возможностью обмена данными с пользовательским входным интерфейсом и памятью и с возможностью исполнения набора инструкций, причем набор инструкций при их исполнении процессором побуждают процессор:
i) анализировать данные сегментации и данные взаимодействия для определения оптимизированного набора взаимодействий пользователя, которые при их исполнении пользователем с использованием графического интерфейса сегментации дают вторую сегментацию, аналогичную первой сегментации, при этом оптимизированный набор взаимодействий пользователя определен путем:
j) формирования множества потенциально пригодных наборов взаимодействий пользователя, которые дают сегментации, подобные первой сегментации,
jj) оценки времени, необходимого для выполнения соответствующего одного из множества потенциально пригодных наборов взаимодействий пользователя с использованием графического интерфейса сегментации, на основе метрики времени, причем метрика времени является функцией от по меньшей мере количества взаимодействий пользователя в соответствующем потенциально пригодном наборе, и
jjj) выбора одного из множества потенциально пригодных наборов взаимодействий пользователя в качестве оптимизированного набора взаимодействий пользователя на основе самого низкого времени, полученного в результате упомянутой оценки; и
ii) формировать оптимизированные данные (142) взаимодействия, представляющие оптимизированный набор взаимодействий пользователя, для обеспечения возможности указания пользователю оптимизированного набора взаимодействий пользователя посредством устройства отображения.
2. Система (100) по п. 1, в которой набор взаимодействий пользователя включает в себя взаимодействие пользователя, представляющее пользователя, использующего средство сегментации, и в которой набор инструкций при их исполнении процессором (140), побуждают процессор изменять параметр средства сегментации таким образом, чтобы формировать другие потенциально пригодные наборы взаимодействий пользователя.
3. Система (100) по п. 1, в которой набор взаимодействий пользователя включает в себя последовательность взаимодействий пользователя и набор инструкций, который при их исполнении процессором (140) побуждают процессор изменять последовательность взаимодействий пользователя таким образом, чтобы формировать другие потенциально пригодные наборы взаимодействий пользователя.
4. Система (100) по п. 1, в которой графический интерфейс (300) сегментации содержит по меньшей мере одно неиспользованное средство сегментации, которое не использовано пользователем для получения первой сегментации,
причем множество потенциально пригодных наборов взаимодействий пользователя сформировано с использованием по меньшей мере одного неиспользованного средства сегментации.
5. Система (100) по любому из предшествующих пунктов, в которой метрика времени содержит по меньшей мере один параметр, который дает представление о действии, выбираемом из следующего списка: выбор действий пользователя, переключение между различными средствами сегментации, переключение между различными срезами изображения, действие масштабирования и действие панорамирования.
6. Система (100) по любому из предшествующих пунктов, в которой метрика времени является функцией от типа взаимодействий пользователя в соответствующем потенциально пригодном наборе.
7. Система (100) по любому из предшествующих пунктов, в которой набор инструкций при их исполнении процессором (140), побуждают процессор рассчитывать геометрическую сложность объекта, и в котором метрика времени является функцией от геометрической сложности объекта.
8. Система (100) по любому из предшествующих пунктов, в которой метрика времени является функцией от особенности изображения.
9. Система (100) по любому из предшествующих пунктов, в которой набор инструкций при их исполнении процессором (140) побуждают процессор указывать пользователю оптимизированный набор взаимодействий пользователя путем формирования видеоизображения, визуально указывающего оптимизированный набор взаимодействий пользователя.
10. Рабочая станция, содержащая систему по любому из пп. 1–9.
11. Устройство визуализации, содержащее систему по любому из пп. 1–9.
12. Реализуемый на компьютере способ (1000) сегментирования объекта на изображении, включающий:
установление на устройстве отображения графического интерфейса сегментации, который содержит набор средств сегментации, позволяющих пользователю получать первую сегментацию объекта на изображении, при этом первая сегментация представлена данными сегментации;
прием (1010) данных взаимодействия от пользовательского устройства, выполненного с возможностью управления пользователем, при этом данные взаимодействия дают представление о наборе взаимодействий пользователя с графическим интерфейсом сегментации, посредством которых была получена первая сегментация объекта;
анализ данных сегментации и данных взаимодействия для определения оптимизированного набора взаимодействий пользователя, которые при их исполнении пользователем с использованием графического интерфейса сегментации дают вторую сегментацию, аналогичную первой сегментации, при этом оптимизированный набор взаимодействий пользователя определяют путем:
i) формирования (1020) множества потенциально пригодных наборов взаимодействий пользователя, которые дают сегментации, подобные первой сегментации,
ii) оценки (1030) времени, необходимого для выполнения соответствующего одного из потенциально пригодных наборов взаимодействий пользователя с использованием графического интерфейса сегментации, на основе метрики времени, причем метрика времени является функцией от по меньшей мере количества взаимодействий пользователя в соответствующем потенциально пригодном наборе, и
iii) выбора (1040) одного из множества потенциально пригодных наборов взаимодействий пользователя в качестве оптимизированного набора взаимодействий пользователя на основе самого низкого времени, полученного в результате упомянутой оценки; и
формирование (1050) оптимизированных данных взаимодействия, представляющих оптимизированный набор взаимодействий пользователя, для обеспечения возможности указания пользователю оптимизированного набора взаимодействий пользователя посредством устройства отображения.
13. Компьютерный программный продукт, содержащий инструкции для побуждения процессорной системы к выполнению способа по п. 12.
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| EP15195285 | 2015-11-19 | ||
| EP15195285.0 | 2015-11-19 | ||
| PCT/EP2016/076282 WO2017084871A1 (en) | 2015-11-19 | 2016-11-01 | Optimizing user interactions in segmentation |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| RU2018121964A true RU2018121964A (ru) | 2019-12-19 |
| RU2018121964A3 RU2018121964A3 (ru) | 2020-05-19 |
| RU2743577C2 RU2743577C2 (ru) | 2021-02-20 |
Family
ID=54703771
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| RU2018121964A RU2743577C2 (ru) | 2015-11-19 | 2016-11-01 | Оптимизация взаимодействий пользователя при сегментации |
Country Status (6)
| Country | Link |
|---|---|
| US (1) | US10672122B2 (ru) |
| EP (1) | EP3378037B1 (ru) |
| JP (1) | JP6873131B2 (ru) |
| CN (1) | CN108352067B (ru) |
| RU (1) | RU2743577C2 (ru) |
| WO (1) | WO2017084871A1 (ru) |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP3618002A1 (en) * | 2018-08-30 | 2020-03-04 | Koninklijke Philips N.V. | Interactive self-improving annotation system for high-risk plaque burden assessment |
| WO2019170493A1 (en) * | 2018-03-08 | 2019-09-12 | Koninklijke Philips N.V. | Interactive self-improving annotation system for high-risk plaque burden assessment |
| CN110989901B (zh) * | 2019-11-29 | 2022-01-18 | 北京市商汤科技开发有限公司 | 图像定位的交互显示方法及装置、电子设备和存储介质 |
| WO2021150017A1 (en) * | 2020-01-23 | 2021-07-29 | Samsung Electronics Co., Ltd. | Method for interactive segmenting an object on an image and electronic computing device implementing the same |
| WO2022053716A1 (en) * | 2020-09-14 | 2022-03-17 | Medizinische Universität Wien | Computer-implemented method for semi-automatic segmentation of medical imaging data and interactive computer program for carrying out the same |
Family Cites Families (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1315035C (zh) * | 2004-07-08 | 2007-05-09 | 腾讯科技（深圳）有限公司 | 一种图像分割显示方法及装置 |
| US7680314B2 (en) * | 2005-10-17 | 2010-03-16 | Siemens Medical Solutions Usa, Inc. | Devices, systems, and methods for improving image consistency |
| US8144949B2 (en) * | 2007-11-15 | 2012-03-27 | Carestream Health, Inc. | Method for segmentation of lesions |
| US8355553B2 (en) * | 2008-11-22 | 2013-01-15 | General Electric Company | Systems, apparatus and processes for automated medical image segmentation using a statistical model |
| WO2010084435A2 (en) * | 2009-01-22 | 2010-07-29 | Koninklijke Philips Electronics N.V. | Predicting user interactions during image processing |
| US20120027277A1 (en) * | 2009-04-03 | 2012-02-02 | Koninklijke Philips Electronics N.V. | Interactive iterative closest point algorithm for organ segmentation |
| CN102890823B (zh) * | 2011-07-19 | 2016-04-27 | 株式会社东芝 | 运动对象轮廓提取及左心室图像分割方法和装置 |
| RU2601212C2 (ru) * | 2011-10-11 | 2016-10-27 | Конинклейке Филипс Н.В. | Процесс интерактивной сегментации долей легкого, проводимой с учетом неоднозначности |
| KR20140093359A (ko) * | 2013-01-15 | 2014-07-28 | 삼성전자주식회사 | 사용자 인터랙션 기반의 영상 세그멘테이션 장치 및 방법 |
| DE102013224888A1 (de) | 2013-12-04 | 2015-06-11 | Siemens Aktiengesellschaft | Verfahren zum Abrufen von Informationen, Recheneinheit und medizinisches Bildgebungssystem |
| US9129191B2 (en) * | 2013-12-16 | 2015-09-08 | Adobe Systems Incorporated | Semantic object selection |
| EP3084722B1 (en) * | 2013-12-17 | 2020-04-22 | Koninklijke Philips N.V. | Model-based segmentation of an anatomical structure |
| GB2524955A (en) * | 2014-04-01 | 2015-10-14 | Scopis Gmbh | Method for cell envelope segmentation and visualisation |
| CN106462974B (zh) * | 2014-06-12 | 2020-07-28 | 皇家飞利浦有限公司 | 用于分割图像的参数优化 |
| GB2528249B (en) * | 2014-07-11 | 2019-03-06 | Siemens Medical Solutions Usa Inc | Automatic background region selection for lesion delineation in medical images |
| US10147185B2 (en) * | 2014-09-11 | 2018-12-04 | B.G. Negev Technologies And Applications Ltd., At Ben-Gurion University | Interactive segmentation |
| US9773325B2 (en) * | 2015-04-02 | 2017-09-26 | Toshiba Medical Systems Corporation | Medical imaging data processing apparatus and method |
| US10366490B2 (en) * | 2017-03-27 | 2019-07-30 | Siemens Healthcare Gmbh | Highly integrated annotation and segmentation system for medical imaging |
| US11017536B2 (en) * | 2018-05-02 | 2021-05-25 | Mako Surgical Corp. | Image segmentation |
-
2016
- 2016-11-01 JP JP2018526173A patent/JP6873131B2/ja active Active
- 2016-11-01 CN CN201680067216.7A patent/CN108352067B/zh active Active
- 2016-11-01 US US15/774,623 patent/US10672122B2/en not_active Expired - Fee Related
- 2016-11-01 RU RU2018121964A patent/RU2743577C2/ru active
- 2016-11-01 EP EP16790581.9A patent/EP3378037B1/en active Active
- 2016-11-01 WO PCT/EP2016/076282 patent/WO2017084871A1/en active Application Filing
Also Published As
| Publication number | Publication date |
|---|---|
| CN108352067B (zh) | 2022-01-25 |
| RU2018121964A3 (ru) | 2020-05-19 |
| EP3378037A1 (en) | 2018-09-26 |
| JP2018537175A (ja) | 2018-12-20 |
| EP3378037B1 (en) | 2023-07-26 |
| JP6873131B2 (ja) | 2021-05-19 |
| US20180330505A1 (en) | 2018-11-15 |
| CN108352067A (zh) | 2018-07-31 |
| US10672122B2 (en) | 2020-06-02 |
| RU2743577C2 (ru) | 2021-02-20 |
| WO2017084871A1 (en) | 2017-05-26 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| RU2018121964A (ru) | Оптимизация взаимодействий пользователя при сегментации | |
| JP2018022216A5 (ru) | ||
| US10867251B2 (en) | Estimation results display system, estimation results display method, and estimation results display program | |
| CN108762740B (zh) | 页面数据的生成方法、装置及电子设备 | |
| JP2017117406A5 (ru) | ||
| CN109202895B (zh) | 设计支持装置、设计支持方法及存储设计支持程序的介质 | |
| JP2017026992A5 (ru) | ||
| US9690682B2 (en) | Program information generating system, method, and computer program product | |
| RU2016119160A (ru) | Способ и устройство для предоставления шлюза электронной транзакции | |
| JP6181134B2 (ja) | 要因解析装置、要因解析方法、及びプログラム | |
| JP2015518594A (ja) | デジタル画像分析のため空間制約を用いた統合インタラクティブセグメンテーション法 | |
| JP2017037618A5 (ru) | ||
| JP2013097467A5 (ru) | ||
| JP2019046055A5 (ru) | ||
| US20170300346A1 (en) | Estimation results display system, estimation results display method, and estimation results display program | |
| CN111858927B (zh) | 数据测试方法、装置、电子设备及存储介质 | |
| JP2017037416A5 (ru) | ||
| US20180101294A1 (en) | Information generating system, information generating device, information generating method, and information generating program | |
| JP2016112724A5 (ru) | ||
| JP2016086367A5 (ru) | ||
| JPWO2016132684A1 (ja) | 影響度可視化システム、方法およびプログラム | |
| JP2016092651A5 (ja) | 画像処理装置、画像処理方法。およびプログラム | |
| JP2014222806A5 (ru) | ||
| CN112148753B (zh) | 用于对数据流执行信息处理的设备和方法 | |
| CN113657010B (zh) | 索具模型的网格划分调整方法、系统以及电子设备 |