KR20220026236A - 의료 영상 분석 보조 시스템, 화면을 갖는 전자 장치에서 수행되는 방법, 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스 - Google Patents

의료 영상 분석 보조 시스템, 화면을 갖는 전자 장치에서 수행되는 방법, 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스 Download PDF

Info

Publication number
KR20220026236A
KR20220026236A KR1020200107024A KR20200107024A KR20220026236A KR 20220026236 A KR20220026236 A KR 20220026236A KR 1020200107024 A KR1020200107024 A KR 1020200107024A KR 20200107024 A KR20200107024 A KR 20200107024A KR 20220026236 A KR20220026236 A KR 20220026236A
Authority
KR
South Korea
Prior art keywords
image
medical image
lesion
screen
displayed
Prior art date
Application number
KR1020200107024A
Other languages
English (en)
Inventor
남창모
Original Assignee
모니터코퍼레이션 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 모니터코퍼레이션 주식회사 filed Critical 모니터코퍼레이션 주식회사
Priority to KR1020200107024A priority Critical patent/KR20220026236A/ko
Publication of KR20220026236A publication Critical patent/KR20220026236A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/63—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Public Health (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Theoretical Computer Science (AREA)
  • Biomedical Technology (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Medical Treatment And Welfare Office Work (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

본 발명은, 화면을 갖는 전자 장치에서 수행되는 방법으로서, 상기 화면의 일측에 환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지 중 적어도 일부를 표시하는 단계; 상기 화면의 타측에 상기 복수의 의료 영상 이미지 내에 존재하는 것으로 판독된 적어도 하나의 병변에 대한 정보를 표시하는 단계; 상기 화면의 타측에 표시된 병변에 대한 정보 중 어느 하나의 병변에 대한 정보를 선택하는 입력에 응답하여, 상기 복수의 의료 영상 이미지 중 선택된 병변이 존재하는 의료 영상 이미지를 상기 화면의 일측에 표시하는 단계; 및 상기 화면 상에 표시된 썸네일 이미지 상에 입력되는 연속 동작 명령에 응답하여, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 썸네일 이미지와 대응하는 의료 영상 이미지로부터 소정의 범위 내의 주변 의료 영상 이미지가 연속적으로 화면에 반복 표시하는 단계를 포함하는, 방법에 관한 것이다.

Description

의료 영상 분석 보조 시스템, 화면을 갖는 전자 장치에서 수행되는 방법, 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스{A medical image analysis assistance system, a method performed in an electronic device having a screen, a graphical user interface of an electronic device having a screen}
본 발명은 의료 영상 분석 보조 시스템, 화면을 갖는 전자 장치에서 수행되는 방법, 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스에 관한 것으로서, 보다 상세하게는 의료 영상 내의 병변 진단을 보조하기 위한 의료 영상 분석 보조 시스템, 화면을 갖는 전자 장치에서 수행되는 방법, 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스에 관한 것이다.
많은 병원에서는 X-ray, CT, MRI 영상과 같은 의료 영상을 촬영하는 장비와 연계하는 의학영상정보시스템(PACS, Picture Archiving Communications System)을 사용하고 있다.
의학영상정보시스템은 촬영된 의료 영상을 디지털 형태로 저장하고 임상의의 PC로 전송하여, 임상의가 PC에서 의료 영상을 확인하며 환자의 병변을 진단하도록 한다.
특히, CT, MRI 영상은 300장의 연속적인 단층 이미지로 구성되는데, 임상의는 300장의 이미지를 확인하여 병변을 빠짐없이 체크하고 정확한 진단을 해야하는 부담을 갖게 된다.
본 발명이 해결하고자 하는 과제는, 사용자가 보다 편리하고 정확하게 병변을 진단할 수 있는 의료 영상 분석 보조 시스템, 화면을 갖는 전자 장치에서 수행되는 방법, 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스를 제공하는 것이다.
본 발명의 과제들은 이상에서 언급한 과제로 제한되지 않으며, 언급되지 않은 또 다른 과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
상기 과제의 해결 수단으로서, 환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지를 포함하는 의료 영상 정보를 수신하는 의료 영상 정보 수신부; 수신된 상기 의료 영상 정보를 판독하여 상기 복수의 의료 영상 이미지에서병변의 존재를 추정하고 추정된 상기 병변의 위치 및 정보를 검출하는 병변 판독부; 및 상기 복수의 의료 영상 이미지 중 적어도 일부와 상기 병변의 정보가 화면 상에 함께 표시되도록 하는 인터페이스 제어부;를 포함하고, 상기 인터페이스 제어부는, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 적어도 일부가 표시되게 하고, 상기 화면의 타측에 상기 병변의 썸네일 이미지와 상기 병변의 정보가 표시되게 하고, 상기 화면 상에 표시된 상기 썸네일 이미지 상의 입력 장치의 포인터가 위치한 상태로 입력되는 연속 동작 명령에 응답하여, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 썸네일 이미지와 대응하는 의료 영상 이미지로부터 소정의 범위 내의 주변 의료 영상 이미지가 연속적으로 화면에 반복 표시되는, 의료 영상 분석 보조 시스템이 제공될 수 있다.
한편, 상기 입력 장치는 마우스이며, 상기 연속 동작 명령은 상기 마우스의 클릭에 의해 입력될 수 있다.
한편, 상기 연속 동작 명령은 상기 마우스의 더블 클릭이 개시 명령 또는 정지 명령일 수 있다.
한편, 상기 입력 장치는 터치 스크린이며, 상기 연속 동작 명령은 상기 터치 스크린의 터치에 의해 입력될 수 있다.
한편, 상기 연속 동작 명령은 상기 터치 스크린의 연속 터치가 개시 명령 또는 정지 명령일 수 있다.
한편, 상기 소정의 범위 내의 일단에 위치하는 제1영상이미지와 타단에 위치하는 제2영상이미지 사이의 복수 개의 의료영상 이미지가 배열된 순서에 따라 연속적으로 화면에 반복 표시되는 것일 수 있다.
한편, 상기 소정의 범위 내의 복수 개의 의료영상 이미지는 상기 제1영상이미지로부터 상기 제2영상이미지 방향으로 배열된 순서에 따라 연속적으로 화면에 반복 표시되는 것일 수 있다.
한편, 상기 소정의 범위 내의 복수 개의 의료영상 이미지는 상기 제1영상이미지로부터 상기 제2영상이미지 방향으로 배열된 순서와, 상기 제2영상이미지로부터 상기 제1영상이미지 방향으로 배열된 순서가 교차하여 연속적으로 화면에 반복 표시되는 것일 수 있다.
한편, 상기 소정의 범위 내의 복수의 의료 영상 이미지 중 상기 병변의 존재가 추정된 의료 영상 이미지는 상기 병변의 위치가 하이라이트 처리된 상태로 표시되는 것일 수 있다.
한편, 상기 인터페이스 제어부는, 상기 썸네일 이미지와 대응하는 의료 영상 이미지 상에서 검출되는 병변 형상 또는 크기 정보에 대응하여, 상기 제1영상이미지와 상기 제2영상이미지의 간격을 결정하도록 설정되는 것일 수 있다.
한편, 상기 인터페이스 제어부는, 상기 화면 상에 표시된 상기 썸네일 이미지 및 상기 병변의 정보 중 적어도 하나를 선택하는 명령이 입력되는 경우, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 병변의 정보에 대응하는 병변이 표시된 병변 이미지가 표시되게 할 수 있다.
한편, 상기 인터페이스 제어부는, 상기 화면의 일측에 상기 병변의 존재가 추정된 의료 영상 이미지 중 어느 하나가 표시되는 경우, 상기 화면의 타측에 표시된 상기 병변의 정보 중 상기 화면의 일측에 표시된 의료 영상 이미지 내에 존재하는 병변의 정보를 하이라이트 처리된 상태로 표시되게 할 수 있다.
상기 과제의 해결 수단으로서, 화면을 갖는 전자 장치에서 수행되는 방법으로서, 상기 화면의 일측에 환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지 중 적어도 일부를 표시하는 단계; 상기 화면의 타측에 상기 복수의 의료 영상 이미지 내에 존재하는 것으로 판독된 적어도 하나의 병변에 대한 정보를 표시하는 단계; 상기 화면의 타측에 표시된 병변에 대한 정보 중 어느 하나의 병변에 대한 정보를 선택하는 입력에 응답하여, 상기 복수의 의료 영상 이미지 중 선택된 병변이 존재하는 의료 영상 이미지를 상기 화면의 일측에 표시하는 단계; 및 상기 화면 타측에 표시된 썸네일 이미지 상에 입력되는 연속 동작 명령에 응답하여, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 썸네일 이미지와 대응하는 의료 영상 이미지로부터 소정의 범위 내의 주변 의료 영상 이미지가 연속적으로 화면에 반복 표시하는 단계를 포함하는, 방법이 제공될 수 있다.
한편, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 화면의 타측에 표시된 상기 병변에 대한 정보 중 어느 하나의 병변을 포함하는 의료 영상 이미지가 표시되면, 상기 화면의 타측에 표시된 상기 병변에 대한 정보 중 상기 화면의 일측에 표시된 의료 영상 이미지 내에 포함된 병변에 대한 정보가 하이라이트 처리된 상태로 표시되는 단계;를 더 포함할 수 있다.
상기 과제의 해결 수단으로서, 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스로서, 환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지 중 어느 하나가 표시되는 이미지 디스플레이 영역과, 상기 복수의 의료 영상 이미지 내에 존재하는 것으로 판독된 적어도 하나의 병변에 대한 정보를 표시하는 병변 리스트 디스플레이 영역을 포함하고, 상기 병변 리스트 디스플레이 영역 내에 표시된 상기 병변에 대한 정보 중 어느 하나의 병변에 대한 정보를 선택하는 입력에 응답하여, 상기 복수의 의료 영상 이미지 중 선택된 병변이 존재하는 의료 영상 이미지를 상기 이미지 디스플레이 영역에 표시하되, 상기 화면 타측에 표시된 썸네일 이미지 상에 입력되는 연속 동작 명령에 응답하여, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 썸네일 이미지와 대응하는 의료 영상 이미지로부터 소정의 범위 내의 주변 의료 영상 이미지가 연속적으로 화면에 반복 표시하는, 그래픽 사용자 인터페이스가 제공될 수 있다.
한편, 상기 이미지 디스플레이 영역에 상기 복수의 의료 영상 이미지 중 상기 병변 리스트 디스플레이 영역에 표시된 상기 병변에 대한 정보 중 어느 하나의 병변을 포함하는 의료 영상 이미지가 표시되면, 상기 병변 리스트 디스플레이 영역에 표시된 상기 병변에 대한 정보 중 상기 이미지 디스플레이 영역에 표시된 의료 영상 이미지 내에 포함된 병변에 대한 정보를 하이라이트 처리된 상태로 표시할 수 있다.
본 발명의 실시예들에 의하면 적어도 다음과 같은 효과가 있다.
사용자가 보다 편리하고 정확하게 병변을 진단할 수 있다.
본 발명에 따른 효과는 이상에서 예시된 내용에 의해 제한되지 않으며, 더욱 다양한 효과들이 본 명세서 내에 포함되어 있다.
도 1은 본 발명의 일 실시예에 따른 의료 영상 분석 보조 시스템이 사용되는 시스템을 개략적으로 도시한 도면이다.
도 2는 본 발명의 일 실시예에 따른 화면을 갖는 전자 장치에서 수행되는 방법의 일부를 설명하기 위한 순서도이다.
도 3은 도 2의 S11 및 S12 단계에 따라 화면 상에 표시되는 그래픽 사용자 인터페이스를 도시한 도면이다.
도 4는 도 3의 병변 리스트 디스플레이 영역에 표시된 병변에 대한 정보의 일례를 도시한 도면이다.
도 5는 도 2의 S13 내지 S15 단계에 따라 화면 상에 표시되는 그래픽 사용자 인터페이스를 도시한 도면이다.
도 6은 본 발명의 일 실시예에 따른 화면을 갖는 전자 장치에서 수행되는 방법의 다른 일부를 설명하기 위한 순서도이다.
도 7은 도 6의 S21 및 S22 단계에 따라 화면 상에 표시되는 그래픽 사용자 인터페이스를 도시한 도면이다.
도 8은 본 발명의 일 실시예에 따른 화면을 갖는 전자 장치에서 수행되는 방법의 또 다른 일부를 설명하기 위한 순서도이다.
도 9 및 도 10은 도 8의 S31 및 S32 단계에 따라 화면에 연속적으로 반복 표시되는 의료영상 이미지의 개념을 모식적으로 나타낸 도면이다.
도 11 내지 도 14는 도 8의 S31 및 S32 단계에 따라 화면 상에 표시되는 그래픽 사용자 인터페이스를 도시한 도면이다.
도 15는 본 발명의 일 실시예에 따른 화면을 갖는 전자 장치에서 수행되는 방법의 또 다른 일부를 설명하기 위한 순서도이다.
도 16 내지 도 21은 도 15의 S41 및 S42 단계에 따라 화면 상에 표시되는 그래픽 사용자 인터페이스를 도시한 도면이다.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.
또한, 본 명세서에서 기술하는 실시예들은 본 발명의 이상적인 예시도인 단면도 및/또는 개략도들을 참고하여 설명될 것이다. 따라서, 제조 기술 및/또는 허용 오차 등에 의해 예시도의 형태가 변형될 수 있다. 또한, 본 발명에 도시된 각 도면에 있어서 각 구성 요소들은 설명의 편의를 고려하여 다소 확대 또는 축소되어 도시된 것일 수 있다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.
이하, 본 발명의 일 실시예에 따른 의료 영상 분석 보조 시스템, 화면을 갖는 전자 장치에서 수행되는 방법, 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스를 설명하기 위한 도면들을 참고하여 본 발명에 대하여 설명하도록 한다.
도 1은 본 발명의 일 실시예에 따른 의료 영상 분석 보조 시스템이 사용되는 시스템을 개략적으로 도시한 도면이다.
도 1에 도시된 바와 같이, 본 발명의 일 실시예에 따른 의료 영상 분석 보조 시스템(1)은 PACS(Picture Archiving Communications System, 2)와 통신 가능하게 연결된다. PACS는 현재 병원에서 널리 사용하고 있는 의료 영상 정보 시스템이다.
본 실시예에서는 의료 영상 분석 보조 시스템(1)이 연결되는 의료 영상 정보 시스템의 일례로서 PACS(2)를 기준으로 설명하지만, 본 발명의 일 실시예에 따른 의료 영상 분석 보조 시스템(1)은 PACS(2) 이외의 다른 의료 영상 정보 시스템과 통신 가능하게 연결되어 사용될 수도 있다.
의료 영상 분석 보조 시스템(1)은 병원 외부의 원격지에 존재할 수 있으며, 이 경우, PACS(2)와 유무선의 원격 통신망을 통해 통신 가능하게 연결될 수 있다. 예를 들어, 의료 영상 분석 보조 시스템(1)과 PACS(2)는 인터넷과 같은 광역 네트워크를 통해 연결될 수 있다.
또는, 의료 영상 분석 보조 시스템(1)은 PACS(2)를 운용하는 병원 내에 위치할 수 있다. 이 경우, 의료 영상 분석 보조 시스템(1)은 병원 내 유무선 통신망을 통해 PACS(2)와 통신 가능하게 연결될 수 있다.
또한, 의료 영상 분석 보조 시스템(1)은 입력 장치(31)와 화면(32)을 갖는 단말기(3)와 통신 가능하게 연결될 수 있다. 단말기(3)는 데스크탑, 노트북, 태블릿, 스마트폰 등의 전자 장치일 수 있다.
의료 영상 분석 보조 시스템(1)은 단말기(3)에 대해 원격지에 존재하고 단말기(3)와 유무선의 원격 통신망을 통해 통신 가능하게 연결될 수 있다. 예를 들어, 의료 영상 분석 보조 시스템(1)은 클라우드 방식으로 단말기(3)와 연결되어 서비스를 제공할 수 있다.
또는, 의료 영상 분석 보조 시스템(1)은 단말기(3)에 설치되는 소프트웨어로 제공될 수도 있다.
또는, 의료 영상 분석 보조 시스템(1)의 일부 구성은 단말기(3)에 설치되는 소프트웨어로 제공되고, 다른 일부 구성은 원격지에 구비되어 단말기(3)와 유무선의 원격 통신망을 통해 통신 가능하게 연결될 수 있다.
도 1에 도시된 바와 같이, 의료 영상 분석 보조 시스템(1)은, 의료 영상 정보 수신부(11), 병변 판독부(12) 및 인터페이스 제어부(13)를 포함한다.
의료 영상 정보 수신부(11)는 PACS(2)로부터 PACS(2)에 저장되어 있거나 PACS(2)와 연계된 의료 영상 장치가 생성한 의료 영상 정보를 수신한다. 의료 영상 정보는 현재 일반적으로 사용되는 표준화된 의료 영상 정보인 다이콤(DICOM, Digital Imaging Communication in Medicine) 파일일 수 있다. 본 실시예에서는, 환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지가 셋트로 구성된, CT(Computer Tomography), MRI(Magnetic Resonance Imaging) 등과 같은 의료 영상 장치를 이용해 촬영한 의료 영상이 포함된 의료 영상 정보를 기준으로 설명한다.
병변 판독부(12)는 의료 영상 정보 수신부(11)가 수신한 의료 영상 정보에 포함된 의료 영상을 판독하여 병변의 존재를 추정하고 추정된 병변의 영상 내의 위치 및 정보 등을 검출한다. 병변 판독부(12)는 인공 지능(AI, artificial intelligence)을 기반으로 의료 영상을 판독하고, 영상 내에 존재하는 것을 추정되는 병변을 검출하도록 구성될 수 있으며, 병변 판독부(12)는 의료 영상의 촬영 부위(두부, 흉부, 복부, 척추, 손, 발 등), 검출하고자 하는 병변의 종류(골절, 결절 등) 등에 따라 구분된 별도의 분석 알고리즘을 구비할 수 있다.
본 실시예에서는, 의료 영상 분석 보조 시스템(1)에 병변 판독부(12)가 포함되는 구성을 예로 설명하고 있으나, 실시예에 따라 의료 영상 분석 보조 시스템은 병변 판독부(12)를 포함하지 않을 수 있다. 이 경우, 의료 영상 정보 수신부(11)는 병변 판독이 완료된 의료 영상 정보를 수신할 수 있다.
인터페이스 제어부(13)는 단말기(3)의 화면(32) 상에 표시되는 그래픽 사용자 인터페이스를 생성한다. 인터페이스 제어부(13)는 그래픽 사용자 인터페이스에 대한 정보를 단말기(3)로 전송하여 단말기(3)의 화면(32) 상에 그래픽 사용자 인터페이스가 시각적으로 표시되도록 한다. 또한, 단말기(3)의 입력 장치(31)를 통한 사용자의 입력에 대응하여 화면(32) 상에 표시된 그래픽 사용자 인터페이스를 변화시킨다.
보다 구체적인 내용은 화면을 갖는 전자 장치에서 수행되는 방법 및 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스와 함께 설명한다.
도 2는 본 발명의 일 실시예에 따른 화면을 갖는 전자 장치에서 수행되는 방법의 일부를 설명하기 위한 순서도이고, 도 3은 도 2의 S11 및 S12 단계에 따라 화면 상에 표시되는 그래픽 사용자 인터페이스를 도시한 도면이고, 도 4는 도 3의 병변 리스트 디스플레이 영역에 표시된 병변에 대한 정보의 일례를 도시한 도면이며, 도 5는 도 2의 S13 내지 S15 단계에 따라 화면 상에 표시되는 그래픽 사용자 인터페이스를 도시한 도면이다.
도 2에 도시된 바와 같이, 본 발명의 일 실시예에 따른 화면을 갖는 전자 장치에서 수행되는 방법(이하, 방법.)은 이미지 디스플레이 영역에 복수의 의료 영상 이미지 중 적어도 일부를 표시하는 단계(S11), 병변 리스트 디스플레이 영역에 병변에 대한 정보를 표시하는 단계(S12), 병변에 대한 정보 중 어느 하나를 선택하는 입력을 검출하는 단계(S13), 이미지 디스플레이 영역에 복수의 의료 영상 이미지 중 선택된 병변이 존재하는 의료 영상 이미지를 표시하는 단계(S14), 병변 리스트 디스플레이 영역에 표시된 병변 정보 중 선택된 병변 정보를 하이라이트 처리하는 단계(S15)를 포함한다.
인터페이스 제어부(13)는 의료 영상 정보 수신부(11)로부터 의료 영상 정보를 수신하고, 병변 판독부(12)로부터 판독된 병변에 대한 정보를 수신할 수 있다. 병변 판독부(12)가 의료 영상 정보 수신부(11)로부터 의료 영상 정보를 수신하여 해당 의료 영상 정보에 판독된 병변에 대한 정보를 추가한 정보를 보유하고 있는 경우에는, 인터페이스 제어부(13)는 병변 판독부(12)로부터 병변에 대한 정보가 추가된 의료 영상 정보를 수신할 수 있다.
도 3에 도시된 바와 같이, 인터페이스 제어부(13)는 단말기(3)의 화면(32)의 적어도 일부를 환자 정보 표시 영역(A), 이미지 디스플레이 영역(B) 및 병변 리스트 디스플레이 영역(C), 도구 표시 영역(D)으로 분할하여 표시하는 그래픽 사용자 인터페이스를 제공할 수 있다.
인터페이스 제어부(13)는 환자 정보 표시 영역(A)에 환자의 정보를 표시한다.
환자의 정보는 의료 영상 정보(예를 들어, 다이콤 파일)에 포함된 정보일 수 있으며, 환자의 이름, ID, 의료 영상 촬영일 등이 포함될 수 있다.
이미지 디스플레이 영역에 복수의 의료 영상 이미지 중 적어도 일부를 표시하는 단계(S11)에서, 인터페이스 제어부(13)는 이미지 디스플레이 영역(B)에 환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지 중 어느 하나를 표시한다. 예를 들어, 300장의 이미지로 구성된 MRI, CT 영상인 경우, 300장의 이미지 중 어느 하나가 이미지 디스플레이 영역(B)에 표시된다.
병변 리스트 디스플레이 영역에 병변에 대한 정보를 표시하는 단계(S12)에서, 인터페이스 제어부(13)는 병변 리스트 디스플레이 영역(C)에 병변 판독부(12)에 의해 복수의 의료 영상 이미지 내에 존재하는 것으로 추정되거나, 임상의 등에 의해 복수의 의료 영상 이미지 내에 존재하는 것으로 확인된 병변들의 정보를 표시한다. 300장의 이미지로 구성된 MRI, CT 영상인 경우, 300장의 이미지에 존재하거나 존재하는 것으로 추정되는 병변들이 표시된다.
도 3 및 도 4에는 4개의 병변에 대한 정보(C1, C2, C3, C4)가 표시된 예가 도시되어 있다. 본 실시예에서는 설명의 편의를 위해, 병변의 일례로서, 폐에 존재하는 노듈(nodule)을 기준으로 설명한다.
4개의 병변에 대한 정보(C1, C2, C3, C4)는 병변의 썸네일 이미지(C11, C21, C31, C41)과 병변에 대한 문자 정보(C12, C22, C32, C42)를 포함할 수 있다.
도 4에 도시된 바와 같이, 병변의 썸네일 이미지(C11, C21, C31, C41)는 복수의 의료 영상 이미지 중 병변이 존재하는 의료 영상 이미지의 일부(병변이 나타나는 부분)일 수 있다. 또는 다른 실시예로서, 병변의 썸네일 이미지(C11, C21, C31, C41)는 복수의 의료 영상 이미지 중 병변이 존재하는 의료 영상 이미지가 될 수도 있다.
병변에 대한 문자 정보(C12, C22, C32, C42)는 병변의 타입(Solid, Part Solid 등), 병변의 위치(RLL(Right Lower Lobe), LLL(Left Lower Lobe) 등), 병변이 위치하는 이미지 번호(#54, #99, #110, #137 등), 평균 크기(예: Avg: 7.8mm 등), 최장 길이/최단 길이(예: 8.3/7.2) 등을 포함할 수 있다.
인터페이스 제어부(13)는 도구 표시 영역(D)에 단말기(3)의 사용자(예를 들어, 임상의 등)가 인터페이스를 통해 명령을 입력할 수 있는 도구들의 아이콘을 표시할 수 있다.
병변에 대한 정보 중 어느 하나를 선택하는 입력을 검출하는 단계(S13)에서, 인터페이스 제어부(13)는 사용자가 단말기(3)의 입력 장치(31)를 이용해 병변에 대한 정보(C1, C2, C3, C4) 중 어느 하나를 선택하는 입력을 검출한다.
병변에 대한 정보 중 어느 하나를 선택하는 입력은, 입력 장치(31)가 마우스인 경우, 사용자가 마우스를 조작하여 화면(32) 상에 표시되는 마우스 포인터를 병변에 대한 정보(C1, C2, C3, C4) 중 어느 하나 위에 위치시키고 마우스를 클릭하여 제공될 수 있다.
또한, 입력 장치(31)가 화면(32) 상에 구성된 터치 스크린으로 구성되는 경우, 사용자는 터치용 펜, 또는 손가락을 이용해 화면(32) 상에 표시된 병변에 대한 정보(C1, C2, C3, C4) 중 어느 하나를 터치하여 제공될 수 있다.
병변에 대한 정보 중 어느 하나를 선택하는 입력이 검출되면, 이미지 디스플레이 영역에 복수의 의료 영상 이미지 중 선택된 병변이 존재하는 의료 영상 이미지를 표시하는 단계(S14)에서, 인터페이스 제어부(13)는 이미지 디스플레이 영역(B)에 S13 단계에서 선택된 병변이 존재하는 의료 영상 이미지를 표시한다.
예를 들어, 화면(32) 상에 도 3과 같은 이미지가 표시된 상태에서 사용자가 입력 장치(31)를 이용해 병변에 대한 정보(C1, C2, C3, C4) 중 C1을 선택하면, 인터페이스 제어부(13)는 복수의 의료 영상 이미지(예를 들어, 300장의 이미지) 중 C1이 존재하는 의료 영상 이미지(예를 들어, 54번 이미지)가 이미지 디스플레이 영역(B) 상에 표현된 도 5와 같은 이미지가 화면(32) 상에 표시되도록 한다.
위와 같은 그래픽 유저 인터페이스를 제공하므로, 임상의가 복수의 의료 영상 이미지에서 병변이 존재하는 부분을 빠르게 찾아볼 수 있게 된다.
또한, 병변 리스트 디스플레이 영역에 표시된 병변 정보 중 선택된 병변 정보를 하이라이트 처리하는 단계(S15)에서, 인터페이스 제어부(13)는 병변에 대한 정보(C1, C2, C3, C4) 중 S13 단계에서 선택된 병변에 대한 정보(C1)가 하이라이트 처리하여 표시되도록 한다. 하이라이트 처리는 해당 영역의 밝기를 주변 영역에 비해 밝게 처리하거나, 투명한 색상(예를 들어, 노란색, 형광색, 붉은색 등)이 오버랩되도록 처리하거나, 글자의 폰트 및/또는 굵기를 다른 부분과 다르게 처리하는 등 주변 영역과 시각적으로 확연하게 분별되도록 하는 이미지 처리를 의미할 수 있다.
인터페이스 제어부(13)는 이미지 디스플레이 영역(B)에 복수의 의료 영상 이미지 중 추정되거나 확인된 병변이 존재하는 의료 영상 이미지가 표시되는 경우, 병변 리스트 디스플레이 영역(C)에 표시된 병변에 대한 정보(C1, C2, C3, C4) 중 의료 영상 이미지 내에 존재하는 병변에 대한 정보(C1)가 하이라이트 처리되도록 표시할 수 있다.
도 2 내지 도 5에 도시된 예에서, 4개의 병변은 300개의 단층 이미지에서 각각 54번째, 99번째, 110번째, 137번째에 존재한다. 따라서, 사용자의 입력에 의해 이미지 디스플레이 영역(B)에 복수의 의료 영상 이미지가 순차적으로 표시되는 경우, 54번째 의료 영상 이미지가 이미지 디스플레이 영역(B)에 표시되면 병변 리스트 디스플레이 영역(C)에 표시된 병변에 대한 정보(C1, C2, C3, C4) 중 C1이 하이라이트 처리되도록 표시되고, 99번째 의료 영상 이미지가 이미지 디스플레이 영역(B)에 표시되면 병변 리스트 디스플레이 영역(C)에 표시된 병변에 대한 정보(C1, C2, C3, C4) 중 C2가 하이라이트 처리되도록 표시되는 방식으로 처리될 수 있다.
이러한 기능은 임상의가 이미지 디스플레이 영역(B) 표시되는 복수의 단층 이미지를 순차적으로 빠르게 넘기며 확인할 때, 병변이 존재하는 이미지가 이미지 디스플레이 영역(B)에 출현하면, 병변 리스트 디스플레이 영역(C)에 표시된 병변에 대한 정보(C1, C2, C3, C4) 중 그에 대응하는 정보가 하이라이트 처리되도록 하여, 병변이 존재하는 이미지임을 빠르게 인식할 수 있고, 해당 병변에 대한 정보도 즉시 확인할 수 있도록 한다.
한편, 도 5에 도시된 바와 같이, 인터페이스 제어부(13)는 이미지 디스플레이 영역(B)에 표시된 의료 영상 이미지 내에 병변이 존재하는 경우, 해당 병변의 위치(B1)가 하이라이트 처리되어 표시되도록 할 수 있다. 또한, 의료 영상 이미지 상에 해당 병변에 대한 구체적인 정보(B2)(예를 들어, XYZ 좌표, 병변에 대한 문자 정보(C12, C22, C32, C42)에 기재되지 않은 병변에 대한 추가적인 정보 등)이 오버랩되어 표시되도록 할 수 있다.
도 6은 본 발명의 일 실시예에 따른 화면을 갖는 전자 장치에서 수행되는 방법의 다른 일부를 설명하기 위한 순서도이고, 도 7은 도 6의 S21 및 S22 단계에 따라 화면 상에 표시되는 그래픽 사용자 인터페이스를 도시한 도면이다.
본 발명의 일 실시예에 따른 방법은, 병변 영역의 확대를 요청하는 입력을 검출하는 단계(S21) 및 이미지 디스플레이 영역에 이미지 내의 병변 부분을 확대 표시하는 단계(S22)를 더 포함할 수 있다. S21 및 S22 단계는 S14 단계 이후에 수행될 수 있다.
S21 단계에서, 인터페이스 제어부(13)는 사용자가 단말기(3)의 입력 장치(31)를 이용해 병변 영역의 확대를 요청하는 입력을 검출한다. 병변 영역의 확대를 요청하는 입력은 도구 표시 영역(D) 내에 표시된 아이콘들 중 병변 영역의 확대를 실행하는 아이콘을 사용자가 입력 장치(31)를 이용해 선택하여 제공될 수 있다. 또는, 사용자가 입력 장치(31)를 이용해, 의료 영상 이미지에서 하이라이트 처리되어 표시된 병변의 위치(B1)를 선택하여 제공될 수 있다.
병변 영역의 확대를 요청하는 입력이 검출되면, 인터페이스 제어부(13)는 S22 단계를 실행하여, 도 7에 도시된 바와 같이, 이미지 디스플레이 영역(B)에 표시된 의료 영상 이미지 내의 병변 부분이 대략 이미지 디스플레이 영역(B)의 중심에 위치하도록 병변 부분을 확대하여 의료 영상 이미지의 일부가 이미지 디스플레이 영역(B)에 표시되도록 한다. 확대 비율을 미리 설정되거나, 사용자에 의해 결정/조절될 수 있으며, 병변의 크기에 따라 확대 비율이 달라지도록 설정될 수도 있다. 예를 들어, 병변의 크기가 큰 경우에 병변의 크기가 작은 경우에 비해 확대 비율이 작도록 설정될 수 있다.
이러한 기능은 임상의가 병변의 형상, 특성 등을 확인하고자 하는 경우, 손쉽게 병변을 확대하여 보여주므로, 사용자 편의성을 향상시킨다.
도 8은 본 발명의 일 실시예에 따른 화면을 갖는 전자 장치에서 수행되는 방법의 또 다른 일부를 설명하기 위한 순서도이고, 도 9 및 도 10은 도 8의 S31 및 S32 단계에 따라 화면에 연속적으로 반복 표시되는 의료영상 이미지의 개념을 모식적으로 나타낸 도면이고, 도 11 내지 도 14는 도 8의 S31 및 S32 단계에 따라 화면 상에 표시되는 그래픽 사용자 인터페이스를 도시한 도면이다.
도 8에 도시된 바와 같이, 본 발명의 일 실시예에 따른 방법은, 썸네일 이미지 상에 대한 연속 동작 명령의 입력 검출하는 단계(S31) 및 썸네일 이미지와 대응하는 주변 의료 영상 이미지를 연속적으로 반복 표시하는 단계(S32)를 포함한다. S31 및 S32 단계는 S14 단계 이후에 수행될 수 있다.
S31 단계에서, 인터페이스 제어부(13)는 썸네일 이미지에 대한 연속 동작 명령의 입력을 검출한다. 썸네일 이미지에 대한 연속 동작 명령은, 사용자가 입력 장치(31)를 이용해 병변 리스트 디스플레이 영역(C)에 표시된 병변에 대한 정보(C1, C2, C3, C4) 중 어느 하나의 썸네일 이미지(C11, C12, C13, C14) 중 어느 하나에 입력 장치의 포인터를 위치한 상태에서 연속 동작 명령을 입력하는 것을 의미한다.
연속 동작 명령에 응답하여, 화면의 일측에 복수의 의료 영상 이미지 중 썸네일 이미지와 대응하는 의료 영상 이미지로부터 소정의 범위 내에 존재하는 주변 의료 영상 이미지가 연속적으로 화면에 반복 표시된다. 이하, 소정의 범위 내에 위치하는 복수 개의 의료영상 이미지 중 일단에 위치하는 의료영상 이미지를 제1영상이미지(B1)로, 타단에 위치하는 의료영상 이미지를 제2영상이미지(B2)로 지칭하여 설명한다.
도 9 및 도 10에 도시된 바와 같이, 제1,2영상이미지(B1, B2) 사이에 위치하는 복수 개의 의료영상 이미지가 배열된 순서에 따라 연속적으로 화면에 반복 표시된다. 즉, 복수 개로 배열된 의료영상 이미지가 빠른 속도로 화면에 반복 표시됨으로써, 사용자에게는 병변의 형상, 크기 등이 이미지 디스플레이 영역(B)에서 그래픽 인터체인지 포맷(Graphic Interchagne Format, GIF)의 형태로 개시된다.
도 9에 나타난 바와 같이, 본 발명의 일 실시예에 의한 소정의 범위 내의 복수 개의 의료영상 이미지는 제1영상이미지(B1)로부터 제2영상이미지(B2) 방향으로 배열된 순서(F)에 따라 연속적으로 화면에 반복 표시된다. 다시 말해, 제1영상이미지(B1)로부터 제2영상이미지(B2) 방향으로 배열된 순서(F)에 따라 순차적으로 화면에 표시된 이후, 다시금 제1영상이미지(B1)로 돌아와 동일한 방향(F)으로 순차적으로 화면에 반복 표시되는 것일 수 있다.
도 10에 나타난 바와 같이, 본 발명의 일 실시예에 의한 소정의 범위 내의 복수 개의 의료영상 이미지는 제1영상이미지(B1)로부터 제2영상이미지(B2) 방향으로 배열된 순서(F)와, 그 역방향인 제2영상이미지(B2)로부터 제1영상이미지(B1) 방향으로 배열된 순서(R)가 교차하여 연속적으로 화면에 반복 표시된다. 다시 말해, 제1영상이미지(B1)로부터 제2영상이미지(B2) 방향으로 배열된 순서(F)에 따라 순차적으로 화면에 표시된 이후, 제2영상이미지(B2)로부로부터 제1영상이미지(B1) 방향으로 배열된 순서(R)에 따라 순차적으로 화면에 표시되는 방식으로, 표시되는 의료영상 이미지의 순번 방향이 교차되는 것일 수 있다.
이때, 화면표시 순서는 사용자 등에 의하여 정해여 지는 것일 수 있다. 즉, 사용자는 도구 표시 영역(D)을 통해 복수 개의 의료영상 이미지의 도 9와 같이 정방향 방식으로 반복 표시될 것인지 또는 도 10과 같이 교차 방식의 반복 표시될 것인지를 선택할 수 있다.
본 발명의 일 실시예에 의한 제1영상이미지(B1)와 제2영상이미지(B2)의 간격은 검출되는 병변의 정보에 따라 결정된다. 즉, 인터페이스 제어부(13)는 기설정된 AI 시스템을 통해, 검출된 병변의 형상 또는 크기 정보에 기반하여 제1영상이미지(B1)와 제2영상이미지(B2)의 간격을 넓게 또는 좁게 자동 결정하도록 설정되는 것일 수 있다.
또는 본 발명의 일 실시예에 의한 제1영상이미지(B1)와 제2영상이미지(B2)의 간격은 사용자에 의해 설정되는 것일 수 있다. 즉, 사용자는 도구 표시 영역(D)을 통해 제1영상이미지(B1)와 제2영상이미지(B2)의 간격을 수동으로 조절할 수 있다.
도 11에 도시된 바와 같이, 사용자가 병변에 대한 정보(C1, C2, C3, C4) 중 C3을 선택하여, 이미지 디스플레이 영역(B)에 C3에 대한 병변이 존재하는 110번째 의료 영상 이미지가 표시된 상태에서, 도 12에 도시된 바와 같이, 사용자가 입력 장치(31)인 마우스를 조작하여 마우스 포인터를 C3의 썸네일 이미지(C31) 상에 위치시키고, 마우스의 더블클릭하는 동작에 의해 상술한 썸네일 이미지에 대한 연속 동작 명령이 입력될 수 있다.
이때, 마우스의 더블클릭 동작은 연속 동작의 개시 명령인 동시에 정지 명령일 수 있다. 즉, 사용자가 입력하는 최초 더블클릭 동작은 이미지 연속 동작의 개시 명령이고, 이미지 연속 동작 계속 중의 더블클릭 동작은 이미지 연속 동작의 종료 명령이 된다.
상술한 방식으로 썸네일 이미지에 대한 연속 동작 명령의 입력이 검출되면, S32 단계에서, 인터페이스 제어부(13)는 전술한 바와 같이 이미지 디스플레이 영역(B)에 소정의 범위 내의 의료 영상 이미지가 연속적으로 화면에 반복 표시되도록 한다.
예를 들어, 110번째 의료 영상 이미지(Bn)을 기준으로 하여, 인공지능 시스템 또는 사용자의 입력을 통해 108번째 의료 영상 이미지가 제1영상이미지(B1)로, 112번째 의료 영상 이미지가 제2영상이미지(B2)로 결정된다. 이후 108번째 의료 영상 이미지와 112번째 의료 영상 사이에 존재하는 복수 개의 의료 영상 이미지가 화면에 연속적으로 반복 표시된다.
도 15 및 도 16에 도시된 바와 같이, 썸네일 이미지에 대한 연속 동작 명령은, 사용자가 터치 펜의 단부 또는 손가락을 C3의 썸네일 이미지(C31) 상에 위치시키고, 연속 터치하는 동작에 의해 입력될 수도 있다. 연속 터치 동작에 따라 의료 영상 이미지가 이미지 디스플레이 영역(B)에 표시되는 것에 대해서는 상술하였는 바, 이에 대한 구체적인 설명은 생략한다
이러한 기능은 임상의가 입력 장치(31)를 이용해 특정 병변(예를 들어, C3)를 선택하여 해당 병변이 존재하는 의료 영상 이미지(예를 들어, 110번째 이미지)가 이미지 디스플레이 영역(B)에 표시된 상태에서, 그 주변 조직/기관의 상태를 확인하고자 하는 경우, 입력 장치(31)의 포인터(마우스 포인터, 터치 펜의 단부, 손가락 등)을 통한 한 번의 동작으로 연속적인 의료 영상 이미지를 입체적으로 확인하는 것이 가능하게 된다.
도 15는 본 발명의 일 실시예에 따른 화면을 갖는 전자 장치에서 수행되는 방법의 또 다른 일부를 설명하기 위한 순서도이고, 도 16 내지 도 21은 도 15의 S41 및 S42 단계에 따라 화면 상에 표시되는 그래픽 사용자 인터페이스를 도시한 도면이다.
도 15에 도시된 바와 같이, 본 발명의 일 실시예에 따른 방법은, 썸네일 이미지에 대한 스크롤 명령의 입력을 검출하는 단계(S41) 및 스크롤 방향에 대응하여 이미지 디스플레이 영역에 주변 이미지를 표시하는 단계(S42)를 포함한다. S41 및 S42 단계는 S14 단계 이후에 수행될 수 있다.
S41 단계에서, 인터페이스 제어부(13)는 썸네일 이미지에 대한 스크롤 명령의 입력을 검출한다. 썸네일 이미지에 대한 스크롤 명령은, 사용자가 입력 장치(31)를 이용해 병변 리스트 디스플레이 영역(C)에 표시된 병변에 대한 정보(C1, C2, C3, C4) 중 어느 하나의 썸네일 이미지(C11, C12, C13, C14) 중 어느 하나에 입력 장치의 포인터를 위치한 상태에서 스크롤 명령을 입력하는 것을 의미한다.
도 16에 도시된 바와 같이, 사용자가 병변에 대한 정보(C1, C2, C3, C4) 중 C3을 선택하여, 이미지 디스플레이 영역(B)에 C3에 대한 병변이 존재하는 110번째 의료 영상 이미지가 표시된 상태에서, 도 17에 도시된 바와 같이, 사용자가 입력 장치(31)인 마우스를 조작하여 마우스 포인터를 C3의 썸네일 이미지(C31) 상에 위치시키고, 마우스 휠을 일방향으로 회전시키는 동작에 의해 썸네일 이미지에 대한 스크롤 명령이 입력될 수 있다.
상술한 방식으로 썸네일 이미지에 대한 스크롤 명령의 입력이 검출되면, S42 단계에서, 인터페이스 제어부(13)는 스크롤 방향에 따라 이미지 디스플레이 영역(B)에 표시된 의료 영상 이미지의 주변 의료 영상 이미지가 이미지 디스플레이 영역(B)에 표시되도록 한다.
예를 들어, 도 17에 도시된 바와 같이, 이미지 디스플레이 영역(B)에 110번째 의료 영상 이미지가 표시된 상태에서 사용자가 마우스 휠을 일방향(사용자의 몸쪽으로 당기는 동작에 의한 회전 방향)으로 회전시키면, 도 18에 도시된 바와 같이, 인터페이스 제어부(13)는 이미지 디스플레이 영역(B)에 111번째 의료 영상 이미지가 표시되도록 할 수 있다.
사용자가 계속하여 마우스 휠을 일방향으로 회전시키면 이미지 디스플레이 영역(B)에는 112번째 의료 영상 이미지, 113번째 의료 영상 이미지, 114번째 의료 영상 이미지가 순차적으로 표시되도록 할 수 있다.
반대로, 도 19에 도시된 바와 같이, 이미지 디스플레이 영역(B)에 110번째의료 영상 이미지가 표시된 상태에서 사용자가 마우스 휠을 타방향(사용자의 몸쪽에서 멀어지는 방향으로 밀어내는 동작에 의한 회전 방향)으로 회전시키면, 도 20에 도시된 바와 같이, 인터페이스 제어부(13)는 이미지 디스플레이 영역(B)에 109번째 의료 영상 이미지가 표시되도록 할 수 있다.
사용자가 계속하여 마우스 휠을 타방향으로 회전시키면 이미지 디스플레이 영역(B)에는 108번째 의료 영상 이미지, 107번째 의료 영상 이미지, 106번째 의료 영상 이미지가 순차적으로 표시되도록 할 수 있다.
도 21에 도시된 바와 같이, 썸네일 이미지에 대한 스크롤 명령은, 사용자가 마우스 포인터를 C3의 썸네일 이미지(C31) 상에 위치시키고, 마우스를 클릭한 채로 드래그하는 동작에 의해 입력될 수도 있다.
이 경우, 스크롤 방향은 드래그 방향에 의해 결정된다. 예를 들어, 도 21의 상태에서 마우스를 아래 방향으로 드래그하면 도 18에 도시된 바와 같이, 인터페이스 제어부(13)는 이미지 디스플레이 영역(B)에 111번째 의료 영상 이미지가 표시되도록 하고, 사용자가 계속하여 마우스를 아래 방향으로 드래그하면, 이미지 디스플레이 영역(B)에는 112번째 의료 영상 이미지, 113번째 의료 영상 이미지, 114번째 의료 영상 이미지가 순차적으로 표시되도록 할 수 있다.
또한, 도 21의 상태에서 마우스를 위 방향으로 드래그하면 도 19에 도시된 바와 같이, 인터페이스 제어부(13)는 이미지 디스플레이 영역(B)에 109번째 의료 영상 이미지가 표시되도록 하고, 사용자가 계속하여 마우스를 위 방향으로 드래그하면, 이미지 디스플레이 영역(B)에는 108번째 의료 영상 이미지, 107번째 의료 영상 이미지, 106번째 의료 영상 이미지가 순차적으로 표시되도록 할 수 있다.
도시되지는 않았으나, 썸네일 이미지에 대한 스크롤 명령은, 사용자가 터치 펜의 단부 또는 손가락을 C3의 썸네일 이미지(C31) 상에 위치시키고, 드래그하는 동작에 의해 입력될 수도 있다. 드래그 방향에 따라 주변의 의료 영상 이미지가 이미지 디스플레이 영역(B)에 표시되는 것에 대해서는 상술하였는 바, 이에 대한 구체적인 설명은 생략한다.
이러한 기능은 임상의가 입력 장치(31)를 이용해 특정 병변(예를 들어, C3)를 선택하여 해당 병변이 존재하는 의료 영상 이미지(예를 들어, 110번째 이미지)가 이미지 디스플레이 영역(B)에 표시된 상태에서, 그 주변 조직/기관의 상태를 확인하고자 하는 경우, 입력 장치(31)의 포인터(마우스 포인터, 터치 펜의 단부, 손가락 등)의 이동을 최소화하며 인접하는 의료 영상 이미지를 확인하는 것을 가능하게 한다.
본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
1: 의료 영상 분석 보조 시스템
2: PACS
3: 단말기
A: 환자 정보 표시 영역
B: 이미지 디스플레이 영역
B1, B2: 제1,2영상이미지
C: 병변 리스트 디스플레이 영역
C11, C21, C31, C41: 썸네일 이미지
D: 도구 표시 영역

Claims (16)

  1. 환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지를 포함하는 의료 영상 정보를 수신하는 의료 영상 정보 수신부;
    수신된 상기 의료 영상 정보를 판독하여 상기 복수의 의료 영상 이미지에서병변의 존재를 추정하고 추정된 상기 병변의 위치 및 정보를 검출하는 병변 판독부; 및
    상기 복수의 의료 영상 이미지 중 적어도 일부와 상기 병변의 정보가 화면 상에 함께 표시되도록 하는 인터페이스 제어부;를 포함하고,
    상기 인터페이스 제어부는,
    상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 적어도 일부가 표시되게 하고,
    상기 화면의 타측에 상기 병변의 썸네일 이미지와 상기 병변의 정보가 표시되게 하고,
    상기 화면 상에 표시된 상기 썸네일 이미지 상의 입력 장치의 포인터가 위치한 상태로 입력되는 연속 동작 명령에 응답하여, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 썸네일 이미지와 대응하는 의료 영상 이미지로부터 소정의 범위 내의 주변 의료 영상 이미지가 연속적으로 화면에 반복 표시되는, 의료 영상 분석 보조 시스템.
  2. 제1항에 있어서,
    상기 입력 장치는 마우스이며,
    상기 연속 동작 명령은 상기 마우스의 클릭에 의해 입력되는 것을 특징으로 하는, 의료 영상 분석 보조 시스템.
  3. 제2항에 있어서,
    상기 연속 동작 명령은 상기 마우스의 더블 클릭이 개시 명령 또는 정지 명령인 것을 특징으로 하는, 의료 영상 분석 보조 시스템.
  4. 제1항에 있어서,
    상기 입력 장치는 터치 스크린이며,
    상기 연속 동작 명령은 상기 터치 스크린의 터치에 의해 입력되는, 의료 영상 분석 보조 시스템.
  5. 제4항에 있어서,
    상기 연속 동작 명령은 상기 터치 스크린의 연속 터치가 개시 명령 또는 정지 명령인 것을 특징으로 하는, 의료 영상 분석 보조 시스템.
  6. 제1항에 있어서,
    상기 소정의 범위 내의 일단에 위치하는 제1영상이미지와 타단에 위치하는 제2영상이미지 사이의 복수 개의 의료영상 이미지가 배열된 순서에 따라 연속적으로 화면에 반복 표시되는 것을 특징으로 하는, 의료 영상 분석 보조 시스템.
  7. 제6항에 있어서,
    상기 소정의 범위 내의 복수 개의 의료영상 이미지는 상기 제1영상이미지로부터 상기 제2영상이미지 방향으로 배열된 순서에 따라 연속적으로 화면에 반복 표시되는 것을 특징으로 하는, 의료 영상 분석 보조 시스템.
  8. 제6항에 있어서,
    상기 소정의 범위 내의 복수 개의 의료영상 이미지는 상기 제1영상이미지로부터 상기 제2영상이미지 방향으로 배열된 순서와, 상기 제2영상이미지로부터 상기 제1영상이미지 방향으로 배열된 순서가 교차하여 연속적으로 화면에 반복 표시되는 것을 특징으로 하는, 의료 영상 분석 보조 시스템..
  9. 제1항에 있어서,
    상기 소정의 범위 내의 복수의 의료 영상 이미지 중 상기 병변의 존재가 추정된 의료 영상 이미지는 상기 병변의 위치가 하이라이트 처리된 상태로 표시되는 것을 특징으로 하는, 의료 영상 분석 보조 시스템.
  10. 제6항에 있어서,
    상기 인터페이스 제어부는,
    상기 썸네일 이미지와 대응하는 의료 영상 이미지 상에서 검출되는 병변 형상 또는 크기 정보에 대응하여, 상기 제1영상이미지와 상기 제2영상이미지의 간격을 결정하도록 설정되는 것을 특징으로 하는, 의료 영상 분석 보조 시스템.
  11. 제1항에 있어서,
    상기 인터페이스 제어부는,
    상기 화면 상에 표시된 상기 썸네일 이미지 및 상기 병변의 정보 중 적어도 하나를 선택하는 명령이 입력되는 경우, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 병변의 정보에 대응하는 병변이 표시된 병변 이미지가 표시되게 하는 것을 특징으로, 의료 영상 분석 보조 시스템.
  12. 제1항에 있어서,
    상기 인터페이스 제어부는,
    상기 화면의 일측에 상기 병변의 존재가 추정된 의료 영상 이미지 중 어느 하나가 표시되는 경우, 상기 화면의 타측에 표시된 상기 병변의 정보 중 상기 화면의 일측에 표시된 의료 영상 이미지 내에 존재하는 병변의 정보를 하이라이트 처리된 상태로 표시되게 하는 것을 특징으로 하는, 의료 영상 분석 보조 시스템.
  13. 화면을 갖는 전자 장치에서 수행되는 방법으로서,
    상기 화면의 일측에 환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지 중 적어도 일부를 표시하는 단계;
    상기 화면의 타측에 상기 복수의 의료 영상 이미지 내에 존재하는 것으로 판독된 적어도 하나의 병변에 대한 정보를 표시하는 단계;
    상기 화면의 타측에 표시된 병변에 대한 정보 중 어느 하나의 병변에 대한 정보를 선택하는 입력에 응답하여, 상기 복수의 의료 영상 이미지 중 선택된 병변이 존재하는 의료 영상 이미지를 상기 화면의 일측에 표시하는 단계; 및
    상기 화면 타측에 표시된 썸네일 이미지 상에 입력되는 연속 동작 명령에 응답하여, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 썸네일 이미지와 대응하는 의료 영상 이미지로부터 소정의 범위 내의 주변 의료 영상 이미지가 연속적으로 화면에 반복 표시하는 단계를 포함하는, 방법.
  14. 제13항에 있어서,
    상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 화면의 타측에 표시된 상기 병변에 대한 정보 중 어느 하나의 병변을 포함하는 의료 영상 이미지가 표시되면, 상기 화면의 타측에 표시된 상기 병변에 대한 정보 중 상기 화면의 일측에 표시된 의료 영상 이미지 내에 포함된 병변에 대한 정보가 하이라이트 처리된 상태로 표시되는 단계;를 더 포함하는 것을 특징으로 하는, 방법.
  15. 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스로서,
    환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지 중 어느 하나가 표시되는 이미지 디스플레이 영역과,
    상기 복수의 의료 영상 이미지 내에 존재하는 것으로 판독된 적어도 하나의 병변에 대한 정보를 표시하는 병변 리스트 디스플레이 영역을 포함하고,
    상기 병변 리스트 디스플레이 영역 내에 표시된 상기 병변에 대한 정보 중 어느 하나의 병변에 대한 정보를 선택하는 입력에 응답하여, 상기 복수의 의료 영상 이미지 중 선택된 병변이 존재하는 의료 영상 이미지를 상기 이미지 디스플레이 영역에 표시하되,
    상기 화면 타측에 표시된 썸네일 이미지 상에 입력되는 연속 동작 명령에 응답하여, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 썸네일 이미지와 대응하는 의료 영상 이미지로부터 소정의 범위 내의 주변 의료 영상 이미지가 연속적으로 화면에 반복 표시하는, 그래픽 사용자 인터페이스.
  16. 제15항에 있어서,
    상기 이미지 디스플레이 영역에 상기 복수의 의료 영상 이미지 중 상기 병변 리스트 디스플레이 영역에 표시된 상기 병변에 대한 정보 중 어느 하나의 병변을 포함하는 의료 영상 이미지가 표시되면, 상기 병변 리스트 디스플레이 영역에 표시된 상기 병변에 대한 정보 중 상기 이미지 디스플레이 영역에 표시된 의료 영상 이미지 내에 포함된 병변에 대한 정보를 하이라이트 처리된 상태로 표시하는 것을 특징으로 하는, 그래픽 사용자 인터페이스.
KR1020200107024A 2020-08-25 2020-08-25 의료 영상 분석 보조 시스템, 화면을 갖는 전자 장치에서 수행되는 방법, 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스 KR20220026236A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200107024A KR20220026236A (ko) 2020-08-25 2020-08-25 의료 영상 분석 보조 시스템, 화면을 갖는 전자 장치에서 수행되는 방법, 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200107024A KR20220026236A (ko) 2020-08-25 2020-08-25 의료 영상 분석 보조 시스템, 화면을 갖는 전자 장치에서 수행되는 방법, 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스

Publications (1)

Publication Number Publication Date
KR20220026236A true KR20220026236A (ko) 2022-03-04

Family

ID=80813977

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200107024A KR20220026236A (ko) 2020-08-25 2020-08-25 의료 영상 분석 보조 시스템, 화면을 갖는 전자 장치에서 수행되는 방법, 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스

Country Status (1)

Country Link
KR (1) KR20220026236A (ko)

Similar Documents

Publication Publication Date Title
US10937544B2 (en) Medical imaging apparatus for displaying x-ray images of different types
JP4820680B2 (ja) 医用画像表示装置
US8929627B2 (en) Examination information display device and method
US9342145B2 (en) Cursor control
JP5465135B2 (ja) 医療情報表示装置および方法、並びにプログラム
EP2169524A2 (en) Apparatus, method and program for controlling drag and drop operation and computer terminal
US20130093781A1 (en) Examination information display device and method
JP2018175216A (ja) 医用画像表示装置及びプログラム
JP5014430B2 (ja) 対象物の画像を提示する提示方法、提示装置、および、コンピュータプログラム
CN106445435B (zh) 医用图像显示装置、系统和方法
JP2015208602A (ja) 画像表示装置及び画像表示方法
JP5398791B2 (ja) 医用画像表示装置
KR20210012492A (ko) 의료 영상 분석 보조 시스템, 화면을 갖는 전자 장치에서 수행되는 방법, 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스
KR20220026236A (ko) 의료 영상 분석 보조 시스템, 화면을 갖는 전자 장치에서 수행되는 방법, 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스
US20150230770A1 (en) Diagnosis station for diagnosing mammograms
JP6841136B2 (ja) 医用画像表示装置及びプログラム
US7787677B2 (en) Presentation method, presentation device and computer program for presenting an image of an object
US20240161231A1 (en) Recording medium, display device, display system and display method
JP2008090101A (ja) 情報処理装置、その画像表示制御方法、及びその画像表示制御プログラム
KR20130135800A (ko) 의료기기 및 이를 이용한 영상표시방법
JP5672183B2 (ja) 情報処理装置、情報処理方法、および情報処理プログラム
US20190196664A1 (en) Medical image display system and medical image display apparatus
KR20220026235A (ko) 의료영상 간 분석데이터 매칭시스템 및 방법, 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스
JP2008186267A (ja) アプリケーションの設定装置および設定方法

Legal Events

Date Code Title Description
A201 Request for examination