KR20240065446A - 초음파 영상 처리 방법 및 디바이스 - Google Patents

초음파 영상 처리 방법 및 디바이스 Download PDF

Info

Publication number
KR20240065446A
KR20240065446A KR1020220141473A KR20220141473A KR20240065446A KR 20240065446 A KR20240065446 A KR 20240065446A KR 1020220141473 A KR1020220141473 A KR 1020220141473A KR 20220141473 A KR20220141473 A KR 20220141473A KR 20240065446 A KR20240065446 A KR 20240065446A
Authority
KR
South Korea
Prior art keywords
interest
objects
annotation
image
ultrasound image
Prior art date
Application number
KR1020220141473A
Other languages
English (en)
Inventor
김덕석
최보경
Original Assignee
주식회사 엠티이지
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 엠티이지 filed Critical 주식회사 엠티이지
Priority to KR1020220141473A priority Critical patent/KR20240065446A/ko
Priority to PCT/KR2023/011445 priority patent/WO2024090746A1/ko
Publication of KR20240065446A publication Critical patent/KR20240065446A/ko

Links

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5215—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/08—Detecting organic movements or changes, e.g. tumours, cysts, swellings
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461—Displaying means of special interest
    • A61B8/463—Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/11—Region-based segmentation
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10132—Ultrasound image

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Physics & Mathematics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Animal Behavior & Ethology (AREA)
  • Surgery (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Molecular Biology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Epidemiology (AREA)
  • General Physics & Mathematics (AREA)
  • Primary Health Care (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)

Abstract

하나 이상의 관심 객체를 포함하는 초음파 영상을 획득하는 단계, 상기 하나 이상의 관심 객체에 대한 최적 영상을 상기 초음파 영상으로부터 획득하는 단계, 상기 최적 영상으로 접근하기 위해 이용되는 어노테이션을 획득하는 단계, 상기 하나 이상의 관심 객체에 대한 모니터링 상황을 나타내는 타임 테이블을 획득하는 단계 및 상기 어노테이션 및 상기 어노테이션과 연동하여 동작하는 상기 타임 테이블을 제공하는 단계를 포함하는, 초음파 영상 처리 방법, 그 방법에 대한 디바이스 및 기록매체가 개시된다.

Description

초음파 영상 처리 방법 및 디바이스 {Method and device for processing ultrasonic imaging}
본 개시의 기술 분야는 최적 영상을 위한 초음파 영상 처리 방법 및 디바이스에 관한 것으로, 초음파 영상에 대한 영상 처리를 통해 사용자에게 유용한 정보를 제공하는 방법을 제공하는 기술 분야와 관련된다.
최근 다양한 분야에서는 동영상을 통해 정보를 전달하고 있다. 영상 매체는 현장을 그대로 기록 할 수 있으며, 시청자로 하여금 시청각적인 효과를 통해 내용 전달을 보다 효과적으로 할 수 있다. 이러한 영상 매체의 장점에 의해 여러 분야에서 동영상을 활용한 정보 전달이 이루어지고 있다. 일 예로 동영상 시장의 선도 주자인 유튜브는 키워드에 대한 검색엔진을 통해 사용자가 원하는 정보를 보다 효과적으로 제공하고 있다.
그러나 아직까지 초음파 영상에 대해서 관심 객체를 모니터링하는 구체적인 방법에 대해서는 개발 중에 있는 현황이다. 특히 초음파 영상의 경우 관심 객체가 단순히 존재하는지 여부뿐만 아니라 관찰이 용이한지 여부에 대해서까지 분석이 요구된다. 따라서 사용자가 용이하게 초음파 영상을 활용할 수 있도록 하는 방법이 필요한 실정이다.
한국등록특허 제 10-2442178 호 (2022.09.05) 초음파 진단장치 및 그에 따른 초음파 진단 방법
본 개시에서 해결하고자 하는 과제는 초음파 영상 처리 방법 및 디바이스에 대한 것으로, 초음파 영상을 용이하게 활용할 수 있는 방법을 제공한다는 측면에서 사용자의 편의성을 향상시킬 수 있다.
본 개시에서 해결하고자 하는 과제는 상기된 바와 같은 기술적 과제들로 한정되지 않으며, 또 다른 기술적 과제들이 존재할 수 있다.
상술한 기술적 과제를 달성하기 위한 기술적 수단으로써, 본 개시의 제 1 측면에 따른 사용자 최적의 초음파 영상 처리 방법에 있어서, 하나 이상의 관심 객체를 포함하는 초음파 영상을 획득하는 단계; 상기 하나 이상의 관심 객체에 대한 최적 영상을 상기 초음파 영상으로부터 획득하는 단계; 상기 최적 영상으로 접근하기 위해 이용되는 어노테이션을 획득하는 단계; 상기 하나 이상의 관심 객체에 대한 모니터링 상황을 나타내는 타임 테이블을 획득하는 단계; 및 상기 어노테이션 및 상기 어노테이션과 연동하여 동작하는 상기 타임 테이블을 제공하는 단계;를 포함할 수 있다.
또한, 상기 어노테이션은 상기 최적 영상의 시작 시점 및 종료 시점에 대한 정보를 포함할 수 있다.
또한, 상기 타임 테이블은 상기 하나 이상의 관심 객체가 동시에 인식되는 시점에 대한 정보를 포함할 수 있다.
또한, 상기 타임 테이블을 제공하는 단계는 상기 하나 이상의 관심 객체 중 기설정 개수 이상의 관심 객체가 동시에 인식되는 시점을 상기 타임 테이블 상에서 하이라이트 하여 디스플레이 할 수 있다.
또한, 상기 초음파 영상에 포함되는 상기 하나 이상의 관심 객체에 대한 세그먼테이션을 수행하는 단계; 및 상기 세그먼테이션이 수행된 상기 하나 이상의 관심 객체를 서로 다른 방식으로 디스플레이하는 단계;를 더 포함할 수 있다.
또한, 상기 하나 이상의 관심 객체를 서로 다른 방식으로 디스플레이하는 단계는 상기 하나 이상의 관심 객체를 서로 다른 색으로 디스플레이 할 수 있다.
또한, 상기 최적 영상을 상기 초음파 영상으로부터 획득하는 단계는 상기 세그먼테이션을 수행하는 단계가 수행되기 이전에 수행할 수 있다.
또한, 상기 최적 영상을 상기 초음파 영상으로부터 획득하는 단계는 상기 하나 이상의 관심 객체 간의 위치 관계에 기초하여 상기 초음파 영상으로부터 상기 최적 영상을 획득할 수 있다.
또한, 상기 하나 이상의 관심 객체는 동맥, 신경계 및 갈비뼈를 포함하고, 상기 최적 영상을 상기 초음파 영상으로부터 획득하는 단계는 상기 신경계, 상기 동맥 및 상기 갈비뼈의 순서로 상기 하나 이상의 관심 객체가 배열되는 영상을 상기 최적 영상으로 결정할 수 있다.
또한, 상기 타임 테이블을 제공하는 단계는 상기 어노테이션이 나타내는 최적 영상의 시작 지점 및 종료 지점을 편집하기 위한 편집 그래픽 및 상기 어노테이션을 제거하기 위한 제거 그래픽을 상기 어노테이션과 인접한 영역에 디스플레이 할 수 있다.
본 개시의 제 2 측면에 따른 초음파 영상 처리 디바이스에 있어서, 하나 이상의 관심 객체를 포함하는 초음파 영상을 획득하는 수신부; 및 상기 하나 이상의 관심 객체에 대한 최적 영상을 상기 초음파 영상으로부터 획득하고, 상기 최적 영상으로 접근하기 위해 이용되는 어노테이션을 획득하고, 상기 하나 이상의 관심 객체에 대한 모니터링 상황을 나타내는 타임 테이블을 획득하고, 상기 어노테이션 및 상기 어노테이션과 연동하여 동작하는 상기 타임 테이블을 제공하는 프로세서;를 포함할 수 있다.
또한, 상기 어노테이션은 상기 최적 영상의 시작 시점 및 종료 시점에 대한 정보를 포함할 수 있다.
또한, 상기 타임 테이블은 상기 하나 이상의 관심 객체가 동시에 인식되는 시점에 대한 정보를 포함할 수 있다.
또한, 상기 프로세서는 상기 초음파 영상에 포함되는 상기 하나 이상의 관심 객체에 대한 세그먼테이션을 수행하고, 상기 세그먼테이션이 수행된 상기 하나 이상의 관심 객체를 서로 다른 방식으로 디스플레이하는 디스플레이;를 더 포함할 수 있다.
또한, 상기 프로세서는 상기 세그먼테이션을 수행하기 전에 상기 최적 영상을 상기 초음파 영상으로부터 획득할 수 있다.
또한, 상기 최적 영상을 상기 초음파 영상으로부터 획득하는 단계는 상기 하나 이상의 관심 객체 간의 위치 관계에 기초하여 상기 초음파 영상으로부터 상기 최적 영상을 획득할 수 있다.
또한, 상기 어노테이션이 나타내는 최적 영상의 시작 지점 및 종료 지점을 편집하기 위한 편집 그래픽 및 상기 어노테이션을 제거하기 위한 제거 그래픽을 상기 어노테이션과 인접한 영역에 디스플레이하는 디스플레이를 더 포함할 수 있다.
또한, 본 개시의 제 3측면은, 제 1측면의 방법을 구현하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 비 일시적 기록 매체를 제공할 수 있다.
본 개시의 일 실시 예에 따르면, 초음파 영상을 용이하게 활용할 수 있는 방법을 제공하기 때문에 초음파 영상에서 유용한 영상에 대해서 용이하게 접근이 가능하다는 점에서 편의성이 향상될 수 있다.
본 개시의 효과들은 이상에서 언급된 효과로 제한되지 않으며, 언급되지 않은 또 다른 효과들은 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.
도 1은 일 실시 예에 따른 디바이스 또는 서버가 시스템 상에서 구현되는 일 예를 도시하는 도면이다.
도 2는 일 실시 예에 따른 디바이스의 구성을 개략적으로 도시한 블록도이다.
도 3은 일 실시 예에 따른 디바이스가 동작하는 각 단계를 도시한 흐름도이다.
도 4는 일 실시 예에 따른 디바이스가 최적 영상을 획득하는 일 예를 설명하기 위한 도면이다.
도 5는 일 실시 예에 따른 디바이스가 어노테이션을 획득하는 일 예를 설명하기 위한 도면이다.
도 6은 일 실시 예에 따른 디바이스가 타임 테이블을 획득하는 일 예를 설명하기 위한 도면이다.
도 7은 일 실시 예에 따른 디바이스가 최적 영상, 타임 테이블 및 어노테이션을 연동하여 제공하는 일 예를 설명하기 위한 도면이다.
본 개시에서 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술 되어 있는 실시 예들을 참조하면 명확해질 것이다. 그러나, 본 개시는 이하에서 개시되는 실시 예들에 제한되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시 예들은 개시가 완전 하도록 하고, 해당 기술 분야에 속하는 통상의 기술자에게 본 개시의 범주를 완전하게 알려주기 위해 제공되는 것이다.
본 명세서에서 사용된 용어는 실시 예들을 설명하기 위한 것이며 본 개시를 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성요소 외에 하나 이상의 다른 구성요소의 존재 또는 추가를 배제하지 않는다. 명세서 전체에 걸쳐 동일한 도면 부호는 동일한 구성 요소를 지칭하며, "및/또는"은 언급된 구성요소들의 각각 및 하나 이상의 모든 조합을 포함한다. 비록 "제1", "제2" 등이 다양한 구성요소들을 서술하기 위해서 사용되나, 이들 구성요소들은 이들 용어에 의해 제한되지 않음은 물론이다. 이들 용어들은 단지 하나의 구성요소를 다른 구성요소와 구별하기 위하여 사용하는 것이다. 따라서, 이하에서 언급되는 제1 구성요소는 본 개시의 기술적 사상 내에서 제2 구성요소일 수도 있음은 물론이다.
다른 정의가 없다면, 본 명세서에서 사용되는 모든 용어(기술 및 과학적 용어를 포함)는 해당 기술분야의 통상의 기술자에게 공통적으로 이해될 수 있는 의미로 사용될 수 있을 것이다. 또한, 일반적으로 사용되는 사전에 정의되어 있는 용어들은 명백하게 특별히 정의되어 있지 않는 한 이상적으로 또는 과도하게 해석되지 않는다.
공간적으로 상대적인 용어인 "아래(below)", "아래(beneath)", "하부(lower)", "위(above)", "상부(upper)" 등은 도면에 도시되어 있는 바와 같이 하나의 구성요소와 다른 구성요소들과의 상관관계를 용이하게 기술하기 위해 사용될 수 있다. 공간적으로 상대적인 용어는 도면에 도시되어 있는 방향에 더하여 사용시 또는 동작 시 구성요소들의 서로 다른 방향을 포함하는 용어로 이해되어야 한다. 예를 들어, 도면에 도시되어 있는 구성요소를 뒤집을 경우, 다른 구성요소의 "아래(below)"또는 "아래(beneath)"로 기술된 구성요소는 다른 구성요소의 "위(above)"에 놓여질 수 있다. 따라서, 예시적인 용어인 "아래"는 아래와 위의 방향을 모두 포함할 수 있다. 구성요소는 다른 방향으로도 배향될 수 있으며, 이에 따라 공간적으로 상대적인 용어들은 배향에 따라 해석될 수 있다.
이하에서는 도면을 참조하여 실시 예들을 상세히 설명한다.
도 1은 일 실시 예에 따른 디바이스(100) 또는 서버가 시스템 상에서 구현되는 일 예를 도시하는 도면이다.
도 1에 도시된 바와 같이, 의료 정보 시스템은 디바이스(100), 외부 서버(130), 저장 매체(140), 통신 디바이스(150), 가상 서버(160), 사용자 단말(170) 및 네트워크 등을 포함할 수 있다.
그러나, 도 1에 도시된 구성요소들 외에 다른 범용적인 구성요소들이 의료 정보 시스템에 더 포함될 수 있음을 관련 기술 분야에서 통상의 지식을 가진 자라면 이해할 수 있다. 예를 들면, 의료 정보 시스템은 네트워크와 연동하여 동작하는 블록체인 서버(미도시)를 더 포함할 수 있다. 또는 다른 실시 예에 따를 경우, 도 1에 도시된 구성요소들 중 일부 구성요소는 생략될 수 있음을 관련 기술 분야에서 통상의 지식을 가진 자라면 이해할 수 있다.
일 실시 예에 따른 디바이스(100)는 수술 등 의료 행위와 관련된 정보를 다양한 소스로부터 획득할 수 있다. 예를 들면 디바이스(100)는 수술 등 의료 행위와 관련된 정보(예: 동영상)를 정보 획득 장치(미도시)로부터 획득할 수 있다. 정보 획득 장치(미도시) 는 촬영 장치, 녹음 장치, 생체 신호 획득 장치 등을 포함할 수 있으나, 이에 제한되지 않는다. 다른 예로 디바이스(100)는 수술 등 의료 행위와 관련된 정보(예: 동영상)를 네트워크로부터 획득할 수 있다.
생체 신호는 체온 신호, 맥박 신호, 호흡 신호, 혈압 신호, 근전도 신호, 뇌파 신호 등 생명체로부터 획득되는 신호를 제한 없이 포함할 수 있다. 정보 획득 장치(미도시)의 일 예인 촬영 장치는 수술실 상황을 전체적으로 촬영하는 제 1 촬영 장치(예: CCTV 등)와 수술 부위를 집중적으로 촬영하는 제 2 촬영 장치(예: 내시경 등) 등을 포함할 수 있으나, 이에 제한되지 않는다.
일 실시 예에 따른 디바이스(100)는 정보 획득 장치(미도시) 또는 네트워크로부터 수술 등 의료 행위와 관련된 영상(동영상, 정지영상 등)을 획득할 수 있다. 영상은 동영상과 정지 영상을 모두 포함하는 개념으로 이해될 수 있다. 디바이스(100)는 획득한 영상에 대한 영상 처리를 수행할 수 있다. 일 실시 예에 따른 영상 처리는 각각의 영상에 대한 네이밍, 인코딩, 저장, 전송, 편집, 메타 데이터 생성 등을 포함할 수 있으나, 이에 제한되지 않는다.
일 실시 예에 따른 디바이스(100)는 정보 획득 장치(미도시) 또는 네트워크로부터 획득한 의료 행위 관련 정보를 그대로 또는 갱신하여 네트워크로 전송할 수 있다. 디바이스(100)가 네트워크로 전송하는 전송 정보는 네트워크를 통해서 외부 디바이스(130, 140, 150, 160, 170)로 전송될 수 있다. 예를 들면, 디바이스(100)는 네트워크를 통해서 외부 서버(130), 저장 매체(140), 통신 디바이스(150), 가상 서버(160), 사용자 단말(170) 등으로 갱신된 동영상을 전송할 수 있다. 디바이스(100)는 외부 디바이스(130, 140, 150, 160, 170)로부터 다양한 정보(예: 피드백 정보, 갱신 요청 등)를 수신할 수 있다. 통신 디바이스(150)는 통신에 이용되는 디바이스를 제한 없이 의미할 수 있으며(예: 게이트웨이), 통신 디바이스(150)는 사용자 단말(180) 등 네트워크와 직접 연결되지 않는 디바이스와 통신할 수 있다.
일 실시 예에 따른 디바이스(100)는 입력부, 출력부 프로세서, 메모리 등을 포함할 수 있으며, 디스플레이 장치(미도시)도 포함할 수 있다. 예컨대, 사용자는 디스플레이 장치를 통해서 통신 상태, 메모리 사용 현황, 전력 상태(예: 배터리의 충전상태(State Of Charge), 외부 전력 공급 여부 등), 저장된 동영상에 대한 썸네일 영상, 현재 동작 중인 동작 모드 등을 등을 확인할 수 있다. 한편, 디스플레이 장치는 액정 디스플레이(liquid crystal display), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display), 유기 발광 다이오드(organic light-emitting diode), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display), 전기영동 디스플레이(electrophoretic display) 등일 수 있다. 또한, 디스플레이 장치는 구현 형태에 따라 2개 이상의 디스플레이를 포함할 수 있다. 또한, 디스플레이의 터치패드가 레이어 구조를 이루어 터치 스크린으로 구성되는 경우, 디스플레이는 출력 장치 이외에 입력 장치로도 사용될 수 있다.
또한, 네트워크는 유선 통신 또는 무선 통신을 통해 상호 통신을 수행할 수 있다. 예컨대 네트워크는 일종의 서버로 구현될 수도 있으며, 와이파이 칩, 블루투스 칩, 무선 통신 칩, NFC 칩 등을 포함할 수 있다. 물론, 디바이스(100)는 와이파이 칩, 블루투스 칩, 무선 통신 칩, NFC 칩 등을 이용하여 각종 외부기기와 통신을 수행할 수 있다. 와이파이 칩, 블루투스 칩은 각각 Wi-Fi 방식, 블루투스 방식으로 통신을 수행할 수 있다. 와이파이 칩이나 블루투스 칩을 이용하는 경우에는 SSID 및 세션 키 등과 같은 각종 연결 정보를 먼저 송수신하여, 이를 이용하여 통신 연결한 후 각종 정보들을 송수신할 수 있다. 무선 통신 칩은 IEEE, 지그비, 3G(3rd Generation), 3GPP(3rd Generation Partnership Project), LTE(Long Term Evolution) 등과 같은 다양한 통신 규격에 따라 통신을 수행할 수 있다. NFC 칩은 135kHz, 13.56MHz, 433MHz, 860~960MHz, 2.45GHz 등과 같은 다양한 RF-ID 주파수 대역들 중에서 13.56MHz 대역을 사용하는 NFC(Near Field Communication) 방식으로 동작할 수 있다.
일 실시 예에 따른 입력부는 사용자가 디바이스(100)를 제어하기 위한 데이터를 입력하는 수단을 의미할 수 있다. 예를 들어, 입력부에는 키 패드(key pad), 돔 스위치 (dome switch), 터치 패드(접촉식 정전 용량 방식, 압력식 저항막 방식, 적외선 감지 방식, 표면 초음파 전도 방식, 적분식 장력 측정 방식, 피에조 효과 방식 등), 조그 휠, 조그 스위치 등이 있을 수 있으나 이에 한정되는 것은 아니다.
일 실시 예에 따른 출력부는 오디오 신호 또는 비디오 신호 또는 진동 신호를 출력할 수 있으며, 출력부는 디스플레이 장치, 음향 출력 장치, 및 진동 모터 등을 포함할 수 있다.
일 실시 예에 따른 사용자 단말(170)은 스마트폰(Smartphone), 스마트패드(SmartPad), 태블릿 PC 등 다양한 유무선 통신 디바이스를 포함할 수 있으나 이에 제한되지 않는다.
일 실시 예에 따른 디바이스(100)는 정보 획득 장치(미도시)로부터 획득한 의료 행위 관련 정보(예: 동영상)를 갱신할 수 있다. 예를 들면, 디바이스(100)는 정보 획득 장치(미도시)로부터 획득한 영상에 대한 네이밍, 인코딩, 저장, 전송, 편집, 메타 데이터 생성 등을 수행할 수 있다. 일 예로, 디바이스(100)는 획득한 영상의 메타 데이터(예: 생성 시간)을 이용하여 영상 파일의 네이밍을 수행할 수 있다. 다른 예로, 디바이스(100)는 정보 획득 장치(미도시)로부터 획득한 의료 행위와 관련된 영상을 분류할 수 있다. 디바이스(100)는 학습된 AI를 이용하여, 의료 행위와 관련된 영상을 수술 종류, 수술자, 수술 장소 등 다양한 기준에 기초하여 분류할 수 있다.
또한, 도 1에서 디바이스(100)는 서버로 구현될 수도 있으며, 디바이스(100)가 구현될 수 있는 물리적 장치의 범위는 제한하여 해석되지 않는다.
또한, 명세서 전반에 걸쳐 '제공'은 정보의 전송뿐 아니라 화면을 디스플레이하는 동작과 같이 정보, 화면 등 임의의 대상을 제공하는 모든 동작을 포함하는 것으로 해석될 수 있으며, 특별한 실시 행위로 제한하여 해석되지 않는다.
일 실시 예에 따른 디바이스(100)가 제공하는 화면에 대해서 사용자 입력의 일 예로서 선택 입력이 획득될 수 있다. 일 실시 예에 따른 선택 입력은 터치 입력, 마우스 등을 이용한 클릭 입력, 키보드 등을 이용한 타이핑 입력 등 다양한 방식에 따라 획득될 수 있다.
도 2는 일 실시 예에 따른 디바이스(100)의 구성을 개략적으로 도시한 블록도이다.
도 2에 도시된 바와 같이, 일 실시 예에 따른 디바이스(100)는 수신부(210), 프로세서(220), 출력부(230) 및 메모리(240)를 포함할 수 있다. 그러나 도 2에 도시된 구성요소 모두가 디바이스(100)의 필수 구성요소인 것은 아니다. 도 2에 도시된 구성 요소보다 많은 구성 요소에 의해 디바이스(100)가 구현될 수도 있고, 도 2에 도시된 구성 요소보다 적은 구성 요소에 의해 디바이스(100)가 구현될 수도 있다.
예를 들어, 일 실시 예에 따른 디바이스(100)는 수신부(210), 프로세서(220), 출력부(230), 메모리(240) 외에 통신부(미도시) 또는 입력부(미도시)를 더 포함할 수도 있다. 또한 출력부(230)의 일 예로서 디스플레이(미도시)가 포함될 수 있다.
일 실시 예에 따른 수신부(210)는 동영상에서 복수의 객체가 제공되는 화면의 일부 영역에 대한 선택 입력을 획득할 수 있다. 선택 입력은 터치 입력, 마우스 등을 이용한 클릭 입력, 키보드 등을 이용한 타이핑 입력 등 다양한 방식으로 제공될 수 있다.
일 실시 예에 따른 수신부(210)는 하나 이상의 관심 객체를 포함하는 초음파 영상을 획득할 수 있다. 초음파 영상은 초음파 영상을 획득하는데 이용되는 초음파 영상 획득 디바이스(미도시)로부터 획득될 수 있다. 일 실시 예에 따른 수신부(210)는 초음파 영상 획득 디바이스로 유선 또는 무선으로 초음파 영상을 수신할 수 있다. 또는 수신부(210)는 초음파 영상 획득 디바이스를 포함할 수도 있다.
일 실시 예에 따른 프로세서(220)는 하나 이상의 관심 객체에 대한 최적 영상을 초음파 영상으로부터 획득한다. 예를 들면, 프로세서(220)는 최적 영상에 대한 샘플을 학습하고, 학습 결과에 기초하여 초음파 영상으로부터 최적 영상을 획득할 수 있다. 다른 예로, 프로세서(220)는 하나 이상의 관심 객체 간의 위치 관계에 기초하여 초음파 영상으로부터 최적 영상을 획득할 수 있다.
일 실시 예에 따른 프로세서(220)는 최적 영상으로 접근하기 위해 이용되는 어노테이션을 획득한다. 일 실시 예에 따른 어노테이션은 초음파 영상에서 최적 영상으로 접근하는 방법을 제공할 수 있다. 예를 들면, 일 예시에 따른 어노테이션은 1분 길이의 초음파 영상에서 최적 영상에 대응되는 시간 구간인 30초 내지 35초의 시간 구간으로 용이하게 접근하는 링크를 제공할 수 있다.
일 실시 예에 따른 프로세서(220)는 하나 이상의 관심 객체에 대한 모니터링 상황을 나타내는 타임 테이블을 획득한다. 타임 테이블은 관심 객체가 초음파 영상에 있는 것으로 결정된 시점에 대한 정보를 포함한다. 따라서, 일 실시 예에 따른 타임 테이블은 하나 이상의 관심 객체가 동시에 인식되는 시점에 대한 정보를 포함할 수 있다.
일 실시 예에 따른 프로세서(220)는 어노테이션 및 어노테이션과 연동하여 동작하는 타임 테이블을 제공한다. 일 실시 예에 따를 때 어노테이션, 타임테이블 및 초음파 영상은 서로 연동하여 동작할 수 있다.
도 3은 일 실시 예에 따른 디바이스(100)가 동작하는 각 단계를 도시한 흐름도이다.
단계 S310을 참조하면, 일 실시 예에 따른 디바이스(100)는 하나 이상의 관심 객체를 포함하는 초음파 영상을 획득한다. 초음파 영상은 초음파 영상을 획득하는데 이용되는 초음파 영상 획득 디바이스(미도시)로부터 획득될 수 있다. 일 실시 예에 따른 디바이스(100)는 초음파 영상 획득 디바이스로부터 유선 또는 무선으로 초음파 영상을 수신할 수 있다. 또는 디바이스(100)는 초음파 영상 획득 디바이스를 포함할 수도 있다.
일 실시 예에 따른 초음파 영상은 시간의 흐름에 따라 갱신되는 영상을 포함하는 파일로 제공될 수 있다. 예를 들면, 초음파 영상은 동일한 관점에 대해서 뎁스가 갱신됨에 따라 획득되는 초음파 영상을 포함할 수 있다. 다른 예로, 초음파 영상은 지향하는 관점이 갱신됨에 따라 획득되는 초음파 영상을 포함할 수 있다.
단계 S320을 참조하면, 일 실시 예에 따른 디바이스(100)는 하나 이상의 관심 객체에 대한 최적 영상을 초음파 영상으로부터 획득한다.
일 실시 예에 따른 디바이스(100)는 다양한 방식으로 초음파 영상으로부터 최적 영상을 획득할 수 있다. 예를 들면, 디바이스(100)는 최적 영상에 대한 샘플을 학습하고, 학습 결과에 기초하여 초음파 영상으로부터 최적 영상을 획득할 수 있다. 다른 예로, 디바이스(100)는 하나 이상의 관심 객체 간의 위치 관계에 기초하여 초음파 영상으로부터 최적 영상을 획득할 수 있다.
일 실시 예에 따른 디바이스(100)가 하나 이상의 관심 객체 간의 위치 관계에 기초하여 초음파 영상으로부터 최적 영상을 획득하는 방법에 대해 설명한다. 하나 이상의 관심 객체는 동맥, 신경계 및 갈비뼈 등을 포함할 수 있다. 디바이스(100)는 신경계, 동맥 및 갈비뼈 등의 위치 관계에 기초하여 복수의 초음파 영상 중 일부의 초음파 영상을 최적 영상으로 결정할 수 있다. 예를 들면, 디바이스(100)는 신경계, 동맥 및 갈비뼈의 순서로 배열되는 초음파 영상을 최적 영상으로 결정할 수 있다. 구체적으로 초음파 영상의 일 측면에서 다른 측면으로 향하는 방향에 따라 동맥, 신경계 및 갈비뼈의 순서로 나열되고, 갈비뼈가 동맥과 신경계를 받치는 형태로 배치되는 경우, 최적 영상으로 결정될 수 있다. 보다 구체적인 최적 영상의 예시에 대해서는 도 4에서 후술한다.
단계 S330을 참조하면, 일 실시 예에 따른 디바이스(100)는 최적 영상으로 접근하기 위해 이용되는 어노테이션을 획득한다.
일 실시 예에 따른 어노테이션은 초음파 영상에서 최적 영상으로 접근하는 방법을 제공할 수 있다. 예를 들면, 일 예시에 따른 어노테이션은 1분 길이의 초음파 영상에서 최적 영상에 대응되는 시간 구간인 30초 내지 35초의 시간 구간으로 용이하게 접근하는 링크를 제공할 수 있다. 이 경우 일 예시에 따른 어노테이션에 대해 선택 입력이 인가됨에 따라, 디바이스(100)는 최적 영상에 대응되는 시간 구간의 초음파 영상을 디스플레이할 수 있다.
따라서, 일 실시 예에 따른 어노테이션은 최적 영상의 시작 시점 및 종료 시점에 대한 정보를 포함할 수 있다. 일 예시에 따른 어노테이션에 대해 선택 입력이 인가됨에 따라, 디바이스(100)는 최적 영상의 시작 시점에 대응되는 초음파 영상을 디스플레이할 수 있다.
보다 구체적인 어노테이션의 예시에 대해서는 도 5에서 후술한다.
단계 S340을 참조하면, 일 실시 예에 따른 디바이스(100)는 하나 이상의 관심 객체에 대한 모니터링 상황을 나타내는 타임 테이블을 획득한다.
일 실시 예에 따른 디바이스(100)는 관심 객체가 모니터링되는 시점에 대한 정보를 포함하는 타임 테이블을 제공할 수 있다. 타임 테이블은 관심 객체가 초음파 영상에 있는 것으로 결정된 시점에 대한 정보를 포함한다. 따라서, 일 실시 예에 따른 타임 테이블은 하나 이상의 관심 객체가 동시에 인식되는 시점에 대한 정보를 포함할 수 있다.
일 실시 예에 따른 디바이스(100)는 타임 테이블을 제공함에 있어서, 하나 이상의 관심 객체 중 기설정 개수 이상의 관심 객체가 동시에 인식되는 시점을 타임 테이블 상에서 하이라이트 하여 디스플레이할 수 있다.
보다 구체적인 타임 테이블의 예시에 대해서는 도 6에서 후술한다.
단계 S350을 참조하면, 일 실시 예에 따른 디바이스(100)는 어노테이션 및 어노테이션과 연동하여 동작하는 타임 테이블을 제공한다.
일 실시 예에 따른 디바이스(100)는 어노테이션, 타임 테이블 및 초음파 영상을 제공할 수 있다. 초음파 영상은 최적 영상을 포함할 수 있다. 일 실시 예에 따를 때 어노테이션, 타임테이블 및 초음파 영상은 서로 연동하여 동작할 수 있다. 일 실시 예에 따라 어노테이션, 타임테이블 및 초음파 영상이 서로 연동하여 제공되는 예시에 대해서는 도 7에서 후술한다.
도 4는 일 실시 예에 따른 디바이스(100)가 최적 영상을 획득하는 일 예를 설명하기 위한 도면이다.
일 실시 예에 따른 디바이스(100)는 다양한 방식으로 최적 영상을 획득할 수 있다.
일 실시 예에 따른 디바이스(100)는 학습을 수행하여 최적 영상을 획득할 수 있다. 디바이스(100)는 최적 영상의 예시로 이용되는 샘플 최적 영상에 대한 학습을 수행하여 복수의 초음파 영상 중 최적 영상을 결정할 수 있다. 학습에는 다양한 학습 알고리즘이 이용될 수 있다. 학습을 수행할 때에는 관심 객체의 위치가 주된 변수로서 이용될 수 있다.
일 실시 예에 따른 디바이스(100)는 학습을 수행하여 최적 영상을 획득할 수 있다. 디바이스(100)는 하나 이상의 관심 객체 간의 위치 관계에 기초하여 초음파 영상으로부터 최적 영상을 획득할 수 있다.
예를 들면, 디바이스(100)는 신경계(410), 동맥(420) 및 갈비뼈(430)의 순서로 배열되는 초음파 영상을 최적 영상으로 결정할 수 있다. 구체적으로 초음파 영상의 일 측면(예: 상측)에서 다른 측면(예: 하측)으로 향하는 방향에 따라 신경계(410), 동맥(420) 및 갈비뼈(430)의 순서로 나열되고, 갈비뼈가 동맥과 신경계를 받치는 형태로 배치되는 경우, 최적 영상으로 결정될 수 있다.
일 실시 예에 따른 디바이스(100)는 초음파 영상에 포함되는 하나 이상의 관심 객체에 대한 세그먼테이션을 수행할 수 있다. 예를 들면, 디바이스(100)는 세그먼테이션을 수행함에 따라 신경계(410), 동맥(420) 및 갈비뼈(430)를 서로 구별할 수 있다.
일 실시 예에 따른 디바이스(100)는 복수개의 관심 객체를 서로 다른 방식으로 디스플레이할 수 있다. 디바이스(100)는 세그먼테이션이 수행된 하나 이상의 관심 객체를 서로 다른 방식으로 디스플레이할 수 있따. 세그먼테이션이 수행된 결과 복수의 관심 객체는 서로 구별될 수 있으며, 디바이스(100)는 서로 구별되는 복수의 관심 객체를 서로 상이한 방식으로 디스플레이할 수 있다. 도 4를 참조하면 디바이스(100)는 신경계(410), 동맥(420) 및 갈비뼈(430)를 서로 다른 색으로 디스플레이할 수 있으나 이에 제한되지 않는다. 디바이스(100)는 도 4에 도시되지 않은 다른 방식으로 복수의 관심 객체를 서로 구별하여 디스플레이할 수 있다. 예를 들면, 디바이스(100)는 신경계(410), 동맥(420) 및 갈비뼈(430)에 대한 외곽선을 초음파 영상 상에 중첩하여 디스플레이할 수 있다. 다른 예로, 디바이스(100)는 초음파 영상을 배제하고, 관심 객체만을 제공하는 영상을 디스플레이할 수도 있다.
일 실시 예에 따른 디바이스(100)는 세그먼테이션을 수행하기 전에 최적 영상을 초음파 영상으로부터 획득할 수 있다. 세그먼테이션이 수행되기 전에 최적 영상을 우선적으로 획득하는 경우, 디바이스(100)는 보다 높은 정확도로 최적 영상을 획득할 수 있다. 세그먼테이션이 수행될 경우, 세그먼테이션을 수행하는 과정에서 오차가 발생할 수 있으며, 이러한 오차가 누적될 경우, 최적 영상을 획득하는 과정에서 부정확성이 높아질 수 있다. 따라서, 디바이스(100)는 세그먼테이션을 수행하기 전에 우선적으로 최적 영상을 획득하고, 일단 최적 영상이 획득되면, 획득된 최적 영상에 대해서 세그먼테이션을 수행함으로서 보다 높은 적확도를 확보할 수 있다. 세그먼테이션을 먼저 수행할 경우, 모든 초음파 영상에 대해서 세그먼테이션을 수행하는 과정에서 리소스 소모가 크게 발생하지만, 일단 획득된 최적 영상에 대해서만 세그먼테이션을 수행할 경우, 리소스 소모가 감소할 수 있다.
도 5는 일 실시 예에 따른 디바이스(100)가 어노테이션을 획득하는 일 예를 설명하기 위한 도면이다.
일 실시 예에 따른 어노테이션은 초음파 영상에서 최적 영상으로 접근하는 방법을 제공할 수 있다. 예를 들면, 도 5를 참조하면 제 1 어노테이션(510)은 초음파 영상에서 최적 영상에 대응되는 시간 구간인 16초 내지 17초의 시간 구간으로 용이하게 접근하는 링크를 제공할 수 있다.
일 실시 예에 따른 디바이스(100)는 복수개의 어노테이션을 제공할 수 있다. 예를 들면 디바이스(100)는 제 1 어노테이션(510), 제 2 어노테이션(530) 및 제 3 어노테이션(530)을 제공할 수 있다.
일 예시에 따라 복수의 어노테이션 중 어느 하나의 어노테이션에 대해 선택 입력이 인가되는 경우, 디바이스(100)는 선택 입력이 인가된 어노테이션에 대응되는 시간 구간의 초음파 영상을 디스플레이할 수 있다. 예를 들면, 제 1 어노테이션(510)에 선택 입력이 인가되는 경우, 디바이스(100)는 16초 시점에 대응되는 초음파 영상을 디스플레이할 수 있다.
일 실시 예에 따라 어노테이션에 대응되는 시간 구간의 초음파 영상은 최적 영상일 수 있다. 디바이스(100)는 초음파 영상의 전체 시간 구간에 대해서 최적 영상이 포함된 시간 구간에 대해서 어노테이션을 생성하여 제공할 수 있다. 디바이스(100)가 초음파 영상으로부터 최적 영상을 획득하는 구체적인 방법에 대해서는 도 4에서 상술한 내용을 참조할 수 있다.
일 실시 예에 따른 어노테이션은 사용자 입력에 기초하여 생성될 수도 있다. 예를 들면, 사용자 입력에 기초하여 결정된 시간 구간(얘: 34초 내지 35초)에 대해서 신규 어노테이션이 생성될 수 있다. 예를 들면, 입력 영역(541)에 입력되는 텍스트와 세이브 버튼(542)을 통해 획득되는 세이브 요청에 기초하여, 디바이스(100)는 사용자 입력에 기초하여 결정된 시간 구간(얘: 34초 내지 35초)에 대한 신규 어노테이션을 획득할 수 있다.
일 실시 예에 따른 디바이스(100)는 어노테이션(예: 제 2 어노테이션(520))이 나타내는 최적 영상의 시작 지점 및 종료 지점을 편집하기 위한 편집 그래픽(521)을 어노테이션(예: 제 2 어노테이션(520))과 인접한 영역에 디스플레이할 수 있다. 예를 들면, 편집 그래픽(521)에 사용자 입력이 인가되는 경우, 디바이스(100)는 제 2 어노테이션(520)의 시작 지점 및 종료 지점을 편집하는 화면을 제공하고, 제공되는 편집 화면을 통해 획득되는 사용자 입력에 기초하여 제 2 어노테이션(520)의 시작 지점 및 종료 지점을 갱신할 수 있다.
일 실시 예에 따른 디바이스(100)는 어노테이션 어노테이션(예: 제 2 어노테이션(520))을 제거하기 위한 제거 그래픽(522)을 어노테이션(예: 제 2 어노테이션(520))과 인접한 영역에 디스플레이할 수 있다. 예를 들면, 제거 그래픽(522)에 사용자 입력이 인가되는 경우, 디바이스(100)는 제 2 어노테이션(520)을 삭제할 수 있다.
도 6은 일 실시 예에 따른 디바이스(100)가 타임 테이블을 획득하는 일 예를 설명하기 위한 도면이다.
일 실시 예에 따른 디바이스(100)는 관심 객체가 모니터링되는 시점에 대한 정보를 포함하는 타임 테이블(600)을 제공할 수 있다. 타임 테이블(600)은 관심 객체가 초음파 영상에 있는 것으로 결정된 시점에 대한 정보를 포함한다. 예를 들면, 제 1 행(610)은 제 1 관심 객체가 초음파 영상에 있는 것으로 결정된 시점을 나타낼 수 있고, 제 2 행(620)은 제 2 관심 객체가 초음파 영상에 있는 것으로 결정된 시점을 나타낼 수 있고, 제 3 행(630)은 제 3 관심 객체가 초음파 영상에 있는 것으로 결정된 시점을 나타낼 수 있다.
일 실시 예에 따른 타임 테이블(600)은 하나 이상의 관심 객체가 동시에 인식되는 시점에 대한 정보를 포함할 수 있다. 디바이스(100)는 타임 테이블(600)을 제공함에 있어서, 하나 이상의 관심 객체 중 기설정 개수 이상의 관심 객체가 동시에 인식되는 시점을 타임 테이블 상에서 하이라이트 하여 디스플레이할 수 있다. 예를 들면 제 1 관심 객체, 제 2 관심 객체 및 제 3 관심 객체가 동시에 모니터링되는 제 1 시간 구간(641), 제 2 시간 구간(642) 및 제 3 시간 구간(643)에 대해서, 디바이스(100)는 하이라이트하여 디스플레이할 수 있다.
도 7은 일 실시 예에 따른 디바이스(100)가 최적 영상, 타임 테이블 및 어노테이션을 연동하여 제공하는 일 예를 설명하기 위한 도면이다.
도 7을 참조하면 디바이스(100)는 최적 영상을 포함하는 초음파 영상을 제 1 영역에 디스플레이하고, 하나 이상의 어노테이션을 제 2 영역(720)에 디스플레이하고, 타임 테이블(600)을 제 3 영역(730)에 디스플레이할 수 있다. 제 1 영역(710), 제 2 영역(720) 및 제 3 영역(730)의 위치는 도 7에 도시된 방식과 상이한 방식으로 제공될 수 있다.
일 실시 예에 따를 때, 제 1 영역(710), 제 2 영역(720) 및 제 3 영역(730)에서 제공되는 정보는 상호 연동될 수 있다. 예를 들면, 제 2 영역에서 디스플레이하고 있는 신규 어노테이션에 대한 시간 구간인 34초 내지 35초가 제 1 영역(710)에서 디스플레이될 수 있다.
일 실시 예에 따른 디바이스(100)는 최적 영상, 타임 테이블(600) 및 하나 이상의 어노테이션을 연동하여 제공할 수 있다. 예를 들면, 사용자가 제 2 영역에서 어느 하나의 어노테이션에 대해 선택 입력을 인가하면 그에 대응하는 초음파 영상이 제 1 영역(710)에서 디스플레이되고, 그에 대응되는 재생 바가 제 3 영역(730)에서 디스플레이될 수 있다.
본 개시의 다양한 실시 예들은 기기(machine)(예를 들어, 디스플레이 장치 또는 컴퓨터)에 의해 읽을 수 있는 저장 매체(storage medium)(예를 들어, 메모리)에 저장된 하나 이상의 인스트럭션들을 포함하는 소프트웨어로서 구현될 수 있다. 예를 들면, 기기의 프로세서(예를 들어, 프로세서(220))는, 저장 매체로부터 저장된 하나 이상의 인스트럭션들 중 적어도 하나의 인스트럭션을 호출하고, 그것을 실행할 수 있다. 이것은 기기가 상기 호출된 적어도 하나의 인스트럭션에 따라 적어도 하나의 기능을 수행하도록 운영되는 것을 가능하게 한다. 상기 하나 이상의 인스트럭션들은 컴파일러에 의해 생성된 코드 또는 인터프리터에 의해 실행될 수 있는 코드를 포함할 수 있다. 기기로 읽을 수 있는 저장매체는, 비일시적(non-transitory) 저장매체의 형태로 제공될 수 있다. 여기서, '비일시적'은 저장매체가 실재(tangible)하는 장치이고, 신호(signal)(예: 전자기파)를 포함하지 않는다는 것을 의미할 뿐이며, 이 용어는 데이터가 저장매체에 반영구적으로 저장되는 경우와 임시적으로 저장되는 경우를 구분하지 않는다.
일 실시 예에 따르면, 본 개시에 개시된 다양한 실시 예들에 따른 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래될 수 있다. 컴퓨터 프로그램 제품은 기기로 읽을 수 있는 저장 매체(예: compact disc read only memory (CD-ROM))의 형태로 배포되거나, 또는 어플리케이션 스토어(예: 플레이 스토어TM)를 통해 또는 두 개의 사용자 장치들(예: 스마트폰들) 간에 직접, 온라인으로 배포(예: 다운로드 또는 업로드)될 수 있다. 온라인 배포의 경우에, 컴퓨터 프로그램 제품의 적어도 일부는 제조사의 서버, 어플리케이션 스토어의 서버, 또는 중계 서버의 메모리와 같은 기기로 읽을 수 있는 저장 매체에 적어도 일시 저장되거나, 임시적으로 생성될 수 있다.
본 발명에 대하여 예시한 도면을 참조로 하여 설명하였으나 개시된 실시 예와 도면에 의해 한정되는 것은 아니며 본 실시 예와 관련된 기술 분야에서 통상의 지식을 가진 자는 상기된 기재의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 방법들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 실시 예를 설명하며 본 발명의 구성에 따른 작용 효과를 명시적으로 기재하여 설명하지 않았을지라도, 해당 구성에 의해 예측이 가능한 효과 또한 인정될 수 있다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.
100: 디바이스
130: 외부 서버 140: 저장 매체
150: 통신 디바이스 160: 가상 서버
170: 사용자 단말 180: 사용자 단말
210: 수신부 220: 프로세서
230: 출력부 240: 메모리
410: 신경계 420: 동맥
430: 갈비뼈
510: 제 1 어노테이션 520: 제 2 어노테이션
530: 제 1 어노테이션
521: 편집 그래픽 522: 제거 그래픽
542: 세이브 버튼
600: 타임 테이블 610: 제 1 행
620: 제 2행 630: 제 3 행
641: 제 1 시간 구간 642: 제 2 시간 구간
643: 제 3 시간 구간
710: 제 1 영역 720: 제 2 영역
730: 제 3 영역

Claims (18)

  1. 초음파 영상 처리 방법에 있어서,
    하나 이상의 관심 객체를 포함하는 초음파 영상을 획득하는 단계;
    상기 하나 이상의 관심 객체에 대한 최적 영상을 상기 초음파 영상으로부터 획득하는 단계;
    상기 최적 영상으로 접근하기 위해 이용되는 어노테이션을 획득하는 단계;
    상기 하나 이상의 관심 객체에 대한 모니터링 상황을 나타내는 타임 테이블을 획득하는 단계; 및
    상기 어노테이션 및 상기 어노테이션과 연동하여 동작하는 상기 타임 테이블을 제공하는 단계;를 포함하는, 방법.
  2. 제 1 항에 있어서,
    상기 어노테이션은 상기 최적 영상의 시작 시점 및 종료 시점에 대한 정보를 포함하는, 방법.
  3. 제 1 항에 있어서,
    상기 타임 테이블은 상기 하나 이상의 관심 객체가 동시에 인식되는 시점에 대한 정보를 포함하는, 방법.
  4. 제 1 항에 있어서,
    상기 타임 테이블을 제공하는 단계는
    상기 하나 이상의 관심 객체 중 기설정 개수 이상의 관심 객체가 동시에 인식되는 시점을 상기 타임 테이블 상에서 하이라이트 하여 디스플레이하는, 방법.
  5. 제 1 항에 있어서,
    상기 초음파 영상에 포함되는 상기 하나 이상의 관심 객체에 대한 세그먼테이션을 수행하는 단계; 및
    상기 세그먼테이션이 수행된 상기 하나 이상의 관심 객체를 서로 다른 방식으로 디스플레이하는 단계;를 더 포함하는, 방법.
  6. 제 5 항에 있어서,
    상기 하나 이상의 관심 객체를 서로 다른 방식으로 디스플레이하는 단계는 상기 하나 이상의 관심 객체를 서로 다른 색으로 디스플레이하는, 방법.
  7. 제 5 항에 있어서,
    상기 최적 영상을 상기 초음파 영상으로부터 획득하는 단계는 상기 세그먼테이션을 수행하는 단계가 수행되기 이전에 수행되는, 방법.
  8. 제 1 항에 있어서,
    상기 최적 영상을 상기 초음파 영상으로부터 획득하는 단계는
    상기 하나 이상의 관심 객체 간의 위치 관계에 기초하여 상기 초음파 영상으로부터 상기 최적 영상을 획득하는, 방법.
  9. 제 8 항에 있어서,
    상기 하나 이상의 관심 객체는 동맥, 신경계 및 갈비뼈를 포함하고,
    상기 최적 영상을 상기 초음파 영상으로부터 획득하는 단계는
    상기 신경계, 상기 동맥 및 상기 갈비뼈의 순서로 상기 하나 이상의 관심 객체가 배열되는 영상을 상기 최적 영상으로 결정하는, 방법.
  10. 제 1 항에 있어서,
    상기 타임 테이블을 제공하는 단계는
    상기 어노테이션이 나타내는 최적 영상의 시작 지점 및 종료 지점을 편집하기 위한 편집 그래픽 및 상기 어노테이션을 제거하기 위한 제거 그래픽을 상기 어노테이션과 인접한 영역에 디스플레이하는, 방법.
  11. 초음파 영상 처리 디바이스에 있어서,
    하나 이상의 관심 객체를 포함하는 초음파 영상을 획득하는 수신부; 및
    상기 하나 이상의 관심 객체에 대한 최적 영상을 상기 초음파 영상으로부터 획득하고,
    상기 최적 영상으로 접근하기 위해 이용되는 어노테이션을 획득하고,
    상기 하나 이상의 관심 객체에 대한 모니터링 상황을 나타내는 타임 테이블을 획득하고,
    상기 어노테이션 및 상기 어노테이션과 연동하여 동작하는 상기 타임 테이블을 제공하는 프로세서;를 포함하는, 디바이스.
  12. 제 11 항에 있어서,
    상기 어노테이션은 상기 최적 영상의 시작 시점 및 종료 시점에 대한 정보를 포함하는, 디바이스.
  13. 제 11 항에 있어서,
    상기 타임 테이블은 상기 하나 이상의 관심 객체가 동시에 인식되는 시점에 대한 정보를 포함하는, 디바이스.
  14. 제 11 항에 있어서,
    상기 프로세서는
    상기 초음파 영상에 포함되는 상기 하나 이상의 관심 객체에 대한 세그먼테이션을 수행하고,
    상기 세그먼테이션이 수행된 상기 하나 이상의 관심 객체를 서로 다른 방식으로 디스플레이하는 디스플레이;를 더 포함하는, 디바이스.
  15. 제 14항에 있어서,
    상기 프로세서는
    상기 세그먼테이션을 수행하기 전에 상기 최적 영상을 상기 초음파 영상으로부터 획득하는, 디바이스.
  16. 제 11 항에 있어서,
    상기 프로세서는
    상기 하나 이상의 관심 객체 간의 위치 관계에 기초하여 상기 초음파 영상으로부터 상기 최적 영상을 획득하는, 디바이스.
  17. 제 11 항에 있어서,
    상기 어노테이션이 나타내는 최적 영상의 시작 지점 및 종료 지점을 편집하기 위한 편집 그래픽 및 상기 어노테이션을 제거하기 위한 제거 그래픽을 상기 어노테이션과 인접한 영역에 디스플레이하는 디스플레이;를 더 포함하는, 디바이스.
  18. 제 1 항 내지 제 10 항 중 어느 한 항의 방법을 구현하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 비일시적 기록 매체.
KR1020220141473A 2022-10-28 2022-10-28 초음파 영상 처리 방법 및 디바이스 KR20240065446A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020220141473A KR20240065446A (ko) 2022-10-28 2022-10-28 초음파 영상 처리 방법 및 디바이스
PCT/KR2023/011445 WO2024090746A1 (ko) 2022-10-28 2023-08-03 초음파 영상 처리 방법 및 디바이스

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020220141473A KR20240065446A (ko) 2022-10-28 2022-10-28 초음파 영상 처리 방법 및 디바이스

Publications (1)

Publication Number Publication Date
KR20240065446A true KR20240065446A (ko) 2024-05-14

Family

ID=90831233

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020220141473A KR20240065446A (ko) 2022-10-28 2022-10-28 초음파 영상 처리 방법 및 디바이스

Country Status (2)

Country Link
KR (1) KR20240065446A (ko)
WO (1) WO2024090746A1 (ko)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102442178B1 (ko) 2014-05-15 2022-09-08 삼성메디슨 주식회사 초음파 진단장치 및 그에 따른 초음파 진단 방법

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4493386B2 (ja) * 2003-04-25 2010-06-30 オリンパス株式会社 画像表示装置、画像表示方法および画像表示プログラム
JP2015061592A (ja) * 2013-08-21 2015-04-02 コニカミノルタ株式会社 超音波診断装置、超音波画像処理方法およびコンピュータ読み取り可能な非一時的な記録媒体
KR102375864B1 (ko) * 2015-02-10 2022-03-18 한화테크윈 주식회사 요약 영상 브라우징 시스템 및 방법
KR102314370B1 (ko) * 2017-05-17 2021-10-19 엘지전자 주식회사 이동 단말기
KR20190124002A (ko) * 2018-04-25 2019-11-04 삼성전자주식회사 의료 영상 장치 및 의료 영상을 처리하는 방법

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102442178B1 (ko) 2014-05-15 2022-09-08 삼성메디슨 주식회사 초음파 진단장치 및 그에 따른 초음파 진단 방법

Also Published As

Publication number Publication date
WO2024090746A1 (ko) 2024-05-02

Similar Documents

Publication Publication Date Title
US10924708B2 (en) Enhanced video interaction for a user interface of a telepresence network
US20220413692A1 (en) System and method for controlling the display of an image stream
CN109346158A (zh) 超声影像处理方法、计算机设备和可读存储介质
US10283004B2 (en) Multimedia apparatus, online education system, and method for providing education content thereof
US9411932B2 (en) Image management apparatus
KR102466438B1 (ko) 인지 기능 평가 시스템 및 인지 기능 평가 방법
WO2018145320A1 (zh) 超声医学检测设备、传输控制方法以及成像系统和终端
US20170300282A1 (en) Mobile device, system and method for medical image displaying using multiple mobile devices
US8401149B2 (en) X-ray photographing apparatus for receiving and editing X-ray image
CN103927452A (zh) 一种远程健康监护系统、方法和装置
US20110152686A1 (en) Ultrasound imaging
JP2020081280A (ja) 画像表示制御システム、画像表示システム及び画像解析装置
CN105468783A (zh) 信息收集方法及装置
KR20240065446A (ko) 초음파 영상 처리 방법 및 디바이스
KR20240048076A (ko) 음성 입력을 이용한 어노테이션을 제공하는 방법 및 디바이스
WO2017190360A1 (zh) 一种医疗检测系统及其控制方法
KR20240021624A (ko) 어노테이션을 포함하는 영상 획득 방법 및 디바이스
JP6178125B2 (ja) 超音波診断装置
KR20240048074A (ko) 라벨링을 이용한 능동 학습 방법 및 디바이스
CN105455846A (zh) 一种存储诊断辅助信息的方法、装置及超声系统
KR20240046357A (ko) 관심 영역에 대한 위치를 결정하는 방법 및 디바이스
KR20240048075A (ko) 영상에 포함된 객체에 대한 추론을 수행하는 방법 및 디바이스
KR20240022048A (ko) 수술 단계에 대한 정보를 제공하는 방법 및 디바이스
KR20240065445A (ko) 의료 로봇과 관련하여 영상을 제공하는 방법 및 디바이스
KR20240065505A (ko) 의사 등장 시간 구간에 기초하여 수행되는 영상 편집 방법 및 디바이스