WO2020204645A1 - 초음파 검사위치 안내 기능이 탑재된 초음파 촬영 장치 - Google Patents

초음파 검사위치 안내 기능이 탑재된 초음파 촬영 장치 Download PDF

Info

Publication number
WO2020204645A1
WO2020204645A1 PCT/KR2020/004543 KR2020004543W WO2020204645A1 WO 2020204645 A1 WO2020204645 A1 WO 2020204645A1 KR 2020004543 W KR2020004543 W KR 2020004543W WO 2020204645 A1 WO2020204645 A1 WO 2020204645A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
ultrasound
unit
camera
ultrasonic
Prior art date
Application number
PCT/KR2020/004543
Other languages
English (en)
French (fr)
Inventor
박범진
이광식
심기춘
박상현
Original Assignee
고려대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 고려대학교산학협력단 filed Critical 고려대학교산학협력단
Publication of WO2020204645A1 publication Critical patent/WO2020204645A1/ko

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/08—Detecting organic movements or changes, e.g. tumours, cysts, swellings
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/44—Constructional features of the ultrasonic, sonic or infrasonic diagnostic device
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/54—Control of the diagnostic device

Definitions

  • the present invention relates to an ultrasound imaging apparatus, and in the case of performing an ultrasound examination on a patient's body, the present invention relates to an ultrasound imaging apparatus capable of confirming and guiding an ultrasound examination position, and safeguarding patient privacy.
  • the vibrating body that generates sound is called an acoustic source, and sound energy generated from the sound source is transmitted in the form of a wave having a certain frequency.
  • the frequency (audible frequency) of sound that can be heard by humans is 20-20,000 Hz.
  • a sound wave having a high frequency above the audible frequency range is defined as an ultrasonic wave.
  • Ultrasonography refers to an image by amplifying and converting the reflected signal by transmitting a pulse wave into the body from tissues with a difference in acoustic impedance, and displaying it as an image. It is also called a sonic image (sonogram).
  • ultrasound Since ultrasound is a sound wave, unlike light, it requires a medium to propagate, and the transmission speed varies depending on the characteristics of the medium. In addition, they always have the same delivery rate within the same medium or medium. Since the main component of the body tissue is moisture, the transmission rate of ultrasonic waves within the body has a value similar to the transmission rate of 1,540 m/s in water.
  • the frequency range of ultrasonic waves used in the body is 1-30 MHz, and the ultrasonic types used are divided into pulsed waves and continuous waves according to vibration types.
  • ultrasound has the advantage that there is no risk of radiation exposure and enables real-time inspection, and thus its usefulness is further increasing throughout the medical field.
  • the ultrasound imaging apparatus displays an image captured through an ultrasound probe on a display device.
  • the examiner may leave a text on each ultrasound image during the examination, or mark a picture representing the body part provided by the ultrasound machine company.
  • CT computed tomography
  • MRI magnetic resonance imaging
  • An object of the present invention relates to an ultrasound imaging apparatus capable of additionally obtaining and providing a guide image for guiding an ultrasound examination position in addition to an ultrasound image of a patient's body.
  • the present invention relates to an ultrasound imaging apparatus capable of completely blocking the possibility of exposing the patient's personal information to a third party by anonymizing the patient's personal information that may be included in the guide image.
  • an ultrasound image acquisition unit for acquiring an ultrasound image through an ultrasound probe;
  • a camera image acquisition unit for obtaining a camera image by photographing a patient's body;
  • a guide image editing unit for generating and outputting a guide image by selectively extracting only an image corresponding to an ultrasound examination position from the camera image;
  • An image anonymization unit for anonymizing and outputting patient personal information included in the guide image;
  • an image controller that combines the anonymized guide image with the ultrasound image and simultaneously displays it on one screen.
  • the image anonymization unit includes an object detection unit that detects a preset object of interest from the guide image; And an object editing unit that overlays a preset image on the object detection area identified by the object detection unit or lowers the resolution of the object detection area to a preset value or less.
  • the image anonymization unit may include a body detection unit for detecting a body area from the guide image; A human body model transforming unit having a human body model that simulates a human body in three dimensions, and changing a display portion and posture of the human body model based on the color and shape characteristics of the body detection area identified by the body detection unit; And an image replacement unit for replacing the body detection region with a human body model.
  • the image control unit may further include a function of calculating an ultrasound test position through the camera image and additionally displaying the ultrasound test position in a text format.
  • the image controller provides the anonymized guide image overlaid on the ultrasound image, or simultaneously provides the anonymized guide image and the ultrasound image through two split screens, or the ultrasound image according to the ultrasound examination position. After adjusting the display position and direction of, it is characterized in that it is provided by overlaying the anonymized guide image.
  • the ultrasonic photographing apparatus includes a motion sensor built-in or mounted in the ultrasonic probe, and PTZ controls the camera according to a sensing value of the motion sensor, so that the camera enlarges the ultrasonic inspection position. It characterized in that it further comprises.
  • the ultrasound imaging apparatus additionally acquires and provides a guide image for guiding the ultrasound examination location in addition to the ultrasound image of the patient's body, so that the user can perform an ultrasound image analysis operation while clearly recognizing where the current ultrasound examination location is. It is possible to perform the operation, and the medical staff who have encountered the ultrasound image through this imaging device can accurately know the area to be photographed using only the previously photographed image, even if they are not a photographer.
  • FIG. 1 is a diagram illustrating a configuration of an ultrasound imaging apparatus equipped with an ultrasound inspection position guidance function according to an exemplary embodiment of the present invention.
  • FIG. 2 is a diagram illustrating a method of generating a guide image according to an embodiment of the present invention.
  • FIG. 3 is a diagram for explaining a detailed configuration of an image anonymizer according to an embodiment of the present invention.
  • FIG. 4 is a diagram illustrating a detailed configuration of an image anonymizer according to another embodiment of the present invention.
  • 5 and 6 are diagrams for explaining a method of guiding an ultrasound examination location of an ultrasound imaging apparatus according to an exemplary embodiment of the present invention.
  • FIG. 7 is a diagram illustrating a configuration of an ultrasound imaging apparatus equipped with an ultrasound inspection position guidance function according to another embodiment of the present invention.
  • first, second, A, B, (a), (b) may be used. These terms are only used to distinguish the component from other components, and the nature, order, or order of the component is not limited by the term.
  • a component is described as being “connected”, “coupled” or “connected” to another component, the component may be directly connected or connected to that other component, but other components between each component It should be understood that may be “connected”, “coupled” or “connected”.
  • the present invention is for improving the interpretation and reading results during ultrasound reading by photographing the position of the body to be photographed using a camera when taking an ultrasound of the body through an ultrasound probe, and the same configurations as the conventional configuration are detailed Is omitted.
  • FIG. 1 is a diagram illustrating a configuration of an ultrasound imaging apparatus equipped with an ultrasound inspection position guidance function according to an exemplary embodiment of the present invention.
  • the ultrasound photographing apparatus of the present invention includes an ultrasound image acquisition unit 10, a camera image acquisition unit 20, a guide image extraction unit 30, an image anonymization unit 40, an image control unit 50, And an image display unit 60, and a communication unit 70.
  • the ultrasound image acquisition unit 10 includes an ultrasound probe 11 that transmits an ultrasound signal to a patient's body and receives an ultrasound signal reflected from the patient's body, and ultrasound based on the ultrasound signal transmitted from the ultrasound probe 101 Create and output video.
  • the camera image acquisition unit 20 includes a camera 21 and acquires a camera image in which the body of a patient undergoing ultrasound examination is photographed.
  • the camera 21 may be implemented as a plurality of cameras so as to photograph all of the ultrasound examination room, or may be implemented as a fisheye lens camera.
  • the guide image extracting unit 30 detects the ultrasonic probe 11 present in the camera image based on preset ultrasonic probe shape information or color information, and considers the ultrasonic probe detection position to determine an ROI corresponding to the ultrasonic inspection position. Calculate. That is, only the ultrasound probe and the surrounding area of the ultrasound probe are calculated as the ROI. And, as shown in FIG. 2, by selectively extracting only the image of the ROI from the entire camera image, a guide image is generated and output.
  • an image anonymization unit 40 is separately provided, and the patient's body included in the guide image is anonymized and output through this, so that personal information of the patient is prevented from being exposed to a third party.
  • the image anonymizer 40 includes an object detection unit 41 that detects a preset object of interest (eg, a face) from a guide image based on a preset object detection criterion, as shown in FIG. 3A, and an object detection area. It may be implemented by including an object editing unit 42 that performs an image editing operation such as overlaying a preset image on the screen or lowering the resolution of the object detection area to a preset value or less. That is, as shown in (b) of FIG. 3, after detecting a specific body part with a high possibility of exposing personal information from the guide image, the image is edited to remove all personal information included in the guide image.
  • a preset object of interest eg, a face
  • the image anonymization unit 40 of the present invention includes a body detection unit 46 that detects a body region from a guide image based on preset ultrasound body shape information or color information, as shown in Fig. 4A, and a human body A human body model transforming unit 47 that has a human body model that simulates three-dimensionally, and changes the display portion and posture of the human body model based on the color and shape characteristics of the body detection area, and replaces the body detection area with a human body model. It may be implemented by including an image replacement unit 48 to allow. That is, in the present invention, the patient's body is generalized and displayed through a human body model as shown in FIG. 4B, so that all personal information included in the guide image is removed.
  • the possibility of exposing the patient's personal information to a third party is completely blocked by editing and transforming the image portion in which the patient's personal information is displayed in various ways.
  • the image control unit 50 simultaneously displays the ultrasound image of the ultrasound image acquisition unit 10 and the guide image of the image anonymizer 40 on one screen of the image display unit 60, so that the medical staff refer to the guide image and It enables you to immediately recognize which body part the ultrasound image was examined.
  • the image controller 50 detects each of the patient's body and the ultrasound probe from the camera image, and then analyzes the relative positions thereof to calculate the ultrasound examination position.
  • the ultrasound scan location is additionally displayed in a text format, such as an ultrasound image and a guide image, so that a user can receive not only an image but also a text format.
  • ultrasound images have a DICOM (Digital Imaging and Communications in Medicine) file format commonly used by conventional medical imaging devices
  • guide images are files acquired based on a camera, and have a picture file format such as JPG.
  • the image controller 50 converts the guide image into a DICOM file, so that the existing medical imaging apparatus can also recognize and use the guide image.
  • DICOM Digital Imaging and Communications in Medicine
  • the image control unit 50 connects to an external data server such as a PACS (Picture Archiving and Communication System) server through the communication unit 70, and then maps and stores the ultrasound image and the guide image to retrieve it later. And make it accessible.
  • an external data server such as a PACS (Picture Archiving and Communication System) server
  • PACS Picture Archiving and Communication System
  • 5 and 6 are diagrams for explaining a method of guiding an ultrasound examination location of an ultrasound imaging apparatus according to an exemplary embodiment of the present invention.
  • the ultrasound imaging apparatus of the present invention simultaneously provides an ultrasound image and a guide image through one screen of the image display unit.
  • the guide image is provided in a manner that is overlaid on the ultrasound image and displayed, or as shown in (b) of FIG. 5, the entire screen is displayed as two screens. After being divided into, two images may be displayed side by side through these screens.
  • the display position and size of the guide image can be freely determined or adjusted by the user.
  • the present invention enables the user to intuitively recognize the current ultrasound examination location through the guide image and proceed with the ultrasound examination, and furthermore, anonymize the patient's face and body specifics included in the guidance image, thereby providing personal privacy. Make sure it is safe.
  • the guide image for guiding the ultrasound examination location is extracted from the camera image, but if necessary, the camera itself generates the guide image through the camera position control. It is also possible to obtain and provide directly.
  • FIG. 7 is a diagram illustrating a configuration of an ultrasound imaging apparatus equipped with an ultrasound inspection position guidance function according to another embodiment of the present invention.
  • the camera 21 ′ of the ultrasonic photographing apparatus of the present invention is preferably implemented as a Pan-Tilt-Zoom camera (PTZ) camera having pan, tilt, and zoom-in functions, and the camera position controller 80 ).
  • PTZ Pan-Tilt-Zoom camera
  • the camera position controller 80 is provided with a motion sensor 81 built in or attached to the ultrasonic probe 11, and thereby obtains a 3D motion value of the ultrasonic probe 11.
  • the motion sensor 81 is most preferably implemented with an acceleration sensor capable of sensing movement distance information in the front, rear, left, and right directions and a gyro sensor capable of sensing a rotation angle, but a specific implementation method thereof is the device. It can be changed in various ways in consideration of the application environment, etc.
  • the camera position controller 80 acquires and stores information on the correlation between the sensor output value and the camera position control value in advance, and converts the 3D motion value sensed by the motion sensor 81 into the camera position control value based on this. To print.
  • the motion sensor 81 determines the 3D motion value of the ultrasonic probe 11. Is sensed and output in real time.
  • the camera position control unit 80 converts the 3D motion value of the ultrasonic probe 11 into a camera position control value in real time and outputs it, and the camera 21 ′ follows the current position of the ultrasonic probe 11 in response thereto. While doing so, only the ultrasound examination location is enlarged.
  • the camera 21 ′ can directly acquire and output a guide image photographed by an enlarged ultrasound examination location, and a separate guide image extracting unit 30 is added. There is no need to have it.

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Radiology & Medical Imaging (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biophysics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Pathology (AREA)
  • Veterinary Medicine (AREA)
  • Biomedical Technology (AREA)
  • Physics & Mathematics (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)

Abstract

본 발명은 초음파 검사위치 안내 기능이 탑재된 초음파 촬영 장치에 관한 것으로, 이는 초음파 프로브를 통해 초음파 영상을 획득하는 초음파 영상 획득부; 환자 신체를 카메라 촬영하여 카메라 영상을 획득하는 카메라 영상 획득부; 상기 카메라 영상으로부터 초음파 검사위치에 대응되는 영상만을 선택적으로 추출하여 안내 영상을 생성 및 출력하는 안내 영상 편집부; 상기 안내 영상에 포함된 환자 개인 정보를 익명화 처리하여 출력하는 영상 익명화부; 및 상기 익명화 처리된 안내 영상을 상기 초음파 영상에 결합시켜 한 화면에 동시 디스플레이하는 영상 제어부를 포함할 수 있다.

Description

초음파 검사위치 안내 기능이 탑재된 초음파 촬영 장치
본 발명은 초음파 촬영장치에 관한 것으로서, 환자 신체에 대한 초음파 검사를 수행하는 경우, 초음파 검사 위치까지 확인 및 안내할 수 있도록 하며, 또한 환자 프라이버시를 안전하게 보호할 수 있도록 하는 초음파 촬영장치에 관한 것이다.
소리를 발생하는 진동체를 음원(acoustic source)이라고 하며, 음원에서 발생하는 소리 에너지는 일정한 주파수(frequency)를 가지는 파동의 형태로 전달된다. 사람이 들을 수 있는 소리의 주파수(가청 주파수)는 20-20,000 Hz이다. 이러한 가청 주파수 범위 이상의 높은 주파수를 가지는 음파를 초음파(ultrasound)라고 정의한다.
초음파 영상(ultrasonography)이란 음향 저항(acoustic impedance)의 차이가 있는 조직에서 펄스 파(pulse wave)를 신체 내로 투과시켜 반사되는 신호를 컴퓨터로 증폭, 변환하여 영상으로 나타내는 것으로 초음파 검사(sonography) 또는 공명음파이미지(sonogram) 이라고도 부른다.
초음파는 음파(sound wave)이기 때문에 빛과는 달리 전파되기 위해서 매개체가 필요하며 매개체의 특성에 따라 전달 속도에 차이가 난다. 또한 같은 매개체 또는 매질 내에서는 항상 같은 전달 속도를 가진다. 신체 조직은 주 구성 요소가 수분이기 때문에 초음파의 신체내에서의 전달 속도는 물에서의 전달 속도인 1,540 m/s와 유사한 값을 갖는다.
신체에 사용되는 초음파의 주파수 영역은 1-30 MHz이며 사용되는 초음파 형태는 진동 형태에 따라 펄스 파와 연속 파(continuous wave)로 나뉜다. 초음파는 다른 영상 진단 장비에 비해 방사선 피폭의 위험성이 없고 실시간 검사가 가능하다는 장점이 있어 의료 영역 전반에 걸쳐 유용성은 더욱 증가하고 있다.
초음파 촬영 장치는 초음파 프로브를 통하여 촬영된 영상을 표시장치에 디스플레이 한다.
현재 초음파 영상을 촬영할 때, 초음파 영상을 촬영하는 신체 위치를 차후 인지 할 수 있도록 하기 위해서는 검사자가 검사도중 초음파 영상마다 일일이 위치를 텍스트로 남기거나 초음파 기계회사에서 제공하는 신체부위를 나타내는 그림에 표시를 남기는 방법 등이 있으며 검사 중 시행하기는 매우 복잡한 작업이다. 고식적으로는 촬영 된 영상에 포함된 구조물을 통해서만 유추 할 수 있다. 영상촬영당시를 제외하고는 전산화 단층 촬영(CT)이나 자기공명영상(MRI)과 달리 초음파 프로브를 통해 촬영된 위치가 신체의 어느 부위에 해당하는 지 확신할 수 없기 때문에 촬영이 완료된 후에 모니터상의 초음파 촬영영상만으로는 진단하는 의료진이나 심지어 직접 초음파 영상을 획득한 의료진조차도 판독 및 해석에 어려움을 겪는 경우가 많다. 환자가 초음파 촬영이후 다른 병원으로 전원 되었을 경우나 추적검사 시행 시에도 기촬영된 초음파 영상만으로는 초음파 검사위치를 정확히 유추해내기 어렵기 때문에 불필요한 중복검사나 CT 혹은 MRI등의 추가적인 검사를 시행하게 되고 아울러 불필요한 의료자원의 낭비가 증대하는 등의 문제점도 발생할 수 있다.
본 발명의 목적은 환자 신체에 대한 초음파 영상 이외에 초음파 검사 위치를 안내하기 위한 안내 영상을 추가적으로 획득 및 제공할 수 있도록 하는 초음파 촬영장치에 관한 것이다.
또한 안내 영상에 포함될 수 있는 환자 개인 신상 정보를 익명화 처리함으로써, 환자의 개인 신상 정보가 제3 자에게 노출될 가능성을 완전히 차단할 수 있도록 하는 초음파 촬영장치에 관한 것이다.
본 발명의 목적은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 본 발명이 속하는 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
위와 같은 목적을 달성하기 위하여, 본 발명의 실시예에 따르면 초음파 프로브를 통해 초음파 영상을 획득하는 초음파 영상 획득부; 환자 신체를 카메라 촬영하여 카메라 영상을 획득하는 카메라 영상 획득부; 상기 카메라 영상으로부터 초음파 검사위치에 대응되는 영상만을 선택적으로 추출하여 안내 영상을 생성 및 출력하는 안내 영상 편집부; 상기 안내 영상에 포함된 환자 개인 정보를 익명화 처리하여 출력하는 영상 익명화부; 및 상기 익명화 처리된 안내 영상을 상기 초음파 영상에 결합시켜 한 화면에 동시 디스플레이하는 영상 제어부를 포함하는 초음파 검사위치 안내 기능이 탑재된 초음파 촬영 장치를 제공한다.
상기 영상 익명화부는 상기 안내 영상으로부터 기 설정된 관심 객체를 검출하는 객체 검출부; 및 상기 객체 검출부에 의해 확인된 객체 검출 영역에 기 설정된 이미지를 오버레이하거나, 상기 객체 검출 영역의 해상도를 기 설정값 이하로 저하시키는 객체 편집부를 포함하는 것을 특징으로 한다.
또한 상기 영상 익명화부는 상기 안내 영상으로부터 신체 영역을 검출하는 신체 검출부; 사람 인체를 3차원적으로 모사한 인체 모델을 구비하고, 상기 신체 검출부에 의해 확인된 신체 검출 영역의 색상 및 형상 특징에 기반하여 상기 인체 모델의 표시 부위와 자세를 변형시키는 인체 모델 변형부; 및 상기 신체 검출 영역을 인체 모델로 치환시키는 영상 치환부를 포함하는 것을 특징으로 한다.
상기 영상 제어부는 상기 카메라 영상을 통해 초음파 검사 위치를 산출한 후, 상기 초음파 검사 위치를 텍스트 형태로 추가 디스플레이하는 기능을 더 포함하는 것을 특징으로 한다.
상기 영상 제어부는 상기 익명화 처리된 안내 영상을 상기 초음파 영상에 오버레이시켜 제공하거나, 상기 익명화 처리된 안내 영상과 상기 초음파 영상을 두 개 분할화면을 통해 동시 제공하거나, 상기 초음파 검사 위치에 따라 상기 초음파 영상의 표시 위치와 방향을 조정한 후 상기 익명화 처리된 안내 영상에 오버레이시켜 제공하는 것을 특징으로 한다.
더하여, 상기 초음파 촬영 장치는 상기 초음파 프로브에 내장 또는 장착된 움직임 센서를 구비하고, 상기 움직임 센서의 센싱값에 따라 상기 카메라를 PTZ 제어함으로써, 상기 카메라가 초음파 검사위치를 확대 촬영하도록 하는 카메라 위치 제어부를 더 포함하는 것을 특징으로 한다.
본 발명에 의한 초음파 촬영 장치는 환자 신체에 대한 초음파 영상 이외에 초음파 검사 위치를 안내하기 위한 안내 영상을 추가적으로 획득 및 제공하도록 함으로써, 사용자는 현재 초음파 검사 위치가 어디인지를 명확히 인지하면서 초음파 영상 분석 동작을 수행할 수 있도록 하며, 이 촬영 장치를 통한 초음파 영상을 접한 의료진은 촬영자가 아니더라도 기촬영된 영상만으로도 촬영부위를 정확히 알 수 있도록 한다.
또한 안내 영상에 포함될 수 있는 환자 개인 신상 정보를 익명화 처리함으로써, 환자의 개인 신상 정보가 제3 자에게 노출될 가능성을 완전히 차단할 수도 있도록 한다.
도 1은 본 발명의 일 실시예에 따른 초음파 검사위치 안내 기능이 탑재된 초음파 촬영 장치의 구성을 나타내는 도면이다.
도 2는 본 발명의 일 실시예에 따른 안내 영상 생성 방법을 설명하기 위한 도면이다.
도 3은 본 발명의 일 실시예에 따른 영상 익명화부의 상세 구성을 설명하기 위한 도면이다.
도 4는 본 발명의 다른 실시예에 따른 영상 익명화부의 상세 구성을 설명하기 위한 도면이다.
도 5 및 도 6은 본 발명의 일 실시예에 따른 초음파 촬영 장치의 초음파 검사위치 안내 방법을 설명하기 위한 도면이다.
도 7은 본 발명의 다른 실시예에 따른 초음파 검사위치 안내 기능이 탑재된 초음파 촬영 장치의 구성을 나타내는 도면이다.
이하, 첨부된 도면을 참조하여 본 발명의 실시예를 더욱 상세히 설명하기로 한다. 그러나, 본 발명은 이하에서 개시되는 실시예에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하며, 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이다. 도면상에서 동일 부호는 동일한 요소를 지칭한다.
각 도면의 구성요소들에 참조부호를 부가함에 있어서, 동일한 구성 요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 본 발명을 설명함에 있어, 관련된 공지구성 또는 기능에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다.
또한, 본 발명의 구성 요소를 설명하는 데 있어서, 제 1, 제 2, A, B, (a), (b) 등의 용어를 사용할 수 있다. 이러한 용어는 그 구성 요소를 다른 구성 요소와 구별하기 위한 것일 뿐, 그 용어에 의해 해당 구성 요소의 본질이나 차례 또는 순서 등이 한정되지 않는다. 어떤 구성 요소가 다른 구성요소에 "연결", "결합" 또는 "접속"된다고 기재된 경우, 그 구성 요소는 그 다른 구성요소에 직접적으로 연결되거나 또는 접속될 수 있지만, 각 구성 요소 사이에 다른 구성 요소가 "연결", "결합" 또는 "접속"될 수도 있다고 이해되어야 할 것이다.
본 발명은 초음파 프로브를 통하여 신체의 초음파 촬영 시, 촬영하는 신체의 위치를 카메라를 이용하여 촬영함으로써 초음파 판독 시 해석 및 판독의 결과를 향상시키기 위한 것으로서, 종래의 구성과 동일한 구성들에 대해서는 자세한 내용을 생략한다.
도 1은 본 발명의 일 실시예에 따른 초음파 검사위치 안내 기능이 탑재된 초음파 촬영 장치의 구성을 나타내는 도면이다.
도 1을 참고하면, 본 발명의 초음파 촬영 장치는 초음파 영상 획득부(10), 카메라 영상 획득부(20), 안내 영상 추출부(30), 영상 익명화부(40), 영상 제어부(50), 영상 표시부(60), 및 통신부(70) 등을 포함한다.
초음파 영상 획득부(10)는 환자 신체에 초음파 신호를 전달하고, 환자 신체로부터 반사된 초음파 신호를 수신하는 초음파 프로브(11)를 구비하고, 초음파 프로브(101)로부터 전달되는 초음파 신호를 기반으로 초음파 영상을 생성 및 출력한다.
카메라 영상 획득부(20)는 카메라(21)를 구비하고, 이를 통해 초음파 검사 중인 환자 신체가 촬영된 카메라 영상을 획득한다. 이때, 카메라(21)는 초음파 검사실 모두를 촬영할 수 있도록 다수개로 구현되거나, 어안렌즈 카메라로 구현될 수도 있다.
안내 영상 추출부(30)는 기 설정된 초음파 프로브 형상 정보 또는 색상 정보를 기반으로 카메라 영상에 존재하는 초음파 프로브(11)를 검출하고, 초음파 프로브 검출 위치를 고려하여 초음파 검사위치에 대응되는 관심 영역을 산출한다. 즉, 초음파 프로브와 초음파 프로브의 주변 영역만을 관심 영역으로 산출하도록 한다. 그리고 도 2에서와 같이, 관심 영역의 영상만을 카메라 영상 전체로부터 선택적으로 추출함으로써, 안내 영상을 생성 및 출력한다.
다만, 이때의 안내 영상에는 환자 얼굴 또는 신체 특이 사항 등과 같은 개인 신상 정보가 포함될 수 있는 문제가 존재한다.
이에 본 발명에서는 영상 익명화부(40)를 별도로 구비하고, 이를 통해 안내 영상에 포함된 환자 신체를 익명화 처리하여 출력함으로써, 환자의 개인 신상 정보가 제3자에게 노출되는 것을 사전 차단하도록 한다.
영상 익명화부(40)는 도 3의 (a)와 같이, 기 설정된 객체 검출 기준을 기반으로 안내 영상으로부터 기 설정된 관심 객체(예를 들어, 얼굴)를 검출하는 객체 검출부(41), 객체 검출 영역에 기 설정된 이미지를 오버레이하거나, 객체 검출 영역의 해상도를 기 설정값 이하로 저하시키는 등의 이미지 편집 작업을 수행하는 객체 편집부(42) 등을 포함하여 구현될 수 있다. 즉, 도 3의 (b)에서와 같이, 안내 영상으로부터 개인 신상 정보 노출 가능성이 큰 특정 신체 부위를 검출한 후, 이를 이미지 편집함으로써 안내 영상에 포함된 개인 신상 정보가 모두 제거되도록 한다.
또 다르게는 본 발명의 영상 익명화부(40)는 도 4의 (a)와 같이, 기 설정된 초음파 신체 형상 정보 또는 색상 정보를 기반으로 안내 영상으로부터 신체 영역을 검출하는 신체 검출부(46), 사람 인체를 3차원적으로 모사한 인체 모델을 구비하고, 신체 검출 영역의 색상 및 형상 특징에 기반하여 인체 모델의 표시 부위와 자세를 변형시키는 인체 모델 변형부(47), 신체 검출 영역을 인체 모델로 치환시키는 영상 치환부(48) 등을 포함하여 구현될 수 있다. 즉, 본 발명에서는 환자 신체를 도 4의 (b)에서와 같이, 인체 모델을 통해 일반화시켜 표시함으로써, 안내 영상에 포함된 개인 신상 정보가 모두 제거되도록 한다.
다시 말해, 본 발명에서는 환자 개인 신상 정보가 표시되는 영상 부분을 다양한 방식으로 편집 및 변형함으로써, 환자의 개인 신상 정보가 제3 자에게 노출될 가능성을 완전히 차단하도록 한다.
영상 제어부(50)는 초음파 영상 획득부(10)의 초음파 영상과 영상 익명화부(40)의 안내 영상을 영상 표시부(60)의 한 화면에 동시 표시함으로써, 의료진이 안내 영상을 참고하여 현재 제공되는 초음파 영상이 어느 신체 부위를 검사한 영상인지 즉각적으로 인지할 수 있도록 한다.
뿐 만 아니라, 영상 제어부(50)는 카메라 영상으로부터 환자 신체와 초음파 프로브 각각을 검출한 후, 이의 상대적 위치를 분석하여 초음파 검사 위치를 산출할 수 있도록 한다. 그리고 초음파 검사 위치를 초음파 영상과 안내 영상과 같이 텍스트 형태로 추가 디스플레이 함으로써, 사용자가 초음파 검사 위치를 영상 뿐 아니라 텍스트 형태로도 안내받을 수 있도록 한다.
더하여, 초음파 영상은 기존의 의료 영상 장치들이 공용으로 이용하는 DICOM(Digital Imaging and Communications in Medicine) 파일 형식을 가지는 데 반해, 안내 영상은 카메라 기반으로 획득되는 파일로써, JPG 등과 같은 그림파일 형식을 가지게 된다. 이에 영상 제어부(50)는 안내 영상을 DICOM 파일로 변환시킴으로써, 기존의 의료 영상 장치가 안내 영상 또한 인식 및 이용할 수 있도록 한다.
또한 영상 제어부(50)는 통신부(70)를 통해 PACS(Picture Archiving and Communication System) 서버와 같은 외부의 데이터서버에 접속한 후, 이에 초음파 영상과 안내 영상 간을 매핑하여 저장함으로써, 차후에도 이를 검색 및 열람할 수 있도록 한다.
도 5 및 도 6은 본 발명의 일 실시예에 따른 초음파 촬영 장치의 초음파 검사위치 안내 방법을 설명하기 위한 도면이다.
도 5의 (a) 및 (b)에 도시된 바와 같이, 본 발명의 초음파 촬영 장치는 초음파 영상과 안내 영상을 영상 표시부의 한 화면을 통해 동시 제공하도록 한다.
보다 구체적으로는, 도 5의 (a)에 도시된 바와 같이, 안내 영상이 초음파 영상에 오버레이되어 표시되는 방식으로 제공되거나, 도 5의 (b)에 도시된 바와 같이, 전체 화면을 두 개의 화면으로 분할한 후, 이들 화면을 통해 두 개의 영상이 나란히 표시되는 방식으로 제공될 수 있다.
이러한 화면 표시 방식, 안내 영상의 표시 위치 및 크기는 사용자에 의해 자유롭게 결정 또는 조정될 수 있음은 물론 당연할 것이다.
즉, 본 발명은 사용자가 안내 영상을 통해 현재 초음파 검사위치를 직관적으로 인지하면서 초음파 검사를 진행할 수 있도록 하며, 이에 더 나아가 안내 영상에 포함된 환자 얼굴, 신체 특이 사항 등을 익명화 처리함으로써 개인 프라이버시를 안전하게 보장할 수 있도록 한다.
또 다르게는 도 6에서와 같이, 초음파 검사 위치에 따라 초음파 영상의 표시 영역 및 방향을 조정한 후, 이를 안내 영상에 오버레이 표시하는 방식으로도 제공될 수 있도록 한다.
더하여, 상기의 설명에서는 카메라가 항상 일정한 조건에서 카메라 영상을 획득 및 출력하면, 이로부터 초음파 검사위치를 안내하기 위한 안내 영상을 추출하도록 하였지만, 필요한 경우에는 카메라 위치 제어를 통해 카메라 자체가 안내 영상을 직접 획득 및 제공할 수도 있도록 한다.
도 7은 본 발명의 다른 실시예에 따른 초음파 검사위치 안내 기능이 탑재된 초음파 촬영 장치의 구성을 나타내는 도면이다.
도 7을 참고하면, 본 발명의 초음파 촬영 장치의 카메라(21')는 팬, 틸트, 줌인 기능을 구비한 PTZ(Pan-Tilt-Zoom camera) 카메라로 구현되는 것이 바람직하며, 카메라 위치 제어부(80)를 추가 구비함을 알 수 있다.
카메라 위치 제어부(80)는 초음파 프로브(11)에 내장 또는 부착된 움직임 센서(81)를 구비하고, 이를 통해 초음파 프로브(11)의 3차원 움직임 값을 획득하도록 한다. 움직임 센서(81)는 전, 후, 좌, 우 방향으로의 이동 거리 정보를 센싱할 수 있는 가속도 센서와 회전 각도를 센싱할 수 있는 자이로 센서로 구현되는 것이 가장 바람직하나, 이의 구체적 구현 방법이 장치 적용 환경 등을 고려하여 다양하게 변화될 수 있다.
그리고 카메라 위치 제어부(80)는 센서 출력값과 카메라 위치 제어값간 상관관계에 대한 정보를 사전 획득 및 저장하고, 이를 기반으로 움직임 센서(81)에 의해 센싱된 3차원 움직임 값을 카메라 위치 제어값으로 변환하여 출력하도록 한다.
이에 사용자가 초음파 프로브(11)의 현재 위치와 카메라 촬영 위치를 동기화시킨 후, 초음파 프로브(11)를 이동시키면서 초음파 검사를 진행하면, 움직임 센서(81)는 초음파 프로브(11)의 3차원 움직임 값을 실시간 센싱 및 출력하게 된다.
그러면, 카메라 위치 제어부(80)는 초음파 프로브(11)의 3차원 움직임 값을 카메라 위치 제어값으로 실시간 변환하여 출력하고, 카메라(21')는 이에 응답하여 초음파 프로브(11)의 현재 위치를 추종하면서 초음파 검사위치만을 확대 촬영하게 된다.
즉, 도 6에서는 카메라(21')를 PTZ 제어하여 카메라(21')가 초음파 검사위치를 확대 촬영한 안내 영상을 직접 획득 및 출력할 수 있게 되며, 별도의 안내 영상 추출부(30)를 추가 구비할 필요가 없게 된다.
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.

Claims (6)

  1. 초음파 프로브를 통해 초음파 영상을 획득하는 초음파 영상 획득부;
    환자 신체를 카메라 촬영하여 카메라 영상을 획득하는 카메라 영상 획득부;
    상기 카메라 영상으로부터 초음파 검사위치에 대응되는 영상만을 선택적으로 추출하여 안내 영상을 생성 및 출력하는 안내 영상 편집부;
    상기 안내 영상에 포함된 환자 개인 정보를 익명화 처리하여 출력하는 영상 익명화부; 및
    상기 익명화 처리된 안내 영상을 상기 초음파 영상에 결합시켜 한 화면에 동시 디스플레이하는 영상 제어부를 포함하는 초음파 검사위치 안내 기능이 탑재된 초음파 촬영 장치.
  2. 제1항에 있어서, 상기 영상 익명화부는
    상기 안내 영상으로부터 기 설정된 관심 객체를 검출하는 객체 검출부; 및
    상기 객체 검출부에 의해 확인된 객체 검출 영역에 기 설정된 이미지를 오버레이하거나, 상기 객체 검출 영역의 해상도를 기 설정값 이하로 저하시키는 객체 편집부를 포함하는 것을 특징으로 하는 초음파 검사위치 안내 기능이 탑재된 초음파 촬영 장치.
  3. 제1항에 있어서, 상기 영상 익명화부는
    상기 안내 영상으로부터 신체 영역을 검출하는 신체 검출부;
    사람 인체를 3차원적으로 모사한 인체 모델을 구비하고, 상기 신체 검출부에 의해 확인된 신체 검출 영역의 색상 및 형상 특징에 기반하여 상기 인체 모델의 표시 부위와 자세를 변형시키는 인체 모델 변형부; 및
    상기 신체 검출 영역을 인체 모델로 치환시키는 영상 치환부를 포함하는 것을 특징으로 하는 초음파 검사위치 안내 기능이 탑재된 초음파 촬영 장치.
  4. 제2항 또는 제3항에 있어서, 상기 영상 제어부는
    상기 카메라 영상을 통해 초음파 검사 위치를 산출한 후, 상기 초음파 검사 위치를 텍스트 형태로 추가 디스플레이하는 기능을 더 포함하는 것을 특징으로 하는 초음파 검사위치 안내 기능이 탑재된 초음파 촬영 장치.
  5. 제4항에 있어서, 상기 영상 제어부는
    상기 익명화 처리된 안내 영상을 상기 초음파 영상에 오버레이시켜 제공하거나, 상기 익명화 처리된 안내 영상과 상기 초음파 영상을 두 개 분할화면을 통해 동시 제공하거나, 상기 초음파 검사 위치에 따라 상기 초음파 영상의 표시 위치와 방향을 조정한 후 상기 익명화 처리된 안내 영상에 오버레이시켜 제공하는 것을 특징으로 하는 초음파 검사위치 안내 기능이 탑재된 초음파 촬영 장치.
  6. 제1항에 있어서,
    상기 초음파 프로브에 내장 또는 장착된 움직임 센서를 구비하고, 상기 움직임 센서의 센싱값에 따라 상기 카메라를 PTZ 제어함으로써, 상기 카메라가 초음파 검사위치를 확대 촬영하도록 하는 카메라 위치 제어부를 더 포함하는 것을 특징으로 하는 초음파 검사위치 안내 기능이 탑재된 초음파 촬영 장치.
PCT/KR2020/004543 2019-04-05 2020-04-03 초음파 검사위치 안내 기능이 탑재된 초음파 촬영 장치 WO2020204645A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020190040045A KR102382614B1 (ko) 2019-04-05 2019-04-05 초음파 검사위치 안내 기능이 탑재된 초음파 촬영 장치
KR10-2019-0040045 2019-04-05

Publications (1)

Publication Number Publication Date
WO2020204645A1 true WO2020204645A1 (ko) 2020-10-08

Family

ID=72667201

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2020/004543 WO2020204645A1 (ko) 2019-04-05 2020-04-03 초음파 검사위치 안내 기능이 탑재된 초음파 촬영 장치

Country Status (2)

Country Link
KR (1) KR102382614B1 (ko)
WO (1) WO2020204645A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4246445A1 (en) * 2022-03-18 2023-09-20 Koninklijke Philips N.V. Anonymization of subject video feeds
WO2023174780A1 (en) * 2022-03-18 2023-09-21 Koninklijke Philips N.V. Anonymization of subject video feeds

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006331261A (ja) * 2005-05-30 2006-12-07 Dainippon Printing Co Ltd 医療用画像管理システム
KR20110068153A (ko) * 2009-12-15 2011-06-22 삼성메디슨 주식회사 서로 다른 영상간에 영상 정합을 수행하는 영상 정합 시스템 및 방법
JP2015222478A (ja) * 2014-05-22 2015-12-10 富士フイルム株式会社 診療支援装置、診療支援装置の作動方法及びプログラム、並びに診療支援システム
KR20160014933A (ko) * 2014-07-30 2016-02-12 삼성전자주식회사 초음파 장치 및 그 제어방법
KR20180131122A (ko) * 2017-05-31 2018-12-10 홍충식 증강현실 초음파 영상 진단기

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4050481B2 (ja) 2001-04-17 2008-02-20 ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー 超音波撮影装置
KR20160046670A (ko) * 2014-10-21 2016-04-29 삼성전자주식회사 영상 진단 보조 장치 및 방법
JP6814811B2 (ja) * 2015-10-22 2021-01-20 タイト ケア リミテッド 生理学的モニタのためのシステム、方法、及びコンピュータプログラム製品
KR101792952B1 (ko) * 2016-06-27 2017-11-01 고려대학교 산학협력단 네비게이션 기반의 초음파 촬영장치
KR101879169B1 (ko) * 2016-11-22 2018-07-17 오주영 카메라 영상을 이용한 방사선 촬영 가이드 시스템 및 방법
JP7154098B2 (ja) * 2018-10-17 2022-10-17 キヤノンメディカルシステムズ株式会社 医用画像閲覧装置、医用画像処理装置、及び、医用画像診断装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006331261A (ja) * 2005-05-30 2006-12-07 Dainippon Printing Co Ltd 医療用画像管理システム
KR20110068153A (ko) * 2009-12-15 2011-06-22 삼성메디슨 주식회사 서로 다른 영상간에 영상 정합을 수행하는 영상 정합 시스템 및 방법
JP2015222478A (ja) * 2014-05-22 2015-12-10 富士フイルム株式会社 診療支援装置、診療支援装置の作動方法及びプログラム、並びに診療支援システム
KR20160014933A (ko) * 2014-07-30 2016-02-12 삼성전자주식회사 초음파 장치 및 그 제어방법
KR20180131122A (ko) * 2017-05-31 2018-12-10 홍충식 증강현실 초음파 영상 진단기

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4246445A1 (en) * 2022-03-18 2023-09-20 Koninklijke Philips N.V. Anonymization of subject video feeds
WO2023174780A1 (en) * 2022-03-18 2023-09-21 Koninklijke Philips N.V. Anonymization of subject video feeds

Also Published As

Publication number Publication date
KR102382614B1 (ko) 2022-04-04
KR20200117639A (ko) 2020-10-14

Similar Documents

Publication Publication Date Title
KR101716421B1 (ko) 정보 제공 방법 및 정보 제공을 위한 의료 진단 장치
JP2005040613A (ja) 医療技術の制御システムおよび医療技術の検査および／または治療装置の操作方法
KR101152177B1 (ko) 수술위치 자동 유도 방법 및 그 시스템과 수술위치의 유도기능을 갖춘 장치
WO2020204645A1 (ko) 초음파 검사위치 안내 기능이 탑재된 초음파 촬영 장치
EP3740133A1 (en) Ultrasound imaging apparatus and method of controlling the same
WO2018097596A1 (ko) 방사선 촬영 가이드 시스템 및 방법
WO2016137157A1 (ko) 의료 영상 장치 및 의료 영상 처리 방법
EP3254262A1 (en) Method and apparatus for displaying medical image
WO2020129464A1 (ja) 情報処理装置、放射線撮影システムおよび支援方法
WO2016047895A1 (en) Ultrasound imaging apparatus and method using synthetic aperture focusing
WO2019168935A1 (en) Video patient tracking for medical imaging guidance
JP2000166908A (ja) 検査システム、画像処理装置、方法、媒体及び撮影システム
KR101941209B1 (ko) 인공지능 기반 독립형 자동 질환 진단 시스템 및 방법
JP2020156823A5 (ko)
JP5125128B2 (ja) 医用画像管理システム、データ管理方法
WO2014069862A1 (ko) 3차원 초음파 진단기를 이용한 원격자문 시스템
KR20150042760A (ko) 정보 제공 방법 및 정보 제공을 위한 자기 공명 영상 장치
KR20150105803A (ko) 자이로 센서를 이용한 3ｄ 내시경 시스템
WO2016080736A1 (ko) 의료영상을 이용한 진단 보조 정보 제공 방법 및 그 시스템
JP2007097635A (ja) 画像解析システム、及び画像解析プログラム
JP7099086B2 (ja) 動態画像処理装置及びプログラム
JP4617116B2 (ja) 即時医療映像自動的サーチ対照方法及びそのシステム
WO2023018259A1 (ko) 증강 현실 및 가상 현실을 이용하여 원격으로 피부 질환을 진단하는 진단 방법 및 장치
CN111000576A (zh) X射线成像系统的图像显示方法、装置、设备及存储介质
JP7405010B2 (ja) 診断支援システム、診断支援装置及びプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20783662

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20783662

Country of ref document: EP

Kind code of ref document: A1