KR20030078760A - 화상 처리 장치 및 초음파 진단 장치 - Google Patents
화상 처리 장치 및 초음파 진단 장치 Download PDFInfo
- Publication number
- KR20030078760A KR20030078760A KR10-2003-0019517A KR20030019517A KR20030078760A KR 20030078760 A KR20030078760 A KR 20030078760A KR 20030019517 A KR20030019517 A KR 20030019517A KR 20030078760 A KR20030078760 A KR 20030078760A
- Authority
- KR
- South Korea
- Prior art keywords
- image
- image data
- synchronization signal
- tomographic
- synchronization
- Prior art date
Links
- 238000012545 processing Methods 0.000 title claims description 67
- 230000017531 blood circulation Effects 0.000 claims description 65
- 238000000034 method Methods 0.000 claims description 46
- 230000000694 effects Effects 0.000 claims description 20
- 230000008859 change Effects 0.000 claims description 14
- 238000000605 extraction Methods 0.000 claims description 11
- 238000005070 sampling Methods 0.000 claims description 10
- 238000003672 processing method Methods 0.000 claims description 7
- 239000003550 marker Substances 0.000 claims description 6
- 238000002604 ultrasonography Methods 0.000 claims description 6
- 230000008569 process Effects 0.000 claims description 5
- 238000003325 tomography Methods 0.000 claims description 3
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 claims 4
- 238000013144 data compression Methods 0.000 claims 1
- 238000013500 data storage Methods 0.000 abstract description 15
- 239000000284 extract Substances 0.000 abstract description 4
- 238000010586 diagram Methods 0.000 description 43
- 230000001360 synchronised effect Effects 0.000 description 18
- 239000000523 sample Substances 0.000 description 13
- 230000005540 biological transmission Effects 0.000 description 12
- 230000006870 function Effects 0.000 description 11
- 230000005856 abnormality Effects 0.000 description 9
- 230000006835 compression Effects 0.000 description 9
- 238000007906 compression Methods 0.000 description 9
- 238000003745 diagnosis Methods 0.000 description 9
- 210000005240 left ventricle Anatomy 0.000 description 7
- 238000005259 measurement Methods 0.000 description 6
- 230000000737 periodic effect Effects 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 4
- 230000000747 cardiac effect Effects 0.000 description 4
- 238000012544 monitoring process Methods 0.000 description 4
- 210000004204 blood vessel Anatomy 0.000 description 3
- 239000003814 drug Substances 0.000 description 3
- 238000007689 inspection Methods 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 3
- 238000012360 testing method Methods 0.000 description 3
- 230000002159 abnormal effect Effects 0.000 description 2
- 239000000306 component Substances 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 230000008602 contraction Effects 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 238000002595 magnetic resonance imaging Methods 0.000 description 2
- 210000005036 nerve Anatomy 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 241000270295 Serpentes Species 0.000 description 1
- 230000036982 action potential Effects 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 239000012503 blood component Substances 0.000 description 1
- 210000005242 cardiac chamber Anatomy 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000002405 diagnostic procedure Methods 0.000 description 1
- 239000006185 dispersion Substances 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000003628 erosive effect Effects 0.000 description 1
- 210000003743 erythrocyte Anatomy 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 230000003902 lesion Effects 0.000 description 1
- 210000004165 myocardium Anatomy 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 239000002356 single layer Substances 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/54—Control of apparatus or devices for radiation diagnosis
- A61B6/541—Control of apparatus or devices for radiation diagnosis involving acquisition triggered by a physiological signal
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
- Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10S128/00—Surgery
- Y10S128/916—Ultrasound 3-D imaging
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Radiology & Medical Imaging (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Biophysics (AREA)
- Pathology (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Ultra Sonic Daignosis Equipment (AREA)
- Magnetic Resonance Imaging Apparatus (AREA)
- Apparatus For Radiation Diagnosis (AREA)
Abstract
화상 생성부(102)는 제어부(101)를 통해 송수신부(12)로부터 수신한 전기 신호에 근거하여 단층 화상의 화상 데이터를 생성한다. 흥미 영역 설정부(103)는 생성된 단층 화상에 대하여 흥미 영역을 설정한다. 특징량 추출부(104)는, 설정된 흥미 영역에 대해 특징량 예를 들면, 심장 좌실의 용량 등을 추출한다. 동기 생성부(105)는 추출된 특징량에 근거하여 동기 신호를 생성한다. 동기 정보 부여부(106)는 생성된 동기 신호를 나타내는 정보를 화상 데이터에 부여하여 화상 데이터 격납부(107)에 격납한다. 데이터 독출부(109)는, 화상 데이터 격납부(107)로부터 동기 신호를 표시하는 정보가 부여된 화상 데이터를 독출하고, 화상 표시부(111)는 독출된 화상 데이터의 단층 화상을 표시한다.
Description
본 발명은 초음파 진단 장치나 CT(Computerized Tomography) 장치 등의 화상 표시 장치에 관한 것으로, 특히 검사 대상물에 초음파나 X선 등을 조사함으로써 얻어지는 단층 화상에 대한 화상 처리 기술에 관한 것이다.
최근, 초음파 또는 X선 등의 진단용 신호(이하, 「신호」라고 함)를 생체 조직(피검자)에 대해 조사하고, 생체 조직으로부터 반사한 신호, 또는 생체 조직을 투과한 신호를 수신하며, 그 수신한 신호에 근거하여 생체 조직의 내부를 화상화하는 화상 표시 장치가 산업분야나 임상 의학 분야에서 폭넓게 이용되고 있다. 이러한 장치의 대표예로서는, 반사한 신호를 이용하는 것으로서 초음파 진단 장치, 투과한 신호를 이용하는 것으로서 CT 장치가 있다.
이들 화상 표시 장치는, 계산기의 성능, 특히 처리 속도의 향상에 따라, 실시간으로 생체 조직에 대해 계측하고, 화상화를 행하는 것이 가능해지고 있다. 특히, 순환기를 비롯한 높은 시간 분해능을 필요로 하는 임상 의학 분야에서는, 실시간으로 생체 조직의 단층 화상이 제공되므로, 환부 등에 대해 동적인 진단이 가능해지고 있다.
또한, 실시간 진단에 있어서, 주기적으로 동작하는 검사 대상의 기능이나 용적 등을 계측하고 싶은 경우가 있는데, 이 경우는 어떠한 방법에 의해 동기 신호를 취득하지 않으면 안된다.
도 1은 종래의 초음파 진단 장치(50)의 외관도이다. 도 1에 도시되는 바와같이, 초음파 진단 장치(50)는, 표시 장치(51), 본체 장치(52), 프로브(53), 및 심전도용 전극(54)으로 구성되어 있다.
표시 장치(51)는, 초음파 에코법 등에 의해 얻어진 단층 화상이나 필요한 정보를 표시시키기 위한 액정 또는 CRT 등에 의한 디스플레이 장치로, 오퍼레이터로부터의 조작을 받아들이는 터치 패널 등을 가지고 있다.
본체 장치(52)는, 프로브(53)를 통해 초음파의 송수신을 제어하기 위한 송수신 회로, 각종 신호나 화상을 처리하기 위해서 DSP(Digital Signal Processor)나 RAM 등으로 이루어지는 신호 ·화상 처리 회로, 오퍼레이터로부터의 조작을 받아들이는 스위치군이나 마우스, 터치 패널을 가지는 액정 디스플레이 등을 구비한다. 또, 본체 장치(52)는 심전도용 전극(54)을 통해 심전 신호를 수신한다
프로브(53)는 초음파를 송수신하기 위한 초음파 진동자나 음향 렌즈 등으로이루어지는 탐촉자이다.
이와 같이, 종래의 초음파 진단 장치(50)에서는 심전도용 전극(54)을 통해 피검자로부터 동기 신호로서의 심전 신호를 취득한다.
그러나, 종래의 초음파 진단 장치의 경우는, 상기의 동기 신호를 전용의 심전도용 전극(54)에 의해 초음파 진단 장치에 입력하고 있으므로, 동기 신호를 입력하기 위한 전용 회로나 전용 케이블 등이 필요해지고, 진단에 드는 비용이 증가하는 동시에, 외부 장치를 설치하기 위한 공간이 필요해진다.
또한, 임상 의학 분야에서의 이용을 생각하는 경우, 계측 대상인 환자에게 동기 신호를 계측 혹은 추출하기 위한 측정 장치를 장착할 필요가 있어, 환자에게 있어서는 심신 양면에서 부담이 된다.
이와 같이, 동기 신호를 이용한 기능 계측은, 일반적으로 외부 장치를 필요로 하고, 계측 대상에도 측정 장치를 장착할 필요가 있으므로, 번잡하고, 계측 비용이 증가하는 결점이 있다.
본 발명은, 상기 과제를 감안하여 이루어진 것으로, 외부로부터 동기 신호를 입력하지 않고, 동기 신호를 이용하는 검사를 가능하게 하는 화상 처리 장치 또는 초음파 진단 장치를 제공하는 것을 제1 목적으로 한다. 또한, 본 발명은 추출한 동기 신호와 표시되어 있는 단층 화상의 관련을 이해하기 쉽게 하기 위한 표시 방법을 제공하는 것을 제2 목적으로 한다.
상기 목적을 달성하기 위해, 본 발명에 관한 화상 처리 장치는, 일정한 주기로 활동하는 대상물의 단층 화상을 처리하는 화상 처리 장치로서, 1주기 이상의 소정 기간에 걸쳐 일정한 레이트로 샘플링함으로써, 단층 화상의 화상 데이터열을 취득하는 화상 취득 수단과, 취득된 화상 데이터열에 근거하여, 시간의 경과와 함께 변화하는 특징값을 순차 추출하는 특징값 추출수단과, 추출된 특징값에 근거하여, 상기 활동에서의 동일 위상의 타이밍을 나타내는 동기 신호를 생성하는 동기 신호 생성수단을 구비한다.
이것에 의해, 취득한 단층 화상으로부터 동기 신호를 생성하므로(외부로부터 심전 신호 등을 입력하지 않고 동기 신호를 획득하므로), 주기적으로 활동하는 검사 대상물에 대해, 동일 위상의 단층 화상에 착안한 진단이나 표시를 행하는 것이 가능해진다. 그 결과, 종래, 외부장치로부터 생성하여 온 동기 신호를 입력하는 것이 불필요해지고, 보다 낮은 비용으로 또 간편하게 진단할 수 있는 효과가 있다.
또, 상기 화상 처리 장치는, 상기 생성된 동기 신호에 근거하여, 상기 화상 데이터열에서의 개개의 화상 데이터가 샘플링된 위상 타이밍을 판별하고, 위상이 동일한 화상 데이터에 대해, 동일 위상인 것을 표시하는 동기 정보를 부가하는 동기 정보 부가 수단을 더 구비하는 것을 특징으로 한다.
이것에 의해, 생성된 동기 신호에 근거하여 화상 데이터에 동기 정보를 부가하고, 동일 위상의 화상 데이터만의 선택을 가능하게 하였으므로, 외부로부터의 동기 신호의 입력을 필요로 하지 않고, 메모리 용량의 삭감을 도모하면서, 동일 위상의 단층 화상을 표시시킬 수 있다.
또한, 상기 화상 처리 장치는, 혈류의 물리적인 특징을 나타내는 혈류 정보를, 상기 화상 취득 수단과 소정의 타이밍을 가지면서 샘플링된 데이터에 근거하여 생성하는 혈류 정보 산출 수단과, 생성된 혈류 정보에 근거하여 혈류 화상의 화상 데이터를 생성하는 혈류 화상 생성 수단과, 상기 동기 신호에 근거하여, 상기 동기 정보가 부가된 단층 화상의 화상 데이터와 상기 혈류 화상의 화상 데이터를 대응시키는 대응 수단을 구비하는 것을 특징으로 한다.
이것에 의해, 취득한 단층 화상으로부터 동기 신호를 생성하고, 이 동기 신호에 근거하여 혈류 등의 컬러 도플러 화상을 표시시키므로, 외부로부터 동기 신호를 입력하지 않고, 시간적으로 일정한 관계를 가지는 일반 단층 화상과 컬러 도플러 화상을 대응시켜 표시시키는 것이 가능해진다.
또, 상기 목적을 달성하기 위해, 본 발명에 관한 초음파 진단 장치는, 일정한 주기로 활동하는 대상물의 단층 화상을 생성하여 표시하는 초음파 진단 장치로서, 1주기 이상의 소정 기간에 걸쳐 일정한 레이트로 샘플링함으로써, 단층 화상의 화상 데이터열을 취득하는 화상 취득 수단과, 취득된 화상 데이터열에 근거하여, 시간의 경과와 함께 변화하는 특징값을 순차 추출하는 특징값 추출 수단과, 추출된 특징값에 근거하여, 상기 활동에서의 동일 위상의 타이밍을 나타내는 동기 신호를 생성하는 동기 신호 생성 수단과, 상기 생성된 동기 신호에 근거하여, 상기 화상 데이터열에서의 개개의 화상 데이터가 샘플링된 위상 타이밍을 판별하고, 위상이 동일한 화상 데이터에 대해, 동일 위상인 것을 표시하는 동기 정보를 부가하는 동기 정보 부가 수단과, 상기 동기 정보가 부가된 동일 위상의 화상 데이터에 근거하여 단층 화상을 표시하는 표시 수단을 구비한다.
이것에 의해, 취득한 단층 화상으로부터 동기 신호를 생성하므로(외부로부터 심전 신호 등을 입력하지 않고 동기 신호를 획득하므로), 주기적인 활동하는 검사 대상물에 대해, 동일 위상의 단층 화상에 착안한 진단이나 표시를 행하는 것이 가능해진다. 그 결과, 종래, 외부 장치로부터 생성하여 온 동기 신호를 입력하는 것이 불필요해져, 보다 낮은 비용으로 또한 간편하게 진단할 수 있는 초음파 진단 장치를 실현할 수 있다.
또한, 상기 목적을 달성하기 위해, 본 발명은, 상기 화상 처리 장치나 초음파 진단 장치의 특징적인 수단을 단계로 하는 화상 처리 방법이나 초음파 진단 방법으로서 실현하거나, 이들 단계를 모두 포함하는 프로그램으로서 실현할 수도 있다. 그리고, 그 프로그램은, 화상 처리 장치나 초음파 진단 장치가 구비하는 ROM 등에 격납해 두는 것 뿐만 아니라, CD-ROM 등의 기록매체나 통신 네트워크 등의 전송 매체를 통해 유통시키는 것도 가능하다.
도 1은 종래의 초음파 진단 장치의 외관도,
도 2는 실시 형태 1에서의 초음파 진단 장치의 기능 구성을 도시하는 블록도,
도 3은 흥미 영역 설정부에 의한, 단층 화상에 흥미 영역을 설정하는 방법의 일례를 도시하는 도면,
도 4(a)는 취득된 단층 화상의 예를 시간의 경과에 따라 배열한 것,
도 4(b)는 도 4(a)에서의 개개의 단층 화상에 근거하여, 특징량의 하나인 좌실 용적을 산출하고, 이를 곡선으로 표시한 그래프(좌실 용적 곡선)의 일례,
도 4(c)는 산출된 좌실 용적 곡선에 근거하여 생성된 동기 신호를 도시하는 도면,
도 5(a)는 좌실 용적 곡선의 일례,
도 5(b)는 심장 좌실의 활동(좌실 용적 곡선)에 근거하여 생성된, 심전 파형의 R파에 상당하는 의사(擬似) R파의 일례,
도 6은 실시간으로 의사 R파를 생성하는 경우의 「의사 R파 생성 처리」의 흐름을 도시하는 흐름도,
도 7(a)는 생성된 동기 신호의 일례를 도시하는 도면,
도 7(b)는 실시 형태 1의 초음파 진단 장치에서, 동기 정보가 부여된 화상 데이터의 격납 및 동기 정보가 부여된 화상 데이터만이 독출되는 모습을 모식적으로 도시하는 도면,
도 8은 실시 형태 2에서의 초음파 진단 장치의 기능 구성을 도시하는 블록도,
도 9(a)는 화상 생성부에서의 처리의 내용을 도시하는 도면,
도 9(b)는 특징량 추출부에서의 처리의 내용을 도시하는 도면,
도 9(c)는 동기 생성부 및 동기 정보 부여부에서의 처리의 내용을 도시하는 도면,
도 9(d)는 화상 표시부에서의 처리의 내용을 도시하는 도면,
도 10(a)는 생성된 동기 신호의 일례를 도시하는 도면,
도 10(b)는 실시 형태 2의 초음파 진단 장치에서, 동기 정보가 부여된 화상 데이터만이 선택되는 모습을 모식적으로 도시하는 도면,
도 11은 실시 형태 3에서의 초음파 진단 장치의 기능 구성을 도시하는 블록도,
도 12(a)는 화상 데이터의 압축을 행하지 않은 경우의 단층 화상의 표시예,
도 12(b)는 선택된 화상 데이터를 1/6로 압축하여 표시 사이즈를 작게 함으로써, 1 화면에 6매의 단층 화상을 동시에 표시시킨 경우를 모식적으로 도시하는 도면,
도 13은 특징량 및 동기 신호를 스크롤 표시시키는 경우의 모습을 도시하는 일례,
도 14(a)는 동기 신호에 대해, 그 표시 대상을 시간과 함께 변화시켜 표시하는 경우의 처리 방법의 일례를 도시하는 도면,
도 14(b)는 도 14(a)에 도시하는 방법에 의해 표시되는, 실제 동기 신호의 모습을 도시하는 도면,
도 15는 제어부에서의 「화상 표시 처리」의 흐름을 도시하는 흐름도,
도 16(a)는 생성된 정상의 동기 신호 파형을 도시하는 도면,
도 16(b)는 생성된 동기 신호에 대해 추정된 주기에 근거하여 주기 변동을 감시하고, 이상이 관측된 경우에 경고를 통지하는 모습을 모식적으로 도시하는 도면,
도 17은 실시 형태 4에서의 초음파 진단 장치의 기능 구성을 도시하는 블록도,
도 18은 단층 화상의 화상 데이터와 혈류 정보를 포함한 화상의 화상 데이터를 취득하는 경우의 상호 취득 타이밍의 관계를 도시하는 도면,
도 19(a)는 취득된 다수의 단층 화상의 일례,
도 19(b)는 생성된 동기 신호 파형의 일례,
도 19(c)는 취득된 다수의 혈류 화상의 일례로, 생성된 동기 신호에 혈류 화상이 관계시키는 경우의 처리의 모습을 도시하는 도면,
도 19(d)는 단층 화상과 혈류 화상을 합성한 다수의 합성 화상의 일례이다.
〈도면의 주요부분에 대한 부호의 설명〉
10 : 초음파 진단 장치11 : 초음파 탐촉자
12 : 송수신부13 : 조작부
50 : 초음파 진단 장치51 : 표시 장치
52 : 본체 장치53 : 프로브
100 : 화상 처리부101 : 제어부
102 : 화상 생성부103 : 흥미 영역 설정부
104 : 특징량 추출부105 : 동기 생성부
이하, 본 발명에 관한 실시 형태에 대해, 도면을 참조하면서 설명한다. 또한, 이하의 실시 형태에서는, 상기의 화상 처리 장치의 일례로서 초음파 진단 장치를 들어, 이에 관해서 설명한다.
(실시 형태 1)
도 2는 본 실시 형태에서의 초음파 진단 장치(10)의 기능 구성을 도시하는 블록도이다. 본 장치(10)는, 취득된 단층 화상으로부터 동기 신호를 생성하는 기능을 가지는 초음파 진단 장치로, 초음파 탐촉자(11), 송수신부(12), 조작부(13),화상 처리부(100), 및 화상 표시부(111)로 구성되어 있다.
초음파 탐촉자(11)는, 일반적으로 프로브라고 불리는 것으로, 예를 들면 페이즈드 어레이 방식의 전자 주사형의 프로브이다. 초음파 탐촉자(11)는 송수신부(12)로부터 수신한 제어 신호에 근거하여 초음파(예를 들면, 초음파 펄스)를 사출한다. 또한, 초음파 탐촉자(11)는 피검자(이하, 「환자」라고도 함)의 생체 내에서 반사해 온 초음파(이하, 「초음파 에코」라고 함)를 전기 신호로 변환하여 송수신부(12)에 송신한다.
송수신부(12)는, 초음파 탐촉자(11)로부터 초음파를 발생시키기 위한 송신 빔 포머 및 초음파 에코를 검출한 초음파 탐촉자(11)로부터 송신되는 전기 신호를 수신하는 수신 빔 포머 등으로 구성되며, 초음파 탐촉자(11)로부터 수신한 전기 신호에 대해 증폭 등을 행하여 화상 처리부(100)에 송신한다.
조작부(13)는, 스위치나 터치 패널 등을 구비하고, 이들에 대한 오퍼레이터로부터의 조작을 받아들이고, 이에 대응하는 제어 신호 등을 화상 처리부(100)에 송신한다.
화상 처리부(100)는 송수신부(12)로부터 수신한 전기 신호에 근거하여 단층 화상의 화상 데이터를 생성한다. 또한, 화상 처리부(100)는 생성한 단층 화상으로부터 얻어진 특징량(심장 좌실의 용적이나 단면적 등, 「특징값」이라고도 함)의 변화에 근거하여 동기 신호를 생성한다. 여기서, 「화상 데이터」란 초음파 탐촉자(11)에 의한 1회의 주사마다 생성되는 2차원의 휘도 데이터 등이며, B 모드 등으로 표시하기 위한 데이터를 말한다.
이 화상 처리부(100)는, 제어부(101), 화상 생성부(102), 흥미 영역 설정부(103), 특징량 추출부(104), 동기 생성부(105), 동기 정보 부여부(106), 화상 데이터 격납부(107), 데이터 특정부(108), 데이터 산출부(109), 및 선택 화상 격납부(110)로 구성되어 있다.
제어부(101)는, 예를 들면, ROM이나 RAM 등을 구비하는 마이크로컴퓨터이며, 화상 처리부(100)에서의 각 부에 대해 각각의 처리의 실행을 지시하고, 이들 처리의 타이밍을 제어한다. 구체적으로는, 초음파의 송신 및 초음파 에코의 수신을 행하는 송수신부(12)를 제어하는 동시에, 조작부(13)로부터 송신된 제어 신호 등을 받아들여 해독한다. 또한, 제어부(101)는 송수신부(12)로부터 수신한, 초음파 에코가 변환된 전기 신호를 화상 생성부(102)에 송신한다.
화상 생성부(102)는, 제어부(101)를 통해 송수신부(12)로부터 수신한 전기 신호에 대해 증폭 연산이나 A/D 변환, 보간 연산 등을 행함으로써, 단층 화상의 화상 데이터를 생성한다.
흥미 영역 설정부(103)는, 생성된 단층 화상에 대해, 특징량의 산출 대상인 흥미 영역(Region Of Interest : ROI)의 설정을 행하고, 또한, 이 흥미 영역에서의 대상물에 대해 윤곽을 추출한다. 일반적으로, 단층 화상은 시계열(時系列)로 다수 취득되고, 이들 단층 화상 각각에 대해 흥미 영역이 설정된다.
대상물의 윤곽을 추출하는 방법으로는, 조작부(13)를 통해 오퍼레이터로부터 수동에 의해 윤곽을 받아들여도 되고, 일본국 특개 2002-224116호 공보에 기재되어 있는 「자동 윤곽 추출법」에 의해 흥미 영역의 윤곽을 취득해도 된다. 이 「자동윤곽 추출법」은, 대상물의 단층 화상에 대해, 우선 「2값화」 및 「축퇴」의 수법을 이용함으로써 대강의 초기 윤곽을 추출하고, 이 초기 윤곽에 대해 동적인 윤곽 모델(SNAKES)을 적용하여, 수속(收束) 계산을 행하면서 최종적으로 자세한 윤곽을 구하는 것이다.
도 3은, 흥미 영역 설정부(103)에 의한, 단층 화상에 흥미 영역을 설정하는 방법의 일례를 도시하는 도면이다. 도 3에서는, 심장의 단층 화상이 묘사되고, 이 중 좌실이 흥미 영역으로서 설정된 경우가 도시되어 있다. 도 3에서는, 정방형으로 둘러싸인 영역(21)이 후술하는 화상 표시부(111)에서의 관찰용 모니터의 외측 틀이고, 그 내부의 사선으로 나타내어지는 부채형의 부분(22)이 초음파 진단 장치(10)에 의해 묘사된 단층 화상 전체이고, 검은 가는 선으로 묘사된 곡선(23, 24)이 심장의 윤곽이며, 검은 굵은 선(25)으로 둘러싸인 곡선의 내부가 흥미 영역(여기서는, 심장 좌실)이다.
특징량 추출부(104)는, 흥미 영역 설정부(103)에서 지정된 단층 화상의 흥미 영역에 대해, 특징량(예를 들면, 심장 좌실의 용량이나 단면적 등)을 추출 또는 산출한다. 예를 들면, 단층 화상으로부터 대상물의 반경을 산출하고, 산출한 반경을 싱글 플래인 에이리어 랭스법이나 모디파이드 심슨법 등의 근사식에 대입하여 심장 좌실의 용적을 산출한다.
동기 생성부(105)는 추출된 특징량에 근거하여 동기 신호(예를 들면, 심전파형의 R파와 같은 파형 등)를 생성한다. 예를 들면, 심장 좌실의 용적이 최소로 되는 시각에 동기 신호를 생성하는 방법이나, 심장 좌실의 용적의 변화에 합치하는동기 신호(예를 들면, 의사(擬似)적인 심전 파형의 R파)를 생성하는 방법 등이 있다.
도 4(a)∼도 4(c)는 특징량 추출부(104)로부터 추출된 특징량에 근거하여 동기 신호를 생성하는 방법의 일례를 도시하는 도면이다. 도 4(a)는 취득된 단층 화상예를 시간의 경과에 따라서 배열한 것이다. 도 4(b)는 상기 도 3(a)에서의 개개의 단층 화상에 근거하여, 특징량의 일례인 심장 좌실의 용적(V)을 산출하고(「●」로 표시하고 있음), 이를 곡선으로 표시한 그래프(이하, 「좌실 용적 곡선」이라고 함)이다. 도 4(b)에서, 세로축은 좌실 용적(V), 가로축은 시간(t)을 나타낸다. 여기서는, 산출된 좌실 용적(V)에 대해 스플라인 보간, 혹은 다항식 보간(이 경우의 보간 곡선은(점의 수-1) 다음 다항식에 의해 표시됨) 등을 행하고, 좌실 용적 곡선(33)을 생성한다. 도 4(c)는 도 4(b)의 좌실 용적 곡선(33)에 근거하여 생성된 동기 신호의 일례를 도시하는 도면이다. 도 4(c)에는 좌실 용적 곡선(33)의 극값(이 경우는 최소값(32, 37))이 검출된 경우, 이 극값을 검출한 시각에 합치하도록, 동기 펄스(34, 38)(예를 들면, 삼각파 펄스 등)가 생성된 모양을 나타내고 있다.
또한, 여기서는 심장의 좌실 용적을 특징량으로서 이용한 예를 나타냈는데, 예를 들면, 박동하는 혈관벽의 움직임을 그대로 특징량으로서 이용하는 방법이나, 혈관 직경의 변화를 특징량으로서 이용하는 방법도 이용 가능하다.
또한, 동기 생성부(105)에서, 보다 실제의 심전 파형에 가까운 파형을 의사적으로 생성하도록 구성해도 된다. 이 경우, 심장 좌실의 활동 상황에 근거하여심전 파형에 상당하는 동기 신호를 생성한다. 심전 파형은 활동중의 심근의 활동전위의 변화를 표시한 것인데, 「의료용 전자 계측」(八木 저, 산업도서(주) 발행)에 의하면, 심장의 수축은 신경 또는 신경근 섬유의 전기 전도를 트리거로서 발생시키고 있다. 즉, 심장의 활동과 심전 파형에는 밀접한 관계가 있어, 심장의 활동을 관찰함으로써 심전 파형을 추정하고, 의사적으로 심전 파형을 생성하는 것이 가능해진다.
심전도에 표시되는 파형으로는, 심장의 활동기에 따라 P파, Q파, R파, S파, T파, 및 U파가 있는데, 심장을 비롯해 순환기계의 기능을 계측하는 경우에는 「R파」를 이용하는 것이 일반적이다. R파는, 심장 좌실의 수축 개시기에 나타나는 파형으로, 진폭 또한 크기 때문에, 심장의 기능에 대해 진단 등을 행할 때의 트리거 신호로서 이용되는 경우가 많다.
도 5(a), 도 5(b)는 의사적으로 심전 파형에 상당하는 동기 신호를 생성하는 방법을 설명하기 위한 도면이다. 도 5(a)는 좌실 용적 곡선의 일례이다. 또, 도 5(b)는 심장 좌실의 활동(좌실 용적 곡선)에 근거하여 생성된, 심전 파형의 R파에 상당하는 의사 R파의 일례이다.
일반적으로, R파가 출현하는 타이밍은, 좌실이 축소를 시작하는 시점에서 약 0.05초 정도 전의 시점이고, 이는 좌실 용적 곡선(33)에서, 좌실이 수축기에 들어가기 직전의 극소값(41)과 극대값(42)을 표시하는 시점(각각 시각이 T3, T4)의 정 중간의 타이밍에 대응한다. 따라서, 좌실 용적 곡선(33)으로부터 최소값(43) 및 그 시각(T5)을 특정하고, 최소값(43) 직전의 극대값(42) 및 그 시각(T4), 또한, 극대값(42) 직전의 극소값(41) 및 그 시각(T3)을 특정한다. 도 5(b)는 동기 생성부(105)에서 생성되는 의사 R파의 형상의 구체예를 나타내고 있다. 이 경우의 R파는, 대소의 이등변 삼각형을 합성한 형상을 하고 있고, 도 5와 같이 a~d를 정의하면, 「a : b : c : d = 10 : 5 : 2 : 1」로 되어 있다.
의사 R파를 생성하는 방법에는 두 종류의 방법이 있다.
하나는, 미리 일정 기간(예를 들면, 10초 정도) 단층 화상을 취득한 후, 비실시간으로 의사 R파를 생성하는 방법이다. 이 경우에서도, 최초에, 흥미 영역을 설정하여 윤곽을 추출하고, 추출된 윤곽 및 다수의 단층 화상으로부터 좌실 용적 곡선(33)을 구한다. 이 좌실 용적 곡선(33)으로부터, 상기와 같은 순서로, 시각(T3 및 T4)을 특정하고, 이들 2개의 시각의 중간에 의사 R파를 생성시킨다.
또 하나는, 실시간으로 의사 R파를 생성하는 방법이다. 이 경우는, 소정의 프레임(예를 들면, 10 프레임)의 단층 화상을 1 세트로 하면서, 의사 R파를 실시간으로 생성하는 방법이다. 이 경우도, 흥미 영역을 설정하고, 윤곽을 추출하여 부분적으로 좌실 용적 곡선(33)을 구한다. 구한 부분적인 좌실 용적 곡선에서 최소값을 특정한 경우는 그 시각으로부터 거슬러 시각(T3 및 T4)을 특정하고, 상기와 마찬가지로, 이들 2개의 시각의 중간에 의사 R파를 생성시킨다. 예를 들면 30 [fps] 프레임 레이트인 경우를 생각하면, 의사 R파의 펄스가 생성되기까지 적어도 330 [ms] 요하므로, 시간 지연은 있지만, 프레임간의 시간이 33 [ms] 있으므로, 실제의 심장의 활동에 추종시키는 것이 가능하다.
도 6은 실시간으로 의사 R파를 생성하는 경우의 「의사 R파 생성 처리」의흐름을 도시한 흐름도이다.
최초에, 10 프레임분의 단층 화상을 취득하고, 이것들에 근거하여 좌실 용적을 산출하여, 일시적으로 기억한다(S501). 다음에, 각 용적값과 미리 설정해 둔 기준값(Vs)을 비교하면서(S502), 최소값을 특정할 수 있는지 여부를 판정한다(S503). 최소값을 특정할 수 있는 경우는(S503 : Yes), 극대값 및 극소값과, 각각의 시각(T4, T3)을 특정한다(S504, S505).
다음에, T4 및 T3이 특정됨으로써, 의사 R파의 각 특징점의 시각이 결정되므로(S506), 의사 R파를 생성하는 것이 가능해진다(S507). 또, 최소값을 특정할 수 없는 경우는(S503 : No), 다음 10 프레임분의 단층 화상을 취득하여, 상기와 동일한 처리를 행한다.
동기 정보 부여부(106)는, 생성된 특징량이나 동기 신호 정보를 화상 데이터에 대응시켜 부여하고, 이를 화상 데이터 격납부(107)에 격납한다.
화상 데이터 격납부(107)는, 예를 들면, RAM 등으로 구성된 수십∼수백 M바이트의 용량을 가지는 기억장치이다. 화상 데이터 격납부(107)는, 동기 정보 부여부(106)에 의해, 특징량(예를 들면, 심장 좌실의 용적)이나 동기 신호가 대응되어 부여된 화상 데이터가 격납된다.
데이터 특정부(108)는, 상기 특징량 또는 상기 동기 신호 정보를 지정함으로써, 주기적 혹은 어떤 규칙성을 가지고 변동하는 화상 데이터열 중에서, 특정한 위상에 있는 화상 데이터를 선택하기 위한 정보를 특정하여, 데이터 독출부(109)에 송신한다.
데이터 독출부(109)는, 데이터 특정부(108)로부터 수신한 정보에 근거하여, 화상 데이터 격납부(107)로부터 해당하는 화상 데이터를 독출하고, 선택 화상 격납부(110)에 송신한다.
선택 화상 격납부(110)는, 화상 표시부(111)의 관찰용 모니터용의 프레임 메모리 등이고, 데이터 독출부(109)에 의해 독출된 화상 데이터가 격납된다.
화상 표시부(111)는, 선택 화상 격납부(110)에 격납되어 있는 화상 데이터를 독출하여, B 모드 등의 단층 화상을 관찰용 모니터인 액정 디스플레이 등에 표시한다. 또한, 화상 표시부(111)는 그래픽 액셀러레이트나 DSC(Digital Scan Converter) 등을 가지고 있다.
도 7은 본 실시 형태에서의 초음파 진단 장치(10)의 기능의 개요를 설명하기 위한 도면이다. 도 7(a)는 생성된 동기 신호의 일례를 도시하는 도면이다. 도 7(b)은, 초음파 진단 장치(10)에서, 동기 정보가 부여된 화상 데이터의 격납 및 동기 정보가 부여된 화상 데이터만이 독출되는 모습을 모식적으로 도시하는 도면이다.
도 7(b)에 도시되는 바와 같이, 동기 정보 부여부(106)에 의해 화상 데이터에 동기 정보 「R」이 부여되어 화상 데이터 격납부(107)에 격납되고, 데이터 독출부(109)에 의해, 동기 정보 「R」이 부여된 화상 데이터만이 화상 데이터 격납부(107)로부터 독출되는 모습이 도시되어 있다.
여기서는, 동기 펄스를 생성하는 근원이 된 단층 화상에 대해 「R」이라는 동기 정보를 부여하고 있는데, 이 동기 정보는 한가지 의미로 특정할 수 있는 것이면 된다. 또한, 동기 정보「R」을 부여한 화상 데이터 이외의 화상 데이터에 「P」,「Q」등 다른 동기 정보를 부여하거나, 하나의 화상 데이터에 다수의 동기 정보를 부여해도 된다. 또한, 특징량 그 자체를 각각의 화상 데이터에 부여해도 된다.
또한, 데이터 특정부(108)에 의해 「R」이라는 동기 정보가 지정된 경우, 데이터 독출부(109)는 화상 데이터 격납부(107)로부터 「R」이라는 동기 정보가 부여되어 있는 화상 데이터만(61∼65 등)을 순차 독출한다. 화상 데이터를 특정하는 방법으로는, 조작자가 동기 정보 그 자체를 지정해도 되고, 「R」이 부여되어 있는 화상 데이터의 n 프레임전 혹은 n 프레임후의 화상 데이터를 지정해도 된다. 또한, 「R」과 「Q」등 다수의 동기 정보를 지정하여, 각 주기의 이들 동기 정보가 부여되어 있는 화상 데이터를 독출하고, 화상 표시부(111)에 동시에 표시시켜도 된다. 표시를 갱신하는 타이밍은, 적당한 시간 간격(예를 들면, 1초 간격)으로, 화상 데이터 격납부(107)에서 자동적으로 독출하도록 해도 되고, 조작부(13)에 트랙 볼이나 키보드 등(도시하지 않음)이 있는 경우는 수동으로 표시를 갱신해도 된다.
이상과 같이, 본 실시 형태에 관한 초음파 진단 장치(10)에 의해, 취득한 단층 화상으로부터 동기 신호를 생성하므로, 외부로부터 동기 신호를 입력하지 않고, 동 위상의 단층 화상을 추출하고, 이것에 근거하여 검사 대상을 진단하는 것이 가능해진다.
또한, 본 실시 형태에서는, 의사 R파를 생성하는 구성에 관해서 설명했는데, P파나 Q파 등, R파 이외의 심전 파형을 생성하도록 구성해도 된다. 또, 본 실시 형태에서는, 10 프레임분의 단층 화상을 취득하고, 이것들에 근거하여 좌실 용적의산출 등을 행하는 실시예에 대해 설명했는데, 물론, 10 프레임에 한정하는 것은 아니다.
또한, 화상 표시 장치가 X선 CT 장치인 경우, 제어부(101)는, X선의 조사와 X선 검출기의 제어를 행하고, MRI(Magnetic Resonance Imaging)의 경우에는, 계측 영역의 자장 및 펄스열의 제어, 및 검출기의 제어를 행한다.
또한, 본 실시 형태에서는, 흥미 영역으로서 심장 좌실에 착안한 예를 나타냈는데, 흥미 영역의 대상은 심장 좌실에 한정되는 것은 아니고, 그 형상도 임의이다. 또, 흥미 영역을 설정하는 방법도 상기의 방법에 한정하지 않고, 상기 이외의 방법으로 설정해도 된다.
(실시 형태 2)
도 8은 본 실시 형태에서의 초음파 진단 장치(20)의 기능 구성을 도시하는 블록도이다. 상기 실시 형태 1에서의 초음파 진단 장치(10)가, 동기 정보를 부여한 단층 화상을 일단 화상 데이터 격납부(107)에 격납하여 동일 위상의 단층 화상의 표시를 행했는데, 본 장치(20)에서는, 일단 화상 데이터 격납부에 격납하지 않고, 보다 고속으로 동일 위상의 단층 화상의 표시를 행한다. 또한, 이하에서는, 상기 실시 형태 1과 다른 구성에 대해 중점적으로 설명하기로 하고, 공통하는 구성에 대해서는 동일한 부호를 붙여, 설명은 생략한다.
초음파 진단 장치(20)가 상기 초음파 진단 장치(10)와 다른 점은, 상기 화상 데이터 격납부(107) 및 데이터 독출부(109) 대신에, 새롭게 화상 데이터 선택부(202)를 구비하는 점이다.
제어부(201)는, 상기 실시 형태 1에서의 화상 데이터 격납부(107) 및 데이터 독출부(109)의 제어 대신에, 새롭게 화상 데이터 선택부(202)의 제어를 행한다.
화상 데이터 선택부(202)는, 데이터 특정부(108)에 의해 지정된 동기 정보가 부여된 화상 데이터만을 선택하고, 그 이외의 화상 데이터는 파기한다. 선택된 화상 데이터는 선택 화상 격납부(110)에 송신된다. 이 때문에, 관측자는 외부로부터 동기 신호를 입력하는 경우와 마찬가지로, 동기 신호에 근거하여 임의의 동일 위상에서의 단층 화상만을 실시간으로 관찰하는 것이 가능해진다.
도 9는 초음파 진단 장치(20)에서의 각 부의 처리의 흐름을 도시하는 타임 챠트이다. 도 9(a)는 화상 생성부(102)에서의 처리의 내용을 도시하는 도면이다. 도 9(b)는 특징량 추출부(104)에서의 처리의 내용을 도시하는 도면이다. 도 9(c)는 동기 생성부(105) 및 동기 정보 부여부(106)에서의 처리의 내용을 도시하는 도면이다. 도 9(d)는 화상 표시부(111)에서의 처리의 내용을 도시하는 도면이다.
도 9(a)에 도시되는 바와 같이, 최초에, 화상 생성부(102)가, 송수신부(12) 및 제어부(201)를 통해 수신한 전기 신호에 근거하여, 단층 화상의 화상 데이터를 생성한다(S 81).
다음에, 특징량 추출부(104)가, 생성된 단층 화상에 근거하여 특징량(예를 들면, 심장 좌실의 용적 등)을 산출하여, 기억한다(S 82). 또한, 동기 생성부(105)가 추출된 특징량에 근거하여, 특징량의 극대값, 극소값 및 최소값을 특정하고, 이것에 근거하여, 동기 정보 부여부(106)가 화상 데이터에 동기 정보(예를 들면, 「R」)의 부여/비부여를 실시한다(S 83). 이 때, 최소값을 특정하기 위해서는, 소정의 기간(예를 들면, 1주기분)에 대해, 좌실 용적값을 비교할 필요가 있다.
마지막으로, 화상 표시부(111)가, 동기 정보가 부여된 화상 데이터만을 선택하고, 선택한 화상 데이터에 근거하여 단층 화상의 표시를 갱신한다(S 84). 이하, 제2 프레임 이후에 대해서도 동일한 처리가 행해진다(S 85 등).
도 10은 본 실시 형태에서의 초음파 진단 장치(20)의 기능의 개요를 설명하기 위한 도면이다. 도 10(a)는 생성된 동기 신호의 일례를 도시하는 도면이다. 도 10(b)은 초음파 진단 장치(20)에서, 동기 정보가 부여된 화상 데이터만이 선택되어 단층 화상이 표시되는 모습을 모식적으로 도시하는 도면이다.
도 10(b)에 도시되는 바와 같이, 동기 정보 부여부(106)에 의해 화상 데이터에 동기 정보「R」이 부여되고, 데이터 특정부(108)로부터 화상 데이터 선택부(202)에, 동기 정보「R」만을 선택하도록 지시되므로, 동기 정보가 부여된 화상 데이터만(61∼65)이 선택되어 표시의 대상이 되는 모습이 도시되어 있다.
이상과 같이, 본 실시 형태에 관한 초음파 진단 장치(20)에 의해, 생성된 동기 신호에 근거하여 화상 데이터에 동기 정보를 부가하고, 동일 위상의 화상 데이터만의 선택을 가능하게 하였으므로, 외부로부터의 동기 신호의 입력을 필요로 하지 않고, 메모리 용량의 삭감을 도모하면서, 동일 위상의 단층 화상을 표시시킬 수 있다.
또한, 상기 실시 형태 1과 마찬가지로, 동기 생성부(105)에서, 의사적으로 심전 파형을 생성하도록 구성해도 된다.
(실시 형태 3)
도 11은 본 실시 형태에 관한 초음파 진단 장치(30)의 기능 구성을 도시하는 블록도이다. 본 초음파 진단 장치(30)는, 단층 화상의 축소 표시나 스크롤 표시, 특징량에 대해 이상이 발생한 경우의 경고 통지 등을 행한다. 또한, 본 장치(30)는 추출한 특징량이나 생성한 동기 신호와 단층 화상을 1 화면중에 동시에 표시한다.
또한, 이하에 있어서도, 실시 형태 2의 경우와 마찬가지로, 상기 실시 형태 1 또는 실시 형태 2와 다른 구성에 대해 중점적으로 설명하고, 공통되는 구성에 대해서는 동일한 부호를 붙여, 설명은 생략한다.
초음파 진단 장치(30)가 상기 초음파 진단 장치(10)와 다른 점은, 새롭게, 특징량 격납부(302), 특징량 독출부(303), 동기 신호 격납부(306), 및 동기 신호 독출부(307)를 구비하고, 동기 생성부(304) 내에 주기 추정부(305)를, 선택 화상 격납부(308) 내에 화상 압축부(309)를, 화상 표시부(310) 내에 주기 변동 경고부(311)를 각각 가지고 있는 것이다.
제어부(301)는, 상기 실시 형태 2에서의 제어부(201)의 기능을 구비하는 동시에, 단층 화상의 축소 표시나 스크롤 표시, 특징량에 대해 이상이 발생한 경우의 경고 통지 등을 행하기 위해, 각 부에 대해 각각의 처리의 실행을 지시하고, 이들 처리의 타이밍을 제어한다. 또, 제어부(301)는 후술하는 「화상 표시 처리」를 제어한다. 또한, 제어부(301)는, 조작부(13)를 통해 조작자로부터 독출 개시점과 독출 종료점을 나타내는 정보를 받아들여, 특징량 독출부(303) 및 동기 신호독출부(307)에 송신한다.
특징량 격납부(302)는, 특징량 추출부(104)에 의해 생성된 특징량을 수신하여, 순차 격납한다.
특징량 독출부(303)는, 제어부(301)로부터 수신한 정보에 근거한, 독출 개시점과 독출 종료점 사이의 특징량 격납부(302)에 격납되어 있는 특징량의 정보를 독출하여, 화상 표시부(310)에 송신한다.
동기 생성부(304)는, 상기 실시 형태 1에서의 동기 생성부(105)의 기능에 추가하여, 새롭게 주기 추정부(305)를 구비한다.
주기 추정부(305)는, 생성된 동기 신호의 주기의 평균값을 구하거나, 통계적인 처리를 행함으로써 동기 신호의 주기 추정을 행한다.
동기 신호 격납부(306)는 동기 생성부(304)에 의해서 생성된 동기 신호 정보를 격납한다.
동기 신호 독출부(307)는, 제어부(301)로부터 수신한 정보에 근거한, 독출 개시점과 독출 종료점 사이의 동기 신호 격납부(306)에 격납되어 있는 동기 신호 정보를 독출하여, 화상 표시부(310)에 송신한다.
선택 화상 격납부(308)는, 상기 실시 형태 1에서의 선택 화상 격납부(110)의 기능에 추가하여, 새롭게 화상 압축부(309)를 구비한다. 여기서, 프레임 메모리의 내용은 화상 데이터 선택부(202)로부터 화상 데이터가 송신되어 올 때마다 갱신되고, 새로운 화상 데이터가 순차 덮어쓰기 되어, 항상 최신 단층 화상(도 12(b)의 경우는 6매)의 표시를 가능하게 한다.
화상 압축부(309)는, 화상 데이터 선택부(202)가 선택 화상 격납부(308)에 송신하는 화상 데이터를 일단 받아들여, 표시 사이즈가 축소되도록 화상 데이터를 변환(예를 들면, 솎아내기 등)하여, 선택 화상 격납부(110)의 관찰용 모니터에 표시하기 위해, 1 화면분의 프레임 메오리 중에 다수의 화상 데이터를 고쳐 격납한다.
도 12는, 화상 압축부(309)에 의해, 단층 화상의 화상 데이터가 압축되는 모양을 모식적으로 나타낸 도면이다. 도 12(a)는 화상 데이터의 압축을 행하지 않는 경우에서의 단층 화상의 표시예이다. 도 12(b)는, 화상 데이터를 1/6로 화상 압축함으로써, 1 화면에 6매의 단층 화상을 표시한 예이다. 도 12(b)에서는, 단층 화상을 「n ×m(n ≥1, m ≥1)」매 표시시키는 경우의 일례이고, 단층 화상을 6매(n = 3, m = 2) 동시에 표시시킨 경우이다.
화상 압축부(309)에 의해, 화상 표시부(310)에서의 관찰용 모니터(1100)의 표시 가능한 화면 사이즈와, 단층 화상의 데이터 사이즈와, 표시하는 단층 화상의 매수(즉, m 및 n)에 의해 압축율을 결정하고, 일반적으로 이용되는 오버샘플링 기술에 의해 내측 삽입 계산을 행하여 압축후의 단층 화상 상의 화소의 좌표를 구하고, 표시하고 싶은 위치에 대응한 프레임 메모리에 화상 데이터를 격납함으로써, 연속으로 취득해 단층 화상을 다수매 동시에 표시시키는 것이 가능해진다.
화상 표시부(310)는, 상기 실시 형태 1에서의 화상 표시부(111)의 기능에 더하여, 새롭게 주기 변동 경고부(311)를 구비한다. 또한, 화상 표시부(310)는, 최신의 단층 화상을 표시할 때에, 그 단층 화상에 대해 하이라이트 처리 등을 행하여, 최신의 단층 화상이 어느 것인지를 알기 쉽게 하는 것도 가능하게 한다.
주기 변동 경고부(311)는, 정규 확률 분포 등을 구하고, 검정을 행하는 등의 통계적인 처리를 행함으로써, 동기 생성부가 생성한 동기 신호의 주기의 이상이 일어난 경우에, 이를 검지하여, 관측자에게 통지한다. 통지 방법은, 경고음을 울리고, 화면 상의 이상 부분의 색을 바꾸어 표시하는 등의 방법이 있다.
도 13은 특징량 및 동기 신호를 스크롤 표시시키는 경우의 모양을 도시한 일례이다. 이 경우, 특징량 격납부(302) 및 동기 신호 격납부(306)에서의 데이터의 기억 방식은 링 버퍼 혹은 이것에 유사한 구성으로 되어 있고, 단층 화상의 화상 데이터의 생성에 따라 특징량 및 동기 신호가 생성될 때마다 순차 덮어쓰기로 격납하고, 격납 영역의 최후미까지 격납이 끝난 경우는 격납 영역의 선두로부터 오래된 정보에 덮어쓰기하면서 새로운 정보를 기입하는 것으로 한다.
이들 정보가 화상 표시부(310)에 표시되는 경우에는, 조작자로부터 받아들인 「독출 개시점」과 「독출 종료점」의 범위 내에 있는 화상 데이터에 특징량이나 동기 신호의 정보를 선택 화상 격납부(308) 내의 프레임 메모리에 기입한다. 독출 개시점과 독출 종료점은 그 위치를 바꾸는 것이 가능하고, 화상 표시부(310)상에는 특징량이나 동기 신호가 시간과 함께 스크롤하도록 표시된다. 또, 표시되어 있는 특징량 또는 동기 신호가 어느 타이밍에서 취득된 것인지 알 수 있는 마커를 표시하는 것도 가능하게 한다.
도 13에서의 관찰용 모니터(1100)에는, 3매의 단층 화상(1205∼1207)과 특징량(심장의 좌실 용적) 곡선(33) 및 동기 신호 파형(35)이 동시에 표시되어 있다.또한, 이 관찰용 모니터(1100)에는, 다른 주기에서의 동 위상의 각 단층 화상(1205∼1207)과 특징량 곡선(33) 및 동기 신호 파형(35)의 대응관계를 나타내는 마커(1211∼1213)가 표시되어 있다. 관찰용 모니터(1101)에는, 동일한 주기에서의 다른 위상의 각 단층 화상(1215∼1217)과 특징량 곡선(33) 및 동기 신호 파형(35)의 대응관계를 나타내는 마커(1221∼1223)가 표시되어 있다. 이 경우, 마커(1222)를 중심으로 하여, 동일한 주기 내에서의 위상이 다른 연속하는 3개의 단층 화상(1215∼1217)이 표시되어 있다.
도 14는 특징량 격납부(302) 및 동기 신호 격납부(306)의 표시 영역이 시간과 함께 변화하는 모습을 나타내는 도면이다. 여기서는 동기 신호에 대해 설명을 행하는데, 특징량에 관해서도 완전히 동일하다. 도 14(a)는, 동기 신호에 대해, 그 표시 대상을 시간과 함께 변화시켜 표시하는 경우의 처리 방법의 일례를 도시하는 도면이다. 또, 도 14(b)는 도 14(a)에 도시한 방법에 의해 표시되는 실제의 동기 신호의 모양을 도시하는 도면이다.
도 14(a)에는 동기 신호 격납부(306)에 격납되어 있는 동기 신호 정보의 독출 위치가 시간과 함께 화상(1) → 화상(2) → 화상(3) → 화상(4)으로 바뀌어 가는 모양이 나타내고 있다. 이에 따라, 화상 표시부(310)의 관찰용 모니터에 표시되는 동기 신호는 도 14(b)와 같이 변화하고, 화면의 우측에서 좌측으로 동기 신호가 흘러가도록 표시된다.
도 15는 본 초음파 진단 장치(30)의 제어부(301)에서의「화상 표시 처리」의 흐름을 나타내는 흐름도이다. 이 경우, 제어 대상이 되는 표시 모드에는 「표시모드 1」과 「표시 모드 2」가 있다. 표시 모드 1은, 상기 도 12(b)에 도시되는 바와 같이, 단층 화상을 축소하여 표시하는 모드이다. 한편, 표시 모드 2는, 상기 도 13에 도시되는 바와 같이, 다른 주기에서의 동 위상의 다수의 단층 화상, 특징량 곡선 및 동기 신호 파형, 또는 동일한 주기에서의 다른 위상의 다수의 단층 화상, 특징량 곡선 및 동기 신호 파형을 표시하는 모드이다.
제어부(301)는, 표시 모드의 종류를 조작자로부터 받아들여, 표시 모드 1이 선택되면(S 1401), 동기 정보 「R」가 부여된 단층 화상을 6매 표시하도록, 데이터 특정부(108)에 지시한다. 다음에, 화상 데이터 선택부(202)는, 데이터 특정부(108)로부터의 지시에 근거하여, 6 프레임분(즉, n ·m 프레임분 : n 및 m은 자연수)의「R」이 붙은 화상 데이터를 선택하여, 선택 화상 격납부(308)에 송신한다(S 1402). 이것에 의해, 화상 압축부(309)는, 수신한 화상 데이터를 (1/n ·m)으로 압축하여, 프레임 메모리에 격납한다(S 1403). 또한, 화상 표시부(310)는 프레임 메모리에 격납되어 있는 화상 데이터에 근거하여 관찰용 모니터에 표시한다(S 1404).
한편, 표시 모드(2)가 선택되면(S 1401), 조작자로부터 받아들인 독출 개시점 및 독출 종료점 및 마커에 근거하여(S 1406, S 1407), 관찰용 모니터에, 다른 주기에서의 동 위상의 다수의 단층 화상, 특징량 곡선 및 동기 신호 파형, 또는 동일한 주기에서의 다른 위상의 다수의 단층 화상, 특징량 곡선 및 동기 신호 파형을 표시한다(S 1408).
도 16은, 주기 추정부(305)에서의 생성된 동기 신호에 대해 추정한 주기에근거하여 주기 변동을 감시하고, 주기 변동 경고부(311)에 의해, 이상이 관측된 경우에 경고를 통지하는 모양을 모식적으로 도시하는 도면이다. 도 16(a)은 생성된 정상인 동기 신호 파형(35)을 도시하는 도면이다. 도 16(b)은 생성된 동기 신호에 대해 추정된 주기에 근거하여 주기 변동을 감시하여, 이상이 관측된 경우에 경고를 통지하는 모습을 모식적으로 도시하는 도면이다.
일반적으로, 동일한 특징량에 착안하여 동기 신호를 생성한 경우에는, 생체를 관측한 경우는 거의 일정한 주기로 동기 신호가 생성되게 된다. 그러나, 생성된 동기 신호의 주기가 돌연 변동한 경우는 어떠한 이상이 발생할 확률이 높아, 관측자에게 통지할 필요가 있다. 도 16(b)의 경우, 생성한 동기 신호에 대해 평균값(Tm)을 산출하고, 동기 신호가 이 Tm보다 X% 짧아진 경우, 또는 Y% 길어진 경우에, 경고음 또는 표시색을 바꾸는 등에 의해 관측자에게 통지한다.
또한, 상기 도 11에는, 주기 변동 경고부(311)를 구비하고, 동기 신호의 주기가 변동한 경우에 경고 통지를 행하도록 구성했는데, 특징량이 이상하게 변동한 경우에 경고를 통지하도록, 특징량 변동 경고부를 구비하도록 구성해도 된다. 이 경우는, 변동을 검지하는 대상이 주기가 아니고, 전술한 심장 좌실의 용적의 최대값/최소값/최대값과 최소값의 차이 등이 대상이 되어, 이들 평균값 등을 이용하여, 시시각각 변화하는 특징량을 감시하고, 이상한 수치가 검출된 경우에 경고음 등을 발생시키는 것으로 한다.
이상과 같이, 본 실시 형태에 관한 초음파 진단 장치(30)에 의해, 단층 화상의 축소 표시나 스크롤 표시, 특징량에 대해 이상이 발생한 경우의 경고 통지 등을행하는 것이 가능해진다.
또, 상기 실시 형태 1과 마찬가지로, 동기 생성부(304)에서, 의사적으로 심전 파형을 생성하도록 구성해도 된다.
(실시 형태 4)
도 17은 본 실시 형태에서의 초음파 진단 장치(40)의 기능 구성을 도시하는 블록도이다.
또한, 이하에 있어서도, 실시 형태 2의 경우와 마찬가지로, 상기 실시 형태 1과 다른 구성에 대해 중점적으로 설명하고, 공통되는 구성에 대해서는 동일한 부호를 붙여, 설명은 생략한다.
초음파 진단 장치(40)가 상기 초음파 진단 장치(10)와 다른 점은, 새롭게, 혈류 정보를 포함한 화상을 생성하는 혈류 정보 연산부(402)를 구비하는 점이다. 여기서, 「혈류 정보를 포함한 화상(이하, 혈류 화상이라고 함)」이란, 일반적으로 컬러 도플러라고 불리는 화상을 말한다. 또한, 「컬러 도플러」란, 생체 중의 운동 반사체(혈류의 경우는 적혈구군)에 의한 초음파의 도플러 효과를 이용하여, 심장이나 혈관내의 혈류 정보 등의 2차원 분포를 조직의 단층 화상과 겹쳐 실시간으로 컬러 표시하는 혈류 화상을 말한다. 이 컬러 도플러를 이용함으로써, 초음파 탐촉자(11)에 대해 근접해 오는 속도 성분과 멀어지는 속도 성분을 다른 색의 화상으로 표현하고, 이를 조직의 단층 화상과 겹쳐 표시시킴으로써, 그 부위에서의 혈류 정보를 시각적으로 파악하는 것이 가능해진다.
제어부(401)는, 상기 실시 형태 1에서의 제어부(101)의 기능을 갖는 동시에,단층 화상의 화상 데이터를 취득하면서 혈류 화상의 화상 데이터를 취득하기 때문에, 송수신부(12)에 대해, 단층 화상을 취득하기 위한 초음파의 송수신과 혈류 정보를 취득하기 위한 초음파의 송수신을, 미리 설정된 규칙(예를 들면, 교대로 취득함)에 근거하여 제어한다. 또한, 제어부(401)는, 송수신부(12)로부터 수신한 전기 신호를, 상기의 규칙에 따라 화상 생성부(102)와 혈류 정보 연산부(402)에 나누어 송신한다.
혈류 정보 연산부(402)는, 도플러 효과를 이용하여, 미리 규정된 샘플링 레이트로 수집된 혈류의 물리적인 특징을 나타내는 혈류 정보(예를 들면, 혈류 속도나 속도 분산, 혈류의 방향 등)를 생성하고, 이 혈류 정보에 근거하여 혈류 화상의 화상 데이터를 생성한다.
동기 정보 부여부(403)는, 단층 화상의 화상 데이터와 혈류 화상의 화상 데이터를 1조의 데이터로서 대응시켜 동일한 동기 정보를 부여하고, 화상 데이터 격납부(107)에 격납한다.
도 18은 단층 화상의 화상 데이터와 혈류 정보를 포함한 화상의 화상 데이터를 취득하는 경우의 상호 취득 타이밍의 관계를 도시하는 도면이다. 일반적으로, 컬러 도플러 화상을 취득하는 경우는, 도 18에 도시되는 바와 같이, 단층 화상의 화상 데이터의 취득을 행하면서 그 틈에 혈류 정보를 위한 데이터를 수집한다. 따라서, 초음파 진단 장치에서 컬러 도플러 화상을 표시하는 경우는, 프레임 레이트가 저하한다(일반적으로는, 10 [fps] 정도). 컬러 도플러 화상을 표시하는 경우는, 통상, 그레이 스케일의 단층 화상(1701)의 위에 난색/냉색으로 혈류 속도를 나타낸 혈류 화상(1702)을 겹쳐 합성 화상(1703)을 생성한다. 또한, 도 18에 도시되는 바와 같이, 동기 정보 부여부(403)는, 단층 화상(1701)의 직후에 취득된 혈류 화상(1702)을 1조의 데이터로서 대응시켜 동일한 동기 정보를 부여하고, 화상 데이터 격납부(107)에 격납한다.
도 19는 생성된 동기 신호에 혈류 화상이 관계되는 경우의 처리의 모양을 도시하는 도면이다. 도 19(a)는 취득된 다수의 단층 화상의 일례이다. 도 19(b)는 생성된 동기 신호 파형의 일례이다. 도 19(c)는, 취득된 다수의 혈류 화상의 일례이고, 생성된 동기 신호에 혈류 화상이 관계되는 경우의 처리의 모양을 도시하는 도면이다. 도 19(d)는 단층 화상과 혈류 화상을 합성한 다수의 합성 화상의 일례이다. 도 19(a)∼도 19(c)에 도시되는 바와 같이, 단층 화상(1801)에 근거하여 생성된 동기 신호(1802)에 대응시켜 혈류 화상을 붙여 1조의 데이터로서 동기 정보 「R」를 부여하여 화상 데이터 격납부(107)에 격납한다. 또한, 대응시킨 단층 화상(1801)과 혈류 화상(1803)을 합성하여 컬러 도플러 화상(1804)을 생성한다.
이상과 같이, 본 실시 형태에 관한 초음파 진단 장치(40)에 의해, 취득한 단층 화상으로부터 동기 신호를 생성하고, 이 동기 신호에 근거하여 혈류 등의 컬러 도플러 화상을 표시시키므로, 외부로부터 동기 신호를 입력하지 않고, 시간적으로 일정한 관계를 갖는 일반 단층 화상과 컬러 도플러 화상을 대응시켜 표시시키는 것이 가능해진다.
또, 상기 실시 형태 1와 마찬가지로, 동기 생성부(105)에서, 의사적으로 심전 파형을 생성해도 된다.
본 발명에 의하면, 취득한 단층 화상으로부터 동기 신호를 생성하므로(외부로부터 심전 신호 등을 입력하지 않고 동기 신호를 획득하므로), 주기적으로 활동하는 검사 대상물에 대해, 동일 위상의 단층 화상에 착안한 진단이나 표시를 행하는 것이 가능해진다. 그 결과, 종래, 외부장치로부터 생성하여 온 동기 신호를 입력하는 것이 불필요해지고, 보다 낮은 비용으로 또 간편하게 진단할 수 있는 효과가 있다.
Claims (28)
- 주기적으로 활동하는 대상물의 단층 화상을 처리하는 화상 처리 장치에 있어서,1주기 이상의 소정 기간에 걸쳐 일정한 레이트로 샘플링함으로써, 단층 화상의 화상 데이터열을 취득하는 화상 취득 수단과,취득된 화상 데이터열에 근거하여, 시간의 경과와 함께 변화하는 특징값을 순차 추출하는 특징값 추출 수단과,추출된 특징값에 근거하여, 상기 활동에서의 동일 위상의 타이밍을 나타내는 동기 신호를 생성하는 동기 신호 생성 수단을 구비하는 것을 특징으로 하는 화상 처리 장치.
- 제1항에 있어서, 상기 화상 처리 장치는,상기 생성된 동기 신호에 근거하여, 상기 화상 데이터열에서의 개개의 화상 데이터가 샘플링된 위상 타이밍을 판별하고, 위상이 동일한 화상 데이터에 대해, 동일 위상인 것을 나타내는 동기 정보를 부가하는 동기 정보 부가 수단을 더 구비하는 것을 특징으로 하는 화상 처리 장치.
- 제2항에 있어서, 상기 화상 처리 장치는,상기 동기 정보가 부가된 동일 위상의 화상 데이터를 포함하는 화상 데이터열을 격납하는 화상 격납 수단을 더 구비하는 것을 특징으로 하는 화상 처리 장치.
- 제3항에 있어서, 상기 화상 처리 장치는,상기 화상 격납 수단으로부터 상기 동기 정보가 부가된 화상 데이터를 독출하는 화상 독출 수단과,상기 독출된 화상 데이터에 근거하여 단층 화상을 표시하는 표시 수단을 더 구비하는 것을 특징으로 하는 화상 처리 장치.
- 제4항에 있어서, 상기 특징값은 상기 대상물의 용적인 것을 특징으로 하는 화상 처리 장치.
- 제5항에 있어서, 상기 동기 생성 수단은,상기 추출된 특징값 중에서 최소값의 특징값을 특정하고, 특정된 최소값의 특징값에 대응하는 화상 데이터의 샘플링된 타이밍에 근거하여, 상기 동기 신호를 생성하는 것을 특징으로 하는 화상 처리 장치.
- 제5항에 있어서, 상기 동기 생성 수단은,상기 추출된 특징값 중에서 최소값의 특징값을 특정하는 최소값 특정부와, 상기 특정된 최소값의 특징값 직전의 극대값의 특징값을 특정하는 극대값 특정부와,상기 특정된 극대값의 특징값 직전의 극소값의 특징값을 특정하는 극소값 특정부를 구비하고,상기 특정된 극대값의 특징값에 대응하는 화상 데이터가 샘플링된 타이밍과 상기 특정된 극소값의 특징값에 대응하는 화상 데이터가 샘플링된 타이밍의 중간 타이밍에, 상기 동기 신호를 생성하는 것을 특징으로 하는 화상 처리 장치.
- 제6항 또는 제7항에 있어서, 상기 동기 신호는, 펄스 파형을 포함하는 동기 신호이며,펄스 파형의 피크 타이밍에 의해, 상기 동일 위상의 타이밍을 나타내는 것을 특징으로 하는 화상 처리 장치.
- 제7항에 있어서, 상기 동기 신호는,의사적인 심전 신호의 R파이며,상기 R파의 피크 타이밍에 의해, 상기 동일 위상의 타이밍을 나타내는 것을 특징으로 하는 화상 처리 장치.
- 제8항에 있어서, 상기 화상 처리 장치는,상기 추출된 특징값을 격납하는 특징값 격납 수단과,상기 생성된 동기 신호를 나타내는 정보를 격납하는 동기 신호 격납 수단을 더 구비하고,상기 표시 수단은,상기 특징값을 나타내는 정보와 상기 동기 신호를 나타내는 정보를 독출하여, 상기 단층 화상과 함께 더 표시하는 것을 특징으로 하는 화상 처리 장치.
- 제10항에 있어서, 상기 화상 처리 장치는,독출 개시점과 독출 종료점의 설정을 받아들이는 접수 수단을 더 구비하고,상기 표시 수단은,상기 설정된 독출 개시점과 독출 종료점 사이의 특징값을 나타내는 정보와 상기 동기 신호를 나타내는 정보를 독출하여, 상기 단층 화상과 함께 더 표시하는 것을 특징으로 하는 화상 처리 장치.
- 제11항에 있어서, 상기 화상 처리 장치는,마커의 설정을 받아들이는 마커 접수 수단을 더 구비하고,상기 표시 수단은,상기 특징값과 상기 동기 신호와 상기 단층 화상이 동일한 위상을 나타내도록, 상기 설정된 마커를 더 표시하는 것을 특징으로 하는 화상 처리 장치.
- 제8항에 있어서, 상기 표시 수단은,상기 독출된 화상 데이터를 압축하는 데이터 압축부와,압축된 화상 데이터를 프레임 메모리에 격납하는 메모리 격납부와,프레임 메모리로부터 데이터를 독출하여 단층 화상을 표시하는 화상 표시부를 구비하는 것을 특징으로 하는 화상 처리 장치.
- 제13항에 있어서, 상기 화상 표시부는,상기 프레임 메모리로부터 다수의 상기 데이터를 독출하여, 다수의 단층 화상을 표시하는 것을 특징으로 하는 화상 처리 장치.
- 제14항에 있어서, 상기 화상 표시부는,독출된 다수의 상기 데이터 중, 시간적으로 오래된 일부의 상기 데이터를 순차 갱신하면서, 다수의 단층 화상을 표시하는 것을 특징으로 하는 화상 처리 장치.
- 제1항에 있어서, 상기 화상 처리 장치는,상기 생성된 동기 신호의 주기가 일정한 기준값 내인지 여부를 판정하는 주기 추정 수단과,상기 주기가 일정한 기준값외로 판정된 경우는 소정의 경고를 행하는 경고 통지 수단을 더 구비하는 것을 특징으로 하는 화상 처리 장치.
- 제2항에 있어서, 상기 화상 처리 장치는,상기 화상 취득 수단에서의 샘플링의 타이밍과 소정의 관계를 가지는 타이밍으로 샘플링된 데이터에 근거하여, 혈류의 물리적인 특징을 나타내는 혈류 정보를생성하는 혈류 정보 산출 수단과,생성된 혈류 정보에 근거하여 혈류 화상의 화상 데이터를 생성하는 혈류 화상 생성 수단과,상기 동기 신호에 근거하여, 상기 동기 정보가 부가된 단층 화상의 화상 데이터와 상기 혈류 화상의 화상 데이터를 대응시키는 대응 수단을 더 구비하는 것을 특징으로 하는 화상 처리 장치.
- 제17항에 있어서, 상기 대응 수단은,상기 단층 화상의 화상 데이터가 샘플링된 직후에 샘플링된 데이터에 근거하는 혈류 화상의 화상 데이터를 해당 단층 화상의 화상 데이터와 대응시키는 것을 특징으로 하는 화상 처리 장치.
- 주기적으로 활동하는 대상물의 단층 화상을 생성하여 표시하는 초음파 진단 장치에 있어서,1주기 이상의 소정의 기간에 걸쳐 일정한 레이트로 샘플링함으로써, 단층 화상의 화상 데이터열을 취득하는 화상 취득 수단과,취득된 화상 데이터열에 근거하여, 시간의 경과와 함께 변화하는 특징값을 순차 추출하는 특징값 추출 수단과,추출된 특징값에 근거하여, 상기 활동에서의 동일 위상의 타이밍을 나타내는 동기 신호를 생성하는 동기 신호 생성 수단과,상기 생성된 동기 신호에 근거하여, 상기 화상 데이터열에서의 개개의 화상 데이터가 샘플링된 위상 타이밍을 판별하고, 위상이 동일한 화상 데이터에 대해, 동일 위상인 것을 나타내는 동기 정보를 부가하는 동기 정보 부가 수단과,상기 동기 정보가 부가된 동일 위상의 화상 데이터에 근거하여 단층 화상을 표시하는 표시 수단을 구비하는 것을 특징으로 하는 초음파 진단 장치.
- 주기적으로 활동하는 대상물의 단층 화상을 처리하는 화상 처리 방법에 있어서,1주기 이상의 소정 기간에 걸쳐 일정한 레이트로 샘플링함으로써, 단층 화상의 화상 데이터열을 취득하는 화상 취득 단계와,취득된 화상 데이터열에 근거하여, 시간의 경과와 함께 변화하는 특징값을 순차 추출하는 특징값 추출 단계와,추출된 특징값에 근거하여, 상기 활동에서의 동일 위상의 타이밍을 나타내는 동기 신호를 생성하는 동기 신호 생성 단계를 가지는 것을 특징으로 하는 화상 처리 방법.
- 제20항에 있어서, 상기 화상 처리 방법은,상기 생성된 동기 신호에 근거하여, 상기 화상 데이터열에서의 개개의 화상 데이터가 샘플링된 위상 타이밍을 판별하고, 위상이 동일한 화상 데이터에 대해, 동일 위상인 것을 나타내는 동기 정보를 부가하는 동기 정보 부가 단계를 더 가지는 것을 특징으로 하는 화상 처리 방법.
- 제21항에 있어서, 상기 화상 처리 방법은,혈류의 물리적인 특징을 나타내는 혈류 정보를, 상기 화상 취득 단계와 소정의 타이밍을 가지면서 샘플링된 데이터에 근거하여 생성하는 혈류 정보 산출 단계와,생성된 혈류 정보에 근거하여 혈류 화상의 화상 데이터를 생성하는 혈류 화상 생성 단계와,상기 동기 신호에 근거하여, 상기 동기 정보가 부가된 단층 화상의 화상 데이터와 상기 혈류 화상의 화상 데이터를 대응시키는 대응 단계를 더 가지는 것을 특징으로 하는 화상 처리 방법.
- 주기적으로 활동하는 대상물의 단층 화상을 처리하는 화상 처리 장치를 위한 프로그램에 있어서,1주기 이상의 소정의 기간에 걸쳐 일정한 레이트로 샘플링함으로써, 단층 화상의 화상 데이터열을 취득하는 화상 취득 단계와,취득된 화상 데이터열에 근거하여, 시간의 경과와 함께 변화하는 특징값을 순차 추출하는 특징값 추출 단계와,추출된 특징값에 근거하여, 상기 활동에서의 동일 위상의 타이밍을 나타내는 동기 신호를 생성하는 동기 신호 생성 단계를 컴퓨터에 실행시키는 것을 특징으로하는 프로그램.
- 제23항에 있어서, 상기 프로그램은,상기 생성된 동기 신호에 근거하여, 상기 화상 데이터열에서의 개개의 화상 데이터가 샘플링된 위상 타이밍을 판별하고, 위상이 동일한 화상 데이터에 대해, 동일 위상인 것을 나타내는 동기 정보를 부가하는 동기 정보 부가 단계를 더 컴퓨터에 실행시키는 것을 특징으로 하는 프로그램.
- 제24항에 있어서, 상기 프로그램은,혈류의 물리적인 특징을 나타내는 혈류 정보를, 상기 화상 취득 단계와 소정의 타이밍을 가지면서 샘플링된 데이터에 근거하여 생성하는 혈류 정보 산출 단계와,생성된 혈류 정보에 근거하여 혈류 화상의 화상 데이터를 생성하는 혈류 화상 생성 단계와,상기 동기 신호에 근거하여, 상기 동기 정보가 부가된 단층 화상의 화상 데이터와 상기 혈류 화상의 화상 데이터를 대응시키는 대응 단계를 더 컴퓨터에 실행시키는 것을 특징으로 하는 프로그램.
- 주기적으로 활동하는 대상물의 단층 화상을 생성하여 표시하는 초음파 진단 장치를 위한 프로그램에 있어서,1주기 이상의 소정 기간에 걸쳐 일정한 레이트로 샘플링함으로써, 단층 화상의 화상 데이터열을 취득하는 화상 취득 단계와,취득된 화상 데이터열에 근거하여, 시간의 경과와 함께 변화하는 특징값을 순차 추출하는 특징값 추출 단계와,추출된 특징값에 근거하여, 상기 활동에서의 동일 위상의 타이밍을 나타내는 동기 신호를 생성하는 동기 신호 생성 단계와,상기 생성된 동기 신호에 근거하여, 상기 화상 데이터열에서의 개개의 화상 데이터가 샘플링된 위상 타이밍을 판별하고, 위상이 동일한 화상 데이터에 대해, 동일 위상인 것을 나타내는 동기 정보를 부가하는 동기 정보 부가 단계와,상기 동기 정보가 부가된 동일 위상의 화상 데이터에 근거하여 단층 화상을 표시하는 표시 단계를 컴퓨터에 실행시키는 것을 특징으로 하는 프로그램.
- 주기적으로 활동하는 대상물의 단층 화상을 처리하는 화상 처리 장치를 위한 프로그램이 기록된 컴퓨터가 독취 가능한 기록매체에 있어서,상기 프로그램은,1주기 이상의 소정 기간에 걸쳐 일정한 레이트로 샘플링함으로써, 단층 화상의 화상 데이터열을 취득하는 화상 취득 단계와,취득된 화상 데이터열에 근거하여, 시간의 경과와 함께 변화하는 특징값을 순차 추출하는 특정값 추출 단계와,추출된 특정값에 근거하여, 상기 활동에서의 동일 위상의 타이밍을 나타내는동기 신호를 생성하는 동기 신호 생성 단계를 포함하는 것을 특징으로 하는 기록매체.
- 주기적으로 활동하는 대상물의 단층 화상을 생성하여 표시하는 초음파 진단 장치를 위한 프로그램이 기록된 컴퓨터가 독취 가능한 기록매체에 있어서,상기 프로그램은,1주기 이상의 소정 기간에 걸쳐 일정한 레이트로 샘플링함으로써, 단층 화상의 화상 데이터열을 취득하는 화상 취득 단계와,취득된 화상 데이터열에 근거하여, 시간의 경과와 함께 변화하는 특징값을 순차 추출하는 특징값 추출 단계와,추출된 특징값에 근거하여, 상기 활동에서의 동일 위상의 타이밍을 나타내는 동기 신호를 생성하는 동기 신호 생성 단계와,상기 생성된 동기 신호에 근거하여, 상기 화상 데이터열에서의 개개의 화상 데이터가 샘플링된 위상 타이밍을 판별하고, 위상이 동일한 화상 데이터에 대해, 동일 위상인 것을 나타내는 동기 정보를 부가하는 동기 정보 부가 단계와,상기 동기 정보가 부가된 동일 위상의 화상 데이터에 근거하여 단층 화상을 표시하는 표시 단계를 포함하는 것을 특징으로 하는 기록매체.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2002097079A JP3986866B2 (ja) | 2002-03-29 | 2002-03-29 | 画像処理装置及び超音波診断装置 |
JPJP-P-2002-00097079 | 2002-03-29 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20030078760A true KR20030078760A (ko) | 2003-10-08 |
Family
ID=28035875
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR10-2003-0019517A KR20030078760A (ko) | 2002-03-29 | 2003-03-28 | 화상 처리 장치 및 초음파 진단 장치 |
Country Status (8)
Country | Link |
---|---|
US (1) | US6849048B2 (ko) |
EP (1) | EP1350470B1 (ko) |
JP (1) | JP3986866B2 (ko) |
KR (1) | KR20030078760A (ko) |
CN (1) | CN100403989C (ko) |
CA (1) | CA2423635A1 (ko) |
DE (1) | DE60300629T2 (ko) |
ES (1) | ES2242117T3 (ko) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100863745B1 (ko) * | 2005-08-18 | 2008-10-16 | 주식회사 메디슨 | 초음파 영상 진단 시스템에서 초음파 영상 처리 장치 및방법 |
KR101302384B1 (ko) * | 2010-07-19 | 2013-09-02 | 삼성메디슨 주식회사 | 초음파 진단장치 및 그 방법 |
Families Citing this family (54)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4189405B2 (ja) | 2003-05-20 | 2008-12-03 | パナソニック株式会社 | 超音波診断装置 |
JP3867080B2 (ja) * | 2003-12-11 | 2007-01-10 | ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー | 超音波診断装置 |
US7261695B2 (en) * | 2004-03-09 | 2007-08-28 | General Electric Company | Trigger extraction from ultrasound doppler signals |
JP4644449B2 (ja) * | 2004-07-12 | 2011-03-02 | 富士通株式会社 | 画像表示装置および画像表示プログラム |
JP4649147B2 (ja) * | 2004-08-31 | 2011-03-09 | 株式会社東芝 | 超音波診断装置 |
JP2006158444A (ja) * | 2004-12-02 | 2006-06-22 | Toshiba Corp | X線コンピュータ断層撮影装置 |
JP2006197967A (ja) * | 2005-01-18 | 2006-08-03 | Toshiba Corp | 超音波診断装置及び超音波画像表示装置 |
JP4589778B2 (ja) * | 2005-03-28 | 2010-12-01 | 株式会社東芝 | 超音波診断装置および超音波診断装置の心電図同期トリガ信号を生成する方法 |
CN101155551A (zh) * | 2005-04-07 | 2008-04-02 | 株式会社根本杏林堂 | 图像显示装置 |
JP5258291B2 (ja) * | 2005-06-07 | 2013-08-07 | 株式会社日立メディコ | 超音波診断装置及び超音波弾性像取得方法 |
JP4920302B2 (ja) * | 2005-06-20 | 2012-04-18 | 株式会社東芝 | 超音波診断装置及び超音波計測方法 |
DE102005029476A1 (de) * | 2005-06-24 | 2007-02-08 | Siemens Ag | Vorrichtung zur Durchführung intravaskulärer Untersuchungen |
CA2618101A1 (en) * | 2005-08-19 | 2007-02-22 | Visualsonics Inc. | Systems and methods for capture and display of blood pressure and ultrasound data |
JP2007068726A (ja) * | 2005-09-06 | 2007-03-22 | Toshiba Corp | 心機能診断装置 |
US7918793B2 (en) | 2005-10-28 | 2011-04-05 | Biosense Webster, Inc. | Synchronization of ultrasound imaging data with electrical mapping |
JP4805669B2 (ja) * | 2005-12-27 | 2011-11-02 | 株式会社東芝 | 超音波画像処理装置及び超音波画像処理装置の制御プログラム |
KR100867588B1 (ko) * | 2006-01-06 | 2008-11-10 | 주식회사 메디슨 | 대상체의 운동주기에 대응시켜 초음파 영상을디스플레이하는 초음파 시스템 및 방법 |
KR20070078152A (ko) * | 2006-01-26 | 2007-07-31 | 주식회사 메디슨 | 초음파 영상을 디스플레이하는 장치 및 방법 |
DE102006013475A1 (de) | 2006-03-23 | 2007-09-27 | Siemens Ag | Vorrichtung und Verfahren zur Synchronisation einer Bilderfassungsvorrichtung mit einem ersten, älteren Bilddatensatz |
JP2007287018A (ja) * | 2006-04-19 | 2007-11-01 | Fujifilm Corp | 診断支援システム |
US9612142B2 (en) | 2006-04-27 | 2017-04-04 | General Electric Company | Method and system for measuring flow through a heart valve |
DE602007006194D1 (de) * | 2006-06-28 | 2010-06-10 | Philips Intellectual Property | Modellbasierte bestimmung des kontraktionsstatus e |
WO2008010135A2 (en) * | 2006-07-14 | 2008-01-24 | Koninklijke Philips Electronics, N.V. | System and method for organizing, recording and displaying images in ultrasound imaging systems |
JP2008049012A (ja) * | 2006-08-28 | 2008-03-06 | Toshiba Corp | 超音波診断装置およびそれに用いるプログラム、画像表示装置 |
JP2008059250A (ja) * | 2006-08-31 | 2008-03-13 | Toshiba Corp | 画像管理システム、画像管理方法、及び画像管理プログラム |
JP4994786B2 (ja) * | 2006-10-26 | 2012-08-08 | 株式会社日立メディコ | 磁気共鳴イメージング装置 |
JP4218772B2 (ja) * | 2007-02-16 | 2009-02-04 | 国立大学法人名古屋大学 | 画像診断支援装置 |
US7860887B2 (en) | 2007-02-20 | 2010-12-28 | The Invention Science Fund I, Llc | Cross-media storage coordination |
US9008116B2 (en) * | 2007-02-20 | 2015-04-14 | The Invention Science Fund I, Llc | Cross-media communication coordination |
JP5366372B2 (ja) * | 2007-04-23 | 2013-12-11 | 株式会社東芝 | 超音波診断装置及び超音波画像データ生成プログラム |
JP5366385B2 (ja) * | 2007-09-26 | 2013-12-11 | 株式会社東芝 | 超音波診断装置及び超音波走査プログラム |
JP4956375B2 (ja) * | 2007-10-30 | 2012-06-20 | キヤノン株式会社 | 画像処理装置、画像処理方法 |
JP5422117B2 (ja) * | 2007-12-20 | 2014-02-19 | 株式会社東芝 | 医用画像処理装置、及び医用画像撮影装置 |
JP5472891B2 (ja) | 2008-01-21 | 2014-04-16 | 株式会社東芝 | 医用画像処理装置 |
JP5317716B2 (ja) * | 2009-01-14 | 2013-10-16 | キヤノン株式会社 | 情報処理装置および情報処理方法 |
JP2012000135A (ja) * | 2010-06-14 | 2012-01-05 | Hitachi Medical Corp | マルチモダリティ動画像診断装置 |
JP5444175B2 (ja) * | 2010-09-14 | 2014-03-19 | 富士フイルム株式会社 | 画像処理装置、方法およびプログラム |
KR101194290B1 (ko) * | 2010-09-24 | 2012-10-29 | 삼성메디슨 주식회사 | 이미지 필터링을 이용한 3차원 초음파 검사기 및 3차원 초음파 검사기의 동작 방법 |
JP5498989B2 (ja) * | 2011-05-30 | 2014-05-21 | 富士フイルム株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
JP5501292B2 (ja) * | 2011-05-30 | 2014-05-21 | 富士フイルム株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
DE102011083704A1 (de) * | 2011-09-29 | 2013-04-04 | Siemens Aktiengesellschaft | Angiographisches Untersuchungsverfahren |
CN103156636B (zh) * | 2011-12-15 | 2016-05-25 | 深圳迈瑞生物医疗电子股份有限公司 | 一种超声成像装置和方法 |
US20130253319A1 (en) * | 2012-03-23 | 2013-09-26 | Ultrasound Medical Devices, Inc. | Method and system for acquiring and analyzing multiple image data loops |
CN103876835A (zh) * | 2012-12-20 | 2014-06-25 | 上海联影医疗科技有限公司 | 一种医学信息显示系统 |
CN104068845B (zh) * | 2014-03-06 | 2016-07-06 | 武汉培威医学科技有限公司 | 一种心电超声信号融合断层扫描成像系统及方法 |
EP3155971A4 (en) * | 2014-06-11 | 2018-03-07 | Olympus Corporation | Medical diagnostic device, medical diagnostic device operation method, and medical diagnostic device operation program |
JP6195329B1 (ja) * | 2015-11-24 | 2017-09-13 | 株式会社国際電気通信基礎技術研究所 | 脳活動解析装置、脳活動解析方法、プログラムおよびバイオマーカー装置 |
CN108742520A (zh) * | 2018-04-09 | 2018-11-06 | 张小磊 | 一种神经内科触觉感知诊断装置 |
JP7114386B2 (ja) * | 2018-07-27 | 2022-08-08 | キヤノンメディカルシステムズ株式会社 | 医用画像診断装置およびモダリティ制御装置 |
JP7135775B2 (ja) * | 2018-11-22 | 2022-09-13 | コニカミノルタ株式会社 | 計測装置及びプログラム |
JP7020392B2 (ja) * | 2018-12-25 | 2022-02-16 | 東芝三菱電機産業システム株式会社 | データ収集再生システム |
CN111803108A (zh) * | 2020-08-07 | 2020-10-23 | 上海联影医疗科技有限公司 | 一种基于时钟同步的曝光控制方法和系统 |
TWI768774B (zh) | 2021-03-17 | 2022-06-21 | 宏碁股份有限公司 | 輔助評估心臟運動狀態的方法 |
JP2024051351A (ja) * | 2022-09-30 | 2024-04-11 | テルモ株式会社 | 画像処理装置、画像表示システム、画像表示方法、及び画像処理プログラム |
Family Cites Families (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5869544A (ja) * | 1981-10-20 | 1983-04-25 | 三菱電機株式会社 | Mモ−ド超音波診断装置 |
JPH0636797B2 (ja) * | 1985-05-24 | 1994-05-18 | 株式会社東芝 | 超音波診断装置 |
JPS63240841A (ja) * | 1987-03-30 | 1988-10-06 | 株式会社東芝 | 超音波診断装置 |
JPS63318932A (ja) * | 1987-06-24 | 1988-12-27 | Toshiba Corp | 超音波診断装置 |
JPH02307436A (ja) * | 1989-05-23 | 1990-12-20 | Toshiba Corp | 超音波血流イメージング装置 |
JP2777911B2 (ja) * | 1989-07-10 | 1998-07-23 | 富士通株式会社 | 超音波診断装置の表示方式 |
US6006126A (en) * | 1991-01-28 | 1999-12-21 | Cosman; Eric R. | System and method for stereotactic registration of image scan data |
JP3069929B2 (ja) * | 1992-01-14 | 2000-07-24 | 石原 謙 | 超音波診断装置 |
JPH06154213A (ja) * | 1992-11-24 | 1994-06-03 | Matsushita Electric Ind Co Ltd | 超音波診断装置 |
US5526442A (en) * | 1993-10-04 | 1996-06-11 | Hitachi Medical Corporation | X-ray radiography method and system |
JP3713303B2 (ja) * | 1994-06-22 | 2005-11-09 | 株式会社東芝 | 超音波診断装置 |
US5615680A (en) * | 1994-07-22 | 1997-04-01 | Kabushiki Kaisha Toshiba | Method of imaging in ultrasound diagnosis and diagnostic ultrasound system |
JP3516497B2 (ja) * | 1994-12-21 | 2004-04-05 | ジーイー横河メディカルシステム株式会社 | 超音波診断装置 |
JP3647970B2 (ja) * | 1996-05-10 | 2005-05-18 | フクダ電子株式会社 | 領域抽出装置 |
US5872571A (en) * | 1996-05-14 | 1999-02-16 | Hewlett-Packard Company | Method and apparatus for display of multi-planar ultrasound images employing image projection techniques |
JPH10127631A (ja) * | 1996-11-06 | 1998-05-19 | Toshiba Corp | 超音波診断装置 |
CN1106825C (zh) * | 1997-02-13 | 2003-04-30 | 通用电器横河医疗系统株式会社 | 识别被观察器官状态时间相位的超声波诊断装置 |
US6224553B1 (en) * | 1997-03-10 | 2001-05-01 | Robin Medical, Inc. | Method and apparatus for the assessment and display of variability in mechanical activity of the heart, and enhancement of ultrasound contrast imaging by variability analysis |
JPH11164833A (ja) * | 1997-09-30 | 1999-06-22 | Toshiba Corp | 医用画像診断装置 |
CN1073394C (zh) * | 1997-12-05 | 2001-10-24 | 李强 | 二维体表超声测量右心室容积和功能的方法及其装置 |
EP1061474A1 (de) * | 1999-06-17 | 2000-12-20 | VAMP Verfahren und Apparate der Medizinischen Physik GmbH | Computertomograph mit objektbezogener Bewegungsartefaktreduktion und Extraktion der Objektbewegungsinformation (Kymogramm) |
JP2002097079A (ja) | 2000-09-21 | 2002-04-02 | Shinagawa Refract Co Ltd | 背面側に低熱伝導層を有するカーボン含有れんがおよびその製造方法 |
JP4614548B2 (ja) | 2001-01-31 | 2011-01-19 | パナソニック株式会社 | 超音波診断装置 |
-
2002
- 2002-03-29 JP JP2002097079A patent/JP3986866B2/ja not_active Expired - Lifetime
-
2003
- 2003-03-25 ES ES03006727T patent/ES2242117T3/es not_active Expired - Lifetime
- 2003-03-25 DE DE60300629T patent/DE60300629T2/de not_active Expired - Lifetime
- 2003-03-25 EP EP03006727A patent/EP1350470B1/en not_active Expired - Lifetime
- 2003-03-26 US US10/396,418 patent/US6849048B2/en not_active Expired - Lifetime
- 2003-03-27 CA CA002423635A patent/CA2423635A1/en not_active Abandoned
- 2003-03-28 KR KR10-2003-0019517A patent/KR20030078760A/ko not_active Application Discontinuation
- 2003-03-31 CN CNB031086128A patent/CN100403989C/zh not_active Expired - Fee Related
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100863745B1 (ko) * | 2005-08-18 | 2008-10-16 | 주식회사 메디슨 | 초음파 영상 진단 시스템에서 초음파 영상 처리 장치 및방법 |
KR101302384B1 (ko) * | 2010-07-19 | 2013-09-02 | 삼성메디슨 주식회사 | 초음파 진단장치 및 그 방법 |
Also Published As
Publication number | Publication date |
---|---|
CA2423635A1 (en) | 2003-09-29 |
CN100403989C (zh) | 2008-07-23 |
JP2003290225A (ja) | 2003-10-14 |
DE60300629D1 (de) | 2005-06-16 |
EP1350470B1 (en) | 2005-05-11 |
US20030187350A1 (en) | 2003-10-02 |
CN1448113A (zh) | 2003-10-15 |
EP1350470A2 (en) | 2003-10-08 |
DE60300629T2 (de) | 2006-02-02 |
EP1350470A3 (en) | 2003-12-03 |
US6849048B2 (en) | 2005-02-01 |
ES2242117T3 (es) | 2005-11-01 |
JP3986866B2 (ja) | 2007-10-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP3986866B2 (ja) | 画像処理装置及び超音波診断装置 | |
US10448921B2 (en) | Ultrasound systems and methods for automated fetal heartbeat identification | |
US6884216B2 (en) | Ultrasound diagnosis apparatus and ultrasound image display method and apparatus | |
US6488629B1 (en) | Ultrasound image acquisition with synchronized reference image | |
JP5448328B2 (ja) | 超音波診断装置及び画像データ生成装置 | |
US7455640B2 (en) | Ultrasonic diagnostic apparatus | |
JPWO2006064676A1 (ja) | 超音波診断装置 | |
JPWO2006068079A1 (ja) | 超音波診断装置 | |
US5375599A (en) | Organically responsive scrolling in ultrasonic diagnostic equipment | |
US20140343427A1 (en) | Diagnostic imaging apparatus and image display method | |
JP5820128B2 (ja) | 超音波診断装置 | |
JP3253409B2 (ja) | 超音波ドプラ診断装置 | |
JP2004313291A (ja) | 超音波診断装置、医用画像解析装置及び医用画像解析方法 | |
US20190239861A1 (en) | Ultrasonic diagnostic apparatus | |
JP4149177B2 (ja) | 超音波診断装置及び画像処理装置 | |
CN111317508B (zh) | 超声波诊断装置、医用信息处理装置、计算机程序产品 | |
JP2939434B2 (ja) | 超音波診断装置 | |
EP2005890A9 (en) | Image processing device, ultrasonic imaging device using the same, and image processing method | |
JPH09140711A (ja) | 時相自動判定方法及び超音波診断装置 | |
JPH11221210A (ja) | 超音波診断装置 | |
JPH08336531A (ja) | 超音波診断装置 | |
JP2002336255A (ja) | 超音波診断装置 | |
JP2801538B2 (ja) | 超音波診断装置 | |
JP4527838B2 (ja) | 超音波診断装置 | |
JP7356229B2 (ja) | 超音波診断装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
WITN | Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid |