CN106510756A - 集成图形处理单元的嵌入式实时高清医学超声成像系统 - Google Patents

集成图形处理单元的嵌入式实时高清医学超声成像系统 Download PDF

Info

Publication number
CN106510756A
CN106510756A CN201610924260.7A CN201610924260A CN106510756A CN 106510756 A CN106510756 A CN 106510756A CN 201610924260 A CN201610924260 A CN 201610924260A CN 106510756 A CN106510756 A CN 106510756A
Authority
CN
China
Prior art keywords
processing unit
data
medical ultrasound
definition
ultrasound imaging
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610924260.7A
Other languages
English (en)
Inventor
陈俊颖
李迪勤
闵华清
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
South China University of Technology SCUT
Original Assignee
South China University of Technology SCUT
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by South China University of Technology SCUT filed Critical South China University of Technology SCUT
Priority to CN201610924260.7A priority Critical patent/CN106510756A/zh
Publication of CN106510756A publication Critical patent/CN106510756A/zh
Pending legal-status Critical Current

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5207Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of raw data to produce diagnostic data, e.g. for generating an image

Abstract

本发明公开集成图形处理单元的嵌入式实时高清医学超声成像系统。本发明的系统采用集成图形处理单元的嵌入式设备来实现医学超声成像,采用改进的高清成像算法,使其计算流程适用于图形处理单元的计算环境,从而提高医学超声成像的图像质量与成像帧率。与传统便携式医学超声成像系统相比,本发明使用的集成图形处理单元嵌入式系统具有强大的并行计算能力,可在短时间内完成高清医学超声成像算法的复杂计算,可以实时且高清地呈现医学超声影像。本发明实现最小方差波束形成高清超声成像,使其在本发明的嵌入式系统上实时输出高清医学超声图像。本发明的集成图形处理单元的嵌入式系统价格并不昂贵,实用性强、性价比高。

Description

集成图形处理单元的嵌入式实时高清医学超声成像系统
技术领域
本发明属于医学超声成像领域,基于集成图形处理单元的高性能嵌入式计算平台,完成便携式高清医学超声成像设备的核心处理模块。
背景技术
在医学超声成像系统中,物理阵元发射超声波并接收回波信号,然后在运算单元中通过成像算法将回波信号数据转换为图像数据并显示出来。传统的延时叠加成像算法通常在中央处理器CPU上实现,但高清成像算法的庞大成像数据及复杂运算过程,使得传统CPU已经无法满足其对高性能计算的需求。
近年来CPU的频率在不断提高、单芯片上的CPU核数也在增加,出现了双核、四核甚至更多核的CPU,但多核CPU的发展存在瓶颈,其运算吞吐率到一定程度后便很难再有突破性提高。有学者提出集成更多的运算单元来提高单位时间的计算能力,但这会造成设备体积和功耗的增加,也会使成本提高。另一方面,目前的图形处理单元发展迅猛,一个图形处理单元中可集成上百多个运算核心,使其计算能力大幅提高,这为实现实时高清医学超声成像提供了很好的硬件条件。本发明充分利用了嵌入式平台上图形处理单元的高速并行计算能力,将复杂的高清医学超声成像算法在集成图形处理单元的高性能嵌入式计算平台上实现,完成便携式高清医学超声成像设备的核心处理模块。
发明内容
本发明的主要目的为了解决目前便携式医学超声检测仪图像质量低的问题。目前便携式医学超声检测仪中使用的成像算法大多是传统的延时叠加成像算法,该算法运算简单,能满足医学超声的实时成像要求,但图像质量相对较低。本发明为了实现高清成像算法在医学超声检测仪中的应用,运用图形处理单元的高速并行计算能力完成高清成像算法的实现成像,达到在便携式医学超声检测仪中实现实时高清成像的要求。
本发明的目的通过如下技术方案实现。
集成图形处理单元的嵌入式实时高清医学超声成像系统,其采用集成图形处理单元的嵌入式设备来实现医学超声成像,采用改进的高清成像算法,使其计算流程适用于图形处理单元的计算环境,从而提高医学超声成像的图像质量与成像帧率。
进一步地实施地,集成图形处理单元的嵌入式实时高清医学超声成像系统包括模拟仿真模块、合成像素模块和显示图像模块;
所述模拟仿真模块使用Field II仿真器模拟超声成像过程并取得仿真数据;在模拟仿真模块中首先依据现实超声成像设备相应配置来模拟对应的仿真物理数据,创建发射和接收阵元,创建模拟检测对象,然后按扫描线逐条模拟发射并接收回波数据。
进一步地,所述合成像素模块根据医学超声成像中最小方差小波束形成算法,最小方差波束形成算法基于延迟叠加波束形成算法,与延迟叠加波束形成算法有相同的输入输出数据流和相同的延迟叠加处理;
最小方差波束形成算法使用变迹权重自适应输入的超声数据,具体包括:
最小方差波束形成算法中使用了子孔径平均法,一个接收孔径由M个连续的输入数据通道构成并被分成一组由L个连续输入通道组成的子孔径;一个接收孔径由(M-L+1)个子孔径组成;通过子孔径平均法,用以下的公式计算出一个像素p0的协方差矩阵:
其中,xk(p0)是输入数据中第k个子孔径组成的(L×1)维的向量,即xk(p0)是x(p0)中第k个元素到第(k-L+1)个元素的集合,而x(p0)是输入数据的一个(M×1)维的向量;算出协方差矩阵R(p0)后,再用以下公式算出变迹权重:
因为输入通道中的数据已经过延迟,所以此处a是一个均为1的简单方向向量;最后,成像中像素p0的幅值通过以下公式估算:
所述显示图像模块在合成像素模块得到像素数据后,调用Maltab相应函数对数据进行希尔伯特变换、对数压缩、灰阶范围较正操作,计算显示图像的深度和宽度,最后将图像相关数据输出到对应的横纵坐标轴内,以在屏幕上显示成像。
本发明依据现有科学技术现状,在集成图形处理单元的嵌入式系统中实现一个实时高清医学超声成像系统。用集成图形处理单元的嵌入式设备来实现医学超声成像,重点对最小方差自适应波束形成高清成像算法进行完善和改进,使其运算流程适用于图形处理单元的运算环境,充分发挥图形处理单元的计算能力,提高医学超声成像的图像质量与成像帧率。
与现有技术相比,本发明的优点主要体现在两个方面:一方面,本发明重点实现的最小方差自适应波束形成算法可有效提高医学超声成像的图像质量,其成像效果比传统的延迟叠加算法好很多;另一方面,通过图形处理单元强大的计算能力妥善解决最小方差自适应波束形成算法庞大的计算需求,从而使该嵌入式系统的输出成像帧率大幅提高,实现了高清医学超声图像的实时输出。
附图说明
图1是实例中的系统模块工作流程示意图。
图2是实例中异构嵌入式计算平台体系结构示意图。
图3a是实例中模拟的实验方案示意图。
图3b是实例中最小方差波束形成算法的输出图像。
具体实施方式
以下结合附图和实例对本发明的具体实施作进一步说明,但本发明的实施和保护不限于此。需指出的是,以下若有未特别详细说明之处,均是本领域技术人员可参照现有技术实现的。
图1为本实例的系统模块流程图。由图1可以看出,系统设计有如下三大模块。
1.模拟仿真模块
使用Field II仿真器模拟超声成像过程并取得仿真数据。在这模块中首先依据现实超声成像设备相应配置来模拟对应的仿真物理数据,创建发射和接收阵元,根据实验需要创建模拟检测对象,然后按扫描线逐条模拟发射并接收回波数据。
2.合成像素模块
根据医学超声成像中最小方差小波束形成算法的发展,我们实现了下面描述中的最小方差波束形成算法。
最小方差波束形成算法是基于延迟叠加波束形成算法发展而来的,它们有相同的输入输出数据流和相同的延迟叠加处理。最主要的不同是最小方差波束形成算法使用变迹权重自适应输入的超声数据,而延迟叠加波束形成算法不能自适应输入数据的固定的变迹权重。正是这个最主要的区别使最小方差波束形成算法输出图像的质量比延迟叠加算法的高。
最小方差波束形成算法中使用了子孔径平均法。一个接收孔径由M个连续的输入数据通道构成并被分成一组由L个连续输入通道组成的子孔径。因此,一个接收孔径由(M-L+1)个子孔径组成。通过子孔径平均法,我们可以用以下的公式计算出一个像素p0的协方差矩阵:
此处,xk(p0)是输入数据中第k个子孔径组成的(L×1)维的向量,即xk(p0)是x(p0)中第k个元素到第(k-L+1)个元素的集合,而x(p0)是输入数据的一个(M×1)维的向量。算出协方差矩阵R(p0)后,再用以下公式算出变迹权重:
因为输入通道中的数据已经过延迟,所以此处a是一个均为1的简单方向向量。最后,成像中像素p0的幅值可通过以下公式估算:
3.显示图像模块
在合成像素模块得到像素数据后,调用Maltab相应函数对数据进行希尔伯特变换、对数压缩、灰阶范围较正等操作,计算显示图像的深度和宽度,最后将图像相关数据输出到对应的横纵坐标轴内,以在屏幕上显示成像。
本实例的系统主要在Nvidia Jetson TX1嵌入式平台上实现,采用Field II得到的仿真模拟数据,对最小方差波束形成高清成像算法进行改进和完善,将其用CUDA C编程实现并编译成PTX文件,最后使用混编的形式将系统各个模块整合起来,使其适合于运行在集成图形处理单元的高性能嵌入式计算平台上,从而完成便携式高清医学超声成像设备的核心处理模块设计。以下从计算平台和实施策略两个方面对实施方案进行介绍。
最小方差波束形成算法以计算复杂度为代价而输出高质量的图像,因此它的计算是相当费时的。较高的计算复杂度阻碍了其在传统嵌入式计算平台如ARM处理器上的实现,如在传统的ARM处理器上实现实时的最小方差波束形成算法。因此,最小方差波束形成算法在含有嵌入式GPU的异构嵌入式计算平台上实现实时成像能力具有很重要的意义。
异构嵌入式计算平台的体系结构如图2所示,其中ARM处理器和嵌入式GPU,以及内部存储器和外部存储器的处理器模块都在一个嵌入式处理芯片内。在异构嵌入式计算平台上还有大量的外围设备,如相机模块、显示模块、USB等常用外设连接器模块。此系统使用的异构嵌入式计算平台GPU加速器是英伟达公司的产品Nvidia Jetson TX1。
本发明中,最小方差波束形成算法在嵌入式GPU上的高清实时实现主要有如下两个方面。
1)GPU计算资源分配:基于GPU的CUDA编程架构模型包括三个规划层次,即GPU的计算网格、线程块及线程。当程序启动一个CUDA内核函数在GPU上执行时,其所有的计算都是在一个计算网格中执行的。不同线程块或线程上的计算任务可以并行执行,而一个线程中的程序指令被顺序执行。这种编程模型的层次结构可以应用到超声成像的最小方差波束形成算法的实现过程中。在图像形成过程中,利用最小方差波束形成算法计算整个图像的像素值。图像中行和列的像素刚好可以映射到GPU二维计算网格中的线程块,其中,每个线程块负责一个像素的幅度值计算。像素幅度值的计算过程如图1的合成像素模块所述,此过程通过同个线程块内的线程之间进行并行协作完成。最适合的线程块数和线程数取决于计算问题的规模和嵌入式计算平台中计算资源的配置。
2)GPU内存访问策略:GPU的内存访问策略对GPU的整体计算速度有非常重要的影响。GPU中有全局内存,共享内存和寄存器等三种基本的内存类型。这三种类型的存储模块位于不同的架构层次上,寄存器位于GPU处理器芯片上,共享内存与GPU计算核心有一定距离,全局内存则与GPU计算核心最远。与GPU核心的距离决定了三种类型的存储器的访问速度,寄存器的访问速度是最快的,共享内存的访问速度比寄存器文件慢,而全局存储器的速度是三个存储器中最慢的一个。然而,内存类型的内存大小与它的内存访问速度成反比。因此,全局内存的容量大小是最大的,寄存器是最小的,而共享内存的大小在全局内存和寄存器之间。因此,在实现的GPU程序中,小型变量可以存储在寄存器中,但大部分的数据会被存储在全局内存中。
方案和性能评估:
该系统通过使用Field II仿真器来模拟超声通道数据样本,从而进行一系列相关实验,得到此系统的成像性能评估。以下仿真模拟了一个由128阵元组成的超声波换能器,每个阵元的宽度为0.3048mm,使用5kHz的脉冲重复率和40MHz的采样率。模拟的实验方案如图3a所示。实验中使用NVIDIA Jetson TX1作为评估平台。通过对我们在上一节中描述的实施方案进行实现。图3b展示了此实验方案中最小方差波束形成算法的输出图像,可以看出,通过最小方差波束形成算法可以得到高质量图像,并且其成像时间在实时成像要求内,说明了此系统的现实意义。

Claims (4)

1.集成图形处理单元的嵌入式实时高清医学超声成像系统,其特征在于采用集成图形处理单元的嵌入式设备来实现医学超声成像,采用改进的高清成像算法,使其计算流程适用于图形处理单元的计算环境,从而提高医学超声成像的图像质量与成像帧率。
2.根据权利要求1所述的集成图形处理单元的嵌入式实时高清医学超声成像系统,其特征在于包括模拟仿真模块、合成像素模块和显示图像模块;
所述模拟仿真模块使用Field II仿真器模拟超声成像过程并取得仿真数据;在模拟仿真模块中首先依据现实超声成像设备相应配置来模拟对应的仿真物理数据,创建发射和接收阵元,创建模拟检测对象,然后按扫描线逐条模拟发射并接收回波数据。
3.根据权利要求1所述的集成图形处理单元的嵌入式实时高清医学超声成像系统,其特征在于系统采用的合成像素模块根据医学超声成像中最小方差小波束形成算法,最小方差波束形成算法基于延迟叠加波束形成算法,与延迟叠加波束形成算法有相同的输入输出数据流和相同的延迟叠加处理;
最小方差波束形成算法使用变迹权重自适应输入的超声数据,具体包括:
最小方差波束形成算法中使用了子孔径平均法,一个接收孔径由M个连续的输入数据通道构成并被分成一组由L个连续输入通道组成的子孔径;一个接收孔径由(M-L+1)个子孔径组成;通过子孔径平均法,用以下的公式计算出一个像素p0的协方差矩阵:
R ( p 0 ) = 1 M - L + 1 Σ k = 1 M - L + 1 x k ( p 0 ) x k H ( p 0 ) - - - ( 1 )
其中,xk(p0)是输入数据中第k个子孔径组成的(L×1)维的向量,即xk(p0)是x(p0)中第k个元素到第(k-L+1)个元素的集合,而x(p0)是输入数据的一个(M×1)维的向量;算出协方差矩阵R(p0)后,再用以下公式算出变迹权重:
w ( p 0 ) = R - 1 ( p 0 ) a a H R - 1 ( p 0 ) a - - - ( 2 )
因为输入通道中的数据已经过延迟,所以此处a是一个均为1的简单方向向量;最后,成像中像素p0的幅值通过以下公式估算:
z ( p 0 ) = 1 M - L + 1 Σ k = 1 M - L + 1 w H ( p 0 ) x k ( p 0 ) - - - ( 3 ) .
4.根据权利要求1所述的集成图形处理单元的嵌入式实时高清医学超声成像系统,其特征在于系统采用的显示图像模块在合成像素模块得到像素数据后,调用Maltab相应函数对数据进行希尔伯特变换、对数压缩、灰阶范围较正操作,计算显示图像的深度和宽度,最后将图像相关数据输出到对应的横纵坐标轴内,以在屏幕上显示成像。
CN201610924260.7A 2016-10-24 2016-10-24 集成图形处理单元的嵌入式实时高清医学超声成像系统 Pending CN106510756A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610924260.7A CN106510756A (zh) 2016-10-24 2016-10-24 集成图形处理单元的嵌入式实时高清医学超声成像系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610924260.7A CN106510756A (zh) 2016-10-24 2016-10-24 集成图形处理单元的嵌入式实时高清医学超声成像系统

Publications (1)

Publication Number Publication Date
CN106510756A true CN106510756A (zh) 2017-03-22

Family

ID=58292288

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610924260.7A Pending CN106510756A (zh) 2016-10-24 2016-10-24 集成图形处理单元的嵌入式实时高清医学超声成像系统

Country Status (1)

Country Link
CN (1) CN106510756A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108354626A (zh) * 2018-03-31 2018-08-03 华南理工大学 基于gpu的多种mv高清算法快速医学超声影像系统
CN108652661A (zh) * 2018-04-10 2018-10-16 华南理工大学 使用capi加速的fpga医学超声成像系统
CN113069145A (zh) * 2021-06-07 2021-07-06 深圳华声医疗技术股份有限公司 心脏超声成像方法、终端设备及计算机可读存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101199428A (zh) * 2007-04-18 2008-06-18 汕头超声仪器研究所 一种超声回波数据的处理装置及方法
CN101606854A (zh) * 2009-06-10 2009-12-23 无锡祥生科技有限公司 一种高精度实时超声图像扫描变换方法
CN102525555A (zh) * 2010-11-19 2012-07-04 通用电气公司 用于校正超声数据的方法和系统
CN104203110A (zh) * 2012-03-26 2014-12-10 毛伊图像公司 用于通过应用加权因子来提高超声图像品质的系统和方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101199428A (zh) * 2007-04-18 2008-06-18 汕头超声仪器研究所 一种超声回波数据的处理装置及方法
CN101606854A (zh) * 2009-06-10 2009-12-23 无锡祥生科技有限公司 一种高精度实时超声图像扫描变换方法
CN102525555A (zh) * 2010-11-19 2012-07-04 通用电气公司 用于校正超声数据的方法和系统
CN104203110A (zh) * 2012-03-26 2014-12-10 毛伊图像公司 用于通过应用加权因子来提高超声图像品质的系统和方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
JUNYING CHEN: "Real-time Embedded Implementation of Adaptive Beamforming for Medical Ultrasound Imaging", 《2016 SIXTH INTERNATIONAL CONFERENCE ON INSTRUMENTATION & MEASUREMENT, COMPUTER, COMMUNICATION AND CONTROL》 *
JUNYING CHEN: "Real-Time GPU-Based Adaptive Beamformer for High Quality Ultrasound Imaging", 《2011 IEEE INTERNATIONAL ULTRASONICS SYMPOSIUM PROCEEDINGS》 *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108354626A (zh) * 2018-03-31 2018-08-03 华南理工大学 基于gpu的多种mv高清算法快速医学超声影像系统
WO2019184343A1 (zh) * 2018-03-31 2019-10-03 华南理工大学 基于gpu的多种mv高清算法快速医学超声影像系统
CN108652661A (zh) * 2018-04-10 2018-10-16 华南理工大学 使用capi加速的fpga医学超声成像系统
WO2019196394A1 (zh) * 2018-04-10 2019-10-17 华南理工大学 使用capi加速的fpga医学超声成像系统
CN113069145A (zh) * 2021-06-07 2021-07-06 深圳华声医疗技术股份有限公司 心脏超声成像方法、终端设备及计算机可读存储介质
CN113069145B (zh) * 2021-06-07 2021-10-19 深圳华声医疗技术股份有限公司 心脏超声成像方法、终端设备及计算机可读存储介质

Similar Documents

Publication Publication Date Title
Steinkraus et al. Using GPUs for machine learning algorithms
CN107229051A (zh) 基于gpu的视频sar回波仿真并行实现方法
CN110046537A (zh) 使用递归神经网络进行动态面部分析的系统和方法
US9724005B2 (en) Real-time multi-channel EEG signal processor based on on-line recursive independent component analysis
CN109376843A (zh) 基于fpga的脑电信号快速分类方法、实现方法及装置
CN103544682B (zh) 一种三维超声图像非局部均值滤波方法
EP3742343A1 (en) Autonomous vehicle simulation using machine learning
WO2019196394A1 (zh) 使用capi加速的fpga医学超声成像系统
CN106510756A (zh) 集成图形处理单元的嵌入式实时高清医学超声成像系统
Westwood A GPU accelerated spring mass system for surgical simulation
CN104237859B (zh) 利用gpu实现外辐射源雷达多通道时域杂波抑制的方法
US10497284B2 (en) Systems and methods of ultrasound simulation
CN108957450A (zh) 一种毫米波雷达gpu实时三维成像方法
CN108354626A (zh) 基于gpu的多种mv高清算法快速医学超声影像系统
CN104656073B (zh) 三维成像声纳波束形成方法及在多核处理器上的实现方法
CN105534546A (zh) 一种基于zynq系列fpga的超声成像方法
CN107847217A (zh) 用于生成超声散射体表示的方法和装置
CN106646664B (zh) 基于gpu的人体微波回波模拟方法及系统
Hergum et al. Fast ultrasound imaging simulation in k-space
Yang et al. Separable beamforming for 3-D synthetic aperture ultrasound imaging
US20230386107A1 (en) Anti-aliasing for real-time rendering using implicit rendering
Hansen et al. Synthetic aperture beamformation using the GPU
CN106291551A (zh) 一种基于gpu的并行结构isar距离对准方法
Storve et al. Fast simulation of dynamic ultrasound images using the GPU
WO2021135629A1 (zh) 波束合成处理方法、装置、计算机设备和存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170322