CN111145343A - 一种离体心脏灌流三维显示方法及系统 - Google Patents

一种离体心脏灌流三维显示方法及系统 Download PDF

Info

Publication number
CN111145343A
CN111145343A CN201911398725.XA CN201911398725A CN111145343A CN 111145343 A CN111145343 A CN 111145343A CN 201911398725 A CN201911398725 A CN 201911398725A CN 111145343 A CN111145343 A CN 111145343A
Authority
CN
China
Prior art keywords
foreground
image
dimensional display
video source
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201911398725.XA
Other languages
English (en)
Other versions
CN111145343B (zh
Inventor
杨丰华
谭伟江
李想
郑双
张钰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Laboratory Animals Monitoring Institute
Original Assignee
Guangdong Laboratory Animals Monitoring Institute
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Laboratory Animals Monitoring Institute filed Critical Guangdong Laboratory Animals Monitoring Institute
Priority to CN201911398725.XA priority Critical patent/CN111145343B/zh
Publication of CN111145343A publication Critical patent/CN111145343A/zh
Application granted granted Critical
Publication of CN111145343B publication Critical patent/CN111145343B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/136—Segmentation; Edge detection involving thresholding
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/194—Segmentation; Edge detection involving foreground-background segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/292—Multi-camera tracking
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/04—Synchronising
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/268—Signal distribution or switching

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Geometry (AREA)
  • Software Systems (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种离体心脏灌流三维显示方法，包括：获取由不同角度设置的多个摄像机对离体心脏灌流实验现场进行采集得到的多个视频源；分别对每个视频源进行拆分处理，得到以图像帧为单位的多帧图像文件；对每个视频源中拆分得到的前后两帧图像的前景进行计算得到前景变化值，当前景变化值均大于预设的前景阈值时，确定视频源时间同步；对图像文件进行前景处理并对每个视频源的图像文件进行同步合并，通过三维坐标进行显示；本发明通过对图像前景变化值的计算确定所有摄像机的同步时间后，对各个视频源进行同步合并，对离体心脏灌流实验场景进行多角度三维显示，实现对离体心脏实验进行多角度的实时观察，保证实验结论数据的准确性。

Description

一种离体心脏灌流三维显示方法及系统
技术领域
本发明涉及三维显示领域，尤其涉及一种离体心脏灌流三维显示方法及系统。
背景技术
离体心脏灌流装置是离体心脏灌流的一套重要组成，在生理和病理的研究的到广泛的应用。离体心脏经过蠕动泵灌注药液，测定其心率和张力等参数，排除了在体内神经和激素的干扰；再配合软件分析其各种参数指标。在利用离体心脏灌流装置对离体心脏进行实验的过程中，技术人员在对数据进行记录的时候，同时对目标心脏进行观察，从而分析得到结论数据；但由于离体心脏不能长期保存，在进行实验后，离体心脏会被处理。如果技术人员在后期对结论数据产生怀疑，或者有部分分析过程没有得到证实而需要对现场情况进行模拟，由于实验的个体不同，得到的数据与真实数据往往存在较大差别。
现有技术中，为了得到真实的实验场景，会在实验过程中通过摄像机实时采集现场视频数据，对离体心脏的表现状态进行实时记录。但是现有技术中直接采用摄像机对实验过程进行视频采集的时候，只能对离体心脏进行单角度的视频采集，即使是采用多个摄像机进行拍摄，显示出来的图像也只是多个单角度图像。而由于离体心脏灌流实验的特殊性，技术人员需要对离体心脏进行多角度的实时观察，才能保证实验结论数据的准确性。
发明内容
本发明提供了一种离体心脏灌流三维显示方法及系统，采用多角度设置的不同摄像机对离体心脏灌流实验现场进行视频采集，通过对图像前景变化值的计算确定所有摄像机的同步时间后，对各个视频源进行同步合并，通过三维坐标进行显示；以解决现有技术中只能对离体心脏灌流环境进行单角度显示的技术问题，从而对离体心脏灌流实验场景进行多角度三维显示，进而实现技术人员对离体心脏实验进行多角度的实时观察，保证实验结论数据的准确性。
为了解决上述技术问题，本发明实施例提供了一种离体心脏灌流三维显示方法，包括：
获取由不同角度设置的多个摄像机对离体心脏灌流实验现场进行采集得到的多个视频源；
分别对每个视频源进行拆分处理，得到以图像帧为单位的多帧图像文件；
对每个视频源中拆分得到的前后两帧图像的前景进行计算得到前景变化值，当每个视频源中计算得到前景变化值均大于预设的前景阈值时，确定所有的视频源时间同步；
在确定时间同步后，对图像文件进行前景处理并对每个视频源的图像文件进行同步合并，通过三维坐标进行显示。
作为优选方案，所述在确定时间同步后，对图像文件进行前景处理并对每个视频源的图像文件进行同步合并，通过三维坐标进行显示，具体包括：
对确定时间同步后的图像文件进行前景识别，对图像中的前景进行提取；
建立世界坐标系，并计算各图像中前景的空间位置；
根据前景的空间位置对每个视频源的图像文件中的前景进行同步输入所述世界坐标系，并对重叠位置进行空间映射，以完成不同视频源之间的图像合并；
在图像合并完成后，根据所述世界坐标系对离体心脏灌流实验现场进行三维显示。
作为优选方案，所述建立世界坐标系，并计算各图像中前景的空间位置，具体包括：
对提取得到的图像前景进行特征标注，得到多个标注点；
计算各个标注点之间的空间距离，将所述空间距离作为位置权值参数；
建立世界坐标系，根据所述位置权值参数计算出图像前景在世界坐标系中的空间位置。
作为优选方案，所述对图像中的前景进行提取的步骤中，对图像中的离体心脏作为第一前景、对图像中的离体灌流设备作为第二前景，将所述第一前景和所述第二前景进行单独提取。
作为优选方案，所述进行三维显示的方法是通过增强现实技术进行三维显示。
作为优选方案，所述对每个视频源中拆分得到的前后两帧图像的前景进行计算得到前景变化值的步骤，具体包括：
对每个视频源中拆分得到的前后两帧图像转化为灰度图并进行高斯滤波平滑处理，得到两帧的高斯滤波图像；
对所述高斯滤波图像作差运算,并对作差后的高斯滤波图像进行二值化处理，得到两帧的二值化图像；
分别计算所述二值化图像的前景变化占整幅图像的比例值,将所述比例值作为图像的前景变化值。
作为优选方案，所述分别对每个视频源进行拆分处理，得到以图像帧为单位的多帧图像文件的步骤，具体包括：
分别将每个视频源进行分解成YUV图片，得到YUV图片集；
对所述YUV图片集进行RGB转换，得到RGB图片集，将所述RGB图片集作为图像帧文件。
本发明实施例还提供了一种离体心脏灌流三维显示系统，包括：
视频采集模块，用于获取由不同角度设置的多个摄像机对离体心脏灌流实验现场进行采集得到的多个视频源；
视频拆分模块，用于分别对每个视频源进行拆分处理，得到以图像帧为单位的多帧图像文件；
视频同步模块，用于对每个视频源中拆分得到的前后两帧图像的前景进行计算得到前景变化值，当每个视频源中计算得到前景变化值均大于预设的前景阈值时，确定所有的视频源时间同步；
三维显示模块，用于在确定时间同步后，对图像文件进行前景处理并对每个视频源的图像文件进行同步合并，通过三维坐标进行显示。
作为优选方案，所述三维显示模块具体包括：
前景提取单元，用于对确定时间同步后的图像文件进行前景识别，对图像中的前景进行提取；
坐标建立单元，用于建立世界坐标系，并计算各图像中前景的空间位置；
图像合并单元，用于根据前景的空间位置对每个视频源的图像文件中的前景进行同步输入所述世界坐标系，并对重叠位置进行空间映射，以完成不同视频源之间的图像合并；
三维显示单元，用于在图像合并完成后，根据所述世界坐标系对离体心脏灌流实验现场进行三维显示。
作为优选方案，所述坐标建立单元具体包括：
前景标注子单元，用于对提取得到的图像前景进行特征标注，得到多个标注点；
空间距离子单元，用于计算各个标注点之间的空间距离，将所述空间距离作为位置权值参数；
空间位置子单元，用于建立世界坐标系，根据所述位置权值参数计算出图像前景在世界坐标系中的空间位置。
作为优选方案，所述前景提取单元用于对图像中的前景进行提取的步骤中，具体为：对图像中的离体心脏作为第一前景、对图像中的离体灌流设备作为第二前景，将所述第一前景和所述第二前景进行单独提取。
作为优选方案，所述三维显示单元用于进行三维显示的方法是通过增强现实技术进行三维显示。
作为优选方案，所述视频同步模块用于对每个视频源中拆分得到的前后两帧图像的前景进行计算得到前景变化值的步骤，具体包括：
对每个视频源中拆分得到的前后两帧图像转化为灰度图并进行高斯滤波平滑处理，得到两帧的高斯滤波图像；
对所述高斯滤波图像作差运算,并对作差后的高斯滤波图像进行二值化处理，得到两帧的二值化图像；
分别计算所述二值化图像的前景变化占整幅图像的比例值,将所述比例值作为图像的前景变化值。
作为优选方案，所述视频拆分模块具体包括：
视频源分解单元，用于分别将每个视频源进行分解成YUV图片，得到YUV图片集；
图片转换单元，用于对所述YUV图片集进行RGB转换，得到RGB图片集，将所述RGB图片集作为图像帧文件。
本发明实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质包括存储的计算机程序；其中，所述计算机程序在运行时控制所述计算机可读存储介质所在的设备执行如上述任一项所述的离体心脏灌流三维显示方法。
本发明实施例还提供了一种终端设备，包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序，所述处理器在执行所述计算机程序时实现如上述任一项所述的离体心脏灌流三维显示方法。
相比于现有技术，本发明实施例具有如下有益效果：
本发明采用多角度设置的不同摄像机对离体心脏灌流实验现场进行视频采集，通过对图像前景变化值的计算确定所有摄像机的同步时间后，对各个视频源进行同步合并，通过三维坐标进行显示；以解决现有技术中只能对离体心脏灌流环境进行单角度显示的技术问题，从而对离体心脏灌流实验场景进行多角度三维显示，进而实现技术人员对离体心脏实验进行多角度的实时观察，保证实验结论数据的准确性。
附图说明
图1：为本发明实施例中的离体心脏灌流三维显示方法的步骤流程图；
图2：为本发明实施例中的离体心脏灌流三维显示系统的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
请参照图1，本发明优选实施例提供了一种离体心脏灌流三维显示方法，包括：
S1，获取由不同角度设置的多个摄像机对离体心脏灌流实验现场进行采集得到的多个视频源。
具体地，首先在进行离体心脏灌流实验之前，设置多个摄像机用于现场视频采集。其中，各个摄像机的拍摄角度均不同；根据实际的应用需求，可以对摄像机的角度进行调整，使得采集的视频角度符合实验数据采集要求。
S2，分别对每个视频源进行拆分处理，得到以图像帧为单位的多帧图像文件；在本实施例中，所述步骤S2中分别对每个视频源进行拆分处理，得到以图像帧为单位的多帧图像文件的步骤，具体包括：S21，分别将每个视频源进行分解成YUV图片，得到YUV图片集；S22，对所述YUV图片集进行RGB转换，得到RGB图片集，将所述RGB图片集作为图像帧文件。
具体地，YUV是一种颜色编码方法。常使用在各个视频处理组件中。YUV在对照片或视频编码时，考虑到人类的感知能力，允许降低色度的带宽。YUV与RGB的转换公式(U和V组件可以被表示成原始的R、G，和B)：
Y＝0.299*R+0.587*G+0.114*B
U＝-0.169*R-0.331*G+0.5*B+128
V＝0.5*R-0.419*G-0.081*B+128
如一般顺序，转移组件的范围可得到：
Y∈[0，255]
U∈[0，255]
V∈[0，255]
在逆转关系上，从YUV到RGB，可得：
R＝Y+1.13983*(V-128)
G＝Y-0.39465*(U-128)-0.58060*(V-128)
B＝Y+2.03211*(U-128)
取而代之，以矩阵表示法(matrix representation)，可得到公式：
Figure BDA0002346973920000071
Figure BDA0002346973920000072
通过上述算法的计算转换，可以将YUV图片转换成RGB图片进行下一步图像处理工作。
S3，对每个视频源中拆分得到的前后两帧图像的前景进行计算得到前景变化值，当每个视频源中计算得到前景变化值均大于预设的前景阈值时，确定所有的视频源时间同步；在本实施例中，所述步骤S3中对每个视频源中拆分得到的前后两帧图像的前景进行计算得到前景变化值的步骤，具体包括：S31，对每个视频源中拆分得到的前后两帧图像转化为灰度图并进行高斯滤波平滑处理，得到两帧的高斯滤波图像；S32，对所述高斯滤波图像作差运算，并对作差后的高斯滤波图像进行二值化处理，得到两帧的二值化图像；S33，分别计算所述二值化图像的前景变化占整幅图像的比例值，将所述比例值作为图像的前景变化值。
具体地，由于摄像机在使用过程中，各摄像机可能时间不对齐，导致定位不准确情况，因此相机同步十分重要，目前通过手动方式对齐，在本实施例中是通过室内开关灯方法对齐，分别计算每个相机的前后两幅图像的前景变化，当该相机前后前景变化大于某个阈值时，等待其他相机其他前景变化也大于该阈值时，认为三个相机同步了。
S4，在确定时间同步后，对图像文件进行前景处理并对每个视频源的图像文件进行同步合并，通过三维坐标进行显示。
在本实施例中，所述步骤S4具体包括：
S41，对确定时间同步后的图像文件进行前景识别，对图像中的前景进行提取；在本实施例中，所述对图像中的前景进行提取的步骤中，对图像中的离体心脏作为第一前景、对图像中的离体灌流设备作为第二前景，将所述第一前景和所述第二前景进行单独提取。进行单独提取前景可以使得三维显示图像的效果更佳，用户可以从不同角度去观察前景。
S42，建立世界坐标系，并计算各图像中前景的空间位置；在本实施例中，所述步骤S42具体包括：S421，对提取得到的图像前景进行特征标注，得到多个标注点；S422，计算各个标注点之间的空间距离，将所述空间距离作为位置权值参数；S423，建立世界坐标系，根据所述位置权值参数计算出图像前景在世界坐标系中的空间位置。
S43，根据前景的空间位置对每个视频源的图像文件中的前景进行同步输入所述世界坐标系，并对重叠位置进行空间映射，以完成不同视频源之间的图像合并。
S44，在图像合并完成后，根据所述世界坐标系对离体心脏灌流实验现场进行三维显示。在本实施例中，所述进行三维显示的方法是通过增强现实技术进行三维显示。
本发明采用多角度设置的不同摄像机对离体心脏灌流实验现场进行视频采集，通过对图像前景变化值的计算确定所有摄像机的同步时间后，对各个视频源进行同步合并，通过三维坐标进行显示；以解决现有技术中只能对离体心脏灌流环境进行单角度显示的技术问题，从而对离体心脏灌流实验场景进行多角度三维显示，进而实现技术人员对离体心脏实验进行多角度的实时观察，保证实验结论数据的准确性。
请参照图2，相应地，本发明实施例还提供了一种离体心脏灌流三维显示系统，包括：
视频采集模块，用于获取由不同角度设置的多个摄像机对离体心脏灌流实验现场进行采集得到的多个视频源。
视频拆分模块，用于分别对每个视频源进行拆分处理，得到以图像帧为单位的多帧图像文件。在本实施例中，所述视频拆分模块具体包括：视频源分解单元，用于分别将每个视频源进行分解成YUV图片，得到YUV图片集；图片转换单元，用于对所述YUV图片集进行RGB转换，得到RGB图片集，将所述RGB图片集作为图像帧文件。
视频同步模块，用于对每个视频源中拆分得到的前后两帧图像的前景进行计算得到前景变化值，当每个视频源中计算得到前景变化值均大于预设的前景阈值时，确定所有的视频源时间同步。
在本实施例中，所述视频同步模块用于对每个视频源中拆分得到的前后两帧图像的前景进行计算得到前景变化值的步骤，具体包括：对每个视频源中拆分得到的前后两帧图像转化为灰度图并进行高斯滤波平滑处理，得到两帧的高斯滤波图像；对所述高斯滤波图像作差运算,并对作差后的高斯滤波图像进行二值化处理，得到两帧的二值化图像；分别计算所述二值化图像的前景变化占整幅图像的比例值,将所述比例值作为图像的前景变化值。
三维显示模块，用于在确定时间同步后，对图像文件进行前景处理并对每个视频源的图像文件进行同步合并，通过三维坐标进行显示。
在本实施例中，所述三维显示模块具体包括：
前景提取单元，用于对确定时间同步后的图像文件进行前景识别，对图像中的前景进行提取；在本实施例中，所述前景提取单元用于对图像中的前景进行提取的步骤中，具体为：对图像中的离体心脏作为第一前景、对图像中的离体灌流设备作为第二前景，将所述第一前景和所述第二前景进行单独提取。
坐标建立单元，用于建立世界坐标系，并计算各图像中前景的空间位置；在本实施例中，所述坐标建立单元具体包括：前景标注子单元，用于对提取得到的图像前景进行特征标注，得到多个标注点；空间距离子单元，用于计算各个标注点之间的空间距离，将所述空间距离作为位置权值参数；空间位置子单元，用于建立世界坐标系，根据所述位置权值参数计算出图像前景在世界坐标系中的空间位置。
图像合并单元，用于根据前景的空间位置对每个视频源的图像文件中的前景进行同步输入所述世界坐标系，并对重叠位置进行空间映射，以完成不同视频源之间的图像合并；
三维显示单元，用于在图像合并完成后，根据所述世界坐标系对离体心脏灌流实验现场进行三维显示。在本实施例中，所述三维显示单元用于进行三维显示的方法是通过增强现实技术进行三维显示。
本发明实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质包括存储的计算机程序；其中，所述计算机程序在运行时控制所述计算机可读存储介质所在的设备执行上述任一实施例所述的离体心脏灌流三维显示方法。
本发明实施例还提供了一种终端设备，所述终端设备包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序，所述处理器在执行所述计算机程序时实现上述任一实施例所述的离体心脏灌流三维显示方法。
优选地，所述计算机程序可以被分割成一个或多个模块/单元(如计算机程序、计算机程序)，所述一个或者多个模块/单元被存储在所述存储器中，并由所述处理器执行，以完成本发明。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段，该指令段用于描述所述计算机程序在所述终端设备中的执行过程。
所述处理器可以是中央处理单元(Central Processing Unit，CPU)，还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等，通用处理器可以是微处理器，或者所述处理器也可以是任何常规的处理器，所述处理器是所述终端设备的控制中心，利用各种接口和线路连接所述终端设备的各个部分。
所述存储器主要包括程序存储区和数据存储区，其中，程序存储区可存储操作系统、至少一个功能所需的应用程序等，数据存储区可存储相关数据等。此外，所述存储器可以是高速随机存取存储器，还可以是非易失性存储器，例如插接式硬盘，智能存储卡(SmartMedia Card，SMC)、安全数字(Secure Digital，SD)卡和闪存卡(Flash Card)等，或所述存储器也可以是其他易失性固态存储器件。
需要说明的是，上述终端设备可包括，但不仅限于，处理器、存储器，本领域技术人员可以理解，上述终端设备仅仅是示例，并不构成对终端设备的限定，可以包括更多或更少的部件，或者组合某些部件，或者不同的部件。
以上所述的具体实施例，对本发明的目的、技术方案和有益效果进行了进一步的详细说明，应当理解，以上所述仅为本发明的具体实施例而已，并不用于限定本发明的保护范围。特别指出，对于本领域技术人员来说，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种离体心脏灌流三维显示方法，其特征在于，包括：
获取由不同角度设置的多个摄像机对离体心脏灌流实验现场进行采集得到的多个视频源；
分别对每个视频源进行拆分处理，得到以图像帧为单位的多帧图像文件；
对每个视频源中拆分得到的前后两帧图像的前景进行计算得到前景变化值，当每个视频源中计算得到前景变化值均大于预设的前景阈值时，确定所有的视频源时间同步；
在确定时间同步后，对图像文件进行前景处理并对每个视频源的图像文件进行同步合并，通过三维坐标进行显示。
2.如权利要求1所述的离体心脏灌流三维显示方法，其特征在于，所述在确定时间同步后，对图像文件进行前景处理并对每个视频源的图像文件进行同步合并，通过三维坐标进行显示，具体包括：
对确定时间同步后的图像文件进行前景识别，对图像中的前景进行提取；
建立世界坐标系，并计算各图像中前景的空间位置；
根据前景的空间位置对每个视频源的图像文件中的前景进行同步输入所述世界坐标系，并对重叠位置进行空间映射，以完成不同视频源之间的图像合并；
在图像合并完成后，根据所述世界坐标系对离体心脏灌流实验现场进行三维显示。
3.如权利要求2所述的离体心脏灌流三维显示方法，其特征在于，所述建立世界坐标系，并计算各图像中前景的空间位置，具体包括：
对提取得到的图像前景进行特征标注，得到多个标注点；
计算各个标注点之间的空间距离，将所述空间距离作为位置权值参数；
建立世界坐标系，根据所述位置权值参数计算出图像前景在世界坐标系中的空间位置。
4.如权利要求2所述的离体心脏灌流三维显示方法，其特征在于，所述对图像中的前景进行提取的步骤中，对图像中的离体心脏作为第一前景、对图像中的离体灌流设备作为第二前景，将所述第一前景和所述第二前景进行单独提取。
5.如权利要求2所述的离体心脏灌流三维显示方法，其特征在于，所述进行三维显示的方法是通过增强现实技术进行三维显示。
6.如权利要求1所述的离体心脏灌流三维显示方法，其特征在于，所述对每个视频源中拆分得到的前后两帧图像的前景进行计算得到前景变化值的步骤，具体包括：
对每个视频源中拆分得到的前后两帧图像转化为灰度图并进行高斯滤波平滑处理，得到两帧的高斯滤波图像；
对所述高斯滤波图像作差运算,并对作差后的高斯滤波图像进行二值化处理，得到两帧的二值化图像；
分别计算所述二值化图像的前景变化占整幅图像的比例值,将所述比例值作为图像的前景变化值。
7.如权利要求1所述的离体心脏灌流三维显示方法，其特征在于，所述分别对每个视频源进行拆分处理，得到以图像帧为单位的多帧图像文件的步骤，具体包括：
分别将每个视频源进行分解成YUV图片，得到YUV图片集；
对所述YUV图片集进行RGB转换，得到RGB图片集，将所述RGB图片集作为图像帧文件。
8.一种离体心脏灌流三维显示系统，其特征在于，包括：
视频采集模块，用于获取由不同角度设置的多个摄像机对离体心脏灌流实验现场进行采集得到的多个视频源；
视频拆分模块，用于分别对每个视频源进行拆分处理，得到以图像帧为单位的多帧图像文件；
视频同步模块，用于对每个视频源中拆分得到的前后两帧图像的前景进行计算得到前景变化值，当每个视频源中计算得到前景变化值均大于预设的前景阈值时，确定所有的视频源时间同步；
三维显示模块，用于在确定时间同步后，对图像文件进行前景处理并对每个视频源的图像文件进行同步合并，通过三维坐标进行显示。
9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质包括存储的计算机程序；其中，所述计算机程序在运行时控制所述计算机可读存储介质所在的设备执行如权利要求1～7任一项所述的离体心脏灌流三维显示方法。
10.一种终端设备，其特征在于，包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序，所述处理器在执行所述计算机程序时实现如权利要求1～7任一项所述的离体心脏灌流三维显示方法。
CN201911398725.XA 2019-12-30 2019-12-30 一种离体心脏灌流三维显示方法及系统 Active CN111145343B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911398725.XA CN111145343B (zh) 2019-12-30 2019-12-30 一种离体心脏灌流三维显示方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911398725.XA CN111145343B (zh) 2019-12-30 2019-12-30 一种离体心脏灌流三维显示方法及系统

Publications (2)

Publication Number Publication Date
CN111145343A true CN111145343A (zh) 2020-05-12
CN111145343B CN111145343B (zh) 2020-11-17

Family

ID=70521993

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911398725.XA Active CN111145343B (zh) 2019-12-30 2019-12-30 一种离体心脏灌流三维显示方法及系统

Country Status (1)

Country Link
CN (1) CN111145343B (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2408192A2 (en) * 2004-04-16 2012-01-18 James A. Aman Multiple view compositing and object tracking system
CN103402109A (zh) * 2013-07-31 2013-11-20 上海交通大学 3d视频中左右视点间帧同步性的检测与保证方法
EP2807827A4 (en) * 2012-01-25 2015-03-04 Lumenco Llc CONVERTING A DIGITAL STEREO IMAGE IN SEVERAL VIEWS WITH PARALLAX FOR 3D VISUALIZATION WITHOUT GLASSES
CN105472204A (zh) * 2014-09-05 2016-04-06 南京理工大学 基于运动检测的帧间降噪方法
CN105488816A (zh) * 2015-11-27 2016-04-13 中南大学 一种基于三维视觉信息的矿物浮选泡沫流速在线检测装置及方法
CN106162137A (zh) * 2016-06-30 2016-11-23 北京大学 虚拟视点合成方法及装置
CN106373148A (zh) * 2016-08-31 2017-02-01 中国科学院遥感与数字地球研究所 多路视频图像配准融合到三维数字地球系统的设备及方法
CN107066938A (zh) * 2017-02-08 2017-08-18 清华大学 视频分析设备、方法和计算机程序产品
CN109242976A (zh) * 2018-08-02 2019-01-18 实野信息科技（上海）有限公司 一种基于WebGL虚拟现实自动旋转展示的方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2408192A2 (en) * 2004-04-16 2012-01-18 James A. Aman Multiple view compositing and object tracking system
EP2807827A4 (en) * 2012-01-25 2015-03-04 Lumenco Llc CONVERTING A DIGITAL STEREO IMAGE IN SEVERAL VIEWS WITH PARALLAX FOR 3D VISUALIZATION WITHOUT GLASSES
CN103402109A (zh) * 2013-07-31 2013-11-20 上海交通大学 3d视频中左右视点间帧同步性的检测与保证方法
CN105472204A (zh) * 2014-09-05 2016-04-06 南京理工大学 基于运动检测的帧间降噪方法
CN105488816A (zh) * 2015-11-27 2016-04-13 中南大学 一种基于三维视觉信息的矿物浮选泡沫流速在线检测装置及方法
CN106162137A (zh) * 2016-06-30 2016-11-23 北京大学 虚拟视点合成方法及装置
CN106373148A (zh) * 2016-08-31 2017-02-01 中国科学院遥感与数字地球研究所 多路视频图像配准融合到三维数字地球系统的设备及方法
CN107066938A (zh) * 2017-02-08 2017-08-18 清华大学 视频分析设备、方法和计算机程序产品
CN109242976A (zh) * 2018-08-02 2019-01-18 实野信息科技（上海）有限公司 一种基于WebGL虚拟现实自动旋转展示的方法

Also Published As

Publication number Publication date
CN111145343B (zh) 2020-11-17

Similar Documents

Publication Publication Date Title
EP2856426B1 (en) Body measurement
US20180204052A1 (en) A method and apparatus for human face image processing
CN110866977B (zh) 增强现实处理方法及装置、系统、存储介质和电子设备
US20180108138A1 (en) Method and system for semantic segmentation in laparoscopic and endoscopic 2d/2.5d image data
RU2014136476A (ru) Эндоскопическая видеосистема
CN107993209B (zh) 图像处理方法、装置、计算机可读存储介质和电子设备
WO2018082389A1 (zh) 一种肤色检测方法、装置及终端
CN108305256B (zh) 视频抠像处理方法、处理装置及计算机可读存储介质
CN108154514A (zh) 图像处理方法、装置及设备
CN109889799B (zh) 基于rgbir摄像头的单目结构光深度感知方法及装置
CN111291674B (zh) 一种虚拟人物表情动作的提取方法、系统、装置及介质
CN111292279B (zh) 一种基于彩色图像融合的偏振图像可视化方法
RU2580473C1 (ru) Устройство бесшовного объединения изображений в единую композицию с автоматической регулировкой контрастности и градиентом
US8902305B2 (en) System and method for managing face data
CN111743524A (zh) 一种信息处理方法、终端和计算机可读存储介质
CN111145343B (zh) 一种离体心脏灌流三维显示方法及系统
CN113379702A (zh) 一种微循环图像的血管路径提取方法及装置
CN111079470A (zh) 人脸活体检测的方法和装置
RU2571574C1 (ru) Устройство объединения изображений в единую композицию с плавным переходом контрастности
TW201509360A (zh) 單鏡頭內視鏡立體視覺化系統及其方法
CN211962752U (zh) 一种基于无线红外摄像头的血管显像系统
CN110097622B (zh) 渲染图像的方法、装置、电子设备和计算机可读存储介质
Li et al. Haze removal from single images based on a luminance reference model
TWI613903B (zh) 結合小波轉換及邊緣偵測建立單張影像深度圖的裝置及其方法
WO2023123214A1 (zh) 电子设备、手部按压深度检测方法、系统以及穿戴设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant