CN109907741B - 三维脉波的显示方法、装置、计算机设备及存储介质 - Google Patents
三维脉波的显示方法、装置、计算机设备及存储介质 Download PDFInfo
- Publication number
- CN109907741B CN109907741B CN201910166759.XA CN201910166759A CN109907741B CN 109907741 B CN109907741 B CN 109907741B CN 201910166759 A CN201910166759 A CN 201910166759A CN 109907741 B CN109907741 B CN 109907741B
- Authority
- CN
- China
- Prior art keywords
- pulse wave
- information
- pulse
- dimensional
- determining
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Abstract
本发明涉及三维脉波的显示方法、装置、计算机设备及存储介质,属于信号处理技术领域。方法包括:获取脉搏的三维脉波对应的脉波动画文件;获取目标标识对象的图像;其中,目标标识对象根据多个初始标识对象确定;目标标识对象用于指示脉搏的位置;确定目标标识对象的图像的第一特征点,根据第一特征点确定第一特征信息;若第一特征信息与标识评价信息相匹配,根据增强现实技术在显示屏中输出脉波动画文件,以显示三维脉波。上述技术方案,解决了传统的三维脉波影像的显示中人机交互不够智能化的问题。所确定的目标标识对象具有良好的标识脉搏的功能,能保证准确确定出脉搏所在的位置,实现三维脉波的AR显示,有效提高人机交互的智能性。
Description
技术领域
本发明涉及信号处理技术领域,特别是涉及三维脉波的显示方法、装置、计算机设备及存储介质。
背景技术
在传统中医学诊断中,切诊得到的脉象可用于分析病人全局的健康状况。随着脉诊仪的不断普及推广,用户对脉象可视化的需求不断增加。三维脉波影像是一种三维动态形式的图像,能够把人工把脉时的指下感觉转换为视觉体验。在实现本发明过程中,发明人发现现有技术中至少存在如下问题:三维脉波影像由设计者预先设定好观察路径,用户只能通过设定好的观察路径来查看三维脉波,这就使得人机交互不够智能化。
发明内容
基于此,本发明实施例提供了三维脉波的显示方法、装置、计算机设备及存储介质,能根据增强现实技术来显示三维脉波,有效提高人机交互的智能性。
本发明实施例的内容如下:
一种三维脉波的显示方法,包括以下步骤:获取脉搏的三维脉波对应的脉波动画文件;获取目标标识对象的图像;其中,所述目标标识对象根据多个初始标识对象确定;所述目标标识对象用于指示所述脉搏的位置;确定所述目标标识对象的图像的第一特征点,根据所述第一特征点确定第一特征信息;若所述第一特征信息与标识评价信息相匹配,根据增强现实技术在显示屏中输出所述脉波动画文件,以显示所述三维脉波。
在一个实施例中,所述确定所述目标标识对象的图像的第一特征点的步骤,包括:根据多个尺度空间的高斯微分函数,确定所述目标标识对象的图像中包含的第一特征点。
在一个实施例中,所述根据所述第一特征点确定第一特征信息的步骤,包括:确定所述第一特征点之间的距离,根据所述距离确定所述第一特征信息。
在一个实施例中,所述标识评价信息包括贴纸模型的第二特征信息;所述根据增强现实技术在显示屏中输出所述脉波动画文件的步骤之前,还包括:确定所述第一特征信息与所述第二特征信息的匹配度;当所述匹配度满足预设的条件时,判定所述第一特征信息与所述标识评价信息相匹配。
在一个实施例中,所述确定所述第一特征信息与所述第二特征信息的匹配度之前,还包括:获取贴纸模型的模型图像,对所述模型图像进行二值化处理;确定经过二值化处理的模型图像的第二特征点,根据所述第二特征点确定所述第二特征信息。
相应的,本发明实施例提供一种三维脉波的显示装置,包括:动画文件获取模块,用于获取脉搏的三维脉波对应的脉波动画文件;图像获取模块,用于获取目标标识对象的图像;其中,所述目标标识对象根据多个初始标识对象确定;所述目标标识对象用于指示所述脉搏的位置;特征信息获取模块,用于确定所述目标标识对象的图像的第一特征点,根据所述第一特征点确定第一特征信息;以及,脉波显示模块,用于若所述第一特征信息与标识评价信息相匹配,根据增强现实技术在显示屏中输出所述脉波动画文件,以显示所述三维脉波。
上述三维脉波的显示方法及装置,从多个初始标识对象中确定目标标识对象,获取目标标识对象的图像,根据该图像确定第一特征点;并在第一特征点对应的第一特征信息与标识评价信息相匹配时,根据增强现实技术在显示屏中输出脉波动画文件,以显示三维脉波。所确定的目标标识对象具有良好的标识脉搏的功能,能保证准确确定出脉搏所在的位置,并实现三维脉波在显示屏中的AR显示,有效提高人机交互的智能性。
一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现以下步骤:获取脉搏的三维脉波对应的脉波动画文件;获取目标标识对象的图像;其中,所述目标标识对象根据多个初始标识对象确定;所述目标标识对象用于指示所述脉搏的位置;确定所述目标标识对象的图像的第一特征点,根据所述第一特征点确定第一特征信息;若所述第一特征信息与标识评价信息相匹配,根据增强现实技术在显示屏中输出所述脉波动画文件,以显示所述三维脉波。上述计算机设备,所确定的目标标识对象具有良好的标识脉搏的功能,能保证准确确定出脉搏所在的位置,并实现三维脉波在显示屏中的AR显示,有效提高人机交互的智能性。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:获取脉搏的三维脉波对应的脉波动画文件;获取目标标识对象的图像;其中,所述目标标识对象根据多个初始标识对象确定;所述目标标识对象用于指示所述脉搏的位置;确定所述目标标识对象的图像的第一特征点,根据所述第一特征点确定第一特征信息;若所述第一特征信息与标识评价信息相匹配,根据增强现实技术在显示屏中输出所述脉波动画文件,以显示所述三维脉波。上述计算机可读存储介质,所确定的目标标识对象具有良好的标识脉搏的功能,能保证准确确定出脉搏所在的位置,并实现三维脉波在显示屏中的AR显示,有效提高人机交互的智能性。
附图说明
图1为一个实施例中三维脉波的显示方法的应用环境图;
图2为一个实施例中三维脉波的显示方法的流程示意图;
图3为一个实施例中在显示屏上显示三维脉波的结构示意图;
图4为一个实施例中初始标识对象的结构示意图;
图5为另一个实施例中初始标识对象的结构示意图;
图6为一个实施例中目标标识对象的结构示意图;
图7为一个实施例中人体手腕上粘贴目标贴纸的示意图;
图8为一个实施例中空间曲面信息对应的曲面结构示意图;
图9为一个实施例中三维脉波的显示装置的结构框图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是终端,其内部结构图可以如图1所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口、显示屏和输入装置。其中,该处理器用于提供计算和控制能力。该存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该网络接口用于与外部的终端通过网络连接通信,例如:与某一服务器连接,用于接收从该服务器中发出的脉波动画文件。该计算机程序被处理器执行时以实现一种三维脉波的显示方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏,该计算机设备的输入装置可以是显示屏上覆盖的触摸层,也可以是计算机设备外壳上设置的按键、轨迹球或触控板,还可以是外接的键盘、触控板或鼠标等。另外,该计算机设备可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备。本领域技术人员可以理解,图1中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
本发明实施例提供一种三维脉波的显示方法、装置、计算机设备及存储介质。以下分别进行详细说明。
在一个实施例中,如图2所示,提供了一种三维脉波的显示方法。以该方法应用于计算机设备为例进行说明。
其中,计算机设备指的是对三维脉波进行显示的终端,可以指带有显示屏的终端,例如:电视机、个人计算机、笔记本电脑、智能手机、平板电脑和头戴显示设备等。当计算机设备为智能手机时,手机的系统可以为Android、IOS、Windows等,手机上可以集成ARKit、ARCore等AR实现工具。当计算机设备为头戴显示设备时,可以为Hololens、Magic LeapLightwear等设备。计算机设备上可以设置有摄像头,该摄像头可以是具有深度感测功能的摄像头。
本实施例提供发三维脉波的显示方法,包括以下步骤:
S201、获取脉搏的三维脉波对应的脉波动画文件。
其中,脉搏可以指人体上各种类型的脉搏,例如:寸脉、关脉、尺脉(寸脉、关脉和尺脉一起可以简称为寸关尺)等。三维脉波指的是脉象信息的立体展现,在一些实施例中三维脉波也可以称为脉象模型。脉波动画文件指的是表征三维脉波的形状、尺寸、幅值、播放速率等信息的动画文件,其中的脉波动画是指三维脉波对应的动画。
S202、获取目标标识对象的图像;其中,目标标识对象根据多个初始标识对象确定;目标标识对象用于指示脉搏的位置。
其中,初始标识对象指的是具有一定特征或者具有标识作用的对象,例如:贴纸、具有特定形状的物品、人体手腕的轮廓(根据人体手腕的外部轮廓就能分析出某一脉搏所在的位置)。而目标标识对象可以是从这些初始标识对象中确定出的最具代表性的标识对象。另外,目标标识对象的图像可以指目标标识对象本身的图像;也可以是包含有目标标识对象的某一物体的图像,例如:设置有目标标识对象人体手腕的图像。
另外,获取目标标识对象的图像可以是通过摄像头实时拍摄,也可以是读取预先存储的图像。
S203、确定目标标识对象的图像的第一特征点,根据第一特征点确定第一特征信息。
其中,第一特征点指的是目标标识对象的图像中具有一定特征的点,可以是图像的频率、对比度、亮度等满足一定条件的点。根据图像确定第一特征信息的实现过程可以为:对图像像素进行分析,从中确定出第一特征点,将这些第一特征点的特征作为第一特征信息。
S204、若第一特征信息与标识评价信息相匹配,根据增强现实技术在显示屏中输出脉波动画文件,以显示三维脉波。
其中,标识评价信息指的是能对第一特征信息进行评价的信息,可以指具有参考价值的特征信息;可以是用于评价标识对象特征的物体所对应的信息。第一特征信息代表了标识对象的特征,将其与标识评价信息进行比对,如果两者相一致或者相似度满足一定的条件,则可以认为第一特征信息与标识评价信息相匹配。这个标识评价信息可以预先存储在计算机设备的内部存储器中,也可以通过一定的方式从其他设备中获取。
增强现实技术(Augmented Reality,AR)是一种将真实世界信息和虚拟世界信息叠加集成的新技术。通过电子信息科学技术及相应设备,AR技术将原本现实世界中受时间空间范围所限且很难体验到的客观信息(如视觉信息、触觉或其他信息等)模拟仿真后再叠加应用到真实世界,使人类感官产生该事物信息存在于现实世界中的错觉,从而达到超越现实的感官体验。目前常通过AR眼镜以及支持AR功能的手机来实现增强现实技术。
以智能手机为例,通过增强现实技术在智能手机上显示的三维脉波可以如图3所示(图中三维脉波代表的是脉搏跳动时被鼓起的皮肤表面)。图3在目标人体手腕寸关尺的位置附近显示了对应的三维脉波,所显示的三维脉波非常直观。
在显示三维脉波之前,可以通过特定的工具(例如Unity 3D等)对脉波动画文件进行处理,使得其能在计算机设备上更好地进行AR显示。
本实施例,所确定的目标标识对象具有良好的标识脉搏的功能,能保证准确确定出脉搏所在的位置,并实现三维脉波在显示屏中的AR显示,有效提高人机交互的智能性。
在一个实施例中,三维脉波包括单个脉搏周期的三维脉波;其中,单个脉搏周期包括多个时刻。这个多个时刻可以根据传感器阵列的采样频率确定。脉波信号从整体上而言可看作周期性信号。故在保证播放效果的前提下,为了节省运算量,提高计算机设备的效能,可以从脉波原始信号中截取单一脉搏周期进行动画制作,并以循环的方式实现三维脉波的周期性跳动。进一步地,根据增强现实技术在显示屏的显示位置上输出脉波动画文件的步骤,包括:根据增强现实技术,在显示位置上多次输出脉波动画文件,以周期性地显示单个脉搏周期的三维脉波。当然,为了提高所显示的三维脉波的准确性,也可以获取多个脉搏周期的脉波动画文件,还可以获取持续的脉波动画文件并进行实时显示。
在一个实施例中,对标识对象的图像进行分析可以通过SIFT、Vuforia(高通推出的针对移动设备扩增实境应用的软件开发工具包)等工具来实现。
涉及图像识别的AR应用中算法的根本思想都是通过设备摄像头建立空间坐标系,通过特征点、基准标记、光流进行图像配准,利用角点、斑点、边缘或阈值进行图像处理。而诸多基于特征点检测的识别算法大多都是以SIFT算法为基础进行改善。
SIFT算法(全称尺度不变特征转换算法)是由David Lowe在1999年发表,2004年完善总结的,用于查找和描述影像局部特征,以尺度空间的极值点为特征点的经典图像识别算法,广泛应用于手势辨识、机器人地图感知导航、影像追踪等领域。SIFT算法可以分为四个阶段:1、利用高斯微分函数对尺度空间极值检测,识别图像位置上潜在的特征点;2、在每个候选位上,通过特点的拟合模型对特征点进行定位,确定位置和尺度;3、第三个阶段则是基于图像局部梯度方向,为特征点分配方向;4、对特征点进行描述。结合到本发明实施例中,根据对特征点的描述就能确定出对应的第一特征信息。
进一步地,SIFT算法在特征点查找阶段采用高斯模糊(即前述的高斯微分函数)来获取尺度空间。作为一种多算法通用的图像滤波器,高斯模糊使用高斯函数来计算图像模糊模板,从而达到模糊图像获取边缘、特征的目的。在N维空间中,高斯正态分布方程如下:
进一步地,假设标识对象的图像大小为m*n(描述像素点分布情况),则对应元素(x,y)的二阶高斯正态分布方程为:
通常在实际的图像处理程序中,通过(6σ+1)×(6σ+1)计算得到高斯模板矩阵的大小,即可保证相关像素的影响。二阶高斯公式得到的数值与原图卷积,即可得到原图的高斯模糊图像。根据这个高斯模糊图像就能确定出标识对象的图像中的特征点。即确定目标标识对象的图像的第一特征点的步骤包括:根据多个尺度空间的高斯微分函数,确定目标标识对象的图像中包含的第一特征点。
进一步地,特征点的尺度计算采用尺度空间的方法进行。尺度空间是1962年由Iijima提出的广泛适用于计算机视觉领域的重要理论。它将传统的单尺度图像信息处理技术引入尺度不断变化的图像信息处理动态模型,建立起多尺度下的尺度空间表示序列,从中提取出主轮廓作为一种特征向量,从而实现对图像边缘、角点等特征提取。
图像L的尺度空间L(x,y,σ)被定义为该图像二阶高斯函数G(x,y,σ)与原图像I(x,y)的卷积,即:
L(x,y,σ)=G(x,y,σ)*I(x,y)
σ的值越小,表示图像被平滑程度越轻,相应尺度也越小。因此,大尺度对应于图像的全局概貌特征,小尺度则对应该图像的细节特征。
另一方面,Vuforia是一款实用的扩增实境软件,兼容性极强,为包括unity在内的多个主流开发平台提供应用工具包。它利用计算机视觉技术对平面影像和三维物体进行实时识别和捕捉,并为用户提供接口和插件,从而方便进行具有增强现实功能的应用开发。高通Vuforia共有9种组件,可以实现丰富的功能。其中,ImageTarget组件是.JPG等图像格式的跟踪目标,能够通过镜头识别并捕捉真实世界中符合比对数据的目标,甚至可以通过给定的二维外部轮廓图像来识别特定三维模型;ObjectTarget组件的功能则是通过特征点云和特征面来识别由Vuforia提供的扫描器安卓应用扫描得到的三维模型。在以上组件中,Vuforia使用了一种可自定义变更的图像识别算法来检测和描述空间模型与平面影象局部特征,在辨识物体、影像缝合、3D模型建立等方面具有良好的应用表现。
为了减少彩色识别的运行困难度和数据复杂度,自带的Vuforia算法首先会对图像进行二值化和降噪等预处理。在确定目标标识对象的图像中包含的第一特征点的步骤之前,还包括:对目标标识对象的图像进行灰度化处理。
之后,算法会在空间坐标系或平面图像中寻找灰度特征点组成特征点云,并提取各点的位置坐标、四元向量(描述空间旋转的一种参数)等信息进行辨识处理。这些基于影像局部外观的特征点属于局部特征,不但不受图像的色彩、尺寸大小、旋转平移的影响,对图像仿射变换、视角改变,局部目标遮挡、色彩也有一定程度的容错能力,且容易采集,侦测率高,系统负载轻便,适合在中小型特征数据库中进行精准匹配。基于以上这些特性,Vufoira算法可以快速识别匹配出标识对象。
本实施例通过设定的方法来分析标识对象的图像,能准确提取出图像中的特征点,并准确确定出脉搏所在的位置,最终实现三维脉波的准确显示。
在一个实施例中,获取目标标识对象的图像的步骤之前,还包括:获取多个初始标识对象的图像;确定多个初始标识对象的图像的第三特征点;根据第三特征点的数目,从初始标识对象中确定目标标识对象。其中,初始标识对象和目标标识对象均可以指贴纸。
进一步地,可以通过Vuforia法确定目标标识对象,具体实现过程可以为:
假设有图4和图5所示的初始标识对象,通过Vuforia算法或其它高斯微分函数等,在不同的尺度空间查找潜在特征点。对比两组图中的(a)、(b)、(c)三个图像可得,三类纯色贴纸中的特征点数目相近且都分布在图形的顶点或边缘,这说明在纯色贴纸中,特征点的选取与贴纸的色彩或边缘粗细无关;对比(c)、(d)与(e)则可以发现,纯色图像的特征点数目远远少于填充纹路图像的特征点数,且纹路图像中的特征点均匀分布在整个图形之中。综上可知,标识对象的特征点多处于四角、边缘、暗区等不会受光照、噪声等因素影响的区域中;而在(e)和(f)所示的贴纸样例中,虽然它们具有几乎相似的特征点数目,但一系列的实验结果表明,(e)的识别效果远好于(f),这其中的原因可能是因为(f)中三个特征点云的距离过近,区分度降低,导致不同形状贴纸的识别效果反而变差。
另外,综合特征点数目、点云区分度等因素,(e)这一类型的贴纸最符合应用中的精准度需求。再结合用户交互体验等客观因素,对其不断进行优化,最终确定如图6所示的图像为手腕识别实验中使用的定位贴纸。基于目标标识对象的选取与特征点之间的距离有关,目标标识对象的第一特征信息与特征点之间的距离也有关。因此,根据第一特征点确定第一特征信息的步骤,可以包括:确定第一特征点之间的距离,根据距离确定第一特征信息。当然,确定第一特征信息还可以考虑目标标识对象的形状、尺寸、频率、对比度、亮度等的特征。
在一个实施例中,标识评价信息包括贴纸模型的第二特征信息;根据增强现实技术在显示屏中输出脉波动画文件的步骤之前,还包括:确定第一特征信息与第二特征信息的匹配度;当匹配度满足预设的条件时,判定第一特征信息与标识评价信息相匹配。
其中,确定第一特征信息与第二特征信息的匹配度之前,还包括:获取贴纸模型的模型图像,对模型图像进行二值化处理;确定经过二值化处理的模型图像的特征点,根据模型图像的特征点确定第二特征信息。
具体的,确定第二特征信息的实现过程可以为:将制作好的JPG格式(当然,也可以为其他格式)的标识对象的图像上传计算机设备;计算机设备自动对图像进行二值化等预处理,然后识别特征点并进行识别准确率评估,进而得到第二特征信息,将第二特征信息存入数据库中。完成后,将这个数据库打包导入Unity(Unity与ARcore/Vuforia结合,为计算机设备的增强显示提供技术支持)项目,完成数据库的激活。数据库中的每个图像都是一个ImageTarget对象,通过函数方法和文件名即可动态加载目标对象,在需要进行信息比对时,从数据库中直接读取第二特征信息即可。
另外,匹配度所需满足的条件可以是匹配度大于某一预设的阈值;这个阈值可以根据实际情况确定。
确定第一特征信息与第二特征信息的匹配度可以伴随计算机设备的移动过程来实现。具体的,以手机为例,用户手持手机,并将手机摄像头朝向目标标识对象,手机摄像头获取目标标识对象的图像,根据该图像确定目标标识对象的第一特征信息,并不断计算第一特征信息与第二特征信息的匹配度,在匹配度大于预设阈值时判定第一特征信息与第二特征信息相匹配,输出提示信息(这个提示信息可以在手机显示屏上输出)。
本实施例根据贴纸模型确定第二特征信息;将预先确定的第二特征信息与计算机设备所获取的第一特征信息进行比对,在两者的匹配度满足预设的条件时,显示对应的三维脉波。在通过与用户的交互过程来实现三维脉波的显示,有效提高三维脉波显示交互的智能性。
在一个实施例中,目标标识对象包括目标贴纸;目标贴纸被粘贴在人体手腕的皮肤表面;根据增强现实技术在显示屏中输出脉波动画文件的步骤,包括:确定目标贴纸的位置,根据目标贴纸的位置确定人体手腕上设定脉搏的位置;设定脉搏包括以下至少一种:寸脉、关脉和尺脉;根据设定脉搏的位置,在显示屏的显示区域上确定显示位置;在显示位置上输出脉波动画文件。
其中,目标贴纸可以是各种形状、颜色的贴纸,其上可以有图案、字符、文字等。本发明实施例对目标贴纸的形态以及其上的内容形式不做限制,能起到标识作用即可。进一步地,可以将目标贴纸粘贴在人体手腕的寸关尺位置上(粘贴有目标贴纸的人体手腕可以如图7所示,其中701表示目标贴纸),通过手机摄像头拍摄粘贴有目标贴纸的图像,根据该图像确定寸关尺的位置。
确定目标贴纸的位置的实现过程可以为:根据目标贴纸在人体手腕上的位置确定寸关尺在人体手腕上的位置,进而得到寸关尺的空间位置。根据这个空间位置确定显示位置。
进一步地,根据设定脉搏的位置确定显示屏中的显示位置,可以是将显示位置确定在设定脉搏附近的某个位置上,例如将寸关尺附近的某个位置确定为显示位置。进一步地,由于三维脉波往往是曲面区域,而且所显示的三维脉波可能包括多个脉搏对应的脉波,因此三维脉波显示所需的位置空间可能是一个“立体的空间区域”,因此这个显示位置可以是一个空间区域。当然,显示位置也可以为一个点,使得三维脉波以该点为中心进行显示;显示位置还可以为一个面,可以将三维脉波显示在平面区域上方、下方等位置。
进一步地,三维脉波为多个脉搏对应的脉波时,可以分别确定这些脉波的显示位置。
本实施例根据目标人体手腕上设定脉搏的位置确定显示位置,能使得在计算机设备上显示的三维脉波“长”在目标人体手腕上,能提高三维脉波显示的直观性。另外,脉波动画文件可以指目标人体手腕对应的动画文件,在这种情况下,能实现在目标人体手腕上显示该目标人体手腕的三维脉波的效果。
在一个实施例中,根据增强现实技术在显示屏中输出脉波动画文件,以显示三维脉波的步骤之后,还包括:根据显示位置设置锚点;锚点用于在显示屏发生位置变动时,控制三维脉波与显示位置的相对位置在显示区域中保持不变。
根据显示位置设置锚点,可以是将显示位置对应的区域作为锚点区域,也可以是将显示位置附近或者与显示位置相关的某个区域确定为锚点区域。进一步地,可以根据目标贴纸的空间位置确定锚点区域,进而设置锚点,使得锚点区域在显示屏中保持位置不变的状态,例如:在寸关尺所在的区域(目标贴纸所粘贴的位置)设置锚点。
当三维脉波为多个脉搏对应的脉波时,可以分别为每个脉波设置锚点,使得各个脉波在显示环境(所显示内容所处的虚拟环境)中保持在固定的位置上。即给每个脉象模型(三维脉波)建立并绑定一个平面锚点,当设备自身相对坐标发生位移变换,脉象模型的坐标也会进行相应的计算改变,使得在镜头图像中三维脉象模型可以保持平面的虚拟固定,不会随着镜头移动。
本实施例能实现对计算机设备的运动跟踪,即在计算机设备发生位置变动时,保证所显示的三维脉波在屏幕中相对于显示位置保持不变,即可以这样理解:无论显示屏怎么旋转,三维脉波在显示环境中的位置是固定的,而屏幕旋转的过程可以理解为从不同角度来观察三维脉波,这样的方式能有效提高三维脉波显示的智能交互。
在一个实施例中,获取脉搏的三维脉波对应的脉波动画文件的步骤,包括:获取脉象的空间分布信息;脉象的空间分布信息根据脉搏的脉象感测信息确定;根据空间分布信息生成设定格式的空间曲面信息,得到三维脉波;将三维脉波按照时间顺序进行排列,根据排列后的三维脉波得到脉波动画文件。
脉象感测信息可以指通过脉象感测器件测量的脉象信息。由于脉搏在人体表面对应的往往是一个区域,因此通过脉象感测器件需要获取一个区域的感测信息。基于此,根据一个区域的脉象感测信息就能确定出脉象的空间分布信息,即脉象在特定空间位置上的信息(例如:某一个位置上的压力数据)。
其中,脉象感测器件可以是各种类型的传感器,这些传感器可以设置在脉诊仪上。多个传感器排列在一起构成传感器阵列,因此可以通过传感器阵列来获取脉象感测信息。多个传感器纵横排布构成传感器阵列,使得传感器阵列能获取到脉搏所在区域中各个位置的脉象信息。传感器可以为压力传感器等。具体的,可以为电容式压力传感器(对应的脉象感测信息为压力值信息)。同时传感器阵列可以具有一定的弹性。
进一步地,获取脉象的空间分布信息的步骤,包括:接收传感器阵列发送的脉搏所在区域的脉象感测信息;获取传感器阵列的排列关系;按照排列关系对脉象感测信息进行整合,得到脉象的空间分布信息。其中,脉搏所在区域指的是皮肤表面上能感受到脉搏跳动的小范围区域(区域的边界可以根据传感器是否能感测到脉象信息来确定)。
由于空间分布信息是一定空间内的脉象信息,而脉搏上下跳动的过程在小范围内会形成一个曲面,如图5所示。对所得到的空间分布信息进行整合,就能得到对应的空间曲面信息;这个整合过程可以是对空间分布信息进行一定的运算或者格式转换。另外,设定格式可以是FBX、DAE、STL、OBJ等格式,所选择的具体格式可以根据具体情况确定。
进一步地,某一个时刻的空间曲面信息对应的可以是一个曲面,那多个时刻的空间曲面信息就可以对应一个持续跳动的曲面。这个持续跳动的曲面对应的信息就是三维脉波。
在一个实施例中,根据设定格式的空间曲面信息得到三维脉波的步骤之前,还包括:根据空间分布信息生成STL格式的空间曲面信息。进一步地,确定空间分布信息以及对空间分布信息进行格式转换可以通过matlab工具实现。本实施例确定STL格式的空间曲面信息,而STL格式能在matlab等工具中得到良好的使用,提高三维脉波显示的效率。当然,确定空间分布信息以及对空间分布信息进行格式转换的过程可以通过Rhinoceros、solidworks、maya等软件实现。此时,可以生成其他格式的空间曲面信息。
本实施例的三维脉波的显示方法,能将抽象的脉象信息转化为脉波动画文件,并通过增强现实技术显示三维脉波,所显示是三维脉波非常直观;而且根据增强现实技术的特性,用户可以根据需要进行三维脉波的显示,同时能实现与三维脉波显示的交互,实现智能化的人机交互。
在一个实施例中,将三维脉波按照时间顺序进行排列的步骤,包括:按照三维脉波的波形高低,对三维脉波进行颜色渲染;将渲染后的三维脉波按照时间顺序进行排列。其中,将三维脉波按照时间顺序进行排列的步骤,包括:按照三维脉波的波形高低,对三维脉波进行颜色渲染;将渲染后的三维脉波按照时间顺序进行排列。进一步地,对三维脉波进行颜色渲染可以通过一定的算法实现;也可以通过特定的工具实现,例如:matlab、maya等工具。
进一步地,maya对渲染后的三维脉波按照时间顺序进行排列,即可得到脉波动画文件,此时可以到处fbx(fbx格式的脉波动画文件可以方便地在手机等工具上播放,当然,也可以为其他格式)格式的脉波动画文件。
根据排列后的三维脉波得到脉波动画文件的步骤,还包括对排列后的三维脉波的设定参数进行调整的步骤;设定参数包括显示尺寸和播放速率。其中,显示尺寸大小决定了AR播放时三维脉波与锚点的比例关系,所以要设置一个合理的初始值;而播放速率的初始值则是三维脉波的真实播放速率。
本实施例提供的三维脉波的显示方法,在生成脉波动画文件之前对空间曲面信息进行颜色渲染、按照时间排列、参数调整等处理,能使得所显示的三维脉波更加直观,提高三维脉波的交互显示的智能性。
在一个实施例中,根据增强现实技术在显示屏中输出脉波动画文件的步骤之后,还包括:若第一特征信息与标识评价信息不匹配,停止输出脉波动画文件。其中,第一特征信息与标识评价信息不匹配的情况可以指:计算机设备所拍摄的标识对象的图像不完整或者存在角度偏差时。进一步地,如果计算机设备的摄像头发生位置移动,导致目标贴纸不在摄像头的拍摄范围内,则可以认为第一特征信息与标识评价信息不匹配。本实施例能实时计算标识对象的第一特征信息与标识评价信息的匹配度,当两者匹配度高时,在标识对象附近显示三维脉波,而当两者匹配度不高时,则停止显示三维脉波。
进一步地,具体实现过程可以为:用户计算机设备扫描周围的环境,当目标贴纸与贴纸模型的相似度高时,则显示三维脉波,如果此时用户继续将计算机设备的摄像头对准标识对象,则继续显示三维脉波,而当用户将计算机设备的摄像头从该标识对象处移开,且两者的匹配度较低时则不再显示三维脉波。这样的三维脉波显示方法能有效提高三维脉波显示过程中的智能人机交互。
在一个实施例中,获取三维脉波对应的脉波动画文件的步骤,包括:从ftp服务器中下载脉波动画文件。ftp服务器的作用是存储脉波动画文件并为计算机设备的显示提供网络支持。计算机设备从ftp服务器中下载脉波动画文件后,可以将其存储在内存中,在需要进行三维脉波显示时再读取内存中的脉波动画文件。当然,计算机设备也可以在线实时从ftp服务器中获取并播放脉波动画文件。
本实施例提供的三维脉波显示方法,计算机设备获取脉波动画文件并根据增强现实技术显示对应的三维脉波,可以实现计算机设备对三维脉波的实时显示,提高三维脉波显示的便利性。
在一些实施例中,ftp服务器可以替换为web服务器、nntp服务器和smtp服务器等。另外,生成脉波动画文件的设备也可以不是服务器,而是终端设备,例如可以是智能手机等。
在一个实施例中,用户可以在计算机设备上登录预先设定的APP,该APP上预先配置有增强显示技术的相关实现程序。基于此,用户登录APP之后,获取对应的脉波动画文件就能进行三维脉波的AR显示。为方便用户更好地观察学习AR脉象模型,可以在APP中增加旋转、缩放、速度变更等基础操作功能;为满足用户查看当前账号中不同的脉象模型样例(这个模型样例可以指用户预先存储的不同位置或不同显示模式的脉象模型,当然,APP也可以实时地从ftp服务器等获取脉波动画文件)的需求,提供模型变换的功能;在APP的初始登录界面输入正确的用户名与密码后,如果用户名下存在多组模型,就可跳转进入模型选择界面;为适应未来用户大量数据需求并保护个人隐私,支持多用户账号切换;最后,考虑到单手操作APP的因素,设计出便于单手操作并可切换左右手模式的UI界面,为用户提供了良好的交互体验。同时,可以读取模型对应的心率文件,计算得到当前脉象模型的实际心率速度和播放速度,通过Text显示在屏幕上(如图3所示)。本实施例提供的三维脉波的显示方法,设置了多种可供用户控制的功能,可以根据用户的需求来进行三维脉波的显示,提供了非常良好的交互体验。
在一个实施例中,为了更好地理解上述方法,以下详细阐述一个本发明三维脉波的显示方法的应用实例。
1、在手机上导入贴纸模型的模型图像,对模型图像进行处理,得到第二特征信息,并将第二特征信息存储到数据库中。
2、获取多个初始标识贴纸的图像,根据图像确定出这些初始标识对象的特征点,根据特征点的分布情况确定出目标标识贴纸。
3、从ftp服务器中下载三维脉波对应的脉波动画文件,将脉波动画文件存储到内存中。
4、在手腕的寸关尺位置上粘贴目标标识贴纸。通过手机摄像头拍摄目标标识贴纸的图像,根据该图像确定目标标识贴纸的第一特征信息。
5、确定第一特征信息与数据库中第二特征信息的匹配度,当该匹配度高于预设的阈值时,判定第一特征信息与第二特征信息相匹配。
6、根据目标标识贴纸在人体手腕上的位置确定手腕上寸关尺的位置,在寸关尺的位置附近确定三维脉波的显示位置。
7、在显示位置上输出存储在内存中的脉波动画文件,以显示三维脉波。
8、在寸关尺位置上给每个脉象模型绑定一个锚点,当手机自身相对坐标发生位移变换,脉象模型的坐标也会进行相应的计算改变。
本实施例,从多个初始标识对象中确定目标标识贴纸,所确定的目标标识对象具有良好的标识脉搏的功能,只要在用户的手腕处贴好目标贴纸,就可通过手机镜头即时识别,且能保证准确确定出脉搏所在的位置,有效提高人机交互的智能性。
需要说明的是,对于前述的各方法实施例,为了简便描述,将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可以采用其它顺序或者同时进行。
基于与上述实施例中的三维脉波的显示方法相同的思想,本发明还提供三维脉波的显示装置,该装置可用于执行上述三维脉波的显示方法。为了便于说明,三维脉波的显示装置实施例的结构示意图中,仅仅示出了与本发明实施例相关的部分,本领域技术人员可以理解,图示结构并不构成对装置的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图9,三维脉波的显示装置包括动画文件获取模块901、图像获取模块902、特征信息获取模块903和脉波显示模块904,详细说明如下:动画文件获取模块901,用于获取脉搏的三维脉波对应的脉波动画文件;图像获取模块902,用于获取目标标识对象的图像;其中,所述目标标识对象根据多个初始标识对象确定;所述目标标识对象用于指示所述脉搏的位置;特征信息获取模块903,用于确定所述目标标识对象的图像的第一特征点,根据所述第一特征点确定第一特征信息;以及,脉波显示模块904,用于若所述第一特征信息与标识评价信息相匹配,根据增强现实技术在显示屏中输出所述脉波动画文件,以显示所述三维脉波。本实施例,所确定的目标标识对象具有良好的标识脉搏的功能,能保证准确确定出脉搏所在的位置,并实现三维脉波在显示屏中的AR显示,有效提高人机交互的智能性。
在一个实施例中,特征信息获取模块903,还用于根据多个尺度空间的高斯微分函数,确定目标标识对象的图像中包含的第一特征点。
在一个实施例中,特征信息获取模块903,还用于确定第一特征点之间的距离,根据距离确定第一特征信息。
在一个实施例中,标识评价信息包括贴纸模型的第二特征信息;三维脉波的显示装置,还包括:匹配度确定模块,用于确定第一特征信息与第二特征信息的匹配度;匹配判断模块,用于当匹配度满足预设的条件时,判定第一特征信息与标识评价信息相匹配。
在一个实施例中,还包括:二值化模块,用于获取贴纸模型的模型图像,对模型图像进行二值化处理;特征信息确定模块,用于确定经过二值化处理的模型图像的第二特征点,根据第二特征点确定第二特征信息。
在一个实施例中,目标标识对象包括目标贴纸;目标贴纸被粘贴在人体手腕的皮肤表面;脉波显示模块904,包括:脉波位置确定子模块,用于确定目标贴纸的位置,根据目标贴纸的位置确定人体手腕上设定脉搏的位置;设定脉搏包括以下至少一种:寸脉、关脉和尺脉;显示位置确定子模块,用于根据设定脉搏的位置,在显示屏的显示区域上确定显示位置;动画文件输出子模块,用于根据增强现实技术在显示位置上输出脉波动画文件。
在一个实施例中,还包括:锚点设置模块,用于根据显示位置设置锚点;锚点用于在显示屏发生位置变动时,控制三维脉波与显示位置的相对位置在显示区域中保持不变。
在一个实施例中,动画文件获取模块901,包括:分布信息获取子模块,用于获取脉象的空间分布信息;脉象的空间分布信息根据脉搏的脉象感测信息确定;三维脉波确定子模块,用于根据空间分布信息生成设定格式的空间曲面信息,得到三维脉波;排列子模块,用于将三维脉波按照时间顺序进行排列,根据排列后的三维脉波得到脉波动画文件。
在一个实施例中,分布信息获取子模块,包括:感测信息接收单元,用于接收传感器阵列发送的脉搏所在区域的脉象感测信息;排列关系获取单元,用于获取传感器阵列的排列关系;分布信息确定单元,用于按照排列关系对脉象感测信息进行整合,得到空间分布信息。
在一个实施例中,还包括:停止输出模块,用于若第一特征信息与标识评价信息不匹配,停止输出脉波动画文件。
在一个实施例中,还包括:初始图像获取模块,用于获取多个初始标识对象的图像;特征点确定模块,用于确定多个初始标识对象的图像的第三特征点;标识对象确定模块,用于根据第三特征点的数目,从初始标识对象中确定目标标识对象。
需要说明的是,本发明的三维脉波的显示装置与本发明的三维脉波的显示方法一一对应,在上述三维脉波的显示方法的实施例阐述的技术特征及其有益效果均适用于三维脉波的显示装置的实施例中,具体内容可参见本发明方法实施例中的叙述,此处不再赘述,特此声明。
此外,上述示例的三维脉波的显示装置的实施方式中,各程序模块的逻辑划分仅是举例说明,实际应用中可以根据需要,例如出于相应硬件的配置要求或者软件的实现的便利考虑,将上述功能分配由不同的程序模块完成,即将三维脉波的显示装置的内部结构划分成不同的程序模块,以完成以上描述的全部或者部分功能。
在一个实施例中,提供了一种计算机设备,可以为手机、头戴显示设备等。该计算机设备包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行计算机程序时实现以下步骤:获取脉搏的三维脉波对应的脉波动画文件;获取目标标识对象的图像;其中,目标标识对象根据多个初始标识对象确定;目标标识对象用于指示脉搏的位置;确定目标标识对象的图像的第一特征点,根据第一特征点确定第一特征信息;若第一特征信息与标识评价信息相匹配,根据增强现实技术在显示屏中输出脉波动画文件,以显示三维脉波。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:根据多个尺度空间的高斯微分函数,确定目标标识对象的图像中包含的第一特征点。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:确定第一特征点之间的距离,根据距离确定第一特征信息。
在一个实施例中,标识评价信息包括贴纸模型的第二特征信息;处理器执行计算机程序时还实现以下步骤:确定第一特征信息与第二特征信息的匹配度;当匹配度满足预设的条件时,判定第一特征信息与标识评价信息相匹配。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:获取贴纸模型的模型图像,对模型图像进行二值化处理;确定经过二值化处理的模型图像的第二特征点,根据第二特征点确定第二特征信息。
在一个实施例中,目标标识对象包括目标贴纸;目标贴纸被粘贴在人体手腕的皮肤表面;处理器执行计算机程序时还实现以下步骤:确定目标贴纸的位置,根据目标贴纸的位置确定人体手腕上设定脉搏的位置;设定脉搏包括以下至少一种:寸脉、关脉和尺脉;根据设定脉搏的位置,在显示屏的显示区域上确定显示位置;根据增强现实技术在显示位置上输出脉波动画文件。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:根据显示位置设置锚点;锚点用于在显示屏发生位置变动时,控制三维脉波与显示位置的相对位置在显示区域中保持不变。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:获取脉象的空间分布信息;脉象的空间分布信息根据脉搏的脉象感测信息确定;根据空间分布信息生成设定格式的空间曲面信息,得到三维脉波;将三维脉波按照时间顺序进行排列,根据排列后的三维脉波得到脉波动画文件。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:接收传感器阵列发送的脉搏所在区域的脉象感测信息;获取传感器阵列的排列关系;按照排列关系对脉象感测信息进行整合,得到空间分布信息。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:若第一特征信息与标识评价信息不匹配,停止输出脉波动画文件。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:获取多个初始标识对象的图像;确定多个初始标识对象的图像的第三特征点;根据第三特征点的数目,从初始标识对象中确定目标标识对象。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:获取脉搏的三维脉波对应的脉波动画文件;获取目标标识对象的图像;其中,目标标识对象根据多个初始标识对象确定;目标标识对象用于指示脉搏的位置;确定目标标识对象的图像的第一特征点,根据第一特征点确定第一特征信息;若第一特征信息与标识评价信息相匹配,根据增强现实技术在显示屏中输出脉波动画文件,以显示三维脉波。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:根据多个尺度空间的高斯微分函数,确定目标标识对象的图像中包含的第一特征点。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:确定第一特征点之间的距离,根据距离确定第一特征信息。
在一个实施例中,标识评价信息包括贴纸模型的第二特征信息;计算机程序被处理器执行时还实现以下步骤:确定第一特征信息与第二特征信息的匹配度;当匹配度满足预设的条件时,判定第一特征信息与标识评价信息相匹配。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:获取贴纸模型的模型图像,对模型图像进行二值化处理;确定经过二值化处理的模型图像的第二特征点,根据第二特征点确定第二特征信息。
在一个实施例中,目标标识对象包括目标贴纸;目标贴纸被粘贴在人体手腕的皮肤表面;计算机程序被处理器执行时还实现以下步骤:确定目标贴纸的位置,根据目标贴纸的位置确定人体手腕上设定脉搏的位置;设定脉搏包括以下至少一种:寸脉、关脉和尺脉;根据设定脉搏的位置,在显示屏的显示区域上确定显示位置;根据增强现实技术在显示位置上输出脉波动画文件。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:根据显示位置设置锚点;锚点用于在显示屏发生位置变动时,控制三维脉波与显示位置的相对位置在显示区域中保持不变。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:获取脉象的空间分布信息;脉象的空间分布信息根据脉搏的脉象感测信息确定;根据空间分布信息生成设定格式的空间曲面信息,得到三维脉波;将三维脉波按照时间顺序进行排列,根据排列后的三维脉波得到脉波动画文件。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:接收传感器阵列发送的脉搏所在区域的脉象感测信息;获取传感器阵列的排列关系;按照排列关系对脉象感测信息进行整合,得到空间分布信息。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:若第一特征信息与标识评价信息不匹配,停止输出脉波动画文件。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:获取多个初始标识对象的图像;确定多个初始标识对象的图像的第三特征点;根据第三特征点的数目,从初始标识对象中确定目标标识对象。
本领域普通技术人员可以理解,实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,作为独立的产品销售或使用。计算机可读介质的更具体的示例(非穷尽性列表)包括以下:具有一个或多个布线的电连接部(电子装置),便携式计算机盘盒(磁装置),随机存取存储器(RAM),只读存储器(ROM),可擦除可编辑只读存储器(EPROM或闪速存储器),光纤装置,以及便携式光盘只读存储器(CDROM)。另外,计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序,然后将其存储在计算机存储器中。
应当理解,本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多步骤或方法可用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如,若用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
本发明实施例的术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或(模块)单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本发明的几种实施方式,不能理解为对本发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。
Claims (20)
1.一种三维脉波的显示方法,其特征在于,包括以下步骤:
获取脉搏的三维脉波对应的脉波动画文件;所述三维脉波是用于对脉象信息的立体展现的三维脉象模型;
获取目标标识对象的图像;其中,所述目标标识对象是从多个初始标识对象中选择出的代表性的标识对象;所述目标标识对象用于指示所述脉搏的位置;所述目标标识对象的图像是通过摄像头实时拍摄得到的图像或者是预先存储的图像;所述目标标识对象包括目标贴纸;所述目标贴纸被粘贴在人体手腕的皮肤表面;
确定所述目标标识对象的图像的第一特征点,根据所述第一特征点确定第一特征信息;
若所述第一特征信息与标识评价信息相匹配,则
确定所述目标贴纸的位置,根据所述目标贴纸的位置确定人体手腕上设定脉搏的位置;所述设定脉搏包括以下至少一种:寸脉、关脉和尺脉;
根据所述设定脉搏的位置,在显示屏的显示区域上确定显示位置;
根据增强现实技术在所述显示位置上输出所述脉波动画文件,以将所述三维脉波和真实世界信息叠加显示;
根据所述显示位置设置锚点;所述锚点用于在显示屏发生位置变动时,控制所述三维脉波与所述显示位置的相对位置在所述显示区域中保持不变。
2.根据权利要求1所述的三维脉波的显示方法,其特征在于,所述确定所述目标标识对象的图像的第一特征点的步骤,包括:
根据多个尺度空间的高斯微分函数,确定所述目标标识对象的图像中包含的第一特征点。
3.根据权利要求1所述的三维脉波的显示方法,其特征在于,所述根据所述第一特征点确定第一特征信息的步骤,包括:
确定所述第一特征点之间的距离,根据所述距离确定所述第一特征信息。
4.根据权利要求1所述的三维脉波的显示方法,其特征在于,所述标识评价信息包括贴纸模型的第二特征信息;
所述根据增强现实技术在显示屏中输出所述脉波动画文件的步骤之前,还包括:
确定所述第一特征信息与所述第二特征信息的匹配度;
当所述匹配度满足预设的条件时,判定所述第一特征信息与所述标识评价信息相匹配。
5.根据权利要求4所述的三维脉波的显示方法,其特征在于,所述确定所述第一特征信息与所述第二特征信息的匹配度之前,还包括:
获取贴纸模型的模型图像,对所述模型图像进行二值化处理;
确定经过二值化处理的模型图像的第二特征点,根据所述第二特征点确定所述第二特征信息。
6.根据权利要求1所述的三维脉波的显示方法,其特征在于,所述获取脉搏的三维脉波对应的脉波动画文件的步骤,包括:
获取脉象的空间分布信息;所述脉象的空间分布信息根据脉搏的脉象感测信息确定;
根据所述空间分布信息生成设定格式的空间曲面信息,得到所述三维脉波;
将所述三维脉波按照时间顺序进行排列,根据排列后的三维脉波得到所述脉波动画文件。
7.根据权利要求6所述的三维脉波的显示方法,其特征在于,所述获取脉象的空间分布信息的步骤,包括:
接收传感器阵列发送的脉搏所在区域的脉象感测信息;
获取所述传感器阵列的排列关系;
按照所述排列关系对所述脉象感测信息进行整合,得到所述空间分布信息。
8.根据权利要求1所述的三维脉波的显示方法,其特征在于,所述根据增强现实技术在显示屏中输出所述脉波动画文件的步骤之后,还包括:
若所述第一特征信息与标识评价信息不匹配,停止输出所述脉波动画文件。
9.根据权利要求1所述的三维脉波的显示方法,其特征在于,所述获取目标标识对象的图像的步骤之前,还包括:
获取所述多个初始标识对象的图像;
确定所述多个初始标识对象的图像的第三特征点;
根据所述第三特征点的数目,从所述初始标识对象中确定所述目标标识对象。
10.一种三维脉波的显示装置,其特征在于,包括:
动画文件获取模块,用于获取脉搏的三维脉波对应的脉波动画文件;所述三维脉波是用于对脉象信息的立体展现的三维脉象模型;
图像获取模块,用于获取目标标识对象的图像;其中,所述目标标识对象是从多个初始标识对象中选择出的代表性的标识对象;所述目标标识对象用于指示所述脉搏的位置;所述目标标识对象的图像是通过摄像头实时拍摄得到的图像或者是预先存储的图像;所述目标标识对象包括目标贴纸;所述目标贴纸被粘贴在人体手腕的皮肤表面;
特征信息获取模块,用于确定所述目标标识对象的图像的第一特征点,根据所述第一特征点确定第一特征信息;
以及,脉波显示模块,用于若所述第一特征信息与标识评价信息相匹配,则确定所述目标贴纸的位置,根据所述目标贴纸的位置确定人体手腕上设定脉搏的位置;所述设定脉搏包括以下至少一种:寸脉、关脉和尺脉;根据所述设定脉搏的位置,在显示屏的显示区域上确定显示位置;根据增强现实技术在所述显示位置上输出所述脉波动画文件,以将所述三维脉波和真实世界信息叠加显示;根据所述显示位置设置锚点;所述锚点用于在显示屏发生位置变动时,控制所述三维脉波与所述显示位置的相对位置在所述显示区域中保持不变。
11.根据权利要求10所述的三维脉波的显示装置,其特征在于,特征信息获取模块,还用于根据多个尺度空间的高斯微分函数,确定目标标识对象的图像中包含的第一特征点。
12.根据权利要求10所述的三维脉波的显示装置,其特征在于,特征信息获取模块,还用于确定第一特征点之间的距离,根据距离确定第一特征信息。
13.根据权利要求10所述的三维脉波的显示装置,其特征在于,标识评价信息包括贴纸模型的第二特征信息;三维脉波的显示装置,还包括:匹配度确定模块,用于确定第一特征信息与第二特征信息的匹配度;匹配判断模块,用于当匹配度满足预设的条件时,判定第一特征信息与标识评价信息相匹配。
14.根据权利要求13所述的三维脉波的显示装置,其特征在于,还包括:二值化模块,用于获取贴纸模型的模型图像,对模型图像进行二值化处理;特征信息确定模块,用于确定经过二值化处理的模型图像的第二特征点,根据第二特征点确定第二特征信息。
15.根据权利要求10所述的三维脉波的显示装置,其特征在于,动画文件获取模块,包括:分布信息获取子模块,用于获取脉象的空间分布信息;脉象的空间分布信息根据脉搏的脉象感测信息确定;三维脉波确定子模块,用于根据空间分布信息生成设定格式的空间曲面信息,得到三维脉波;排列子模块,用于将三维脉波按照时间顺序进行排列,根据排列后的三维脉波得到脉波动画文件。
16.根据权利要求15所述的三维脉波的显示装置,其特征在于,分布信息获取子模块,包括:感测信息接收单元,用于接收传感器阵列发送的脉搏所在区域的脉象感测信息;排列关系获取单元,用于获取传感器阵列的排列关系;分布信息确定单元,用于按照排列关系对脉象感测信息进行整合,得到空间分布信息。
17.根据权利要求10所述的三维脉波的显示装置,其特征在于,还包括:停止输出模块,用于若第一特征信息与标识评价信息不匹配,停止输出脉波动画文件。
18.根据权利要求10所述的三维脉波的显示装置,其特征在于,还包括:初始图像获取模块,用于获取多个初始标识对象的图像;特征点确定模块,用于确定多个初始标识对象的图像的第三特征点;标识对象确定模块,用于根据第三特征点的数目,从初始标识对象中确定目标标识对象。
19.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至9任一项所述的方法的步骤。
20.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至9任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910166759.XA CN109907741B (zh) | 2019-03-06 | 2019-03-06 | 三维脉波的显示方法、装置、计算机设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910166759.XA CN109907741B (zh) | 2019-03-06 | 2019-03-06 | 三维脉波的显示方法、装置、计算机设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109907741A CN109907741A (zh) | 2019-06-21 |
CN109907741B true CN109907741B (zh) | 2022-04-01 |
Family
ID=66963481
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910166759.XA Active CN109907741B (zh) | 2019-03-06 | 2019-03-06 | 三维脉波的显示方法、装置、计算机设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109907741B (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101129261A (zh) * | 2007-02-09 | 2008-02-27 | 北京中医药大学 | 一种获取识别脉动信息与舌诊信息的装置及其方法 |
CN104603673A (zh) * | 2012-09-03 | 2015-05-06 | Smi创新传感技术有限公司 | 头戴式系统以及使用头戴式系统计算和渲染数字图像流的方法 |
CN105190630A (zh) * | 2013-01-15 | 2015-12-23 | 凯瑟沃克斯有限公司 | 计算血流储备分数 |
CN106663338A (zh) * | 2014-08-01 | 2017-05-10 | 索尼公司 | 信息处理装置、信息处理方法和程序 |
CN108885800A (zh) * | 2016-08-11 | 2018-11-23 | 英特吉姆股份有限公司 | 基于智能增强现实(iar)平台的通信系统 |
CN109247923A (zh) * | 2018-11-15 | 2019-01-22 | 中国科学院自动化研究所 | 基于视频的非接触式脉搏实时估计方法及设备 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7499742B2 (en) * | 2001-09-26 | 2009-03-03 | Cvrx, Inc. | Electrode structures and methods for their use in cardiovascular reflex control |
JP5092357B2 (ja) * | 2006-11-07 | 2012-12-05 | ソニー株式会社 | 撮像表示装置、撮像表示方法 |
CN101500150B (zh) * | 2009-02-17 | 2010-10-13 | 上海申通轨道交通研究咨询有限公司 | 一种视频信息显示内容的监控方法 |
JP4936479B2 (ja) * | 2009-03-26 | 2012-05-23 | 任天堂株式会社 | 情報処理プログラム、情報処理装置、情報処理システム、および情報処理方法 |
US9204808B2 (en) * | 2011-10-14 | 2015-12-08 | Sony Corporation | Device for monitoring and/or improving the efficiency of physical training |
JP2013122443A (ja) * | 2011-11-11 | 2013-06-20 | Hideo Ando | 生体活動測定方法、生体活動測定装置、生体活動検出信号の転送方法および生体活動情報を利用したサービスの提供方法 |
US9504391B2 (en) * | 2013-03-04 | 2016-11-29 | Microsoft Technology Licensing, Llc | Determining pulse transit time non-invasively using handheld devices |
CN103169456A (zh) * | 2013-03-29 | 2013-06-26 | 深圳职业技术学院 | 一种脉搏波信号的处理方法及处理系统 |
US20160106328A1 (en) * | 2014-10-16 | 2016-04-21 | Xerox Corporation | Determining arterial pulse transit time from time-series signals obtained at proximal and distal arterial sites |
CN207337934U (zh) * | 2017-10-30 | 2018-05-08 | 成都极致空觉科技有限公司 | 实时检测身体状况的ar穿戴装置 |
CN109124579A (zh) * | 2018-07-20 | 2019-01-04 | 南开大学 | 一种基于柔性力敏传感器阵列自动脉搏定位方法 |
-
2019
- 2019-03-06 CN CN201910166759.XA patent/CN109907741B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101129261A (zh) * | 2007-02-09 | 2008-02-27 | 北京中医药大学 | 一种获取识别脉动信息与舌诊信息的装置及其方法 |
CN104603673A (zh) * | 2012-09-03 | 2015-05-06 | Smi创新传感技术有限公司 | 头戴式系统以及使用头戴式系统计算和渲染数字图像流的方法 |
CN105190630A (zh) * | 2013-01-15 | 2015-12-23 | 凯瑟沃克斯有限公司 | 计算血流储备分数 |
CN106663338A (zh) * | 2014-08-01 | 2017-05-10 | 索尼公司 | 信息处理装置、信息处理方法和程序 |
CN108885800A (zh) * | 2016-08-11 | 2018-11-23 | 英特吉姆股份有限公司 | 基于智能增强现实(iar)平台的通信系统 |
CN109247923A (zh) * | 2018-11-15 | 2019-01-22 | 中国科学院自动化研究所 | 基于视频的非接触式脉搏实时估计方法及设备 |
Non-Patent Citations (2)
Title |
---|
Pulse Wave Intensity and ECG: a Multisensor Approach for the Risk Assessment in Systolic Heart Failure;Hametner, B;《IEEE Sensors Applications Symposium》;20151231;第1-2页 * |
运用传感器技术促进中医药研究;王光耀;《智慧健康》;20151231;第1-3页 * |
Also Published As
Publication number | Publication date |
---|---|
CN109907741A (zh) | 2019-06-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11030237B2 (en) | Method and apparatus for identifying input features for later recognition | |
CN109949900B (zh) | 三维脉波的显示方法、装置、计算机设备及存储介质 | |
Memo et al. | Head-mounted gesture controlled interface for human-computer interaction | |
CN108875524B (zh) | 视线估计方法、装置、系统和存储介质 | |
US10832039B2 (en) | Facial expression detection method, device and system, facial expression driving method, device and system, and storage medium | |
CN110363867B (zh) | 虚拟装扮系统、方法、设备及介质 | |
CN109859305B (zh) | 基于多角度二维人脸的三维人脸建模、识别方法及装置 | |
CN104508704B (zh) | 人体测量方法 | |
US10810718B2 (en) | Method and device for three-dimensional reconstruction | |
CN106325509A (zh) | 三维手势识别方法及系统 | |
CN106780619A (zh) | 一种基于Kinect深度相机的人体尺寸测量方法 | |
CN104537705B (zh) | 基于增强现实的移动平台三维生物分子展示系统和方法 | |
Houshiar et al. | A study of projections for key point based registration of panoramic terrestrial 3D laser scan | |
CN112991556B (zh) | Ar数据的展示方法、装置、电子设备及存储介质 | |
JP6770208B2 (ja) | 情報処理装置 | |
CN108682282A (zh) | 一种基于ARKit框架的增强现实版化学元素周期表的交互方法 | |
CN110288714B (zh) | 一种虚拟仿真实验系统 | |
CN109907741B (zh) | 三维脉波的显示方法、装置、计算机设备及存储介质 | |
CN111638794A (zh) | 一种虚拟文物的显示控制方法及装置 | |
CN109935318B (zh) | 三维脉波的显示方法、装置、计算机设备及存储介质 | |
CN109938705B (zh) | 三维脉波的显示方法、装置、计算机设备及存储介质 | |
Liu et al. | New anti-blur and illumination-robust combined invariant for stereo vision in human belly reconstruction | |
Bhatla et al. | Development of Anatomy Learning System based on Augmented Reality | |
JP2009151516A (ja) | 情報処理装置および情報処理装置用操作者指示点算出プログラム | |
Piechaczek et al. | Popular strategies and methods for using augmented reality |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20201211 Address after: Room 1001, unit 3, building 1, No. 145, Mingzhu North Road, Xiangzhou District, Zhuhai City, Guangdong Province Applicant after: Zhimei Kangmin (Zhuhai) Health Technology Co., Ltd Address before: Room 702-2, 7th floor, No. 18 Futian Road, Xiangzhou District, Zhuhai City, Guangdong Province Applicant before: ZHUHAI WANNAOTE HEALTH TECHNOLOGY Co.,Ltd. |
|
TA01 | Transfer of patent application right | ||
GR01 | Patent grant | ||
GR01 | Patent grant |