CN117912680A - 基于多模态的健康信息管理方法及系统 - Google Patents
基于多模态的健康信息管理方法及系统 Download PDFInfo
- Publication number
- CN117912680A CN117912680A CN202410316637.5A CN202410316637A CN117912680A CN 117912680 A CN117912680 A CN 117912680A CN 202410316637 A CN202410316637 A CN 202410316637A CN 117912680 A CN117912680 A CN 117912680A
- Authority
- CN
- China
- Prior art keywords
- indication
- index
- abnormal
- indexes
- video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000007726 management method Methods 0.000 title claims abstract description 15
- 230000002159 abnormal effect Effects 0.000 claims abstract description 198
- 238000004458 analytical method Methods 0.000 claims abstract description 27
- 238000010586 diagram Methods 0.000 claims abstract description 23
- 238000012545 processing Methods 0.000 claims description 123
- 238000000034 method Methods 0.000 claims description 34
- 230000005856 abnormality Effects 0.000 claims description 23
- 238000012163 sequencing technique Methods 0.000 claims description 2
- 239000000758 substrate Substances 0.000 claims 2
- 239000000523 sample Substances 0.000 claims 1
- 230000003247 decreasing effect Effects 0.000 abstract description 8
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 12
- PCTMTFRHKVHKIS-BMFZQQSSSA-N (1s,3r,4e,6e,8e,10e,12e,14e,16e,18s,19r,20r,21s,25r,27r,30r,31r,33s,35r,37s,38r)-3-[(2r,3s,4s,5s,6r)-4-amino-3,5-dihydroxy-6-methyloxan-2-yl]oxy-19,25,27,30,31,33,35,37-octahydroxy-18,20,21-trimethyl-23-oxo-22,39-dioxabicyclo[33.3.1]nonatriaconta-4,6,8,10 Chemical compound C1C=C2C[C@@H](OS(O)(=O)=O)CC[C@]2(C)[C@@H]2[C@@H]1[C@@H]1CC[C@H]([C@H](C)CCCC(C)C)[C@@]1(C)CC2.O[C@H]1[C@@H](N)[C@H](O)[C@@H](C)O[C@H]1O[C@H]1/C=C/C=C/C=C/C=C/C=C/C=C/C=C/[C@H](C)[C@@H](O)[C@@H](C)[C@H](C)OC(=O)C[C@H](O)C[C@H](O)CC[C@@H](O)[C@H](O)C[C@H](O)C[C@](O)(C[C@H](O)[C@H]2C(O)=O)O[C@H]2C1 PCTMTFRHKVHKIS-BMFZQQSSSA-N 0.000 description 11
- 210000004369 blood Anatomy 0.000 description 8
- 239000008280 blood Substances 0.000 description 8
- 210000003743 erythrocyte Anatomy 0.000 description 8
- 201000010099 disease Diseases 0.000 description 7
- 238000004590 computer program Methods 0.000 description 5
- 238000004891 communication Methods 0.000 description 3
- 210000000265 leukocyte Anatomy 0.000 description 3
- 208000024891 symptom Diseases 0.000 description 3
- 238000012098 association analyses Methods 0.000 description 2
- 210000004027 cell Anatomy 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 208000032467 Aplastic anaemia Diseases 0.000 description 1
- 206010061548 Red blood cell abnormality Diseases 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004820 blood count Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000003862 health status Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 208000037244 polycythemia vera Diseases 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Landscapes
- Measuring And Recording Apparatus For Diagnosis (AREA)
Abstract
本发明提供一种基于多模态的健康信息管理方法及系统,根据所述指示请求生成指示链接,建立与指示链接对应的指示页面,指示页面包括正常区、异常区和数据指示区;对多模态健康数据进行指标分析,确定正常指标和/或异常指标,基于正常区对正常指标进行展示,基于异常区对异常指标进行展示;根据关联表对异常指标进行数量递减的关联性分析,确定关联指标和/或单独指标,获取与各异常指标对应的上层指示视频,以及与关联指标对应的下层指示视频;生成与上层指示视频对应的上层关联槽,以及与下层指示视频对应的下层关联槽,基于上层关联槽和下层关联槽生成指示结构图,根据指示结构图对数据指示区更新后,将指示链接反馈至用户端。
Description
技术领域
本发明涉及数据处理技术,尤其涉及一种基于多模态的健康信息管理方法及系统。
背景技术
多模态的健康信息管理是指利用多种不同类型的数据来综合评估和管理个体的健康状况,比如,文字和图片等。随着医疗技术的不断进步和信息化的发展,它能够提供更全面、更深入的健康评估,帮助个体更好地了解自己的健康状况,及时采取相应的健康管理措施,预防和治疗疾病,因此,健康信息管理具有十分重要的意义。
现有技术中,人员进行体检时,会得到多份体检文件,比如,血常规、CT影像图等,但,文字类的报告单往往只是简单地将异常数据标注出来,图片类的报告单,用户无法得知具体的情况,缺乏对指标的深入分析和处理,导致缺乏直观性,从而使得用户体验较低。
因此,如何依据用户的健康数据定制化生成相应的展示页面,以使用户可以直观查看相关指标的具体情况,从而提升用户的体验,更好的帮助患者了解健康状况,成为亟待解决的问题。
发明内容
本发明实施例提供一种基于多模态的健康信息管理方法及系统,可以依据用户的健康数据定制化生成相应的展示页面,以使用户可以直观查看相关指标的具体情况,从而提升用户的体验,更好的帮助患者了解健康状况。
本发明实施例的第一方面,提供一种基于多模态的健康信息管理方法,包括:
接收用户端的指示请求,根据所述指示请求生成指示链接,建立与所述指示链接对应的指示页面,所述指示页面包括正常区、异常区和数据指示区;
获取所述用户端基于所述指示链接上传的多模态健康数据,对所述多模态健康数据进行指标分析,确定正常指标和/或异常指标,基于所述正常区对所述正常指标进行展示,基于所述异常区对所述异常指标进行展示;
根据关联表对所述异常指标进行数量递减的关联性分析,确定关联指标和/或单独指标,获取与各所述异常指标对应的上层指示视频,以及与所述关联指标对应的下层指示视频;
生成与所述上层指示视频对应的上层关联槽,以及与所述下层指示视频对应的下层关联槽,基于所述上层关联槽和所述下层关联槽生成指示结构图,根据所述指示结构图对所述数据指示区更新后,将所述指示链接反馈至所述用户端。
可选地,在第一方面的一种可能实现方式中,所述获取所述用户端基于所述指示链接上传的多模态健康数据,对所述多模态健康数据进行指标分析,确定正常指标和/或异常指标,包括:
获取所述用户端基于所述指示链接上传的多模态健康数据,对所述多模态健康数据进行解析,得到多个处理文件,所述处理文件包括自动处理文件和/或主动处理文件,并获取与各所述自动处理文件对应的标准数据区间表;
根据所述标准数据区间表对所述自动处理文件进行数据判断,确定所述自动处理文件对应的多模态健康数据与所述标准数据区间表对应时,将相应所述多模态健康数据对应的指标作为正常指标,确定所述多模态健康数据与所述标准数据区间表不对应时,将相应所述多模态健康数据对应的指标作为异常指标;
将所述主动处理文件发送至相应的医师端,接收所述医师端对所述主动处理文件的反馈信息,根据所述反馈信息确定相应的指标为正常指标或异常指标。
可选地,在第一方面的一种可能实现方式中,所述根据关联表对所述异常指标进行数量递减的关联性分析,确定关联指标和/或单独指标,包括:
统计相应所述处理文件对应的所述异常指标得到异常集合,获取所述异常集合中异常指标的异常数量;
若所述异常数量大于1,以1为递减幅度,依次对所述异常数量进行递减处理,在所述异常数量为2时停止,得到数量序列;
获取所述异常集合与所述数量序列中各异常数量对应的多个指标组合,根据所述异常数量对相应的指标组合进行汇聚得到组合集合,并按照所述数量序列对多个所述组合集合进行递减排序,得到集合序列;
将所述集合序列的第一个组合集合中的指标组合,与所述关联表中的预设指标集合进行比对;
在所述关联表中不具有与所述指标组合完全对应的预设指标集合时,将第一个所述组合集合从所述集合序列中删除,对集合序列进行更新;
在所述关联表中具有与所述指标组合完全对应的预设指标集合时,确定相应所述指标组合作为关联指标;
将所述关联指标作为剔除指标,对所述集合序列中包含所述剔除指标的其余指标组合进行剔除处理,并将第一个所述组合集合从所述集合序列中删除,对集合序列进行更新;
重复上述对集合序列进行更新的步骤,直至所述集合序列为空,将所述异常指标中除关联指标以外的指标作为单独指标。
可选地,在第一方面的一种可能实现方式中,所述获取与各所述异常指标对应的上层指示视频,以及与所述关联指标对应的下层指示视频,包括:
获取与各所述异常指标对应的处理文件,所述处理文件包括自动处理文件和/或主动处理文件;
基于所述自动处理文件从视频库中调取与相应所述异常指标对应的指示视频作为上层指示视频,所述视频库中包括与所述预设指标集合对应的指示视频;
根据所述主动处理文件获取医师端基于相应所述异常指标录制的录制视频作为上层指示视频;
获取所述关联指标对应的处理文件,所述处理文件包括自动处理文件和/或主动处理文件;
基于所述自动处理文件从视频库中调取与相应所述关联指标对应的指示视频作为下层指示视频;
根据所述主动处理文件获取医师端基于相应所述关联指标录制的录制视频作为下层指示视频。
可选地,在第一方面的一种可能实现方式中,通过以下步骤得到录制视频,包括:
调取与所述主动处理文件尺寸相同的透明图层叠加在所述主动处理文件的上方;
接收医师端对所述透明图层的触发信息,基于所述触发信息确定医师端的触发痕迹,以及触发时刻;
根据所述触发痕迹对所述主动处理文件进行更新,得到文件介绍帧,并基于所述触发时刻录制医师端的讲解视频,将所述文件介绍帧放置于所述讲解视频的前方,生成录制视频。
可选地,在第一方面的一种可能实现方式中,所述生成与所述上层指示视频对应的上层关联槽,以及与所述下层指示视频对应的下层关联槽,基于所述上层关联槽和所述下层关联槽生成指示结构图,包括:
生成与所述上层指示视频对应的上层关联槽,以及与所述下层指示视频对应的下层关联槽;
将所述关联指标中的异常指标作为相邻指标,并将所述相邻指标对应的上层关联槽作为相邻槽,将其余的上层关联槽作为单独槽;
将相应所述相邻指标进行位置的相邻设置,将相应所述相邻槽设置在所述相邻指标对应的位置处,基于所述相邻槽构建与相应所述下层关联槽对应的关联结构;
基于所述单独槽、所述相邻槽、所述关联结构和所述下层关联槽生成指示结构图。
可选地,在第一方面的一种可能实现方式中,所述基于所述相邻槽构建与相应所述下层关联槽对应的关联结构,包括:
获取所述相邻槽的槽位数量,确定所述槽位数量为奇数时,获取位于中间位置的相邻槽作为中间槽位,基于预设设置距离将相应所述下层关联槽设置在所述中间槽位的下方;
获取所述相邻槽下边缘线的中心点作为下边缘线中点,以及所述下层关联槽上边缘线的中心点作为上边缘线中点;
连接所述下边缘线中点和所述上边缘线中点,生成关联结构;
确定所述槽位数量为偶数时,获取位于中间位置的2个相邻槽作为基准槽位,提取所述基准槽位的槽位中心点,并将所述槽位中心点连线确定连接线段;
获取所述连接线段的线段中点,基于所述线段中点构建垂直于所述连接线段的设置线;
基于预设设置距离将相应所述下层关联槽的中心点设置在所述基准槽位下方的所述设置线的位置处;
获取所述相邻槽下边缘线的中心点作为下边缘线中点,以及所述下层关联槽上边缘线的中心点作为上边缘线中点;
连接所述下边缘线中点和所述上边缘线中点,生成关联结构。
可选地,在第一方面的一种可能实现方式中,还包括:
接收用户端发送的汇总请求,基于所述汇总请求对所述上层指示视频和所述下层指示视频进行汇总处理,生成汇总视频发送至用户端。
可选地,在第一方面的一种可能实现方式中,所述接收用户端发送的汇总请求,基于所述汇总请求对所述上层指示视频和所述下层指示视频进行汇总处理,生成汇总视频发送至用户端,包括:
接收用户端发送的汇总请求,基于所述汇总请求调取与所述用户端对应的基本信息,根据所述基本信息构建信息介绍帧;
获取与所述上层指示视频对应的异常指标,基于所述异常指标构建单独指标帧,将所述单独指标帧放置于所述上层指示视频的前方,生成单独指示视频;
获取与所述下层指示视频对应的关联指标,基于所述关联指标构建关联指标帧,将所述关联指标帧放置于所述上层指示视频的前方,生成关联指示视频;
依次将所述信息介绍帧、所述单独指示视频和所述关联指示视频进行拼接汇总处理,生成汇总视频发送至用户端。
本发明实施例的第二方面,提供一种基于多模态的健康信息管理系统,包括:
指示模块,用于接收用户端的指示请求,根据所述指示请求生成指示链接,建立与所述指示链接对应的指示页面,所述指示页面包括正常区、异常区和数据指示区;
展示模块,用于获取所述用户端基于所述指示链接上传的多模态健康数据,对所述多模态健康数据进行指标分析,确定正常指标和/或异常指标,基于所述正常区对所述正常指标进行展示,基于所述异常区对所述异常指标进行展示;
分析模块,用于根据关联表对所述异常指标进行数量递减的关联性分析,确定关联指标和/或单独指标,获取与各所述异常指标对应的上层指示视频,以及与所述关联指标对应的下层指示视频;
生成模块,用于生成与所述上层指示视频对应的上层关联槽,以及与所述下层指示视频对应的下层关联槽,基于所述上层关联槽和所述下层关联槽生成指示结构图,根据所述指示结构图对所述数据指示区更新后,将所述指示链接反馈至所述用户端。
本发明实施例的第三方面,提供一种电子设备,包括:存储器、处理器以及计算机程序,所述计算机程序存储在所述存储器中,所述处理器运行所述计算机程序执行本发明第一方面及第一方面各种可能涉及的所述方法。
本发明实施例的第四方面,提供一种存储介质,所述存储介质中存储有计算机程序,所述计算机程序被处理器执行时用于实现本发明第一方面及第一方面各种可能涉及的所述方法。
本发明的有益效果如下:
1、本发明会生成指示页面直观展示用户的正常指标和异常指标,并在数据指示区内展示与各个异常指标对应的上层指示视频,以及与关联指标对应的下层指示视频,使得用户可以通过指示页面直观查看所有的异常指标和相应的指示视频,方便用户直观了解到各个异常指标或者组合的异常指标对应的具体情况,使得数据较为直观,从而提升用户体验感。本发明会构建与指示链接对应的指示页面,并对多模态健康数据进行分析,将分析得到的正常指标在正常区进行展示,将异常指标在异常区进行展示,对正常和异常进行分区展示,方便用户直观查看到异常指标。其次,本发明会对异常指标进行关联性分析,确定相互关联的指标对应病症的相关视频进行展示,以及各个异常指标对应的相关指示视频进行展示,使得后续用户可以知道每个异常指标对应的指标解读视频,依据相互组合的关联指标对应的指标解读视频,方便后续用户可以直观查看到所有的指标以及相应的指标解读视频,从而帮助人员更好的了解健康状况,及时采集相应的管理措施,并且数据进行了汇总展示,方便人员查看到所有的数据。
2、本发明会对异常指标进行数量递减的关联性分析,确定所有异常指标中的关联指标和单独指标,方便后续获取与关联指标对应的指示视频对用户进行展示,用户可以通过关联结构确定与该指示视频对应的关联指标,方便用户进行直观查看。本发明会依据标准数据区间表和医师端的反馈信息确定相应的异常指标和正常指标,其次,通过对异常数量的数量依次递减,从而得到数量序列,依据数量序列中的各个异常数量提取异常集合中相同数量对应的多个指标组合,根据所述指标组合和关联表的对比,确定与关联表中预设指标集合完全一致的指标组合作为关联指标,并对集合序列中剔除包含关联指标中的异常指标的其他的指标组合进行剔除,不断重复从而得到可以进行关联的关联指标和关联指标以外的单独指标。最后,会获取与各个异常指标对应的指示视频作为上层指示视频,以及与关联指标对应的下层指示视频,并且会将关联指标对应的异常指标和相应的上层关联槽位进行相邻设置,使得后续可以生成关联结构,方便用户进行观察。在生成关联结构的过程中,会确定相邻槽的数量,如果是奇数则在中间位置的下方构建下层关联槽,并获取其上边缘线的中间点与各个相邻槽下边缘线的中间点进行连接,从而生成相应的关联结构,如果是偶数则确定中间2个槽位的中间位置的线段中点,在该线段中点处的下方设置线的预设位置处设置相应的下层关联槽位,同样进行边缘线中间点的连接生成关联结构,使得槽位分布较为合理,方便用户进行查看,提升用户体验感。
3、本发明会接收汇总请求,依据汇总请求对所有指示视频、相应的异常指标和用户的基本信息进行汇总,生成汇总视频发送至用户端进行展示。本发明会依据将各个指示视频对应的异常指标生成与之对应的指示帧放置在指示视频的前方,从而得到每个异常指标和关联指标需要进行展示的视频,并将用户的基本信息对应的信息介绍帧放在最前方,将各个视频进行依次拼接,从而得到汇总视频对用户进行展示,使得用户可以通过一个完整的视频查看每个异常指标以及异常指标对应的视频,每个关联指标以及关联指标对应的视频。
附图说明
图1为本发明所提供的一种基于多模态的健康信息管理方法的流程图;
图2为本发明所提供的一种指示结构图的示意图;
图3为本发明所提供的一种基于多模态的健康信息管理系统的结构示意图。
具体实施方式
下面以具体地实施例对本发明的技术方案进行详细说明。下面这几个具体的实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例不再赘述。
本发明提供一种基于多模态的健康信息管理方法,如图1所示,包括步骤S1-S4:
S1,接收用户端的指示请求,根据所述指示请求生成指示链接,建立与所述指示链接对应的指示页面,所述指示页面包括正常区、异常区和数据指示区。
需要说明的是,一般而言,人员在进行健康管理时,得到相应的体检数据,比如,血常规报告单、心电图等,血常规报告单等文字报告仅会简单地将异常数据标注出来,心电图等图片报告只提供简单的文字说明,且数据分布较为杂乱,用户无法依据多个异常指标确定与之对应的病症,缺乏相应的指导和分析,使得用户体验较低。
因此,当服务器接收到用户端的指示请求,会根据指示请求生成相应的指示链接,并构建与该指示链接对应的指示页面,该指示页面包括正常区、异常区和数据指示区。
其中,指示链接为指示请求对应的链接,指示页面为与指示链接对应的页面,后续当用户对该指示链接进行触发后则会跳转至相应的指示页面。
例如,当用户需要对多模态健康数据进行定制化展示时,会发送指示请求至服务器,服务器接收到该请求后会生成与该请求对应的指示链接,该指示链接具有对应的指示页面,指示页面中分为上中下3个区域,最上面的区域为正常区,中间区域为异常区,下方区域为数据指示区。
S2,获取所述用户端基于所述指示链接上传的多模态健康数据,对所述多模态健康数据进行指标分析,确定正常指标和/或异常指标,基于所述正常区对所述正常指标进行展示,基于所述异常区对所述异常指标进行展示。
不难理解的是,服务器会获取用户端基于所述指示链接上传的多模态健康数据,并对多模态健康数据中的各个指标进行指标分析,从而得到正常指标和异常指标。
具体的,将正常指标放置在正常区进行展示,将异常指标放置在异常区进行展示。
通过上述方式,可以对指标进行分类,从而方便后续针对相应的指标进行分类展示,方便用户直观查看到相应指标的情况。
在一些实施例中,步骤S2中的(获取所述用户端基于所述指示链接上传的多模态健康数据,对所述多模态健康数据进行指标分析,确定正常指标和/或异常指标),包括S21-S23:
S21,获取所述用户端基于所述指示链接上传的多模态健康数据,对所述多模态健康数据进行解析,得到多个处理文件,所述处理文件包括自动处理文件和/或主动处理文件,并获取与各所述自动处理文件对应的标准数据区间表。
可以理解的是,服务器会获取用户端基于所述指示链接上传的多模态健康数据,并对该多模态健康数据进行解析,得到多个处理文件。
其中,处理文件包括自动处理文件和/或主动处理文件,多模态健康数据可以是用户对应的指标数据。比如,白细胞、红细胞、心电图数据等。
不难理解的是,对用户的多模态健康数据进行解析,可以得到相应多模态健康数据所处的处理文件,比如,白细胞、红细胞属于血常规文件,心电图数据属于心电图文件。
自动处理文件可以是自动比对处理得到正常指标和异常指标的文件,比如,文字类的指标类文件,血常规等化验单,后续通过与标准数据区间表进行自动比对可以进行自动处理确定正常或异常数据。进一步的,获取与各所述自动处理文件对应的标准数据区间表。方便后续对自动处理文件中的多模态健康数据和标准数据区间表中的区间进行比对,从而确定正常指标和异常指标。
主动处理文件可以是需要医师进行主动处理得到正常指标和异常指标的文件,比如,图片类的文件,心电图等,后续通过医师端主动进行反馈判别是异常指标还是正常指标。
S22,根据所述标准数据区间表对所述自动处理文件进行数据判断,确定所述自动处理文件对应的多模态健康数据与所述标准数据区间表对应时,将相应所述多模态健康数据对应的指标作为正常指标,确定所述多模态健康数据与所述标准数据区间表不对应时,将相应所述多模态健康数据对应的指标作为异常指标。
可以理解的是,服务器会根据标准数据区间表对所述自动处理文件进行数据判断,当确定动处理文件对应的多模态健康数据与所述标准数据区间表对应时,将相应所述多模态健康数据对应的指标作为正常指标。
具体的,当确定多模态健康数据与所述标准数据区间表不对应时,将相应所述多模态健康数据对应的指标作为异常指标。
不难理解的是,将文字类的指标文件(自动处理文件),比如,血常规中的数据与标准数据区间表进行比对,将处于标准数据区间表内区间内的指标作为正常指标,将不处于标准数据区间表内区间内的指标作为异常指标。
S23,将所述主动处理文件发送至相应的医师端,接收所述医师端对所述主动处理文件的反馈信息,根据所述反馈信息确定相应的指标为正常指标或异常指标。
可以理解的是,服务器会将主动处理文件发送至相应的医师端,随后接收医师端对所述主动处理文件的反馈信息,依据该反馈信息确定相应的指标为正常指标或异常指标。
比如,将心电图等图片类的文件发送至医师端,由医师端进行主动判断生成相应的反馈信息,反馈该主动处理文件为正常指标还是异常指标。例如,判断心电图为正常或异常。
S3,根据关联表对所述异常指标进行数量递减的关联性分析,确定关联指标和/或单独指标,获取与各所述异常指标对应的上层指示视频,以及与所述关联指标对应的下层指示视频。
需要说明的是,用户的异常指标中最多的异常指标的组合已经组成了一个病症特征,此时已经是同时出现多个异常指标异常情况下对应的病症,则无法对该异常指标的组合内的指标进行再次拆分组合。比如,血常规中异常指标A、B、C、D,当异常指标对应组合A、B、C、D时,此时没有与之对应的病症,当A、B、C时具有对应的病症,此时3个指标同时出现异常对应着相应的病症,则A、B、C此时继续进行拆分组合则会与用户的病症不对应。
其中,关联表包括多个预设指标集合,每个预设指标集合具有与相应病症对应的指示视频。关联指标为异常指标与关联表中预设指标集合相同的组合对应的指标,即,病症对应的多个指标。单独指标为单独的异常指标,比如,红细胞降低等。
可以理解的是,服务器会根据关联表对所述异常指标进行数量递减的关联性分析,确定关联指标和/或单独指标。
进一步的,获取与各所述异常指标对应的上层指示视频,以及与所述关联指标对应的下层指示视频。不难理解的是,每个异常指标都具有与之对应的视频作为上层指示视频,比如,红细胞异常对应的视频,心电图异常对应的视频。后续会将异常指标进行递减组合与关联表中的预设指标集合进行比对,从而确定关联指标,以及关联指标对应的视频。
在一些实施例中,步骤S3中的(根据关联表对所述异常指标进行数量递减的关联性分析,确定关联指标和/或单独指标),包括S301-S308:
S301,统计相应所述处理文件对应的所述异常指标得到异常集合,获取所述异常集合中异常指标的异常数量。
可以理解的是,服务器会统计所有处理文件对应的异常指标得到异常集合,并获取异常集合中异常指标的异常数量。
比如,统计用户所有检查的处理文件对应的异常指标从而得到异常集合,例如,血常规对应的异常指标A、B、C和心电图对应的异常指标D,则得到异常集合{A、B、C、D},并获取异常数量4。
值得一提的是,所有的操作都是针对1个单子执行的1个操作,如果用户有10个单子,那么有10次操作,从而得到每个处理文件中异常指标所对应的关联指标。
S302,若所述异常数量大于1,以1为递减幅度,依次对所述异常数量进行递减处理,在所述异常数量为2时停止,得到数量序列。
可以理解的是,如果异常数量大于1,则以1的幅度进行递减,依次对异常数量进行递减处理,知道异常数量为2时停止,从而得到数量序列。
比如,异常数量4大于1,则递减得到3、2,从而得到数量序列4-3-2。
S303,获取所述异常集合与所述数量序列中各异常数量对应的多个指标组合,根据所述异常数量对相应的指标组合进行汇聚得到组合集合,并按照所述数量序列对多个所述组合集合进行递减排序,得到集合序列。
可以理解的是,服务器会获取异常集合与所述数量序列中各异常数量对应的多个指标组合,比如,异常集合{A、B、C、D}与数量序列中数量为4对应指标组合ABCD,异常集合{A、B、C、D}与数量序列中数量为3对应指标组合ABC,ABD,ACD和BCD的指标组合,数量序列中数量为2对应指标组合AB, AC, AD, BC, BD和CD的指标组合。
进一步的,根据所述异常数量对相应的指标组合进行汇聚得到组合集合,即各个异常数量对应的指标组合的集合,比如,数量序列中数量为4对应的组合集合为{ABCD},数量序列中数量为3对应的组合集合为{ABC,ABD,ACD,BCD},数量序列中数量为2对应的组合集合为{AB, AC, AD, BC, BD,CD}。
按照数量序列对多个所述组合集合进行递减排序,得到集合序列,比如,集合序列为ABCD-ABC-ABD-ACD-BCD-AB-AC-AD-BC-BD-CD。
S304,将所述集合序列的第一个组合集合中的指标组合,与所述关联表中的预设指标集合进行比对。
可以理解的是,将集合序列的第一个组合集合中的指标组合,与所述关联表中的预设指标集合进行比对。
不难理解的是,关联表包括与各病症对应的预设指标集合,每个预设指标集合具有对应的视频,其中,预设指标集合为人为预先设置的指标集合,集合内可以有一个也可以有多个异常指标,比如,心电图异常,每个预设指标集合都具有对应的视频,视频可以是医师端录制的讲解视频,也可以是异常指标对应病症的指示视频。
比如,挑选集合序列为ABCD-ABC-ABD-ACD-BCD-AB-AC-AD-BC-BD-CD中第一组合集合中的首个指标组合ABCD与关联表进行比对,从而确定相应的关联指标。
S305,在所述关联表中不具有与所述指标组合完全对应的预设指标集合时,将第一个所述组合集合从所述集合序列中删除,对集合序列进行更新。
可以理解的是,如果关联表中不具有与所述指标组合完全对应的预设指标集合时,则将第一组合集合从所述集合序列中删除,对集合序列进行更新,后续会继续挑选集合序列的第一个组合集合中的首个指标组合,再次与关联表进行比对。
比如,挑选集合序列为ABCD-ABC-ABD-ACD-BCD-AB-AC-AD-BC-BD-CD中第一组合集合中的首个指标组合ABCD与关联表进行比对,不具有ABCD,则进行删除更新,得到更新后的挑选集合序列为ABC-ABD-ACD-BCD-AB-AC-AD-BC-BD-CD。
S306,在所述关联表中具有与所述指标组合完全对应的预设指标集合时,确定相应所述指标组合作为关联指标。
可以理解的是,在所述关联表中具有与所述指标组合完全对应的预设指标集合时,则确定相应所述指标组合作为关联指标。
S307,将所述关联指标作为剔除指标,对所述集合序列中包含所述剔除指标的其余指标组合进行剔除处理,并将第一个所述组合集合从所述集合序列中删除,对集合序列进行更新。
可以理解的是,将关联指标中所有的异常指标作为剔除指标,对所述集合序列中包含所述剔除指标的其余指标组合进行剔除处理,并将第一个所述组合集合从所述集合序列中删除,对集合序列进行更新。
比如,集合序列为ABCD-ABC-ABD-ACD-BCD-AB-AC-AD-BC-BD-CD中首个ABCD便出现了关联表中具有与ABCD完全对应的预设指标集合,则A、B、C、D则为剔除指标,对其余的指标组合进行剔除处理,则更新后的集合序列为空,此时为同时ABCD出现异常对应一个病症,后续则无需继续对比查看。
S308,重复上述对集合序列进行更新的步骤,直至所述集合序列为空,将所述异常指标中除关联指标以外的指标作为单独指标。
可以理解的是,服务器重复上述对集合序列进行更新的步骤,直至所述集合序列为空,将所述异常指标中除关联指标以外的指标作为单独指标。
不难理解的是,如果仅是AB出现了关联表中具有与AB完全对应的预设指标集合,那么剔除后的集合序列为CD,后续还需对CD继续与关联表进行比对,从而确定是否还具有其他的关联指标,直至集合序列为空时,将关联指标以外的指标作为单独指标。
在一些实施例中,步骤S3中的(获取与各所述异常指标对应的上层指示视频,以及与所述关联指标对应的下层指示视频),包括S309-S314:
S309,获取与各所述异常指标对应的处理文件,所述处理文件包括自动处理文件和/或主动处理文件。
可以理解的是,服务器获取各所述异常指标对应的处理文件,其中,处理文件包括自动处理文件和/或主动处理文件。
比如,红细胞异常对应的处理文件为自动处理文件,心电图异常对应的处理文件为主动处理文件。后续关联指标也具有相应的自动处理文件和主动处理文件。
S310,基于所述自动处理文件从视频库中调取与相应所述异常指标对应的指示视频作为上层指示视频,所述视频库中包括与所述预设指标集合对应的指示视频。
可以理解的是,服务器基于自动处理文件从视频库中调取与相应所述异常指标对应的指示视频作为上层指示视频。其中,视频库中包括与所述预设指标集合对应的指示视频。
其中,预设指标集合为人为预先设置的指标集合,集合内可以有一个也可以有多个异常指标,比如,每个预设指标集合都具有对应的视频,视频可以是医师端录制的讲解视频,也可以是异常指标对应病症的指示视频。指示视频可以是与相应病症对应的指导视频,可以是一个或多个异常指标对应的指示视频。不难理解的是,一个异常指标和多个异常指标均有对应的病症情况。例如,红细胞过高可以是原发性红细胞增多症,又如,同时出现白细胞计数升高、血小板计数降低和红细胞计数降低可以是再生障碍性贫血。
不难理解的是,从视频库中调取与每个异常指标对应的指示视频,比如,红细胞异常、白细胞异常等对应的指示视频作为上层指示视频。
S311,根据所述主动处理文件获取医师端基于相应所述异常指标录制的录制视频作为上层指示视频。
可以理解的是,如果异常指标对应的处理文件为主动处理文件,比如,心电图,则根据主动处理文件获取医师端基于相应所述异常指标录制的录制视频作为上层指示视频
需要说明的是,心电图等图片类的健康数据,无法预先设置对应的视频,因此需要医师端依据图片中异常部分进行对应的讲解,所以会基于相应的异常指标得到录制的录制视频作为上层指示视频。
S312,获取所述关联指标对应的处理文件,所述处理文件包括自动处理文件和/或主动处理文件。
可以理解的是,会获取关联指标对应的处理文件,所述处理文件包括自动处理文件和/或主动处理文件。
不难理解的是,此处原理和获取与各异常指标对应的处理文件的原理相似。
S313,基于所述自动处理文件从视频库中调取与相应所述关联指标对应的指示视频作为下层指示视频。
可以理解的是,基于自动处理文件从视频库中调取与相应所述关联指标对应预设指标集合的指示视频作为下层指示视频。
比如,依据关联指标ABCD调取与预设指标集合{ABCD}对应病症的指示视频作为下层指示视频。与通过异常指标调取相应视频的原理相似。
S314,根据所述主动处理文件获取医师端基于相应所述关联指标录制的录制视频作为下层指示视频。
需要说明的是,心电图、CT等图片类的多个健康数据,无法预先设置对应的视频,因此需要医师端依据图片中异常部分进行对应的讲解,所以会基于相应的关联指标得到录制的录制视频作为下层指示视频。
与步骤S310的原理相似。
在上述实施例的基础上,通过以下步骤得到录制视频,包括步骤A1-A3:
A1,调取与所述主动处理文件尺寸相同的透明图层叠加在所述主动处理文件的上方。
需要说明的是,由于心电、CT等图片类健康数据,一般而言,会出现部分异常,因此,本发明会依据医师对主动处理文件中异常的选中操作,生成对用户展示的文件介绍帧,随后再录制该异常部分的讲解视频进行组合,方便后续用户进行查看时,首先对用户展示的是出现异常的部分,随后播放的则是该部分对应的讲解视频。
因此,本发明会调取与主动处理文件尺寸相同的透明图层叠加在所述主动处理文件的上方。方便后续记录医师对异常部分的触发痕迹。
A2,接收医师端对所述透明图层的触发信息,基于所述触发信息确定医师端的触发痕迹,以及触发时刻。
可以理解的是,服务器会接收医师端对所述透明图层的触发信息,并依据该触发信息确定医师端的触发痕迹,以及触发时刻。
其中,触发痕迹为医师端对透明图层的触发痕迹,触发时刻为医师端触发完毕后对应的时刻。
A3,根据所述触发痕迹对所述主动处理文件进行更新,得到文件介绍帧,并基于所述触发时刻录制医师端的讲解视频,将所述文件介绍帧放置于所述讲解视频的前方,生成录制视频。
可以理解的是,服务器根据触发痕迹对所述主动处理文件进行更新,从而得到文件介绍帧,比如,心电图上叠加有透明图层,接收医师对异常部分的触发信息,从而生成带有触发痕迹选中异常部分的心电图,将该心电图作为文件介绍帧。
进一步的,服务器会从触发时刻后开始录制医师端的讲解视频,并将文件介绍帧放置于所述讲解视频的前方,生成录制视频。使得后续对该主动处理文件内的异常指标进行播放时,首先会对用户展示医师所框选的异常部分,随后则是该异常部分对应的讲解视频。
S4,生成与所述上层指示视频对应的上层关联槽,以及与所述下层指示视频对应的下层关联槽,基于所述上层关联槽和所述下层关联槽生成指示结构图,根据所述指示结构图对所述数据指示区更新后,将所述指示链接反馈至所述用户端。
需要说明的是,由于视频数据直接放置在指示页面中,则会直接进行展示播放,无法按照用户的需求进行选择性的播放,因此,本发明会生成与各指示视频对应的关联槽,后续用户对相应的关联槽进行触发后则会调取相应的视频进行播放。
其中,上层关联槽为与各异常指标相关联的上层的槽位,下层关联槽为与关联指标相关联的下层的槽位。
因此,服务器会生成与上层指示视频对应的上层关联槽,以及与所述下层指示视频对应的下层关联槽。方便后续用户对相应的关联槽位进行触发后调取相应的视频进行展示播放。
不难理解的是,由于下层指示视频是由多个关联的异常指标组合得到对应病症的视频。因此,下层指示视频是与多个异常指标相关联的,也与该异常指标对应的上层指示视频相关联。
因此,本发明会基于上层关联槽和所述下层关联槽生成指示结构图,后续通过指示结构图对所述数据指示区更新后,则各个区域会展示相应的数据,将所述指示链接反馈至所述用户端。
在一些实施例中,步骤S4中的(生成与所述上层指示视频对应的上层关联槽,以及与所述下层指示视频对应的下层关联槽,基于所述上层关联槽和所述下层关联槽生成指示结构图),包括S41-S44:
S41,生成与所述上层指示视频对应的上层关联槽,以及与所述下层指示视频对应的下层关联槽。
可以理解的是,服务器为上层指示视频生成对应的上层关联槽,以及为下层指示视频生成对应的下层关联槽。
S42,将所述关联指标中的异常指标作为相邻指标,并将所述相邻指标对应的上层关联槽作为相邻槽,将其余的上层关联槽作为单独槽。
可以理解的是,会将关联指标中的异常指标作为相邻指标,比如,A、B、C为相邻指标,并将该A、B、C对应的上层关联槽作为相邻槽,将其余的上层关联槽作为单独槽。
S43,将相应所述相邻指标进行位置的相邻设置,将相应所述相邻槽设置在所述相邻指标对应的位置处,基于所述相邻槽构建与相应所述下层关联槽对应的关联结构。
可以理解的是,服务器会将邻指标进行位置的相邻设置,将相应所述相邻槽设置在所述相邻指标对应的位置处,并根据相邻槽构建与相应关联指标对应下层关联槽的关联结构。即,将下层关联槽和相应的上层关联槽位相连接从而生成相应的关联结构。后续方便用户查看,该下层关联槽对应的下层指示视频是与哪些异常指标相关的。
参见图2所示,将A、B、C对应的上层关联槽作为相邻槽,并相邻设置相应的异常指标和相邻槽,将相邻槽与之对应的下层关联槽进行连接生成关联结构。
在一些实施例中,步骤S43中的(基于所述相邻槽构建与相应所述下层关联槽对应的关联结构),包括S431-S438:
S431,获取所述相邻槽的槽位数量,确定所述槽位数量为奇数时,获取位于中间位置的相邻槽作为中间槽位,基于预设设置距离将相应所述下层关联槽设置在所述中间槽位的下方。
可以理解的是,服务器会获取相邻槽的槽位数量,确定所述槽位数量为奇数时,获取位于中间位置的相邻槽作为中间槽位,并在中间槽位的中心点位置的下方的预设设置距离设置相应的下层关联槽。
比如,参见图2,相邻槽为正方形,3个正方形中间的正方向为中间槽位,并获取该中间槽位的中心点,即,正方形的中心点,在该中心点下方的预设设置距离的位置处确定下层关联槽的中心点的设置位置,将该下层关联槽设置在该设置位置处。
S432,获取所述相邻槽下边缘线的中心点作为下边缘线中点,以及所述下层关联槽上边缘线的中心点作为上边缘线中点。
可以理解的是,服务器会获取相邻槽下边缘线的中心点作为下边缘线中点,以及所述下层关联槽上边缘线的中心点作为上边缘线中点。
S433,连接所述下边缘线中点和所述上边缘线中点,生成关联结构。
可以理解的是,服务器会连接下边缘线中点和所述上边缘线中点,生成关联结构,即相应的连接结构,方便后续用户进行观察,确定相应的下层指示视频与哪些异常指标相关。
S434,确定所述槽位数量为偶数时,获取位于中间位置的2个相邻槽作为基准槽位,提取所述基准槽位的槽位中心点,并将所述槽位中心点连线确定连接线段。
可以理解的是,服务器会确定槽位数量为偶数时,获取位于中间位置的2个相邻槽作为基准槽位,提取所述基准槽位的槽位中心点,并将所述槽位中心点连线确定连接线段。比如,中间2个正方形对应的中心点的连线。
S435,获取所述连接线段的线段中点,基于所述线段中点构建垂直于所述连接线段的设置线。
可以理解的是,获取该连接线段的线段中点,基于所述线段中点构建垂直于所述连接线段的设置线。比如,中间2个正方形对应的中心点的连线,在该连线的中间的位置处构建垂直的设置线。方便后续将下层关联槽设置在中间2个基准槽位的中间位置处,后续会将下层关联槽的中心点设置在2个基准槽位的下方且处于设置线上。
S436,基于预设设置距离将相应所述下层关联槽的中心点设置在所述基准槽位下方的所述设置线的位置处。
可以理解的是,服务器会基于预设设置距离将相应所述下层关联槽的中心点设置在所述基准槽位下方的所述设置线的位置处。
S437,获取所述相邻槽下边缘线的中心点作为下边缘线中点,以及所述下层关联槽上边缘线的中心点作为上边缘线中点。
可以理解的是,与步骤S432同理方便后续进行连接。
S438,连接所述下边缘线中点和所述上边缘线中点,生成关联结构。
S44,基于所述单独槽、所述相邻槽、所述关联结构和所述下层关联槽生成指示结构图。
可以理解的是,服务器会将所有的上层关联槽与相应的异常指标相关联连接,可以是通过虚线连接,并将相邻槽位通过关联结构与下层关联槽进行连接,从而得到指示结构图,比如,图2中,A、B、C对应的相邻槽位通过关联结构所连接的下层关联槽,单独槽是独立的则不进行连接,从而得到指示结构图,此处通过服务器进行自动连接。
在上述实施例的基础上,还包括B1:
B1,接收用户端发送的汇总请求,基于所述汇总请求对所述上层指示视频和所述下层指示视频进行汇总处理,生成汇总视频发送至用户端。
可以理解的是,服务器会接收到用户端发送的汇总请求,基于所述汇总请求对所述上层指示视频和所述下层指示视频进行汇总处理,生成汇总视频发送至用户端。即,对所有视频进行汇总发送至用户端进行展示。
在一些实施例中,步骤B1中的(接收用户端发送的汇总请求,基于所述汇总请求对所述上层指示视频和所述下层指示视频进行汇总处理,生成汇总视频发送至用户端)包括B11-B14:
B11,接收用户端发送的汇总请求,基于所述汇总请求调取与所述用户端对应的基本信息,根据所述基本信息构建信息介绍帧。
可以理解的是,服务器会接收用户端发送的汇总请求,基于所述汇总请求调取与所述用户端对应的基本信息,根据所述基本信息构建信息介绍帧,基本信息可以是人员甲、身高、体重等基本信息。依据该基本信息生成与之对应的图像帧,方便后续放在所有视频的最前方,从而使得最先播放的是用户的基本介绍,方便人员了解自身的基本状况。
B12,获取与所述上层指示视频对应的异常指标,基于所述异常指标构建单独指标帧,将所述单独指标帧放置于所述上层指示视频的前方,生成单独指示视频。
可以理解的是,服务器会获取与上层指示视频对应的异常指标,基于所述异常指标构建单独指标帧,比如,红细胞异常,则依据该红细胞异常的指标生成一个图像帧(单独指标帧),用于介绍该异常指标。
进一步的,将单独指标帧放置于相应所述上层指示视频的前方,生成单独指示视频。
后续对人员进行展示时,会优先展示该异常指标随后再展示相应的指示视频。
B13,获取与所述下层指示视频对应的关联指标,基于所述关联指标构建关联指标帧,将所述关联指标帧放置于所述上层指示视频的前方,生成关联指示视频。
可以理解的是,服务器会获取下层指示视频对应的关联指标,基于所述关联指标构建关联指标帧,将所述关联指标帧放置于所述上层指示视频的前方,生成关联指示视频。
不难理解的是,与步骤B12原理相似,先播放指标的介绍图像帧,后续再播放相应的指示视频。
B14,依次将所述信息介绍帧、所述单独指示视频和所述关联指示视频进行拼接汇总处理,生成汇总视频发送至用户端。
可以理解的是,服务器会依次将信息介绍帧、所述单独指示视频和所述关联指示视频进行拼接汇总处理,生成汇总视频发送至用户端。
参见图3,是本发明实施例提供的一种基于多模态的健康信息管理系统的结构示意图,该系统包括:
指示模块,用于接收用户端的指示请求,根据所述指示请求生成指示链接,建立与所述指示链接对应的指示页面,所述指示页面包括正常区、异常区和数据指示区;
展示模块,用于获取所述用户端基于所述指示链接上传的多模态健康数据,对所述多模态健康数据进行指标分析,确定正常指标和/或异常指标,基于所述正常区对所述正常指标进行展示,基于所述异常区对所述异常指标进行展示;
分析模块,用于根据关联表对所述异常指标进行数量递减的关联性分析,确定关联指标和/或单独指标,获取与各所述异常指标对应的上层指示视频,以及与所述关联指标对应的下层指示视频;
生成模块,用于生成与所述上层指示视频对应的上层关联槽,以及与所述下层指示视频对应的下层关联槽,基于所述上层关联槽和所述下层关联槽生成指示结构图,根据所述指示结构图对所述数据指示区更新后,将所述指示链接反馈至所述用户端。
本发明还提供一种可读存储介质,所述可读存储介质中存储有计算机程序,所述计算机程序被处理器执行时用于实现上述的各种实施方式提供的方法。
其中,可读存储介质可以是计算机存储介质,也可以是通信介质。通信介质包括便于从一个地方向另一个地方传送计算机程序的任何介质。计算机存储介质可以是通用或专用计算机能够存取的任何可用介质。例如,可读存储介质耦合至处理器,从而使处理器能够从该可读存储介质读取信息,且可向该可读存储介质写入信息。当然,可读存储介质也可以是处理器的组成部分。处理器和可读存储介质可以位于专用集成电路(ApplicationSpecific Integrated Circuits,简称:ASIC)中。另外,该ASIC可以位于用户设备中。当然,处理器和可读存储介质也可以作为分立组件存在于通信设备中。可读存储介质可以是只读存储器(ROM)、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
本发明还提供一种程序产品,该程序产品包括执行指令,该执行指令存储在可读存储介质中。设备的至少一个处理器可以从可读存储介质读取该执行指令,至少一个处理器执行该执行指令使得设备实施上述的各种实施方式提供的方法。
在上述设备的实施例中,应理解,处理器可以是中央处理单元(英文:CentralProcessing Unit,简称:CPU),还可以是其他通用处理器、数字信号处理器(英文:DigitalSignal Processor,简称:DSP)、专用集成电路(英文:Application Specific IntegratedCircuit,简称:ASIC)等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明所公开的方法的步骤可以直接体现为硬件处理器执行完成,或者用处理器中的硬件及软件模块组合执行完成。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。
Claims (10)
1.一种基于多模态的健康信息管理方法,其特征在于,包括:
接收用户端的指示请求,根据所述指示请求生成指示链接,建立与所述指示链接对应的指示页面,所述指示页面包括正常区、异常区和数据指示区;
获取所述用户端基于所述指示链接上传的多模态健康数据,对所述多模态健康数据进行指标分析,确定正常指标和/或异常指标,基于所述正常区对所述正常指标进行展示,基于所述异常区对所述异常指标进行展示;
根据关联表对所述异常指标进行数量递减的关联性分析,确定关联指标和/或单独指标,获取与各所述异常指标对应的上层指示视频,以及与所述关联指标对应的下层指示视频;
生成与所述上层指示视频对应的上层关联槽,以及与所述下层指示视频对应的下层关联槽,基于所述上层关联槽和所述下层关联槽生成指示结构图,根据所述指示结构图对所述数据指示区更新后,将所述指示链接反馈至所述用户端。
2.根据权利要求1所述的方法,其特征在于,
所述获取所述用户端基于所述指示链接上传的多模态健康数据,对所述多模态健康数据进行指标分析,确定正常指标和/或异常指标,包括:
获取所述用户端基于所述指示链接上传的多模态健康数据,对所述多模态健康数据进行解析,得到多个处理文件,所述处理文件包括自动处理文件和/或主动处理文件,并获取与各所述自动处理文件对应的标准数据区间表;
根据所述标准数据区间表对所述自动处理文件进行数据判断,确定所述自动处理文件对应的多模态健康数据与所述标准数据区间表对应时,将相应所述多模态健康数据对应的指标作为正常指标,确定所述多模态健康数据与所述标准数据区间表不对应时,将相应所述多模态健康数据对应的指标作为异常指标;
将所述主动处理文件发送至相应的医师端,接收所述医师端对所述主动处理文件的反馈信息,根据所述反馈信息确定相应的指标为正常指标或异常指标。
3.根据权利要求2所述的方法,其特征在于,
所述根据关联表对所述异常指标进行数量递减的关联性分析,确定关联指标和/或单独指标,包括:
统计相应所述处理文件对应的所述异常指标得到异常集合,获取所述异常集合中异常指标的异常数量;
若所述异常数量大于1,以1为递减幅度,依次对所述异常数量进行递减处理,在所述异常数量为2时停止,得到数量序列;
获取所述异常集合与所述数量序列中各异常数量对应的多个指标组合,根据所述异常数量对相应的指标组合进行汇聚得到组合集合,并按照所述数量序列对多个所述组合集合进行递减排序,得到集合序列;
将所述集合序列的第一个组合集合中的指标组合,与所述关联表中的预设指标集合进行比对;
在所述关联表中不具有与所述指标组合完全对应的预设指标集合时,将第一个所述组合集合从所述集合序列中删除,对集合序列进行更新;
在所述关联表中具有与所述指标组合完全对应的预设指标集合时,确定相应所述指标组合作为关联指标;
将所述关联指标作为剔除指标,对所述集合序列中包含所述剔除指标的其余指标组合进行剔除处理,并将第一个所述组合集合从所述集合序列中删除,对集合序列进行更新;
重复上述对集合序列进行更新的步骤,直至所述集合序列为空,将所述异常指标中除关联指标以外的指标作为单独指标。
4.根据权利要求3所述的方法,其特征在于,
所述获取与各所述异常指标对应的上层指示视频,以及与所述关联指标对应的下层指示视频,包括:
获取与各所述异常指标对应的处理文件,所述处理文件包括自动处理文件和/或主动处理文件;
基于所述自动处理文件从视频库中调取与相应所述异常指标对应的指示视频作为上层指示视频,所述视频库中包括与所述预设指标集合对应的指示视频;
根据所述主动处理文件获取医师端基于相应所述异常指标录制的录制视频作为上层指示视频;
获取所述关联指标对应的处理文件,所述处理文件包括自动处理文件和/或主动处理文件;
基于所述自动处理文件从视频库中调取与相应所述关联指标对应的指示视频作为下层指示视频;
根据所述主动处理文件获取医师端基于相应所述关联指标录制的录制视频作为下层指示视频。
5.根据权利要求4所述的方法,其特征在于,通过以下步骤得到录制视频,包括:
调取与所述主动处理文件尺寸相同的透明图层叠加在所述主动处理文件的上方;
接收医师端对所述透明图层的触发信息,基于所述触发信息确定医师端的触发痕迹,以及触发时刻;
根据所述触发痕迹对所述主动处理文件进行更新,得到文件介绍帧,并基于所述触发时刻录制医师端的讲解视频,将所述文件介绍帧放置于所述讲解视频的前方,生成录制视频。
6.根据权利要求5所述的方法,其特征在于,
所述生成与所述上层指示视频对应的上层关联槽,以及与所述下层指示视频对应的下层关联槽,基于所述上层关联槽和所述下层关联槽生成指示结构图,包括:
生成与所述上层指示视频对应的上层关联槽,以及与所述下层指示视频对应的下层关联槽;
将所述关联指标中的异常指标作为相邻指标,并将所述相邻指标对应的上层关联槽作为相邻槽,将其余的上层关联槽作为单独槽;
将相应所述相邻指标进行位置的相邻设置,将相应所述相邻槽设置在所述相邻指标对应的位置处,基于所述相邻槽构建与相应所述下层关联槽对应的关联结构;
基于所述单独槽、所述相邻槽、所述关联结构和所述下层关联槽生成指示结构图。
7.根据权利要求6所述的方法,其特征在于,
所述基于所述相邻槽构建与相应所述下层关联槽对应的关联结构,包括:
获取所述相邻槽的槽位数量,确定所述槽位数量为奇数时,获取位于中间位置的相邻槽作为中间槽位,基于预设设置距离将相应所述下层关联槽设置在所述中间槽位的下方;
获取所述相邻槽下边缘线的中心点作为下边缘线中点,以及所述下层关联槽上边缘线的中心点作为上边缘线中点;
连接所述下边缘线中点和所述上边缘线中点,生成关联结构;
确定所述槽位数量为偶数时,获取位于中间位置的2个相邻槽作为基准槽位,提取所述基准槽位的槽位中心点,并将所述槽位中心点连线确定连接线段;
获取所述连接线段的线段中点,基于所述线段中点构建垂直于所述连接线段的设置线;
基于预设设置距离将相应所述下层关联槽的中心点设置在所述基准槽位下方的所述设置线的位置处;
获取所述相邻槽下边缘线的中心点作为下边缘线中点,以及所述下层关联槽上边缘线的中心点作为上边缘线中点;
连接所述下边缘线中点和所述上边缘线中点,生成关联结构。
8.根据权利要求1所述的方法,其特征在于,还包括:
接收用户端发送的汇总请求,基于所述汇总请求对所述上层指示视频和所述下层指示视频进行汇总处理,生成汇总视频发送至用户端。
9.根据权利要求8所述的方法,其特征在于,
所述接收用户端发送的汇总请求,基于所述汇总请求对所述上层指示视频和所述下层指示视频进行汇总处理,生成汇总视频发送至用户端,包括:
接收用户端发送的汇总请求,基于所述汇总请求调取与所述用户端对应的基本信息,根据所述基本信息构建信息介绍帧;
获取与所述上层指示视频对应的异常指标,基于所述异常指标构建单独指标帧,将所述单独指标帧放置于所述上层指示视频的前方,生成单独指示视频;
获取与所述下层指示视频对应的关联指标,基于所述关联指标构建关联指标帧,将所述关联指标帧放置于所述上层指示视频的前方,生成关联指示视频;
依次将所述信息介绍帧、所述单独指示视频和所述关联指示视频进行拼接汇总处理,生成汇总视频发送至用户端。
10.一种基于多模态的健康信息管理系统,其特征在于,包括:
指示模块,用于接收用户端的指示请求,根据所述指示请求生成指示链接,建立与所述指示链接对应的指示页面,所述指示页面包括正常区、异常区和数据指示区;
展示模块,用于获取所述用户端基于所述指示链接上传的多模态健康数据,对所述多模态健康数据进行指标分析,确定正常指标和/或异常指标,基于所述正常区对所述正常指标进行展示,基于所述异常区对所述异常指标进行展示;
分析模块,用于根据关联表对所述异常指标进行数量递减的关联性分析,确定关联指标和/或单独指标,获取与各所述异常指标对应的上层指示视频,以及与所述关联指标对应的下层指示视频;
生成模块,用于生成与所述上层指示视频对应的上层关联槽,以及与所述下层指示视频对应的下层关联槽,基于所述上层关联槽和所述下层关联槽生成指示结构图,根据所述指示结构图对所述数据指示区更新后,将所述指示链接反馈至所述用户端。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410316637.5A CN117912680B (zh) | 2024-03-20 | 2024-03-20 | 基于多模态的健康信息管理方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410316637.5A CN117912680B (zh) | 2024-03-20 | 2024-03-20 | 基于多模态的健康信息管理方法及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN117912680A true CN117912680A (zh) | 2024-04-19 |
CN117912680B CN117912680B (zh) | 2024-05-28 |
Family
ID=90694074
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202410316637.5A Active CN117912680B (zh) | 2024-03-20 | 2024-03-20 | 基于多模态的健康信息管理方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117912680B (zh) |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010057552A (ja) * | 2008-09-01 | 2010-03-18 | Omron Healthcare Co Ltd | 生体指標管理装置 |
WO2018092154A1 (en) * | 2016-11-15 | 2018-05-24 | Tantrottolan Solutions Llp | Methods and systems for monitoring health of a subject. |
CN110349671A (zh) * | 2019-05-24 | 2019-10-18 | 平安科技(深圳)有限公司 | 体检数据处理方法、系统、电子设备及存储介质 |
CN113744863A (zh) * | 2020-05-29 | 2021-12-03 | 京东方科技集团股份有限公司 | 健康数据管理方法、设备及系统 |
CN114360679A (zh) * | 2022-01-07 | 2022-04-15 | 启康保(北京)健康科技有限公司 | 体检报告数字化管理方法及系统 |
CN114694846A (zh) * | 2022-04-01 | 2022-07-01 | 南方医科大学南方医院 | 一种健康数据管理系统 |
CN115329128A (zh) * | 2022-08-16 | 2022-11-11 | 上海铂桐医疗科技有限公司 | 适用于营养管理系统的数据处理方法及装置 |
CN117727468A (zh) * | 2024-02-08 | 2024-03-19 | 广州基医云计算有限公司 | 一种基于云边协同的健康筛查智能分诊系统 |
-
2024
- 2024-03-20 CN CN202410316637.5A patent/CN117912680B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010057552A (ja) * | 2008-09-01 | 2010-03-18 | Omron Healthcare Co Ltd | 生体指標管理装置 |
WO2018092154A1 (en) * | 2016-11-15 | 2018-05-24 | Tantrottolan Solutions Llp | Methods and systems for monitoring health of a subject. |
CN110349671A (zh) * | 2019-05-24 | 2019-10-18 | 平安科技(深圳)有限公司 | 体检数据处理方法、系统、电子设备及存储介质 |
CN113744863A (zh) * | 2020-05-29 | 2021-12-03 | 京东方科技集团股份有限公司 | 健康数据管理方法、设备及系统 |
CN114360679A (zh) * | 2022-01-07 | 2022-04-15 | 启康保(北京)健康科技有限公司 | 体检报告数字化管理方法及系统 |
CN114694846A (zh) * | 2022-04-01 | 2022-07-01 | 南方医科大学南方医院 | 一种健康数据管理系统 |
CN115329128A (zh) * | 2022-08-16 | 2022-11-11 | 上海铂桐医疗科技有限公司 | 适用于营养管理系统的数据处理方法及装置 |
CN117727468A (zh) * | 2024-02-08 | 2024-03-19 | 广州基医云计算有限公司 | 一种基于云边协同的健康筛查智能分诊系统 |
Also Published As
Publication number | Publication date |
---|---|
CN117912680B (zh) | 2024-05-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Campbell et al. | The experience of pay for performance in English family practice: a qualitative study | |
Lubke et al. | Dependence of explicit and implicit memory on hypnotic state in trauma patients | |
Tsien et al. | Poor prognosis for existing monitors in the intensive care unit | |
US20110218822A1 (en) | Remote patient management system adapted for generating a teleconsultation report | |
Novitski et al. | The repeatable battery for the assessment of neuropsychological status effort scale | |
Collins et al. | Workarounds used by nurses to overcome design constraints of electronic health records | |
US20060206359A1 (en) | Method and system for facilitating clinical decisions | |
US20060078867A1 (en) | System supporting acquisition and processing of user entered information | |
Peterfreund et al. | Evaluation of a mandatory quality assurance data capture in anesthesia: a secure electronic system to capture quality assurance information linked to an automated anesthesia record | |
US20120053957A1 (en) | Tool for detecting inconsistencies and omissions in documented justification for medical services | |
US11342077B2 (en) | Medical information processing apparatus and medical information processing method | |
Haller et al. | Integrating incident reporting into an electronic patient record system | |
De Lusignan et al. | End-digit preference in blood pressure recordings of patients with ischaemic heart disease in primary care | |
Edbril et al. | Relationship between malpractice litigation and human errors | |
CN105335606B (zh) | 用于确定临床事件之间的相关性的方法和系统 | |
AU2022231758A1 (en) | Medical care assistance device, and operation method and operation program therefor | |
CN117912680B (zh) | 基于多模态的健康信息管理方法及系统 | |
US9978165B2 (en) | Dynamic presentation of waveform tracings in a central monitor perspective | |
Teh et al. | Effectiveness of an advanced practice nurse–led preoperative telephone assessment | |
Wilbanks et al. | An observational study of the accuracy and completeness of an anesthesia information management system: recommendations for documentation system changes | |
Zeng et al. | Providing multiple views to meet physician information needs | |
Khan et al. | Time spent by intensive care unit nurses on the electronic health record | |
JP2008165680A (ja) | インシデントレポート作成システム | |
JP5049597B2 (ja) | インシデント分析システム及びインシデント分析プログラム | |
Miettinen et al. | Information quality in healthcare: coherence of data compared between organization's electronic patient records |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant |