CN116504382A - 远程医疗监护系统及其方法 - Google Patents

远程医疗监护系统及其方法 Download PDF

Info

Publication number
CN116504382A
CN116504382A CN202310613831.5A CN202310613831A CN116504382A CN 116504382 A CN116504382 A CN 116504382A CN 202310613831 A CN202310613831 A CN 202310613831A CN 116504382 A CN116504382 A CN 116504382A
Authority
CN
China
Prior art keywords
feature
parameter
time sequence
matrix
inter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202310613831.5A
Other languages
English (en)
Other versions
CN116504382B (zh
Inventor
郑栋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Zhisheng Vision Technology Co ltd
Original Assignee
Hangzhou Medical Ruilian Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Medical Ruilian Technology Co ltd filed Critical Hangzhou Medical Ruilian Technology Co ltd
Priority to CN202310613831.5A priority Critical patent/CN116504382B/zh
Publication of CN116504382A publication Critical patent/CN116504382A/zh
Application granted granted Critical
Publication of CN116504382B publication Critical patent/CN116504382B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/0205—Simultaneously evaluating both cardiovascular conditions and different types of body conditions, e.g. heart and respiratory condition
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0004—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by the type of physiological signal transmitted
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0004—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by the type of physiological signal transmitted
    • A61B5/0006—ECG or EEG signals
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0004—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by the type of physiological signal transmitted
    • A61B5/0011—Foetal or obstetric data
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235—Details of waveform analysis
    • A61B5/7264—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G06N3/0464—Convolutional networks [CNN, ConvNet]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G06N3/047—Probabilistic or stochastic networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G06N3/0985—Hyperparameter optimisation; Meta-learning; Learning-to-learn
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/67—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for remote operation
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/30—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/70—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for mining of medical data, e.g. analysing previous cases of other patients
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H80/00—ICT specially adapted for facilitating communication between medical practitioners or patients, e.g. for collaborative diagnosis, therapy or health monitoring
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/021—Measuring pressure in heart or blood vessels
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/14532—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue for measuring glucose, e.g. by tissue impedance measurement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/14542—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue for measuring blood gases
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316—Modalities, i.e. specific diagnostic methods
    • A61B5/318—Heart-related electrical modalities, e.g. electrocardiography [ECG]
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02A—TECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
    • Y02A90/00—Technologies having an indirect contribution to adaptation to climate change
    • Y02A90/10—Information and communication technologies [ICT] supporting adaptation to climate change, e.g. for weather forecasting or climate simulation

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Biomedical Technology (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Theoretical Computer Science (AREA)
  • Pathology (AREA)
  • Biophysics (AREA)
  • Molecular Biology (AREA)
  • Data Mining & Analysis (AREA)
  • Physiology (AREA)
  • Artificial Intelligence (AREA)
  • Animal Behavior & Ethology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Surgery (AREA)
  • Evolutionary Computation (AREA)
  • Mathematical Physics (AREA)
  • Epidemiology (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Primary Health Care (AREA)
  • Computational Linguistics (AREA)
  • Computing Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Software Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Databases & Information Systems (AREA)
  • Cardiology (AREA)
  • Evolutionary Biology (AREA)
  • Reproductive Health (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • General Business, Economics & Management (AREA)
  • Gynecology & Obstetrics (AREA)
  • Signal Processing (AREA)
  • Psychiatry (AREA)

Abstract

一种远程医疗监护系统及其方法，其获取被监测对象在预定时间段内多个预定时间点的体征数据；采用基于深度学习的人工智能技术，进行所述各个体征数据参数之间的时序协同关联特征信息的充分表达，以此来对于目标对象的身体状态进行实时准确地监测，从而提高远程医疗监护的准确性和时效性，为远程医疗提供了更好的技术支持。

Description

远程医疗监护系统及其方法
技术领域
本申请涉及智能化监护技术领域，并且更具体地，涉及一种远程医疗监护系统及其方法。
背景技术
随着社会压力的增大和视频隐患的存在，越来越多的人患有慢性疾病，需要长期监护身体状况的人群只增不减。然而，经常去医院的监护方式较为不便，因此需要远程医疗监控系统来缓解这个问题。但是，现有的医疗健康监测系统存在着监护设备功能单一、信息滞后等问题，导致监护信息不准确。
因此，期望一种优化的远程医疗监护系统，以提高远程医疗监护的准确性和时效性，为远程医疗提供了更好的技术支持。
发明内容
为了解决上述技术问题，提出了本申请。本申请的实施例提供了一种远程医疗监护系统及其方法，其获取被监测对象在预定时间段内多个预定时间点的体征数据；采用基于深度学习的人工智能技术，进行所述各个体征数据参数之间的时序协同关联特征信息的充分表达，以此来对于目标对象的身体状态进行实时准确地监测，从而提高远程医疗监护的准确性和时效性，为远程医疗提供了更好的技术支持。
第一方面，提供了一种远程医疗监护系统，其包括：数据采集模块，用于获取被监测对象在预定时间段内多个预定时间点的体征数据，其中，所述体征数据包括血压参数、血糖参数、血氧参数、胎心参数和心电参数；数据参数全时序排列模块，用于将所述多个预定时间点的体征数据按照时间维度和样本维度排列为全参数全时序输入矩阵；空间注意力特征提取模块，用于将所述全参数全时序输入矩阵通过使用空间注意力机制的卷积神经网络模型以得到参数间时序关联特征矩阵；矩阵切分模块，用于将所述参数间时序关联特征矩阵进行特征矩阵切分以得到多个参数间时序子特征矩阵；全局关联编码模块，用于将所述多个参数间时序子特征矩阵通过包含嵌入层的上下文编码器以得到分类特征向量；以及身体状态检测模块，用于将所述分类特征向量通过分类器以得到分类结果，所述分类结果用于表示被监控对象的身体状态是否异常。
在上述远程医疗监护系统中，所述数据参数全时序排列模块，包括：行向量排列单元，用于将所述多个预定时间点的体征数据分别按照时间维度排列为用全参数输入行向量；以及，二维矩阵化单元，用于将所述全参数输入行向量按照样本维度进行二维排列以得到所述全参数全时序输入矩阵。
在上述远程医疗监护系统中，所述空间注意力特征提取模块，用于：所述使用空间注意力机制的卷积神经网络模型的各层在层的正向传递过程中对输入数据分别进行：对输入数据进行卷积处理以生成卷积特征图；对所述卷积特征图进行池化处理以生成池化特征图；对所述池化特征图进行非线性激活以生成激活特征图；计算所述激活特征图的各个位置沿通道维度的均值以生成空间特征矩阵；计算所述空间特征矩阵中各个位置的类Softmax函数值以获得空间得分矩阵；以及，计算所述空间特征矩阵和所述空间得分矩阵的按位置点乘以获得特征矩阵；其中，所述使用空间注意力机制的卷积神经网络模型的最后一层输出的所述特征矩阵为所述参数间时序关联特征矩阵。
在上述远程医疗监护系统中，所述全局关联编码模块，包括：上下文编码单元，用于将所述多个参数间时序子特征矩阵通过所述包含嵌入层的上下文编码器以得到多个上下文参数间时序子特征向量；矩阵展开单元，用于将所述多个参数间时序子特征矩阵进行矩阵展开以得到多个参数间时序子特征向量；特征优化单元，用于融合所述多个参数间时序子特征向量和所述多个上下文参数间时序子特征向量以得到多个优化上下文参数间时序子特征向量；以及，级联单元，用于将所述多个优化上下文参数间时序子特征向量进行级联以得到所述分类特征向量。
在上述远程医疗监护系统中，所述上下文编码单元，包括：矩阵展开子单元，用于将所述多个参数间时序子特征矩阵展开为多个参数间时序子特征向量；向量构造子单元，用于将所述多个参数间时序子特征向量进行一维排列以得到参数间全局特征向量；自注意子单元，用于计算所述参数间全局特征向量与所述多个参数间时序子特征向量中各个参数间时序子特征向量的转置向量之间的乘积以得到多个自注意力关联矩阵；标准化子单元，用于分别对所述多个自注意力关联矩阵中各个自注意力关联矩阵进行标准化处理以得到多个标准化后自注意力关联矩阵；关注度计算子单元，用于将所述多个标准化后自注意力关联矩阵中各个标准化后自注意力关联矩阵通过Softmax分类函数以得到多个概率值；以及，注意力施加子单元，用于分别以所述多个概率值中各个概率值作为权重对所述多个参数间时序子特征向量中各个参数间时序子特征向量进行加权以得到所述多个上下文参数间时序子特征向量。
在上述远程医疗监护系统中，所述特征优化单元，用于：以如下优化公式对所述参数间时序子特征向量和对应的所述上下文参数间时序子特征向量进行局部序列语义的片段式富化融合以得到所述优化上下文参数间时序子特征向量；其中，所述优化公式为：，其中，/>是所述参数间时序子特征向量， 是所述上下文参数间时序子特征向量，/>是所述上下文参数间时序子特征向量的转置向量，/> 为所述参数间时序子特征向量和所述上下文参数间时序子特征向量之间的距离矩阵，/>和/>均为列向量，且 /> 是权重超参数，/>表示向量乘法，/> 表示向量加法，/>是所述优化上下文参数间时序子特征向量。
在上述远程医疗监护系统中，所述身体状态检测模块，包括：全连接编码单元，用于使用所述分类器的多个全连接层对所述分类特征向量进行全连接编码以得到编码分类特征向量；以及，分类单元，用于将所述编码分类特征向量通过所述分类器的Softmax分类函数以得到所述分类结果。
第二方面，提供了一种远程医疗监护方法，其包括：获取被监测对象在预定时间段内多个预定时间点的体征数据，其中，所述体征数据包括血压参数、血糖参数、血氧参数、胎心参数和心电参数；将所述多个预定时间点的体征数据按照时间维度和样本维度排列为全参数全时序输入矩阵；将所述全参数全时序输入矩阵通过使用空间注意力机制的卷积神经网络模型以得到参数间时序关联特征矩阵；将所述参数间时序关联特征矩阵进行特征矩阵切分以得到多个参数间时序子特征矩阵；将所述多个参数间时序子特征矩阵通过包含嵌入层的上下文编码器以得到分类特征向量；以及将所述分类特征向量通过分类器以得到分类结果，所述分类结果用于表示被监控对象的身体状态是否异常。
在上述远程医疗监护方法中，将所述多个预定时间点的体征数据按照时间维度和样本维度排列为全参数全时序输入矩阵，包括：将所述多个预定时间点的体征数据分别按照时间维度排列为用全参数输入行向量；以及，将所述全参数输入行向量按照样本维度进行二维排列以得到所述全参数全时序输入矩阵。
在上述远程医疗监护方法中，将所述全参数全时序输入矩阵通过使用空间注意力机制的卷积神经网络模型以得到参数间时序关联特征矩阵，包括：所述使用空间注意力机制的卷积神经网络模型的各层在层的正向传递过程中对输入数据分别进行：对输入数据进行卷积处理以生成卷积特征图；对所述卷积特征图进行池化处理以生成池化特征图；对所述池化特征图进行非线性激活以生成激活特征图；计算所述激活特征图的各个位置沿通道维度的均值以生成空间特征矩阵；计算所述空间特征矩阵中各个位置的类Softmax函数值以获得空间得分矩阵；以及，计算所述空间特征矩阵和所述空间得分矩阵的按位置点乘以获得特征矩阵；其中，所述使用空间注意力机制的卷积神经网络模型的最后一层输出的所述特征矩阵为所述参数间时序关联特征矩阵。
与现有技术相比，本申请提供的远程医疗监护系统及其方法，其获取被监测对象在预定时间段内多个预定时间点的体征数据；采用基于深度学习的人工智能技术，进行所述各个体征数据参数之间的时序协同关联特征信息的充分表达，以此来对于目标对象的身体状态进行实时准确地监测，从而提高远程医疗监护的准确性和时效性，为远程医疗提供了更好的技术支持。
附图说明
为了更清楚地说明本申请实施例的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为根据本申请实施例的远程医疗监护系统的应用场景图。
图2为根据本申请实施例的远程医疗监护系统的框图。
图3为根据本申请实施例的远程医疗监护系统中所述数据参数全时序排列模块的框图。
图4为根据本申请实施例的远程医疗监护系统中所述全局关联编码模块的框图。
图5为根据本申请实施例的远程医疗监护系统中所述上下文编码单元的框图。
图6为根据本申请实施例的远程医疗监护系统中所述身体状态检测模块的框图。
图7为根据本申请实施例的远程医疗监护方法的流程图。
图8为根据本申请实施例的远程医疗监护方法的系统架构的示意图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
除非另有说明，本申请实施例所使用的所有技术和科学术语与本申请的技术领域的技术人员通常理解的含义相同。本申请中所使用的术语只是为了描述具体的实施例的目的，不是旨在限制本申请的范围。
在本申请实施例记载中，需要说明的是，除非另有说明和限定，术语“连接”应做广义理解，例如，可以是电连接，也可以是两个元件内部的连通，可以是直接相连，也可以通过中间媒介间接相连，对于本领域的普通技术人员而言，可以根据具体情况理解上述术语的具体含义。
需要说明的是，本申请实施例所涉及的术语“第一\第二\第三”仅仅是是区别类似的对象，不代表针对对象的特定排序，可以理解地，“第一\第二\第三”在允许的情况下可以互换特定的顺序或先后次序。应该理解“第一\第二\第三”区分的对象在适当情况下可以互换，以使这里描述的本申请的实施例可以除了在这里图示或描述的那些以外的顺序实施。
如上所述，现有的医疗健康监测系统存在着监护设备功能单一、信息滞后等问题，导致监护信息不准确。因此，期望一种优化的远程医疗监护系统，以提高远程医疗监护的准确性和时效性，为远程医疗提供了更好的技术支持。
相应地，考虑到在实际进行远程医疗监护的过程中，为了提高远程医疗监护系统的准确性和时效性，关键在于对于目标对象的体征数据进行及时准确地分析，从而判断目标对象的身体状态是否正常。但是，由于目标对象的体征数据都在时间维度上有着各自的动态变化规律性，并且各个体征数据参数，例如血压参数、血糖参数、血氧参数、胎心参数和心电参数之间还存在着时序协同关联特征，同时所述各个体征数据参数之间的时序关联性不同，且这种关联特征为小尺度的隐含关联特征信息，难以通过传统的特征提取方式进行充分捕捉。因此，在此过程中，难点在于如何进行所述各个体征数据参数之间的时序协同关联特征信息的充分表达，以此来对于目标对象的身体状态进行实时准确地监测，从而提高远程医疗监护的准确性和时效性，为远程医疗提供了更好的技术支持。
近年来，深度学习以及神经网络已经广泛应用于计算机视觉、自然语言处理、文本信号处理等领域。深度学习以及神经网络的发展为挖掘所述各个体征数据参数之间的时序协同关联特征信息提供了新的解决思路和方案。
具体地，在本申请的技术方案中，首先，获取被监测对象在预定时间段内多个预定时间点的体征数据，其中，所述体征数据包括血压参数、血糖参数、血氧参数、胎心参数和心电参数。接着，考虑到由于所述被监测对象的体征数据中的各个数据参数不仅都在时间维度上有着各自的动态变化特征，而且所述体征数据中的各个数据参数之间还具有着时序的协同关联关系。因此，为了能够捕捉刻画出所述各个数据参数之间的隐含关联特征，以此来进行所述被监测对象的身体状态检测评估，在本申请的技术方案中，进一步将所述多个预定时间点的体征数据按照时间维度和样本维度排列为全参数全时序输入矩阵，以此来整合所述体征数据中的各个数据参数在时间维度和样本维度上的分布信息。
然后，使用在局部隐含关联特征提取方案具有优异表现的卷积神经网络模型来进行所述全参数全时序输入矩阵的特征挖掘，以此来提取出所述体征数据中的各个数据参数之间的时序关联特征信息。特别地，考虑到由于所述各个数据参数之间在不同的时间跨度下和不同的参数类型跨度下呈现出不同的关联特性。为了能够捕捉到特定时间跨度和参数类型跨度下的时序关联特征信息，以此来准确地进行被监控对象的身体状态分析，在本申请的技术方案中，将所述全参数全时序输入矩阵通过使用空间注意力机制的卷积神经网络模型，以提取出所述全参数全时序输入矩阵中聚焦于空间位置上的关于所述体征数据中各个数据参数的时序协同关联特征信息，从而得到参数间时序关联特征矩阵。
进一步地，还考虑到由于所述体征数据中各个数据参数之间的时序协同关联特征为小尺度的隐性关联特征信息，并且由于卷积运算的固有局限性，纯CNN的方法很难学习明确的全局和远程语义信息交互。为了能够捕捉到所述各个数据参数之间的局部时序关联基于全局的时序协同关联特征信息，在本申请的技术方案中，进一步将所述参数间时序关联特征矩阵进行特征矩阵切分以得到多个参数间时序子特征矩阵后，将所述多个参数间时序子特征矩阵通过包含嵌入层的上下文编码器中进行编码，以提取出所述体征数据中各个数据参数之间的局部关联特征基于全局的时序协同关联特征信息，从而得到分类特征向量。
接着，进一步将所述分类特征向量通过分类器中进行分类处理，以得到用于表示被监控对象的身体状态是否异常的分类结果。也就是，在本申请的技术方案中，所述分类器的标签包括被监控对象的身体状态异常(第一标签)，以及，被监控对象的身体状态正常(第二标签)，其中，所述分类器通过软最大值函数来确定所述分类特征向量属于哪个分类标签。值得注意的是，这里的所述第一标签p1和所述第二标签p2并不包含人为设定的概念，实际上在训练过程当中，计算机模型并没有“被监控对象的身体状态是否异常”这种概念，其只是有两种分类标签且输出特征在这两个分类标签下的概率，即p1和p2 之和为一。因此，被监控对象的身体状态是否异常的分类结果实际上是通过分类标签转化为符合自然规律的二分类的类概率分布，实质上用到的是标签的自然概率分布的物理意义，而不是“被监控对象的身体状态是否异常”的语言文本意义。应可以理解，在本申请的技术方案中，所述分类器的分类标签为被监控对象的身体状态是否异常的检测评估标签，因此，在得到所述分类结果后，可基于所述分类结果来对于目标对象的身体状态进行监测，从而提高远程医疗监护的准确性和时效性。
特别地，在本申请的技术方案中，所述参数间时序关联特征矩阵表达体征数据的时序-样本间局部关联特征，而通过将所述参数间时序关联特征矩阵进行特征矩阵切分得到的所述多个参数间时序子特征矩阵通过包含嵌入层的上下文编码器，得到的多个上下文参数间时序子特征向量可以表达参数间时序关联特征的各个局部分布之间的全局上下文分布。因此，为了充分利用体征数据的时序-样本间局部关联特征和全局关联特征，优选地通过融合所述参数间时序子特征矩阵展开后得到的参数间时序子特征向量及其对应的上下文参数间时序子特征向量来优化所述上下文参数间时序子特征向量，从而提升所述上下文参数间时序子特征向量的表达效果。
进一步地，考虑到所述参数间时序子特征向量对于体征数据的时序-样本间的局部特征表达，因此期望提升所述参数间时序子特征向量及其对应的上下文参数间时序子特征向量之间的基于小粒度局部序列分布的融合效果。
基于此，本申请的申请人对所述参数间时序子特征向量，例如记为及其对应的上下文参数间时序子特征向量，例如记为/>进行局部序列语义的片段式富化融合，以获得优化的上下文参数间时序子特征向量，例如记为/>，具体表示为：，/>为特征向量/>和特征向量之间的距离矩阵，即/> ，/>和/>均为列向量，且/>是权重超参数。
这里，所述局部序列语义的片段式富化融合基于序列的片段特征分布对序列的预定分布方向上的方向性语义的编码效果，来以序列片段之间的相似性嵌入作为用于序列间关联的重加权因数，从而对序列之间在各个片段级别（patch-level）的基于特征表象（feature appearance）的相似性进行捕获，实现了所述参数间时序子特征向量及其对应的上下文参数间时序子特征向量的局部片段级语义的富化式融合，从而提升了所述上下文参数间时序子特征向量的表达效果，也就提升了所述上下文参数间时序子特征向量级联得到的所述分类特征向量的表达效果。这样，能够对于目标对象的身体状态进行实时准确地监测，从而提高远程医疗监护的准确性和时效性，为远程医疗提供了更好的技术支持。
图1为根据本申请实施例的远程医疗监护系统的应用场景图。如图1所示，在该应用场景中，首先，获取被监测对象（例如，如图1中所示意的M）在预定时间段内多个预定时间点的体征数据（例如，如图1中所示意的C），其中，所述体征数据包括血压参数、血糖参数、血氧参数、胎心参数和心电参数；然后，将获取的体征数据输入至部署有远程医疗监护算法的服务器（例如，如图1中所示意的S）中，其中所述服务器能够基于远程医疗监护算法对所述体征数据进行处理，以生成用于表示被监控对象的身体状态是否异常的分类结果。
在介绍了本申请的基本原理之后，下面将参考附图来具体介绍本申请的各种非限制性实施例。
在本申请的一个实施例中，图2为根据本申请实施例的远程医疗监护系统的框图。如图2所示，根据本申请实施例的远程医疗监护系统100，包括：数据采集模块110，用于获取被监测对象在预定时间段内多个预定时间点的体征数据，其中，所述体征数据包括血压参数、血糖参数、血氧参数、胎心参数和心电参数；数据参数全时序排列模块120，用于将所述多个预定时间点的体征数据按照时间维度和样本维度排列为全参数全时序输入矩阵；空间注意力特征提取模块130，用于将所述全参数全时序输入矩阵通过使用空间注意力机制的卷积神经网络模型以得到参数间时序关联特征矩阵；矩阵切分模块140，用于将所述参数间时序关联特征矩阵进行特征矩阵切分以得到多个参数间时序子特征矩阵；全局关联编码模块150，用于将所述多个参数间时序子特征矩阵通过包含嵌入层的上下文编码器以得到分类特征向量；以及，身体状态检测模块160，用于将所述分类特征向量通过分类器以得到分类结果，所述分类结果用于表示被监控对象的身体状态是否异常。
具体地，在本申请实施例中，所述数据采集模块110，用于获取被监测对象在预定时间段内多个预定时间点的体征数据，其中，所述体征数据包括血压参数、血糖参数、血氧参数、胎心参数和心电参数。如上所述，现有的医疗健康监测系统存在着监护设备功能单一、信息滞后等问题，导致监护信息不准确。因此，期望一种优化的远程医疗监护系统，以提高远程医疗监护的准确性和时效性，为远程医疗提供了更好的技术支持。
相应地，考虑到在实际进行远程医疗监护的过程中，为了提高远程医疗监护系统的准确性和时效性，关键在于对于目标对象的体征数据进行及时准确地分析，从而判断目标对象的身体状态是否正常。但是，由于目标对象的体征数据都在时间维度上有着各自的动态变化规律性，并且各个体征数据参数，例如血压参数、血糖参数、血氧参数、胎心参数和心电参数之间还存在着时序协同关联特征，同时所述各个体征数据参数之间的时序关联性不同，且这种关联特征为小尺度的隐含关联特征信息，难以通过传统的特征提取方式进行充分捕捉。因此，在此过程中，难点在于如何进行所述各个体征数据参数之间的时序协同关联特征信息的充分表达，以此来对于目标对象的身体状态进行实时准确地监测，从而提高远程医疗监护的准确性和时效性，为远程医疗提供了更好的技术支持。
近年来，深度学习以及神经网络已经广泛应用于计算机视觉、自然语言处理、文本信号处理等领域。深度学习以及神经网络的发展为挖掘所述各个体征数据参数之间的时序协同关联特征信息提供了新的解决思路和方案。
具体地，在本申请的技术方案中，首先，获取被监测对象在预定时间段内多个预定时间点的体征数据，其中，所述体征数据包括血压参数、血糖参数、血氧参数、胎心参数和心电参数。
具体地，在本申请实施例中，所述数据参数全时序排列模块120，用于将所述多个预定时间点的体征数据按照时间维度和样本维度排列为全参数全时序输入矩阵。接着，考虑到由于所述被监测对象的体征数据中的各个数据参数不仅都在时间维度上有着各自的动态变化特征，而且所述体征数据中的各个数据参数之间还具有着时序的协同关联关系。因此，为了能够捕捉刻画出所述各个数据参数之间的隐含关联特征，以此来进行所述被监测对象的身体状态检测评估，在本申请的技术方案中，进一步将所述多个预定时间点的体征数据按照时间维度和样本维度排列为全参数全时序输入矩阵，以此来整合所述体征数据中的各个数据参数在时间维度和样本维度上的分布信息。
图3为根据本申请实施例的远程医疗监护系统中所述数据参数全时序排列模块的框图，如图3所示，所述数据参数全时序排列模块120，包括：行向量排列单元121，用于将所述多个预定时间点的体征数据分别按照时间维度排列为用全参数输入行向量；以及，二维矩阵化单元122，用于将所述全参数输入行向量按照样本维度进行二维排列以得到所述全参数全时序输入矩阵。
具体地，在本申请实施例中，所述空间注意力特征提取模块130，用于将所述全参数全时序输入矩阵通过使用空间注意力机制的卷积神经网络模型以得到参数间时序关联特征矩阵。然后，使用在局部隐含关联特征提取方案具有优异表现的卷积神经网络模型来进行所述全参数全时序输入矩阵的特征挖掘，以此来提取出所述体征数据中的各个数据参数之间的时序关联特征信息。特别地，考虑到由于所述各个数据参数之间在不同的时间跨度下和不同的参数类型跨度下呈现出不同的关联特性。
为了能够捕捉到特定时间跨度和参数类型跨度下的时序关联特征信息，以此来准确地进行被监控对象的身体状态分析，在本申请的技术方案中，将所述全参数全时序输入矩阵通过使用空间注意力机制的卷积神经网络模型，以提取出所述全参数全时序输入矩阵中聚焦于空间位置上的关于所述体征数据中各个数据参数的时序协同关联特征信息，从而得到参数间时序关联特征矩阵。
其中，所述空间注意力特征提取模块130，用于：所述使用空间注意力机制的卷积神经网络模型的各层在层的正向传递过程中对输入数据分别进行：对输入数据进行卷积处理以生成卷积特征图；对所述卷积特征图进行池化处理以生成池化特征图；对所述池化特征图进行非线性激活以生成激活特征图；计算所述激活特征图的各个位置沿通道维度的均值以生成空间特征矩阵；计算所述空间特征矩阵中各个位置的类Softmax函数值以获得空间得分矩阵；以及，计算所述空间特征矩阵和所述空间得分矩阵的按位置点乘以获得特征矩阵；其中，所述使用空间注意力机制的卷积神经网络模型的最后一层输出的所述特征矩阵为所述参数间时序关联特征矩阵。
注意力机制是机器学习中的一种数据处理方法，广泛应用在自然语言处理、图像识别及语音识别等各种不同类型的机器学习任务中。一方面，注意力机制就是希望网络能够自动学出来图片或者文字序列中的需要注意的地方；另一方面，注意力机制通过神经网络的操作生成一个掩码mask, mask上的值的权重。 一般来说，空间注意力机制对于同一像素点不同通道求均值,再经过一些卷积和上采样的运算得到空间特征,空间特征每层的像素点就被赋予不同的权重。
具体地，在本申请实施例中，所述矩阵切分模块140，用于将所述参数间时序关联特征矩阵进行特征矩阵切分以得到多个参数间时序子特征矩阵。进一步地，还考虑到由于所述体征数据中各个数据参数之间的时序协同关联特征为小尺度的隐性关联特征信息，并且由于卷积运算的固有局限性，纯CNN的方法很难学习明确的全局和远程语义信息交互。为了能够捕捉到所述各个数据参数之间的局部时序关联基于全局的时序协同关联特征信息，在本申请的技术方案中，进一步将所述参数间时序关联特征矩阵进行特征矩阵切分以得到多个参数间时序子特征矩阵
具体地，在本申请实施例中，所述全局关联编码模块150，用于将所述多个参数间时序子特征矩阵通过包含嵌入层的上下文编码器以得到分类特征向量。然后，将所述多个参数间时序子特征矩阵通过包含嵌入层的上下文编码器中进行编码，以提取出所述体征数据中各个数据参数之间的局部关联特征基于全局的时序协同关联特征信息，从而得到分类特征向量。
图4为根据本申请实施例的远程医疗监护系统中所述全局关联编码模块的框图，如图4所示，所述全局关联编码模块150，包括：上下文编码单元151，用于将所述多个参数间时序子特征矩阵通过所述包含嵌入层的上下文编码器以得到多个上下文参数间时序子特征向量；矩阵展开单元152，用于将所述多个参数间时序子特征矩阵进行矩阵展开以得到多个参数间时序子特征向量；特征优化单元153，用于融合所述多个参数间时序子特征向量和所述多个上下文参数间时序子特征向量以得到多个优化上下文参数间时序子特征向量；以及，级联单元154，用于将所述多个优化上下文参数间时序子特征向量进行级联以得到所述分类特征向量。
其中，图5为根据本申请实施例的远程医疗监护系统中所述上下文编码单元的框图，如图5所示，所述上下文编码单元151，包括：矩阵展开子单元1511，用于将所述多个参数间时序子特征矩阵展开为多个参数间时序子特征向量；向量构造子单元1512，用于将所述多个参数间时序子特征向量进行一维排列以得到参数间全局特征向量；自注意子单元1513，用于计算所述参数间全局特征向量与所述多个参数间时序子特征向量中各个参数间时序子特征向量的转置向量之间的乘积以得到多个自注意力关联矩阵；标准化子单元1514，用于分别对所述多个自注意力关联矩阵中各个自注意力关联矩阵进行标准化处理以得到多个标准化后自注意力关联矩阵；关注度计算子单元1515，用于将所述多个标准化后自注意力关联矩阵中各个标准化后自注意力关联矩阵通过Softmax分类函数以得到多个概率值；以及，注意力施加子单元1516，用于分别以所述多个概率值中各个概率值作为权重对所述多个参数间时序子特征向量中各个参数间时序子特征向量进行加权以得到所述多个上下文参数间时序子特征向量。
上下文编码器旨在挖掘得到词序列中上下文之间的隐藏模式，可选地，编码器包括：CNN(Convolutional Neural Network，卷积神经网络)、Recursive NN(RecursiveNeural Network，递归神经网络)、语言模型(Language Model)等。基于CNN的方法对于局部特征有比较好的提取效果，但其对于句子中的长程依赖(Long-termDependency)问题效果欠佳，因此基于Bi-LSTM(Long Short- Term Memory，长短期记忆网络)的编码器被广泛使用。Recursive NN把句子当作树状结构而非序列进行处理，从理论上而言具有更强的表示能力，但其存在样本标注难度大、深层易梯度消失、难以并行计算等弱点，因此在实际应用中使用 较少。Transformer是应用广泛的网络结构了，同时具有CNN和RNN的特性，对于全局特征有较好的提取效果，同时相较于RNN(RecurrentNeural Network，循环神经网络)在并行计算上具有一定优势。
特别地，在本申请的技术方案中，所述参数间时序关联特征矩阵表达体征数据的时序-样本间局部关联特征，而通过将所述参数间时序关联特征矩阵进行特征矩阵切分得到的所述多个参数间时序子特征矩阵通过包含嵌入层的上下文编码器，得到的多个上下文参数间时序子特征向量可以表达参数间时序关联特征的各个局部分布之间的全局上下文分布。因此，为了充分利用体征数据的时序-样本间局部关联特征和全局关联特征，优选地通过融合所述参数间时序子特征矩阵展开后得到的参数间时序子特征向量及其对应的上下文参数间时序子特征向量来优化所述上下文参数间时序子特征向量，从而提升所述上下文参数间时序子特征向量的表达效果。
进一步地，考虑到所述参数间时序子特征向量对于体征数据的时序-样本间的局部特征表达，因此期望提升所述参数间时序子特征向量及其对应的上下文参数间时序子特征向量之间的基于小粒度局部序列分布的融合效果。
基于此，本申请的申请人对所述参数间时序子特征向量，例如记为及其对应的上下文参数间时序子特征向量，例如记为/>进行局部序列语义的片段式富化融合，以获得优化的上下文参数间时序子特征向量，例如记为/>，具体表示为：以如下优化公式对所述参数间时序子特征向量和对应的所述上下文参数间时序子特征向量进行局部序列语义的片段式富化融合以得到所述优化上下文参数间时序子特征向量；其中，所述优化公式为：/>，其中，/>是所述参数间时序子特征向量，/> 是所述上下文参数间时序子特征向量，/>是所述上下文参数间时序子特征向量的转置向量，/> 为所述参数间时序子特征向量和所述上下文参数间时序子特征向量之间的距离矩阵，/>和/>均为列向量，且 /> 是权重超参数，/>表示向量乘法，/> 表示向量加法，/>是所述优化上下文参数间时序子特征向量。
这里，所述局部序列语义的片段式富化融合基于序列的片段特征分布对序列的预定分布方向上的方向性语义的编码效果，来以序列片段之间的相似性嵌入作为用于序列间关联的重加权因数，从而对序列之间在各个片段级别（patch-level）的基于特征表象（feature appearance）的相似性进行捕获，实现了所述参数间时序子特征向量及其对应的上下文参数间时序子特征向量的局部片段级语义的富化式融合，从而提升了所述上下文参数间时序子特征向量的表达效果，也就提升了所述上下文参数间时序子特征向量级联得到的所述分类特征向量的表达效果。这样，能够对于目标对象的身体状态进行实时准确地监测，从而提高远程医疗监护的准确性和时效性，为远程医疗提供了更好的技术支持。
具体地，在本申请实施例中，所述身体状态检测模块160，用于将所述分类特征向量通过分类器以得到分类结果，所述分类结果用于表示被监控对象的身体状态是否异常。接着，进一步将所述分类特征向量通过分类器中进行分类处理，以得到用于表示被监控对象的身体状态是否异常的分类结果。也就是，在本申请的技术方案中，所述分类器的标签包括被监控对象的身体状态异常(第一标签)，以及，被监控对象的身体状态正常(第二标签)，其中，所述分类器通过软最大值函数来确定所述分类特征向量属于哪个分类标签。
值得注意的是，这里的所述第一标签p1和所述第二标签p2并不包含人为设定的概念，实际上在训练过程当中，计算机模型并没有“被监控对象的身体状态是否异常”这种概念，其只是有两种分类标签且输出特征在这两个分类标签下的概率，即p1和p2 之和为一。因此，被监控对象的身体状态是否异常的分类结果实际上是通过分类标签转化为符合自然规律的二分类的类概率分布，实质上用到的是标签的自然概率分布的物理意义，而不是“被监控对象的身体状态是否异常”的语言文本意义。应可以理解，在本申请的技术方案中，所述分类器的分类标签为被监控对象的身体状态是否异常的检测评估标签，因此，在得到所述分类结果后，可基于所述分类结果来对于目标对象的身体状态进行监测，从而提高远程医疗监护的准确性和时效性。
图6为根据本申请实施例的远程医疗监护系统中所述身体状态检测模块的框图，如图6所示，所述身体状态检测模块160，包括：全连接编码单元161，用于使用所述分类器的多个全连接层对所述分类特征向量进行全连接编码以得到编码分类特征向量；以及，分类单元162，用于将所述编码分类特征向量通过所述分类器的Softmax分类函数以得到所述分类结果。
综上，基于本申请实施例的远程医疗监护系统100被阐明，其获取被监测对象在预定时间段内多个预定时间点的体征数据；采用基于深度学习的人工智能技术，进行所述各个体征数据参数之间的时序协同关联特征信息的充分表达，以此来对于目标对象的身体状态进行实时准确地监测，从而提高远程医疗监护的准确性和时效性，为远程医疗提供了更好的技术支持。
如上所述，根据本申请实施例的远程医疗监护系统100可以实现在各种终端设备中，例如用于远程医疗监护的服务器等。在一个示例中，根据本申请实施例的远程医疗监护系统100可以作为一个软件模块和/或硬件模块而集成到终端设备中。例如，该远程医疗监护系统100可以是该终端设备的操作系统中的一个软件模块，或者可以是针对于该终端设备所开发的一个应用程序；当然，该远程医疗监护系统100同样可以是该终端设备的众多硬件模块之一。
替换地，在另一示例中，该远程医疗监护系统100与该终端设备也可以是分立的设备，并且该远程医疗监护系统100可以通过有线和/或无线网络连接到该终端设备，并且按照约定的数据格式来传输交互信息。
在本申请的一个实施例中，图7为根据本申请实施例的远程医疗监护方法的流程图。如图7所示，根据本申请实施例的远程医疗监护方法，其包括：210，获取被监测对象在预定时间段内多个预定时间点的体征数据，其中，所述体征数据包括血压参数、血糖参数、血氧参数、胎心参数和心电参数；220，将所述多个预定时间点的体征数据按照时间维度和样本维度排列为全参数全时序输入矩阵；230，将所述全参数全时序输入矩阵通过使用空间注意力机制的卷积神经网络模型以得到参数间时序关联特征矩阵；240，将所述参数间时序关联特征矩阵进行特征矩阵切分以得到多个参数间时序子特征矩阵；250，将所述多个参数间时序子特征矩阵通过包含嵌入层的上下文编码器以得到分类特征向量；以及，260，将所述分类特征向量通过分类器以得到分类结果，所述分类结果用于表示被监控对象的身体状态是否异常。
图8为根据本申请实施例的远程医疗监护方法的系统架构的示意图。如图8所示，在所述远程医疗监护方法的系统架构中，首先，获取被监测对象在预定时间段内多个预定时间点的体征数据，其中，所述体征数据包括血压参数、血糖参数、血氧参数、胎心参数和心电参数；然后，将所述多个预定时间点的体征数据按照时间维度和样本维度排列为全参数全时序输入矩阵；接着，将所述全参数全时序输入矩阵通过使用空间注意力机制的卷积神经网络模型以得到参数间时序关联特征矩阵；然后，将所述参数间时序关联特征矩阵进行特征矩阵切分以得到多个参数间时序子特征矩阵；接着，将所述多个参数间时序子特征矩阵通过包含嵌入层的上下文编码器以得到分类特征向量；以及，最后，将所述分类特征向量通过分类器以得到分类结果，所述分类结果用于表示被监控对象的身体状态是否异常。
在一个具体示例中，在上述远程医疗监护方法中，将所述多个预定时间点的体征数据按照时间维度和样本维度排列为全参数全时序输入矩阵，包括：将所述多个预定时间点的体征数据分别按照时间维度排列为用全参数输入行向量；以及，将所述全参数输入行向量按照样本维度进行二维排列以得到所述全参数全时序输入矩阵。
在一个具体示例中，在上述远程医疗监护方法中，将所述全参数全时序输入矩阵通过使用空间注意力机制的卷积神经网络模型以得到参数间时序关联特征矩阵，包括：所述使用空间注意力机制的卷积神经网络模型的各层在层的正向传递过程中对输入数据分别进行：对输入数据进行卷积处理以生成卷积特征图；对所述卷积特征图进行池化处理以生成池化特征图；对所述池化特征图进行非线性激活以生成激活特征图；计算所述激活特征图的各个位置沿通道维度的均值以生成空间特征矩阵；计算所述空间特征矩阵中各个位置的类Softmax函数值以获得空间得分矩阵；以及，计算所述空间特征矩阵和所述空间得分矩阵的按位置点乘以获得特征矩阵；其中，所述使用空间注意力机制的卷积神经网络模型的最后一层输出的所述特征矩阵为所述参数间时序关联特征矩阵。
在一个具体示例中，在上述远程医疗监护方法中，将所述多个参数间时序子特征矩阵通过包含嵌入层的上下文编码器以得到分类特征向量，包括：将所述多个参数间时序子特征矩阵通过所述包含嵌入层的上下文编码器以得到多个上下文参数间时序子特征向量；将所述多个参数间时序子特征矩阵进行矩阵展开以得到多个参数间时序子特征向量；融合所述多个参数间时序子特征向量和所述多个上下文参数间时序子特征向量以得到多个优化上下文参数间时序子特征向量；以及，将所述多个优化上下文参数间时序子特征向量进行级联以得到所述分类特征向量。
在一个具体示例中，在上述远程医疗监护方法中，将所述多个参数间时序子特征矩阵通过所述包含嵌入层的上下文编码器以得到多个上下文参数间时序子特征向量，包括：将所述多个参数间时序子特征矩阵展开为多个参数间时序子特征向量；将所述多个参数间时序子特征向量进行一维排列以得到参数间全局特征向量；计算所述参数间全局特征向量与所述多个参数间时序子特征向量中各个参数间时序子特征向量的转置向量之间的乘积以得到多个自注意力关联矩阵；分别对所述多个自注意力关联矩阵中各个自注意力关联矩阵进行标准化处理以得到多个标准化后自注意力关联矩阵；将所述多个标准化后自注意力关联矩阵中各个标准化后自注意力关联矩阵通过Softmax分类函数以得到多个概率值；以及，分别以所述多个概率值中各个概率值作为权重对所述多个参数间时序子特征向量中各个参数间时序子特征向量进行加权以得到所述多个上下文参数间时序子特征向量。
在一个具体示例中，在上述远程医疗监护方法中，融合所述多个参数间时序子特征向量和所述多个上下文参数间时序子特征向量以得到多个优化上下文参数间时序子特征向量，包括：以如下优化公式对所述参数间时序子特征向量和对应的所述上下文参数间时序子特征向量进行局部序列语义的片段式富化融合以得到所述优化上下文参数间时序子特征向量；其中，所述优化公式为：，其中，是所述参数间时序子特征向量，/> 是所述上下文参数间时序子特征向量，/>是所述上下文参数间时序子特征向量的转置向量，/> 为所述参数间时序子特征向量和所述上下文参数间时序子特征向量之间的距离矩阵，/>和/>均为列向量，且 是权重超参数，/>表示向量乘法，/> 表示向量加法，/>是所述优化上下文参数间时序子特征向量。
在一个具体示例中，在上述远程医疗监护方法中，将所述分类特征向量通过分类器以得到分类结果，所述分类结果用于表示被监控对象的身体状态是否异常，包括：使用所述分类器的多个全连接层对所述分类特征向量进行全连接编码以得到编码分类特征向量；以及，将所述编码分类特征向量通过所述分类器的Softmax分类函数以得到所述分类结果。
本领域技术人员可以理解，上述远程医疗监护方法中的各个步骤的具体操作已经在上面参考图1到图6的远程医疗监护系统的描述中得到了详细介绍，并因此，将省略其重复描述。
本申请还提供了一种计算机程序产品，所述计算机程序产品包括指令，当所述指令被执行时，以使得装置执行对应于上述方法中的操作。
在本申请的一个实施例中，还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有执行上述所述方法的计算机程序。
应可以理解，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等) 上实施的计算机程序产品的形式。
本申请实施例的方法、系统、和计算机程序产品的流程图和/或框图来描述的。应理解可由计算机程序指令实现流程图和/或框图中的每一流程和/或方框、以及流程图和/或框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或框图一个方框或多个方框中指定的功能的步骤。
以上结合具体实施例描述了本申请的基本原理，但是，需要指出的是，在本申请中提及的优点、优势、效果等仅是示例而非限制，不能认为这些优点、优势、效果等是本申请的各个实施例必须具备的。另外，上述公开的具体细节仅是为了示例的作用和便于理解的作用，而非限制，上述细节并不限制本申请为必须采用上述具体的细节来实现。
本申请中涉及的器件、装置、设备、系统的方框图仅作为例示性的例子并且不意图要求或暗示必须按照方框图示出的方式进行连接、布置、配置。如本领域技术人员将认识到的，可以按任意方式连接、布置、配置这些器件、装置、设备、系统。诸如“包括”、“包含”、“具有”等等的词语是开放性词汇，指“包括但不限于”，且可与其互换使用。这里所使用的词汇“或”和“和”指词汇“和/或”，且可与其互换使用，除非上下文明确指示不是如此。这里所使用的词汇“诸如”指词组“诸如但不限于”，且可与其互换使用。
还需要指出的是，在本申请的装置、设备和方法中，各部件或各步骤是可以分解和/或重新组合的。这些分解和/或重新组合应视为本申请的等效方案。
提供所公开的方面的以上描述以使本领域的任何技术人员能够做出或者使用本申请。对这些方面的各种修改对于本领域技术人员而言是非常显而易见的，并且在此定义的一般原理可以应用于其他方面而不脱离本申请的范围。因此，本申请不意图被限制到在此示出的方面，而是按照与在此公开的原理和新颖的特征一致的最宽范围。
最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。
为了例示和描述的目的已经给出了以上描述。此外，此描述不意图将本申请的实施例限制到在此公开的形式。尽管以上已经讨论了多个示例方面和实施例，但是本领域技术人员将认识到其某些变型、修改、改变、添加和子组合。

Claims (10)

1.一种远程医疗监护系统，其特征在于，包括：数据采集模块，用于获取被监测对象在预定时间段内多个预定时间点的体征数据，其中，所述体征数据包括血压参数、血糖参数、血氧参数、胎心参数和心电参数；数据参数全时序排列模块，用于将所述多个预定时间点的体征数据按照时间维度和样本维度排列为全参数全时序输入矩阵；空间注意力特征提取模块，用于将所述全参数全时序输入矩阵通过使用空间注意力机制的卷积神经网络模型以得到参数间时序关联特征矩阵；矩阵切分模块，用于将所述参数间时序关联特征矩阵进行特征矩阵切分以得到多个参数间时序子特征矩阵；全局关联编码模块，用于将所述多个参数间时序子特征矩阵通过包含嵌入层的上下文编码器以得到分类特征向量；以及身体状态检测模块，用于将所述分类特征向量通过分类器以得到分类结果，所述分类结果用于表示被监控对象的身体状态是否异常。
2.根据权利要求1所述的远程医疗监护系统，其特征在于，所述数据参数全时序排列模块，包括：行向量排列单元，用于将所述多个预定时间点的体征数据分别按照时间维度排列为用全参数输入行向量；以及二维矩阵化单元，用于将所述全参数输入行向量按照样本维度进行二维排列以得到所述全参数全时序输入矩阵。
3.根据权利要求2所述的远程医疗监护系统，其特征在于，所述空间注意力特征提取模块，用于：所述使用空间注意力机制的卷积神经网络模型的各层在层的正向传递过程中对输入数据分别进行：对输入数据进行卷积处理以生成卷积特征图；对所述卷积特征图进行池化处理以生成池化特征图；对所述池化特征图进行非线性激活以生成激活特征图；计算所述激活特征图的各个位置沿通道维度的均值以生成空间特征矩阵；计算所述空间特征矩阵中各个位置的类Softmax函数值以获得空间得分矩阵；以及计算所述空间特征矩阵和所述空间得分矩阵的按位置点乘以获得特征矩阵；其中，所述使用空间注意力机制的卷积神经网络模型的最后一层输出的所述特征矩阵为所述参数间时序关联特征矩阵。
4.根据权利要求3所述的远程医疗监护系统，其特征在于，所述全局关联编码模块，包括：上下文编码单元，用于将所述多个参数间时序子特征矩阵通过所述包含嵌入层的上下文编码器以得到多个上下文参数间时序子特征向量；矩阵展开单元，用于将所述多个参数间时序子特征矩阵进行矩阵展开以得到多个参数间时序子特征向量；特征优化单元，用于融合所述多个参数间时序子特征向量和所述多个上下文参数间时序子特征向量以得到多个优化上下文参数间时序子特征向量；以及级联单元，用于将所述多个优化上下文参数间时序子特征向量进行级联以得到所述分类特征向量。
5.根据权利要求4所述的远程医疗监护系统，其特征在于，所述上下文编码单元，包括：矩阵展开子单元，用于将所述多个参数间时序子特征矩阵展开为多个参数间时序子特征向量；向量构造子单元，用于将所述多个参数间时序子特征向量进行一维排列以得到参数间全局特征向量；自注意子单元，用于计算所述参数间全局特征向量与所述多个参数间时序子特征向量中各个参数间时序子特征向量的转置向量之间的乘积以得到多个自注意力关联矩阵；标准化子单元，用于分别对所述多个自注意力关联矩阵中各个自注意力关联矩阵进行标准化处理以得到多个标准化后自注意力关联矩阵；关注度计算子单元，用于将所述多个标准化后自注意力关联矩阵中各个标准化后自注意力关联矩阵通过Softmax分类函数以得到多个概率值；以及注意力施加子单元，用于分别以所述多个概率值中各个概率值作为权重对所述多个参数间时序子特征向量中各个参数间时序子特征向量进行加权以得到所述多个上下文参数间时序子特征向量。
6.根据权利要求5所述的远程医疗监护系统，其特征在于，所述特征优化单元，用于：以如下优化公式对所述参数间时序子特征向量和对应的所述上下文参数间时序子特征向量进行局部序列语义的片段式富化融合以得到所述优化上下文参数间时序子特征向量；其中，所述优化公式为：，其中，/>是所述参数间时序子特征向量，/> 是所述上下文参数间时序子特征向量，/>是所述上下文参数间时序子特征向量的转置向量，/> 为所述参数间时序子特征向量和所述上下文参数间时序子特征向量之间的距离矩阵，/>和/>均为列向量，且 /> 是权重超参数，/>表示向量乘法，/> 表示向量加法，/>是所述优化上下文参数间时序子特征向量。
7.根据权利要求6所述的远程医疗监护系统，其特征在于，所述身体状态检测模块，包括：全连接编码单元，用于使用所述分类器的多个全连接层对所述分类特征向量进行全连接编码以得到编码分类特征向量；以及分类单元，用于将所述编码分类特征向量通过所述分类器的Softmax分类函数以得到所述分类结果。
8.一种远程医疗监护方法，其特征在于，包括：获取被监测对象在预定时间段内多个预定时间点的体征数据，其中，所述体征数据包括血压参数、血糖参数、血氧参数、胎心参数和心电参数；将所述多个预定时间点的体征数据按照时间维度和样本维度排列为全参数全时序输入矩阵；将所述全参数全时序输入矩阵通过使用空间注意力机制的卷积神经网络模型以得到参数间时序关联特征矩阵；将所述参数间时序关联特征矩阵进行特征矩阵切分以得到多个参数间时序子特征矩阵；将所述多个参数间时序子特征矩阵通过包含嵌入层的上下文编码器以得到分类特征向量；以及将所述分类特征向量通过分类器以得到分类结果，所述分类结果用于表示被监控对象的身体状态是否异常。
9.根据权利要求8所述的远程医疗监护方法，其特征在于，将所述多个预定时间点的体征数据按照时间维度和样本维度排列为全参数全时序输入矩阵，包括：将所述多个预定时间点的体征数据分别按照时间维度排列为用全参数输入行向量；以及将所述全参数输入行向量按照样本维度进行二维排列以得到所述全参数全时序输入矩阵。
10.根据权利要求9所述的远程医疗监护方法，其特征在于，将所述全参数全时序输入矩阵通过使用空间注意力机制的卷积神经网络模型以得到参数间时序关联特征矩阵，包括：所述使用空间注意力机制的卷积神经网络模型的各层在层的正向传递过程中对输入数据分别进行：对输入数据进行卷积处理以生成卷积特征图；对所述卷积特征图进行池化处理以生成池化特征图；对所述池化特征图进行非线性激活以生成激活特征图；计算所述激活特征图的各个位置沿通道维度的均值以生成空间特征矩阵；计算所述空间特征矩阵中各个位置的类Softmax函数值以获得空间得分矩阵；以及计算所述空间特征矩阵和所述空间得分矩阵的按位置点乘以获得特征矩阵；其中，所述使用空间注意力机制的卷积神经网络模型的最后一层输出的所述特征矩阵为所述参数间时序关联特征矩阵。
CN202310613831.5A 2023-05-29 2023-05-29 远程医疗监护系统及其方法 Active CN116504382B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310613831.5A CN116504382B (zh) 2023-05-29 2023-05-29 远程医疗监护系统及其方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310613831.5A CN116504382B (zh) 2023-05-29 2023-05-29 远程医疗监护系统及其方法

Publications (2)

Publication Number Publication Date
CN116504382A true CN116504382A (zh) 2023-07-28
CN116504382B CN116504382B (zh) 2023-11-24

Family

ID=87330393

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310613831.5A Active CN116504382B (zh) 2023-05-29 2023-05-29 远程医疗监护系统及其方法

Country Status (1)

Country Link
CN (1) CN116504382B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116649159A (zh) * 2023-08-01 2023-08-29 江苏慧岸信息科技有限公司 一种食用菌生长参数寻优的系统和方法
CN116680557A (zh) * 2023-08-03 2023-09-01 山东省地质矿产勘查开发局第八地质大队(山东省第八地质矿产勘查院) 用于煤层气钻井工程的实时监测系统及其方法
CN116832385A (zh) * 2023-08-04 2023-10-03 贝滨（广东）科技有限公司 一种基于物联网的消防栓用水监控系统
CN117438024A (zh) * 2023-12-15 2024-01-23 吉林大学 急诊病人体征数据的智能采集分析系统及方法
CN117710166A (zh) * 2024-02-06 2024-03-15 吉林大学 用于小儿神经护理的教学指导检测系统及方法
CN118098599A (zh) * 2024-04-22 2024-05-28 吉林大学 用于高危孕产妇的孕期监测管理系统及方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108511086A (zh) * 2018-04-13 2018-09-07 广州红象医疗科技有限公司 医疗监护方法和系统、计算机存储介质及设备
CN109727669A (zh) * 2018-11-13 2019-05-07 合肥数翼信息科技有限公司 一种中风患者监护系统和方法
CN113673244A (zh) * 2021-01-04 2021-11-19 腾讯科技（深圳）有限公司 医疗文本处理方法、装置、计算机设备和存储介质
CN115116592A (zh) * 2022-07-28 2022-09-27 天津市天津医院 医院综合信息管理系统及其管理方法
CN115222987A (zh) * 2022-07-13 2022-10-21 吉林大学 一种基于多尺度注意力网络和心冲击图的疾病分类方法
CN115547466A (zh) * 2022-09-05 2022-12-30 西安启玥华辰软件咨询开发有限公司 基于大数据的医疗机构登记评审系统及其方法
US20230060039A1 (en) * 2019-10-03 2023-02-23 Rom Technologies, Inc. Method and system for using sensors to optimize a user treatment plan in a telemedicine environment
CN115910340A (zh) * 2022-11-29 2023-04-04 广东中大讯通信息有限公司 基于深度学习的健康管理方法与系统

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108511086A (zh) * 2018-04-13 2018-09-07 广州红象医疗科技有限公司 医疗监护方法和系统、计算机存储介质及设备
CN109727669A (zh) * 2018-11-13 2019-05-07 合肥数翼信息科技有限公司 一种中风患者监护系统和方法
US20230060039A1 (en) * 2019-10-03 2023-02-23 Rom Technologies, Inc. Method and system for using sensors to optimize a user treatment plan in a telemedicine environment
CN113673244A (zh) * 2021-01-04 2021-11-19 腾讯科技（深圳）有限公司 医疗文本处理方法、装置、计算机设备和存储介质
CN115222987A (zh) * 2022-07-13 2022-10-21 吉林大学 一种基于多尺度注意力网络和心冲击图的疾病分类方法
CN115116592A (zh) * 2022-07-28 2022-09-27 天津市天津医院 医院综合信息管理系统及其管理方法
CN115547466A (zh) * 2022-09-05 2022-12-30 西安启玥华辰软件咨询开发有限公司 基于大数据的医疗机构登记评审系统及其方法
CN115910340A (zh) * 2022-11-29 2023-04-04 广东中大讯通信息有限公司 基于深度学习的健康管理方法与系统

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116649159A (zh) * 2023-08-01 2023-08-29 江苏慧岸信息科技有限公司 一种食用菌生长参数寻优的系统和方法
CN116649159B (zh) * 2023-08-01 2023-11-07 江苏慧岸信息科技有限公司 一种食用菌生长参数寻优的系统和方法
CN116680557A (zh) * 2023-08-03 2023-09-01 山东省地质矿产勘查开发局第八地质大队(山东省第八地质矿产勘查院) 用于煤层气钻井工程的实时监测系统及其方法
CN116680557B (zh) * 2023-08-03 2023-10-27 山东省地质矿产勘查开发局第八地质大队(山东省第八地质矿产勘查院) 用于煤层气钻井工程的实时监测系统及其方法
CN116832385A (zh) * 2023-08-04 2023-10-03 贝滨（广东）科技有限公司 一种基于物联网的消防栓用水监控系统
CN117438024A (zh) * 2023-12-15 2024-01-23 吉林大学 急诊病人体征数据的智能采集分析系统及方法
CN117438024B (zh) * 2023-12-15 2024-03-08 吉林大学 急诊病人体征数据的智能采集分析系统及方法
CN117710166A (zh) * 2024-02-06 2024-03-15 吉林大学 用于小儿神经护理的教学指导检测系统及方法
CN118098599A (zh) * 2024-04-22 2024-05-28 吉林大学 用于高危孕产妇的孕期监测管理系统及方法

Also Published As

Publication number Publication date
CN116504382B (zh) 2023-11-24

Similar Documents

Publication Publication Date Title
CN116504382B (zh) 远程医疗监护系统及其方法
Niu et al. Video-based remote physiological measurement via cross-verified feature disentangling
Ahishali et al. Advance warning methodologies for covid-19 using chest x-ray images
CN113365147B (zh) 基于音乐卡点的视频剪辑方法、装置、设备及存储介质
CN116168352B (zh) 基于图像处理的电网障碍物识别处理方法及系统
Wang et al. Sequential weakly labeled multiactivity localization and recognition on wearable sensors using recurrent attention networks
CN116092701B (zh) 基于健康数据分析管理平台的控制系统及其方法
CN117158923A (zh) 基于元宇宙的居家养老远程监控方法
Abdellaoui et al. Human Action Recognition in Video Sequences Using Deep Belief Networks.
Xu et al. Intelligent emotion detection method based on deep learning in medical and health data
CN107291845A (zh) 一种基于预告片的电影推荐方法及系统
CN116486308A (zh) 基于智慧教育的教学管理系统及其方法
CN115951883B (zh) 分布式微服务架构的服务组件管理系统及其方法
CN116310565A (zh) 尿频尿急的中药制作方法及装置
CN112801009B (zh) 基于双流网络的面部情感识别方法、装置、介质及设备
CN114896434B (zh) 一种基于中心相似度学习的哈希码生成方法及装置
CN116503785A (zh) 游泳馆监管系统及其方法
CN116543351A (zh) 一种基于时空串并联关系编码的自监督群体行为识别方法
CN116758397A (zh) 基于深度学习的单模态诱导的多模态预训练方法及系统
CN112216379A (zh) 一种基于智能联合学习的疾病诊断系统
Rafiq et al. Real-time vision-based bangla sign language detection using convolutional neural network
CN110738129B (zh) 一种基于r-c3d网络的端到端视频时序行为检测方法
CN113516058B (zh) 直播视频群组异常活动检测方法、装置、电子设备及介质
CN117612071B (zh) 一种基于迁移学习的视频动作识别方法
CN116393188B (zh) 适用于循环肿瘤细胞捕捉的微流控芯片及其方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20231031

Address after: Room 4874, Building 3, No. 3, Xijing Road, Badachu High tech Park, Shijingshan District, Beijing 100041

Applicant after: Beijing Zhisheng Vision Technology Co.,Ltd.

Address before: 311100 Room 109-B, Building 23, No. 1399, Liangmu Road, Cangqian Street, Yuhang District, Hangzhou City, Zhejiang Province

Applicant before: Hangzhou medical Ruilian Technology Co.,Ltd.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant