CN112820366A - 数据处理方法、装置、系统、设备和存储介质 - Google Patents

数据处理方法、装置、系统、设备和存储介质 Download PDF

Info

Publication number
CN112820366A
CN112820366A CN202011538950.1A CN202011538950A CN112820366A CN 112820366 A CN112820366 A CN 112820366A CN 202011538950 A CN202011538950 A CN 202011538950A CN 112820366 A CN112820366 A CN 112820366A
Authority
CN
China
Prior art keywords
data
internet
things
target
preset rule
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011538950.1A
Other languages
English (en)
Inventor
王洪亮
李龙飞
刘欣欣
田福臣
王同波
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BOE Technology Group Co Ltd
Original Assignee
BOE Technology Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BOE Technology Group Co Ltd filed Critical BOE Technology Group Co Ltd
Priority to CN202011538950.1A priority Critical patent/CN112820366A/zh
Publication of CN112820366A publication Critical patent/CN112820366A/zh
Priority to US17/357,942 priority patent/US20220197888A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G16H10/60ICT specially adapted for the handling or processing of patient-related medical or healthcare data for patient-specific data, e.g. for electronic patient records
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16YINFORMATION AND COMMUNICATION TECHNOLOGY SPECIALLY ADAPTED FOR THE INTERNET OF THINGS [IoT]
    • G16Y20/00Information sensed or collected by the things
    • G16Y20/40Information sensed or collected by the things relating to personal data, e.g. biometric data, records or preferences
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23Updating
    • G06F16/2308Concurrency control
    • G06F16/2315Optimistic concurrency control
    • G06F16/2322Optimistic concurrency control using timestamps
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23Updating
    • G06F16/2358Change logging, detection, and notification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23Updating
    • G06F16/2365Ensuring data consistency and integrity
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28Databases characterised by their database models, e.g. relational or object models
    • G06F16/284Relational databases
    • G06F16/288Entity relationship models
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16YINFORMATION AND COMMUNICATION TECHNOLOGY SPECIALLY ADAPTED FOR THE INTERNET OF THINGS [IoT]
    • G16Y40/00IoT characterised by the purpose of the information processing
    • G16Y40/50Safety; Security of things, users, data or systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Computing Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Epidemiology (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Primary Health Care (AREA)
  • Public Health (AREA)
  • Information Transfer Between Computers (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本申请公开了数据处理方法、装置、系统、设备和存储介质,该方法包括:接收物联网终端装置上报的物联网数据;根据业务系统发送的预设规则,确定所述物联网数据中的目标物联网数据,所述预设规则是指示针对所述物联网数据进行存储处理的条件;将所述目标物联网数据存储至与所述预设规则对应的存储位置,从而有效实现数据存储系统在多业务系统中复用,有效降低数据存储系统和业务系统的成本,同时,有效避免业务系统对应的数据成为孤岛数据。

Description

数据处理方法、装置、系统、设备和存储介质
技术领域
本公开一般涉及物联网技术领域,具体涉及物联网数据处理技术, 尤其涉及一种数据处理方法、装置、系统、设备和存储介质。
背景技术
目前企业的APP(application,应用程序)产品、物联网类的业务 系统、健康管理系统等产生的基础数据分别单独存储,如果将这些基 础数据统一存在数据管理平台,对于健康医疗类数据来说,会存在隐 私安全问题。
发明内容
鉴于现有技术中的上述缺陷或不足,期望提供一种数据处理方法、 装置、系统、设备和存储介质。
第一方面,本发明的数据处理方法,包括:接收物联网终端装置 上报的物联网数据;根据业务系统发送的预设规则,确定所述物联网 数据中的目标物联网数据,所述预设规则是指示针对所述物联网数据 进行存储处理的条件;将所述目标物联网数据存储至与所述预设规则 对应的存储位置。
在一些实施例中,根据业务系统发送的预设规则,确定所述物联 网数据中的目标物联网数据,包括:
解析所述预设规则,得到所述预设规则对应的内容;
根据所述预设规则对应的内容,确定所述物联网数据中的目标物 联网数据。
在一些实施例中,所述预设规则对应的内容包括目标设备标识符 和绑定时间参数,则根据所述预设规则对应的内容,确定所述物联网 数据中的目标物联网数据,包括:
获取所述物联网数据包含的上报设备标识符和设备上传数据时 间;
在所述上报设备标识符与所述目标设备标识符一致时,根据所述 设备上传数据时间与所述绑定时间参数的关系对所述物联网数据进行 筛选处理,得到所述目标物联网数据。
在一些实施例中,所述预设规则对应的内容包括目标设备标识符、 绑定时间参数、用户属性标识和分析对象条件,则根据所述预设规则 对应的内容,确定所述物联网数据中的目标物联网数据,包括:
解析所述预设规则得到所述用户属性标识,所述用户属性标识用 于指示是否针对与所述目标设备标识符对应的物联网数据进行数据分 析;
在所述用户属性标识指示对所述目标设备标识符对应的物联网数 据进行数据分析时,根据所述分析对象条件、所述目标设备标识符和 所述绑定时间参数对所述物联网数据进行分析处理,得到分析处理结 果;
确定所述分析处理结果为所述目标物联网数据。
在一些实施例中,所述根据所述分析对象范围、所述目标设备标 识符和所述绑定时间参数对所述物联网数据进行分析处理,包括:
获取所述物联网数据包含的上报设备标识符和设备上传数据时 间;
在所述上报设备标识符与所述目标设备标识符一致,且所述设备 上传数据时间在所述绑定时间参数内时,根据所述分析对象范围对所 述物联网数据进行筛选处理,得到筛选结果;
针对所述筛选结果进行分析处理,得到分析处理结果。
在一些实施例中,所述将所述目标物联网数据存储至与所述预设 规则对应的存储位置,包括:
根据所述预设规则分配与所述预设规则对应的存储位置;
将所述目标物联网数据进行数据预处理,得到预处理后的结果;
将预处理结果存储至与所述预设规则对应的存储位置。
在一些实施例中,根据与所述预设规则对应的存储位置推送所述 目标物联网数据至所述业务系统。
在一些实施例中,该方法还包括:接收所述业务系统发送上报的 物联网数据;根据业务系统发送的预设规则,确定所述物联网数据中 的目标物联网数据;将所述目标物联网数据存储至与所述预设规则对 应的存储位置;根据与所述预设规则对应的存储位置推送所述目标物 联网数据至所述业务系统。
在一些实施例中,所述业务系统为至少两个,所述预设规则对应 的内容包括目标设备标识符和绑定时间参数和分析对象条件,则根据 所述预设规则对应的内容,确定所述物联网数据中的目标物联网数据, 包括:获取所述物联网数据包含的上报设备标识符和设备上传数据时 间;在所述上报设备标识符分别与至少两个业务系统上报的所述目标 设备标识符一致时,对所述物联网数据进行分析处理,得到分析处理 结果;确定所述分析处理结果为所述目标物联网数据。
第二方面,本发明的数据处理方法,包括:获取目标存储条件, 所述目标存储条件包括目标设备标识符和绑定时间参数;
根据所述目标存储条件生成预设规则,所述预设规则是指示针对 所述物联网数据进行存储处理的条件;
发送所述预设规则至数据存储系统。
在一些实施例中,所述目标存储条件还包括目标用户参数和分析 对象范围,则根据所述目标存储条件生成预设规则包括:
根据所述目标用户参数和所述绑定时间参数生成用户属性标识, 所述用户属性标识用于指示是否针对与目标设备标识符对应的物联网 数据进行数据分析;
根据所述目标属性标识、所述绑定时间参数、所述目标设备标识 符和所述分析对象范围生成所述预设规则。
第三方面,本发明的数据处理装置,包括:物联网数据接收单元, 用于接收物联网终端装置上报的物联网数据;
目标数据确定单元,用于根据业务系统发送的预设规则,确定所 述物联网数据中的目标物联网数据,所述预设规则是指示针对所述物 联网数据进行存储处理的条件;
存储单元,用于将所述目标物联网数据存储至与所述预设规则对 应的存储位置。
第四方面,本发明的数据处理装置,包括:存储条件获取单元, 用于获取目标存储条件,所述目标存储条件包括目标设备标识符和绑 定时间参数;
规则生成单元,用于根据所述目标存储条件生成预设规则,所述 预设规则是指示针对所述物联网数据进行存储处理的条件;
规则发送单元,用于发送所述预设规则至数据存储系统。
第五方面,本发明的数据处理系统,包括:
数据湖存储分析系统和至少一个业务系统,所述数据湖存储分析 系统包括第三方面所述的数据存储装置,所述数据湖存储分析系统用 于存储物联网终端装置上传的物联网数据;
所述业务系统包括如第四方面所述的数据存储装置,所述业务系 统用于存储与所述物联网终端装置存在绑定关系的用户数据。
第六方面,计算机设备,包括存储器、处理器及存储在存储器上 并可在处理器上运行的计算机程序,所述处理器执行所述程序时,实 现第一方面所述的数据处理方法或第二方面所述的数据处理方法。
第七方面,计算机可读存储介质,其上存储有计算机程序,其特 征在于,该程序被处理器执行时实现第一方面所述的数据处理方法或 第二方面所述的数据处理方法。
本申请的数据存储系统能够接收多业务系统的预设规则,并根据 多业务系统的预设规则将目标物联网数据存储至与预设规则个对应的 存储位置,从而有效实现数据存储系统在多业务系统中复用,有效降 低数据存储系统和业务系统的成本,同时,有效避免业务系统对应的 数据成为孤岛数据。
应当理解,本部分所描述的内容并非旨在标识本公开的实施例 的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征 将通过以下的说明书而变得容易理解。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描 述,本申请的其它特征、目的和优点将会变得更明显:
图1a为本申请实施例的一种应用场景图;
图1b为本申请实施例的另一种应用场景图;
图1c为本申请实施例的又一种应用场景图;
图2为本申请实施例的一种数据处理方法的流程图;
图3为本申请实施例的一种数据处理方法的原理示意图;
图4为本申请实施例的另一种数据处理方法的流程图;
图5为本申请实施例的另一种数据处理方法的原理示意图;
图6为本申请实施例的又一种数据处理方法的流程图;
图7为本申请实施例的又一种数据处理方法的信令交互图;
图8为本申请实施例的再一种数据处理方法的流程图;
图9为本申请实施例的再一种数据处理方法的流程图;
图10为本申请一个具体实施例的流程图;
图11为本申请另一个具体实施例的原理示意图;
图12为本申请实施例的另一种数据处理方法的流程图;
图13为本申请实施例的又一种数据处理方法的数据交互图;
图14为本申请实施例的再一种数据处理方法的数据交互图;
图15为本申请实施例的再一种数据处理方法的数据交互图;
图16为本申请实施例的再一种数据处理方法的原理图;
图17为本申请实施例的再一种数据处理方法中数据湖的结构示 意图;
图18为本申请实施例的一种数据处理装置的结构示意图;
图19为本申请实施例的一种数据处理装置的结构示意图;
图20为本申请实施例的一种数据处理系统的结构示意图;
图21为适于用来实现本申请实施例的计算机设备或服务器的计算 机系统的结构示意图。
具体实施方式
下面结合附图和实施例对本申请作进一步的详细说明。可以理解 的是,此处所描述的具体实施例仅仅用于解释相关发明,而非对该发 明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与 发明相关的部分。
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例 中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本 申请。
请参考图1a-图1c,图1a-图1c为本申请实施例提供的应用场景 示意图。如图1a-图1c所示,图1a和图1b分别从数据存储系统与接 入设备和业务系统的不同视角展示了三者之间的关系。图1c从数据存 储系统提供的数据处理功能展开描述。
如图1a所示,设备、数据存储系统和业务系统依次连接,设备为 健康检测装置,例如血压计、血糖仪、智能心贴、体脂称、肺功能仪、 睡眠仪、体温检测设备、母乳分析仪等,设备通过例如直连设备、设 备厂商云对接、网关和业务系统等接口与数据存储系统相连,以将采 集到的用户健康数据发送至数据存储系统中,数据存储系统为IoT (Internet ofThings,物联网)数据湖,数据存储系统中配置有厂家管 理、设备管理、产品管理、安全鉴权、数据标准化、数据存储、数据 转化、设备联动等多个功能模块,以对设备发送的数据进行存储、整 合、标准化和处理等,例如,通过安全鉴权确定进行数据上报的设备 为可接收物联网数据的设备,在对设备上传的数据利用数据标准化模 块进行数据处理,然后利用数据存储模块进行存储,或者利用数据转 发模块发送至业务系统。
应当理解的是数据存储系统构建了一个基础数据的生态系统,通 过搭建多源异构数据一站式开发平台,支持数据仓库、交互查询、运 营分析、数据可视化、搜索推荐、实时分析、预测分析等大数据存储、 计算与分析功能,实现企业经营中数治理与服务的全局性打通。具体 地,如图1c所示,数据湖中集成有微服务框架、AI平台、大数据计 算功能、安全&监控模块、多源异构数据整合模块、混合云存储、数 据处理模块等,数据湖外侧连接社区商超例如智慧社区、健康驿站、 C端&家庭例如移动健康、居家物联网、B端类健康管理例如医共体、VIP健康管理、智慧公卫例如智慧体检、智慧随访,单病种医单体例 如糖尿病、高血压、COPD(chronic obstructive pulmonary disease,慢 性阻塞性肺疾病),线上营销等。其中,对于不同来源的数据,不管从 任何渠道传输到数据湖的数据,只要手机号或身份证号一致,数据湖 后台就应该把这些数据对应到一个用户上,然后根据具体的业务系统 来推送相关的需要的数据。
业务系统为与用户进行数据交互的平台系统,例如企业APP、健 康管理系统、健康驿站、智慧社区、健康管理、智慧公卫等。业务系 统接收数据后,可各自独立处理数据、推送消息等。
应当理解的是,数据存储系统中的数据还可为公益平台提供数据 支持,例如医院信息系统、公卫信息系统、区域卫生信息平台等。
图2为本申请实施例的一种数据处理方法的流程图。其中,需要 说明的是,本实施例的数据处理方法的执行主体为数据处理装置,数 据处理装置可以由软件和/或硬件的方式实现,该实施例中的数据处理 装置可以配置在服务器中,该服务器为数据存储系统,例如IoT数据 湖。
如图2和3所示,本申请实施例的数据处理方法,包括以下步骤:
步骤101,接收物联网终端装置上报的物联网数据。
需要说明的是,物联网终端装置包括医疗数据采集设备,例如血 压计、血糖仪等。物联网数据至少包括物联网终端装置采集的用户健 康数据。其中,物联网终端装置通常存储有数据存储系统的网络地址, 在物联网终端装置检测到用户健康数据后,根据用户健康数据生成物 联网数据,然后按照数据存储系统的网络地址,将物联网数据上报至 数据存储系统。
应当理解的是,本申请实施例中定的物联网终端装置为用户在业 务系统注册时绑定的物联网终端装置。
步骤102,根据业务系统发送的预设规则,确定物联网数据中的 目标物联网数据,预设规则是指示针对物联网数据进行存储处理的条 件。
需要说明的是,业务系统为与用户进行数据交互的平台系统,例 如企业APP、健康管理系统等。业务系统可根据业务类型分为血压系 统、血糖系统等,也可根据企业进行划分,因此,各业务系统基于自 身的特性生成指示针对物联网数据进行存储处理的条件的预设规则, 然后业务系统将预设规则发送至数据存储系统,以使数据存储系统根 据业务系统发送的预设规则,确定物联网数据中的目标物联网数据。 其中,目标物联网数据可为物联网终端装置采集的用户健康数据或对 用户健康数据分析后的分析结果。
需要说明的是,如图17所示,数据存储系统包括多个功能模块, 其中基础配置模块,用于配置产品类型、管理指标、业务系统管理信 息、配置信息和字典数据等。其中设备接入子模块,适配有多种快速 接入方案,包括常见网络环境和常见传输协议,如HTTP、Socket、 MQTT等,可适应于多种物联网终端装置和业务系统进行数据交互, 例如,接收物联网终端装置发送的物联网数据和业务系统发送的预设 规则等。其中,数据存储系统的地址可烧录在物联网终端装置中。
应当理解的是,数据存储系统仅能够接收已与数据存储系统建立 通信连接的物联网数据或预设规则,且物联网终端装置与业务系统也 只有在与数据存储系统建立联系后才能够接收到数据存储系统发送的 数据。对于已经与数据存储系统建立通信的物联网终端装置,数据存 储系统还能够提供相应的设备管理服务,例如对物联网终端装置的设备生命周期进行管理等。其中,一个物联网终端装置可以关联多个业 务系统,针对各业务系统,一个物联网终端装置只能关联一个机构, 一个物联网终端装置可以关联不同用户。
还应当说明的是,部分自身不具有与数据存储系统进行无线通信 的物联网终端装置,还可先利用蓝牙、局域网络等通信方式将检测到 的物联网数据发送至装载有业务系统的用户终端中,例如智能手机等, 再由业务系统将物联网终端装置检测的物联网数据发送至数据存储系 统。
如图17所示,数据存储系统还可以包括数据处理模块,该数据处 理模块又可以细分为数据接收子模块、数据转换子模块、数据分发子 模块和数据存储子模块等。其中数据接收子模块用于接收硬件设备传 输的数据或业务系统同步过来的数据。数据转换子模块用于对接收到 的数据进行预处理和数据标准化处理等。数据标准化处理是指将设备 数据中有用的信息提取出来,处理成统一格式的数据。例如统一成结 构化数据,存储至关系型数据库中,然后可以通过SQL语句查询和提 取。
数据分发子模块,用于提供给业务系统分发数据的能力。例如在 数据存储系统与业务系统之间可以支持以下几种分发方式:
a)通过消息中间件MQ(Message Queue)通讯;
b)通过HTTP/HTTPS直接传输;
c)通过HTTP/HTTPS RSA签名加密传输;
d)Token方式。
如图17所示,数据存储系统还可以包括数据分析模块,数据分析 模块可以通过云计算、大数据分析、人工智能算法模型等方式对数据 上进行分析,包括但不限于实时分析、预测分析等方式获取分析结果。
在本申请实施例中,至少一个物联网终端装置只需配置有数据存 储系统的网络地址即可将物联网数据发送至数据存储系统,以使数据 存储系统能够同时存储至少一个物联网终端装置上报的物联网数据, 同理,至少一个业务系统也只需配置有数据存储系统的网络地址即可 将预设规则发送至数据存储系统,以使数据存储系统能够按照预设规 则对接收到的物联网数据进行存储。
步骤103,将目标物联网数据存储至预设规则对应的存储位置。
需要说明的时,数据存储系统具有分布式存储结构,即,可按照 业务系统发送的预设规则对目标物联网数据进行分布式存储。
应当理解的是,当一个物联网终端装置上传的物联网数据符合多 个业务系统发送的预设规则时,数据存储系统可分别根据每个预设规 则对物联网数据进行存储。
由此,本申请的数据存储系统能够接收多业务系统的预设规则, 并根据多业务系统的预设规则将目标物联网数据存储至与预设规则个 对应的存储位置,从而有效实现数据存储系统在多业务系统中复用, 有效降低数据存储系统和业务系统的成本,同时,有效避免业务系统 对应的数据成为孤岛数据。
可选的,由于各物联网终端装置上报的物联网数据通常具有各自 的数据特性,因此,在根据预设规则对物联网数据进行存储处理之前, 还需要对物联网数据进行预处理。
具体地,如图4所示,将目标物联网数据存储至与预设规则对应 的存储位置,包括:
步骤201,根据预设规则分配与预设规则对应的存储位置。
其中,与预设规则对应的存储位置包括但不限于与业务系统一一 对应的存储位置,或者以用户健康数据类型一一对应的存储位置,或 者以健康管理需求一一对应的存储位置。
步骤202,将目标物联网数据进行数据预处理,得到预处理后的 结果。
需要说明的是,因为各物联网终端装置上报的数据类型通常因厂 家等因素存在不同,包括但不限于结构化数据、半结构化数据、非结 构化数据等,因此,为了便于数据存储系统对目标物联网数据的存储 与分析,需要对目标物联网数据进行预处理,以使目标物联网数据的 格式统一。
举例来说,针对用户血压数据,多个不同厂家生产的不同型号的 物联网终端装置,它们之间的数据格式有可能相差很大,例如,物联 网终端装置1上报的物联网数据为普通字符串“N12345H123L78”,其 中,N后的数字“12345”为设备号,H后的数字“123”为收缩压,L 后的数字“78”为舒张压,物联网终端装置2上报的物联网数据为十 六进制字符串“2711 7D 4A”,其中,“2711”为设备号,“7D”为收缩 压,“4A”为舒张压。此时,需要将物联网终端装置1上报的物联网 数据和物联网终端装置2上报的物联网数据进行格式统一,优选的, 可将物联网终端装置2上报的物联网数据转换成普通字符串,转换结 果为:
收缩压 舒张压 设备号 设备绑定时间 设备解绑时间
123 78 12345 2020-01-03-10:22:37 2020-01-03-10:26:45
125 74 10001 2020-04-12-18:28:52 2020-04-12-18:31:03
步骤203,将预处理结果存储至与预设规则对应的存储位置。
由此,本申请能够将物联网终端装置上报的物联网数据进行数据 预处理,以便于数据存储系统对目标物联网数据进行存储和数据分析, 提高数据存储系统的数据处理速度。
进一步地,本申请实施例提出的数据处理方法,如图5所示,还 包括:根据预设规则对应的存储位置推送目标物联网数据至业务系统。
也就是说,本申请实施例提出的数据存储系统还具有将存储的目 标物联网数据进行分发的功能,从而能够满足业务系统对目标物联网 数据的查询、分析需求。
具体地,数据存储系统可采用如下方式向业务系统进行目标物联 网数据的分发:a)通过消息中间件MQ(Message Queue)通讯,b) 通过HTTP/HTTPS直接传输,c)通过HTTP/HTTPS RSA签名加密传 输,d)Token方式,e)API接口等。
应当理解的是,上述数据存储系统向业务系统分发目标物联网数 据的通信方式也可应用于物联网终端装置向数据存储系统上报环节。
进一步地,根据业务系统发送的预设规则,确定物联网数据中的 目标物联网数据,包括:解析预设规则,得到预设规则对应的内容, 根据预设规则对应的内容,确定物联网数据中的目标物联网数据。
需要说明的是,由于健康医疗领域内的数据通常含有隐私数据, 例如,用户的健康情况等。而且,由于业务系统与数据存储系统分开 部署,即,业务系统系企业部署的业务平台,数据存储系统为多个企 业可共享的数据存储平台,业务系统为了对自有用户的隐私进行保密, 通常不会将用户信息共享至数据存储平台,即,物联网终端装置测量 产生的用户健康数据在数据存储系统中与用户信息剥离,实现了对用 户健康数据脱敏存储的目的,即,数据存储系统仅能够对物联网终端 装置发送的物联网数据进行处理分析,而不能对用户信息进行分析。 但是,数据存储系统不仅仅具有对物联网终端装置发送的物联网数据进行存储分发的简单操作,还能够对存储的用户健康数据进行数据可 视化处理、数据融合、数据分析等,因此,本申请提出根据业务系统 发送的预设规则,确定物联网数据中的目标物联网数据。
作为一个可行实施例,预设规则对应的内容包括目标设备标识符 和绑定时间参数。
需要说明的是,预设规则中的目标设备标识符和绑定时间参数可 为用户在业务系统中进行注册和/或登录时使用和/或绑定使用的物联 网终端装置的标识和时间,应当理解的时,绑定时间参数还可包括但 不限于物联网终端装置与业务系统解绑的时间。其中,绑定时间和解 绑时间为用户信息与目标设备标识符之间的绑定开始时间和绑定结束时间。
举例来说,当存在多个用户共用一个物联网中终端装置时,例如 医院的医疗器械,在每次使用之前可在医疗器械预置的业务系统交互 界面中进行用户信息登录,此时,业务系统可获取到与该用户信息对 应的目标设备标识符和绑定开始时间,当前患者使用结束进行用户信 息退出时,则生成解绑时间。
如图6所示,根据预设规则对应的内容,确定物联网数中的目标 物联网数据,包括:
步骤301,获取物联网数据包含的上报设备标识符和设备上传数 据时间。
其中,由于物联网数据是由物联网终端装置进行上报,因此,上 报设备标识符即为用户健康数据采集的物联网终端装置的设备标识 符。设备上传数据时间即为物联网终端装置将采集到的用户健康数据 上报至数据存储系统的时间。应当理解的时,设备上传数据时间是指 物联网终端装置发起上报的时间,而不是数据存储系统接收到物联网 数据时间,由此,可以有效避免因上报时延带来的误差,避免将有效 数据判断为无效数据。
步骤302,在上报设备标识符与目标设备标识符一致时,根据设 备上传数据时间与绑定时间参数的关系对物联网数据进行筛选处理, 得到目标物联网数据。
也就是说,在上报设备标识符和目标设备标识符一致时,说明向 数据存储系统上报物联网数据的物联网终端装置,与用户在业务系统 中注册和/或登录时使用的物联网终端装置相同,此时,认为数据存储 系统接收到的物联网数据有效,可以根据设备上传数据时间与绑定时 间参数的关系对物联网数进行筛选处理,得到目标物联网数据。
可选的,根据设备上传数据时间与绑定时间参数的关系对物联网 数据进行筛选处理,得到目标物联网数据,包括但不限于将物联网数 据筛选出可直接反馈数据的目标物联网数据和需要分析处理再反馈数 据的目标物联网数据。
举例来说,如图7所示,业务系统需要寻找用户B的所有绑定设 备检测的用户健康数据,例如血压计、血糖仪等。此时,业务系统从 保存的用户信息中搜索与用户B具有绑定关系的设备标识符和对应的 绑定时间:
Figure BDA0002854013670000131
由于用户可能具有多个健康检测设备,即,查询得到多条如上信 息,进一步选取每个设备编号和对应的绑定时间参数生成查询列表:
Figure BDA0002854013670000132
业务系统根据查询列表生成预设规则,并将预设规则发送至数据 存储系统,数据存储系统根据预设规则中的查询列表查询同时满足任 一条上报设备标识符与目标设备标识符一致且设备上传数据时间在绑 定时间参数内的数据,并将满足查询列表的物联网数据作为目标物联 网数据。
应当理解的是,在根据查询列表筛选出目标物联网数据之后,可 直接将查询到的物联网数据发送至业务系统,也可进一步根据业务系 统发送的预设规则对筛选出的目标物联网数据进行数据分析。
作为另一个可行实施例,预设规则对应的内容包括目标设备标识 符、绑定时间参数、用户属性标识和分析对象。
需要说明的是,预设规则中的目标设备标识符和绑定时间参数可 为用户在业务系统中进行注册和/或登录时使用和/或绑定使用的物联 网终端装置的标识和时间,应当理解的时,绑定时间参数还可包括但 不限于物联网终端装置与业务系统解绑的时间。其中,绑定时间和解 绑时间为用户信息与目标设备标识符之间的绑定开始时间和绑定结束时间。
用户属性标识可用于指示是否针对目标设备标识符对应的物联网 数据进行数据分析,即,是否需要对该用户的用户健康数据进行分析。 例如,该用户是业务系统的附加健康分析功能的开通用户,则可以用 用户属性标识对用户进行标记,以使数据存储系统对该用户的用户健 康数据进行分析。
分析对象是指需要进行分析的数据,例如,在血压分析领域,则 可仅对满足高血压标准的血压数据进行分析,例如分析高血压发生的 次数、频率等。
则如如图8所示,根据预设规则对应的内容,确定物联网数据中 的目标物联网数据,包括:
步骤401,解析预设规则得到用户属性标识,用户属性标识用于 指示是否针对与目标设备标识符对应的物联网数据进行分析。
由前述分析可知,用户属性标识由业务系统根据用户在业务系统 中注册的用户信息来确定,因此,用户属性标识可预置在业务系统发 送至数据存储系统中的预设规则中,通过对预设规则的解析来得到用 户属性标识。
举例来说,用户属性标识可为二值标识,例如,当需要对用户的 用户健康数据进行分析时用户属性标识为select=1,当无需对用户的 用户健康数据进行分析时用户属性标识为select=0。
步骤402,在用户属性标识指示对目标设备标识符对应的物联网 数据进行数据分析时,根据分析对象条件、目标设备标识符和绑定时 间参数对物联网数据进行分析处理,得到分析处理结果。
步骤403,确定分析处理结果为目标物联网数据。
也就是说,本申请实施例可在接收到业务系统发送的预设规则后, 先提取预设规则中的用户属性标识,如果用户属性标识为指示对目标 设备标识符对应的物联网数据进行数据分析,则进一步获取预设规则 中的分析对象条件、目标设备标识符和绑定时间参数,并根据物联网 终端装置上报的物联网数据进行分析处理,得到分析处理结果,如果 用户属性标识为指示不对目标设备标识符对应的物联网数据进行分析 时,则可仅提取预设规则中的存储位置,以将物联网终端装置上报的 物联网数据作为目标物联网数据并按照预预设规则中的存储位置进行 存储,然后根据预设规则对应的存储位置推送目标物联网数据至业务 系统。
进一步地,如图9所示,步骤402,在用户属性标识指示对目标 设备标识符对应的物联网数据进行数据分析时,根据分析对象条件、 目标设备标识符和绑定时间参数对物联网数据进行分析处理,得到分 析处理结果,还包括:
步骤501,获取物联网数据包含的上报设备标识符和设备上传数 据时间。
其中,由于物联网数据是由物联网终端装置进行上报,因此,上 报设备标识符即为用户健康数据采集的物联网终端装置的设备标识 符。设备上传数据时间即为物联网终端装置将采集到的用户健康数据 上报至数据存储系统的时间。应当理解的是,设备上传数据时间是指 物联网终端装置发起上报的时间,而不是数据存储系统接收到物联网 数据时间,由此,可以有效避免因上报时延带来的误差,避免将有效 数据判断为无效数据。
步骤502,在上报设备标识符与目标设备标识符一致,且设备上 传数据时间在绑定时间参数内时,根据分析对象范围对物联网数据进 行筛选处理,得到筛选结果。
其中,设备上传数据时间在绑定时间参数内是指,设备上传数据 时间在用户注册/登录业务系统的绑定时间之后,且在用户退出业务系 统的解绑时间之前,即,如果设备上传数据时间在绑定时间和解绑时 间之间,则确定设备上传数据时间在绑定时间参数内。
分析对象范围是指对用户健康数据进行处理的阈值,换言之,当 用户健康数据处于分析对象范围时,则确定用户健康数据为筛选结果。
步骤503,针对筛选结果进行分析处理,得到分析处理结果。
应当理解的是,针对筛选结果进行分析处理也可根据预设规则进 行预设,即,预设规则中可包含有对筛选结果进行分析的分析规则指 令,数据存储系统可根据分析规则指令选取对应的分析模型,其中, 分析模型可为预置在数据存储系统中的大数据分析模型、AI分析模 型、神经网络分析等,然后将筛选结果输入至对应的分析模型中,得 到分析处理结果。
举例来说,如图10所示,当业务系统的需求为保存新上传的满足 北京市朝阳区、女性、年龄大于50、血液舒张压大于90、血液收缩压 大于140条件的物联网数据的副本,并返回已保存的条数和血压平均 值。
其中,在用户A在业务系统中与血压计绑定操作时,会生成一个 绑定关系:
Figure BDA0002854013670000161
由于业务系统中存储有用户信息,业务系统根据自身存储的用户 信息判断用户A的是否为满足条件的用户,如果是,则对用户A生成 select=1的用户属性标识,如果否,则对用户A生成select=0的用户 属性标识。
然后业务系统根据用户绑定的物联网终端装置的设备编号、绑定 时间和用户属性标识生成如下预设规则并发送至数据存储系统:
Figure BDA0002854013670000162
Figure BDA0002854013670000171
数据存储系统对业务系统发送的预设规则进行分析,在用户属性 标识为select=1时,提取预设规则中的设备标识“SN:123456”作为 目标设备标识符,并提取绑定时间参数“Binding_Time: 2020-09-08-12:12:12”,然后持续接收物联网设备发送的物联网数据,提取物联网数据中的上报设备标识符,如果物联网数据中的上报设备 标识符与目标设备标识符相符,即上报设备表示符为“SN:123456”, 则进一步获取预设规则中的绑定时间参数和物联网数据中的设备上传 数据时间,如果设备上传数据时间在绑定时间参数内,即设备上传数 据时间在2020-09-08-12:12:12之后,应当理解的是,前述预设规则中 未标记有解绑时间,因此在2020-09-08-12:12:12之后的时间均绑定时 间参数,则进一步获取物联网数据中的用户健康数据和预设规则中的 分析对象范围,如果物联网数据中的收缩压大于140且舒张压大于90, 则确定当前物联网数据为筛选结果,如果物联网数据中的收缩压小于 或等于140或舒张压小于或等于90,则确定当前物联网数据不为筛选 结果。
由此,本申请实施例提出的数据处理方法,能够利用数据存储系 统的数据分析模型,根据业务系统发送的预设规则和物联网终端装置 检测的物联网数据进行分析,为业务系统提供针对相应数据的智能辅 助诊断结果,例如,数据存储系统可将实时分析和/或预测的结果发送 至业务系统,业务系统在自身数据中查询相应数据对应的用户信息, 然后及时将异常分析结果发送至用户信息对应的客户端交互界面中和 /或向用户信息绑定的账号发送提醒信息。从而能够实现对慢性病例如 高血压、糖尿病以及慢性呼吸病症等的检测和提醒。作为一个可行实 施例,业务系统还可直接将待分析的数据发送至数据存储系统,以利 用数据存储系统中预置的分析模型对待分析的数据进行数据分析,有 效解决业务系统数据分析算力不足的问题。例如,一些机构(不限于 体检机构)可将机构提供的设备进行绑定以及测量,测量数据汇总到 机构的终端设备上,然后终端设备通过有线网络或无线网络的通信方 式,把这些数据传递到数据存储系统中。
具体地,数据存储系统接收业务系统发送上报的物联网数据;根 据业务系统发送的预设规则,确定物联网数据中的目标物联网数据; 将目标物联网数据存储至与预设规则对应的存储位置;根据与预设规 则对应的存储位置推送目标物联网数据至业务系统。
举例来说,针对体检机构的眼底相机拍摄的眼底图片,可以通过 预置在眼底相机中的业务系统将图片和包含有分析需求的预设规则发 送至数据存储系统,然后数据存储系统分别提取待分析的眼底图片和 分析需求,将眼底图片输入至与分析需求对应的分析模型中,以实现 对眼底图片的分析,得到分析结果并发送至业务系统。
又如,在用户使用母乳分析仪时,业务系统发送至数据存储系统 中的预设规则可为根据母乳进行食谱推荐,数据存储系统在接收到物 联网终端装置发送的母乳检测数据时后,可将母乳检测数据发送至食 谱推荐模型中,以利用食谱推荐模型对母乳检测数据进行分析,获取 针对性的给母亲推荐的食谱,然后数据存储系统将分析得到的食谱反 馈至业务系统,以便于业务系统对母亲进行食谱推荐。
还如,数据存储系统可接收业务系统发送的医学报告图像数据, 然后对医学报告图像数据进行OCR(Optical Character Recognition, 光学字符识别)识别,提取医学报告中的字符数据,并反馈至业务系 统。
作为又一个可行实施例,业务系统为至少两个,预设规则对应的 内容包括目标设备标识符和绑定时间参数和分析对象条件,则根据预 设规则对应的内容,确定物联网数据中的目标物联网数据,包括:获 取物联网数据包含的上报设备标识符和设备上传数据时间;在上报设 备标识符分别与至少两个业务系统上报的目标设备标识符一致时,对 物联网数据进行分析处理,得到分析处理结果;确定分析处理结果为 目标物联网数据。如图11所示,数据存储系统还可解决多业务系统间 数据融合的问题。具体地,在业务系统1和业务系统2想要获取对方 数据或利用对方已有数据进行数据分析时,可在双方业务系统决策层面允许进行数据共享时,可分别由业务系统1和业务系统2向数据存 储系统发送允许将按照各自原预设规则存储的数据转移和/或复制到 新的共享位置,例如,将业务系统1的数据A、B、C复制到共享位置, 业务系统2的数据D、E复制到共享位置,然后通过新的预设规则指令数据存储系统按照共享位置的内的数据A、B、C、D、E进行融合 分析,并将分析结果分别发送至业务系统1和业务系统2。应当理解 的是,业务系统1和业务系统2也可按照自身业务需求单独指令数据 存储系统对共享位置内的物联网数据进行个性化分析。
在进行数据融合分析是,不同渠道、不同业务系统、不同类型硬 件设备产生的数据可以通过多种传输方式将数据传输到数据存储系统 中进行融合分析,上述传输方式包括但不限于:通过各类网络直连的 物联网硬件设备,直接根据烧录的接收数据的服务器的地址,传输数 据到数据存储系统里。或者,通过蓝牙等无线通信方式的硬件设备可 以先通过手机等终端设备里安装的APP或小程序与设备进行绑定,传 输的数据到APP后台,然后通过APP后台数据接口,传输到数据存 储系统里,通过数据处理后可以分发到各个业务系统里,或经过数据 分析,AI大数据等处理后返回给用户一个报告或结果。在一些机构(不 限于体检机构)里,用户可以用机构里提供的设备进行绑定以及测量 数据,数据汇集到机构的终端设备上,然后终端设备通过有线过无限 通信方式,把这些数据传输到数据存储系统里。
举例来说,业务系统1可为用于糖网(糖网病,糖尿病性视网膜 病变,是一种糖尿病的并发症)筛查的平台,虽然目前AI算法可以达 到90%以上的准确率,但还是存在判断为假阳性的情况,如果在得知 筛查的人没有患糖尿病的话,就能够对糖网筛查的结果进行纠正,其 中,业务系统2提供的数据即可包含与业务系统1进行糖网筛查对应 的用户的糖尿病患病情况,基于此,数据存储系统可根据业务系统1 和业务系统2能够更好的筛查出患有糖尿病的用户的设备标识。
其中,当多个业务系统共同使用数据存储系统中的数据时,共享 位置中的数据可采用最新数据表和/或全部数据表,最新数据表按设备 标识、业务系统、指标等进行保存,保存设备最后一次测量的数据, 全部数据表则保存该设备中的全部数据。在数据存储系统中,可观看(查询)到不区分多业务系统对应的最新数据,数据存储系统可根据 各业务系统的预设规则,向业务系统反馈相应设备检测到的最新数据。 应当理解的是,用户在终端设备中(不限于小程序、APP、H5页面) 看到的是个人测量过的所有最新的数据,不分来源、不分设备、不分 机构。综上所述,本申请的数据存储系统能够接收多业务系统的预设 规则,并根据多业务系统的预设规则将目标物联网数据存储至与预设 规则个对应的存储位置,从而有效实现数据存储系统在多业务系统中 复用,有效降低数据存储系统和业务系统的成本,同时,有效避免业 务系统对应的数据成为孤岛数据。
图12为本申请实施例的另一种数据处理方法的流程图。其中,需 要说明的是,本实施例的数据处理方法的执行主体为业务系统,业务 系统可与数据存储系统进行数据交互。如图12所示,本申请实施例的 数据处理方法,包括:
步骤601,获取目标存储条件,目标存储条件包括目标设备标识 符合绑定时间参数。
步骤602,根据目标存储条件生成预设规则,预设规则是指示针 对物联网数据进行存储处理的条件。
步骤603,发送预设规则至数据存储系统。
作为一个可行实施例,该方法还包括:
目标存储条件还包括目标用户参数和分析对象范围,则根据目标 存储条件生成预设规则包括:
根据目标用户参数和绑定时间参数生成用户属性标识,用户属性 标识用于指示是否针对与目标设备标识符对应的物联网数据进行数据 分析;
根据目标属性标识、绑定时间参数、目标设备标识符和分析对象 范围生成预设规则。
需要说明的是,本申请实施例的数据处理方法中未披露的细节, 请参照本申请上述实施例中所披露的细节,这里不再赘述。
综上所述,本申请的数据存储系统能够接收多业务系统的预设规 则,并根据多业务系统的预设规则将目标物联网数据存储至与预设规 则个对应的存储位置,从而有效实现数据存储系统在多业务系统中复 用,有效降低数据存储系统和业务系统的成本,同时,有效避免业务 系统对应的数据成为孤岛数据。
下面结合图13-17对数据处理方法进行描述。图13为本申请实施 例的又一种数据处理方法的流程图。其中,本申请实施例提出的数据 处理方法应用于数据处理系统。其中,数据存储系统以IoT数据湖为 例,图16描述了本申请实施例提出的数据湖与业务系统之间的交互系 统示意图。
如图13所示,在业务系统中,用户与物联网终端装置(检测设备) 进行绑定,业务系统基于用户信息、绑定的设备标识、绑定时间和解 绑时间以及用户个性化定制的分析需求生成相应的预设规则,业务系 统将预设规则发送至数据存储系统,物理网终端装置(检测设备)对 用户进行测量获取测量数据,物联网洪端装置根据测量数据、设备标 识和检测时间生成物联网数据,并将物联网数据发送至数据存储系统, 数据存储系统在接收到的物联网数据满足预设规则时,将物联网数据 保存至与预设规则对应的存储位置,在接收到的物联网数据不满足预 设规则时,对物联网数据不做处理。
进一步地,如图14所示,业务系统根据其内存储的用户信息判断 用户是否符合筛选条件,如果是,则设置用户属性标识为1,如果否, 则设置用户属性标识为0,根据用户信息、用户绑定的设备标识、绑 定时间、解绑时间、分析对象条件和用户属性标识生成预设规则,将 预设规则发送到数据存储系统。物理网终端装置(检测设备)的测量 数据,物联网洪端装置根据测量数据、设备标识和检测时间生成物联 网数据,并将物联网数据发送至数据存储系统。数据存储系统提取与 用户标识1对应的设备标识作为目标设备标识,在物联网终端装置的 上报设备标识与目标设备标识相符时,进一步获取物理网数据,在物 理网数据符合分析对象条件时,保存物理网数据副本,计数数值加1, 更新检测数据平均值,并将结果返回给业务系统。
或者,如图15所示,业务系统根据用户信息获取与用户信息绑定 的所有设备的设备标识,获取每个设备标识的绑定时间和解绑时间, 根据设备标识、绑定时间和解绑时间生成预设规则,将预设规则发送 至数据存储系统。数据存储系统在存储的数据中查询符合预设规则的 数据,并将查询到的数据发送至业务系统。
图18为本申请实施例的一种数据处理装置的结构示意图。其中, 数据处理装置可以配置在服务器中,该服务器为数据存储系统,例如 IoT数据湖。如图18所示,数据处理装置10,包括:
物联网数据接收单元11用于接收物联网终端装置上报的物联网 数据。
目标数据确定单元12,用于根据业务系统发送的预设规则,确定 物联网数据中的目标物联网数据,预设规则是指示针对物联网数据进 行存储处理的条件。
存储单元13,用于将目标物联网数据存储至与预设规则对应的存 储位置。
在一些实施例中,目标数据确定单元12,还用于:
解析预设规则,得到预设规则对应的内容;
根据预设规则对应的内容,确定物联网数据中的目标物联网数据。
在一些实施例中,目标数据确定单元12,还用于:
获取物联网数据包含的上报设备标识符和设备上传数据时间;
在上报设备标识符与目标设备标识符一致时,根据设备上传数据 时间与绑定时间参数的关系对物联网数据进行筛选处理,得到目标物 联网数据。
在一些实施例中,目标数据确定单元12,还用于:
解析预设规则得到用户属性标识,用户属性标识用于指示是否针 对与目标设备标识符对应的物联网数据进行数据分析;
在用户属性标识指示对目标设备标识符对应的物联网数据进行数 据分析时,根据分析对象条件、目标设备标识符和绑定时间参数对物 联网数据进行分析处理,得到分析处理结果;
确定分析处理结果为目标物联网数据。
在一些实施例中,目标数据确定单元12,还用于:
获取物联网数据包含的上报设备标识符和设备上传数据时间;
在上报设备标识符与目标设备标识符一致,且设备上传数据时间 在绑定时间参数内时,根据分析对象范围对物联网数据进行筛选处理, 得到筛选结果;
针对筛选结果进行分析处理,得到分析处理结果。
在一些实施例中,存储单元13,还用于:
根据预设规则分配与预设规则对应的存储位置;
将目标物联网数据进行数据预处理,得到预处理后的结果;
将预处理结果存储至与预设规则对应的存储位置。
在一些实施例中,存储单元13,还用于:
根据与预设规则对应的存储位置推送目标物联网数据至业务系 统。
在一些实施例中,数据处理装置10,还用于:
接收所述业务系统发送上报的物联网数据;
根据业务系统发送的预设规则,确定所述物联网数据中的目标物 联网数据;
将所述目标物联网数据存储至与所述预设规则对应的存储位置;
根据与所述预设规则对应的存储位置推送所述目标物联网数据至 所述业务系统。
在一些实施例中,所述业务系统为至少两个,所述预设规则对应 的内容包括目标设备标识符和绑定时间参数和分析对象条件,则根据 所述预设规则对应的内容,确定所述物联网数据中的目标物联网数据, 数据处理装置10,还用于:
获取所述物联网数据包含的上报设备标识符和设备上传数据时 间;
在所述上报设备标识符分别与至少两个业务系统上报的所述目标 设备标识符一致时,对所述物联网数据进行分析处理,得到分析处理 结果;
确定所述分析处理结果为所述目标物联网数据。
需要说明的是,本申请实施例的数据处理装置中未披露的细节, 请参照本申请上述实施例中所披露的细节,这里不再赘述。
应当理解,数据存储装置10中记载的诸单元或模块与参考图2 描述的方法中的各个步骤相对应。由此,上文针对方法描述的操作和 特征同样适用于数据存储装置20及其中包含的单元,在此不再赘述。
在上文详细描述中提及的若干模块或者单元,这种划分并非强制 性的。实际上,根据本公开的实施方式,上文描述的两个或更多模块 或者单元的特征和功能可以在一个模块或者单元中具体化。反之,上 文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模 块或者单元来具体化。
综上所述,本申请的数据存储系统能够接收多业务系统的预设规 则,并根据多业务系统的预设规则将目标物联网数据存储至与预设规 则对应的存储位置,从而有效实现数据存储系统在多业务系统中复用, 有效降低数据存储系统和业务系统的成本,同时,有效避免业务系统 对应的数据成为孤岛数据。
图19为本申请实施例的一种数据处理装置的结构示意图。其中, 数据处理装置设置于业务服务器中,业务服务器利用数据处理装置与 数据存储系统进行数据交互,数据处理装置可为业务系统。如图19 所示,数据处理装置20,包括:
存储条件获取单元21,用于获取目标存储条件,目标存储条件包 括目标设备标识符和绑定时间参数;
规则生成单元22,用于根据目标存储条件生成预设规则,预设规 则是指示针对物联网数据进行存储处理的条件;
规则发送单元23,用于发送预设规则至数据存储系统。
在一些实施例中,存储条件获取单元21,还用于:
根据目标用户参数和绑定时间参数生成用户属性标识,用户属性 标识用于指示是否针对与目标设备标识符对应的物联网数据进行数据 分析;
根据目标属性标识、绑定时间参数、目标设备标识符和分析对象 范围生成预设规则。
应当理解,数据存储装置20中记载的诸单元或模块与参考图12 描述的方法中的各个步骤相对应。由此,上文针对方法描述的操作和 特征同样适用于数据存储装置20及其中包含的单元,在此不再赘述。
在上文详细描述中提及的若干模块或者单元,这种划分并非强制 性的。实际上,根据本公开的实施方式,上文描述的两个或更多模块 或者单元的特征和功能可以在一个模块或者单元中具体化。反之,上 文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模 块或者单元来具体化。
在本申请各个实施例中的各功能单元可以集成在一个处理单元 中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集 成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可 以采用软件功能单元的形式实现。
综上所述,本申请的数据存储系统能够接收多业务系统的预设规 则,并根据多业务系统的预设规则将目标物联网数据存储至与预设规 则个对应的存储位置,从而有效实现数据存储系统在多业务系统中复 用,有效降低数据存储系统和业务系统的成本,同时,有效避免业务 系统对应的数据成为孤岛数据。
图20为本申请实施例的一种数据处理系统的结构示意图。如图 20所示,数据处理系统30,包括:
数据湖存储分析系统31和至少一个业务系统32,数据湖存储分 析系统31包括数据存储装置10,数据湖存储分析系统31用于存储物 联网终端装置上传的物联网数据;
业务系统32包括数据存储装置20,业务系统32用于存储与物联 网终端装置存在绑定关系的用户数据。
应当理解,数据存储装置10和数据存储装置20中记载的诸单元 或模块与参考图2描述的方法中的各个步骤相对应。由此,上文针对 方法描述的操作和特征同样适用于数据存储装置10和数据存储装置 20及其中包含的单元,在此不再赘述。
在上文详细描述中提及的若干模块或者单元,这种划分并非强制 性的。实际上,根据本公开的实施方式,上文描述的两个或更多模块 或者单元的特征和功能可以在一个模块或者单元中具体化。反之,上 文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模 块或者单元来具体化。
下面参考图21,其示出了适于用来实现本申请实施例的终端设备 或服务器的计算机系统1600的结构示意图。
如图21所示,计算机系统1600包括中央处理单元(CPU)1601, 其可以根据存储在只读存储器(ROM)1602中的程序或者从存储部分 1608加载到随机访问存储器(RAM)1603中的程序而执行各种适当 的动作和处理。在RAM 1603中,还存储有系统1600操作所需的各种程序和数据。CPU 1601、ROM 1602以及RAM 1603通过总线1604彼 此相连。输入/输出(I/O)接口1605也连接至总线1604。
以下部件连接至I/O接口1605:包括键盘、鼠标等的输入部分 1606;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声 器等的输出部分1607;包括硬盘等的存储部分1608;以及包括诸如 LAN卡、调制解调器等的网络接口卡的通信部分1609。通信部分1609经由诸如因特网的网络执行通信处理。驱动器1610也根据需要连接至 I/O接口16016。可拆卸介质1611,诸如磁盘、光盘、磁光盘、半导体 存储器等等,根据需要安装在驱动器1610上,以便于从其上读出的计 算机程序根据需要被安装入存储部分1608。
特别地,根据本公开的实施例,上文参考图X描述的过程可以被 实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序 产品,其包括有形地包含在机器可读介质上的计算机程序,所述计算 机程序包含用于执行图2或12的方法的程序代码。在这样的实施例中, 该计算机程序可以通过通信部分1609从网络上被下载和安装,和/或 从可拆卸介质1611被安装。
附图中的流程图和框图,图示了按照本发明各种实施例的系统、 方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点 上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码 的一部分,所述模块、程序段、或代码的一部分包含一个或多个用于 实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的 实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发 生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们 有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的 是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的 组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现, 或者可以用专用硬件与计算机指令的组合来实现。
作为另一方面,本申请还提供了一种计算机可读存储介质,该计 算机可读存储介质可以是上述实施例中所述装置中所包含的计算机可 读存储介质;也可以是单独存在,未装配入设备中的计算机可读存储 介质。计算机可读存储介质存储有一个或者一个以上程序,所述程序 被一个或者一个以上的处理器用来执行描述于本申请的数据处理方 法。
以上描述仅为本申请的较佳实施例以及对所运用技术原理的说 明。本领域技术人员应当理解,本申请中所涉及的发明范围,并不限 于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离 所述发明构思的情况下,由上述技术特征或其等同特征进行任意组合 而形成的其它技术方案。例如上述特征与本申请中公开的(但不限于) 具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (16)

1.一种数据处理方法,其特征在于,该方法包括:
接收物联网终端装置上报的物联网数据;
根据业务系统发送的预设规则,确定所述物联网数据中的目标物联网数据,所述预设规则是指示针对所述物联网数据进行存储处理的条件;
将所述目标物联网数据存储至与所述预设规则对应的存储位置。
2.根据权利要求1所述的方法,其特征在于,根据业务系统发送的预设规则,确定所述物联网数据中的目标物联网数据,包括:
解析所述预设规则,得到所述预设规则对应的内容;
根据所述预设规则对应的内容,确定所述物联网数据中的目标物联网数据。
3.根据权利要求2所述的方法,其特征在于,所述预设规则对应的内容包括目标设备标识符和绑定时间参数,则根据所述预设规则对应的内容,确定所述物联网数据中的目标物联网数据,包括:
获取所述物联网数据包含的上报设备标识符和设备上传数据时间;
在所述上报设备标识符与所述目标设备标识符一致时,根据所述设备上传数据时间与所述绑定时间参数的关系对所述物联网数据进行筛选处理,得到所述目标物联网数据。
4.根据权利要求2所述的方法,其特征在于,所述预设规则对应的内容包括目标设备标识符、绑定时间参数、用户属性标识和分析对象条件,则根据所述预设规则对应的内容,确定所述物联网数据中的目标物联网数据,包括:
解析所述预设规则得到所述用户属性标识,所述用户属性标识用于指示是否针对与所述目标设备标识符对应的物联网数据进行数据分析;
在所述用户属性标识指示对所述目标设备标识符对应的物联网数据进行数据分析时,根据所述分析对象条件、所述目标设备标识符和所述绑定时间参数对所述物联网数据进行分析处理,得到分析处理结果;
确定所述分析处理结果为所述目标物联网数据。
5.根据权利要求4所述的方法,其特征在于,所述根据所述分析对象范围、所述目标设备标识符和所述绑定时间参数对所述物联网数据进行分析处理,包括:
获取所述物联网数据包含的上报设备标识符和设备上传数据时间;
在所述上报设备标识符与所述目标设备标识符一致,且所述设备上传数据时间在所述绑定时间参数内时,根据所述分析对象范围对所述物联网数据进行筛选处理,得到筛选结果;
针对所述筛选结果进行分析处理,得到分析处理结果。
6.根据权利要求1所述的方法,其特征在于,所述将所述目标物联网数据存储至与所述预设规则对应的存储位置,包括:
根据所述预设规则分配与所述预设规则对应的存储位置;
将所述目标物联网数据进行数据预处理,得到预处理后的结果;
将预处理结果存储至与所述预设规则对应的存储位置。
7.根据权利要求1所述的方法,其特征在于,该方法还包括:
根据与所述预设规则对应的存储位置推送所述目标物联网数据至所述业务系统。
8.根据权利要求1所述的方法,其特征在于,该方法还包括:
接收所述业务系统发送上报的物联网数据;
根据业务系统发送的预设规则,确定所述物联网数据中的目标物联网数据;
将所述目标物联网数据存储至与所述预设规则对应的存储位置;
根据与所述预设规则对应的存储位置推送所述目标物联网数据至所述业务系统。
9.根据权利要求1所述的方法,其特征在于,所述业务系统为至少两个,所述预设规则对应的内容包括目标设备标识符和绑定时间参数和分析对象条件,则根据所述预设规则对应的内容,确定所述物联网数据中的目标物联网数据,包括:
获取所述物联网数据包含的上报设备标识符和设备上传数据时间;
在所述上报设备标识符分别与至少两个业务系统上报的所述目标设备标识符一致时,对所述物联网数据进行分析处理,得到分析处理结果;
确定所述分析处理结果为所述目标物联网数据。
10.一种数据处理方法,其特征在于,包括:
获取目标存储条件,所述目标存储条件包括目标设备标识符和绑定时间参数;
根据所述目标存储条件生成预设规则,所述预设规则是指示针对所述物联网数据进行存储处理的条件;
发送所述预设规则至数据存储系统。
11.根据权利要求10所述的方法,其特征在于,所述目标存储条件还包括目标用户参数和分析对象范围,则根据所述目标存储条件生成预设规则包括:
根据所述目标用户参数和所述绑定时间参数生成用户属性标识,所述用户属性标识用于指示是否针对与目标设备标识符对应的物联网数据进行数据分析;
根据所述目标属性标识、所述绑定时间参数、所述目标设备标识符和所述分析对象范围生成所述预设规则。
12.一种数据处理装置,其特征在于,该装置包括:
物联网数据接收单元,用于接收物联网终端装置上报的物联网数据;
目标数据确定单元,用于根据业务系统发送的预设规则,确定所述物联网数据中的目标物联网数据,所述预设规则是指示针对所述物联网数据进行存储处理的条件;
存储单元,用于将所述目标物联网数据存储至与所述预设规则对应的存储位置。
13.一种数据处理装置,其特征在于,该装置包括:
存储条件获取单元,用于获取目标存储条件,所述目标存储条件包括目标设备标识符和绑定时间参数;
规则生成单元,用于根据所述目标存储条件生成预设规则,所述预设规则是指示针对所述物联网数据进行存储处理的条件;
规则发送单元,用于发送所述预设规则至数据存储系统。
14.一种数据处理系统,其特征在于,该系统包括:数据湖存储分析系统和至少一个业务系统,所述数据湖存储分析系统包括如权利要求12所述的数据存储装置,所述数据湖存储分析系统用于存储物联网终端装置上传的物联网数据;
所述业务系统包括如权利要求13所述的数据存储装置,所述业务系统用于存储与所述物联网终端装置存在绑定关系的用户数据。
15.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时,实现如权利要求1-9中任一所述的数据处理方法或权利要求10-11中任一所述的数据处理方法。
16.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-9中任一所述的数据处理方法或权利要求10-11中任一所述的数据处理方法。
CN202011538950.1A 2020-12-23 2020-12-23 数据处理方法、装置、系统、设备和存储介质 Pending CN112820366A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202011538950.1A CN112820366A (zh) 2020-12-23 2020-12-23 数据处理方法、装置、系统、设备和存储介质
US17/357,942 US20220197888A1 (en) 2020-12-23 2021-06-24 Data processing method, apparatus, system, device, and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011538950.1A CN112820366A (zh) 2020-12-23 2020-12-23 数据处理方法、装置、系统、设备和存储介质

Publications (1)

Publication Number Publication Date
CN112820366A true CN112820366A (zh) 2021-05-18

Family

ID=75854387

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011538950.1A Pending CN112820366A (zh) 2020-12-23 2020-12-23 数据处理方法、装置、系统、设备和存储介质

Country Status (2)

Country Link
US (1) US20220197888A1 (zh)
CN (1) CN112820366A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113192624A (zh) * 2021-07-01 2021-07-30 京东方科技集团股份有限公司 紧急救治系统、紧急救治方法及电子设备
CN113407582A (zh) * 2021-06-03 2021-09-17 上海蓝色帛缔智能工程有限公司 一种多智能体的集成数据的监控方法及云服务器
CN113965538A (zh) * 2021-10-21 2022-01-21 青岛海信智慧生活科技股份有限公司 设备状态消息处理方法、装置及存储介质
CN115473766A (zh) * 2022-08-22 2022-12-13 苏州思萃工业互联网技术研究所有限公司 一种基于分布式网关的vip实现方法和系统
WO2023123614A1 (zh) * 2021-12-31 2023-07-06 深圳Tcl新技术有限公司 数据处理方法、装置、终端和存储介质

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115412601A (zh) * 2022-08-26 2022-11-29 浙江中控技术股份有限公司 数据获取方法、装置、电子设备及非易失性存储介质

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10382294B2 (en) * 2014-09-25 2019-08-13 Oracle International Corporation Platform for capturing, processing, storing, and presentation of generic sensor data from remote arbitrary locations
US11768823B2 (en) * 2016-02-17 2023-09-26 Verizon Patent And Licensing Inc. Rules execution system for IoT devices
US10771335B2 (en) * 2017-07-24 2020-09-08 Verizon Patent And Licensing, Inc. Generating and sharing models for Internet-of-Things data
KR20200100845A (ko) * 2018-01-05 2020-08-26 제이엠 드라이버 엘엘씨 (디비에이 링스 테크놀로지) 사물 인터넷(iot) 디바이스를 위한 재구성가능한 임베디드 규칙 엔진
CN111639101B (zh) * 2020-04-27 2022-12-06 浙江时空道宇科技有限公司 一种物联网规则引擎系统的相关方法、装置、系统及存储介质

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113407582A (zh) * 2021-06-03 2021-09-17 上海蓝色帛缔智能工程有限公司 一种多智能体的集成数据的监控方法及云服务器
CN113192624A (zh) * 2021-07-01 2021-07-30 京东方科技集团股份有限公司 紧急救治系统、紧急救治方法及电子设备
CN113965538A (zh) * 2021-10-21 2022-01-21 青岛海信智慧生活科技股份有限公司 设备状态消息处理方法、装置及存储介质
CN113965538B (zh) * 2021-10-21 2023-04-18 青岛海信智慧生活科技股份有限公司 设备状态消息处理方法、装置及存储介质
WO2023123614A1 (zh) * 2021-12-31 2023-07-06 深圳Tcl新技术有限公司 数据处理方法、装置、终端和存储介质
CN115473766A (zh) * 2022-08-22 2022-12-13 苏州思萃工业互联网技术研究所有限公司 一种基于分布式网关的vip实现方法和系统
CN115473766B (zh) * 2022-08-22 2024-01-26 苏州思萃工业互联网技术研究所有限公司 一种基于分布式网关的vip实现方法和系统

Also Published As

Publication number Publication date
US20220197888A1 (en) 2022-06-23

Similar Documents

Publication Publication Date Title
CN112820366A (zh) 数据处理方法、装置、系统、设备和存储介质
US10284689B2 (en) Method and system for processing machine-to-machine sensor data
CN109346192A (zh) 基于互联网提供线上全流程就医和服务的系统及方法
US20170300651A1 (en) Platform which correlates data for recommendation
US20090089089A1 (en) Apparatus and method for providing geriatric care management service
CN113678121A (zh) Iot系统中标记数据的自动生成
US9787842B1 (en) Establishment of communication between devices
CN110784509B (zh) 一种医疗信息处理方法、系统及相关组件
CN112289437A (zh) 一种基于边缘计算架构的糖尿病辅助治疗云平台系统
US11757815B1 (en) Data aggregation from multiple entities
US11694788B2 (en) Healthcare protocols for use with a distributed ledger
JP2002140439A (ja) 医用イメージング・デバイスから検査データを自動的に収集し且つ放射線科業務に関するレポートを自動的に作成するためのシステム
CN111897796A (zh) 用于医院引流的数据库构建方法及医院引流方法
CN106940720B (zh) 基于健康物联网的多源信息处理方法和系统
KR101836103B1 (ko) 모바일 헬스케어 시스템 및 이를 이용한 컴포넌트 기반 모바일 헬스 애플리케이션 제공 시스템
US10395008B2 (en) Device connectivity engine
CN115718775A (zh) 医疗数据的处理方法与医疗信息系统
CN112837792A (zh) 健康管理方法、装置和系统以及数据采集装置
KR20110090116A (ko) 이동통신단말기를 이용한 의료 상담 시스템 및 이의 운영 방법
CN111462852A (zh) 一种区域远程会诊的方法、系统及计算机存储介质
CN111243695A (zh) 无侵入式医疗数据采集方法及系统
Chakraborty et al. Tele-wound technology network for assessment of chronic wounds
JP6681640B1 (ja) サーバ及び情報処理方法
KR20180074606A (ko) IoT 기반의 생체정보 제공 방법
US20220084691A1 (en) Medical Data Management Method, Apparatus, System, and Server

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination