CN108766519A - 一种服药监督方法、装置、可读存储介质及设备 - Google Patents

一种服药监督方法、装置、可读存储介质及设备 Download PDF

Info

Publication number
CN108766519A
CN108766519A CN201810638442.7A CN201810638442A CN108766519A CN 108766519 A CN108766519 A CN 108766519A CN 201810638442 A CN201810638442 A CN 201810638442A CN 108766519 A CN108766519 A CN 108766519A
Authority
CN
China
Prior art keywords
user
medication
image
data
drug
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810638442.7A
Other languages
English (en)
Inventor
吕相文
吕东岳
谢海永
田子
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Electronics Technology Group Corp CETC
Electronic Science Research Institute of CTEC
Original Assignee
China Electronics Technology Group Corp CETC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Electronics Technology Group Corp CETC filed Critical China Electronics Technology Group Corp CETC
Priority to CN201810638442.7A priority Critical patent/CN108766519A/zh
Publication of CN108766519A publication Critical patent/CN108766519A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/10—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to drugs or medications, e.g. for ensuring correct administration to patients
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/107—Static hand or arm
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G06V40/165—Detection; Localisation; Normalisation using facial parts and geometric relationships

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Medicinal Chemistry (AREA)
  • Public Health (AREA)
  • Geometry (AREA)
  • Primary Health Care (AREA)
  • Medical Informatics (AREA)
  • Epidemiology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Chemical & Material Sciences (AREA)
  • Medical Treatment And Welfare Office Work (AREA)

Abstract

本发明公开了一种服药监督方法、装置、计算机可读存储介质及设备，其中，方法包括：判断采集到的人脸图像与账户对应的人脸图像是否匹配；当判断结果为是时，按照预设的规则采集用户的服药图像；根据服药图像获取用户的服药数据；在服药数据与账户对应的待服药数据匹配时，判定用户服药完成。通过对用户的身份进行验证，以及对用户服药的过程进行监督，解决了现有技术中不能监督患者是否按规定进行服药的技术问题。

Description

一种服药监督方法、装置、可读存储介质及设备
技术领域
本发明涉及计算机技术领域，尤其涉及一种服药监督的方法、装置、可读存储介质及设备。
背景技术
目前在疾病预防和控制过程中，尤其对于慢性疾病的控制治疗，患者的服药依从性对治疗效果和愈后有着很大的影响。低服药依从性可能会使病情恶化，导致发病率、死亡率和医疗费用的增加等后果。
在现有技术中，提高患者服药依从性的产品大多仅关注“患者遗忘”这一因素，主要解决患者记忆失误造成的漏服、错服等问题。产品功能设计上多会采用闹铃方式提醒患者服药，传感器识别患者取药动作，然后通过监测取药动作是否发生来判断患者服药，最终通过后台系统实现漏服监管。现有技术主要是解决患者因遗忘带来的漏服、错服的问题，这个过程中患者服药依从性的高低取决于患者自身的健康意识，并不能监督患者是否按规定进行服药。如何在疗程中准确的监督患者的药物摄取，成为目前亟需解决的技术问题，只有做到了这些，才能真正提高居家治疗患者的服药依从性。
发明内容
鉴于上述问题，本发明提供一种服药监督的方法、装置、计算机可读存储介质及设备，用以解决现有技术中不能监督患者是否按规定进行服药的技术问题。
依据本发明的第一个方面，提供了一种服药监督方法，所述方法包括：
判断采集到的人脸图像与账户对应的人脸图像是否匹配；
当判断结果为是时，按照预设的规则采集用户的服药图像；
根据服药图像获取用户的服药数据；
在服药数据与账户对应的待服药数据匹配时，判定用户服药完成。
可选的，按照预设的规则采集用户的服药图像，包括：
采集用户手持药物图像，手持药物图像中包含用户的人脸区域和掌中药物区域；
采集用户含药前的口腔图像，口腔图像中包含用户的舌上和舌下区域；
采集用户含药时的口腔图像，口腔图像中包含用户的口腔药物区域；
采集用户含药后的口腔图像，口腔图像中包括用户的舌上和舌下区域。
可选的，根据服药图像获取用户的服药数据，包括：
在检测到人脸区域对应的用户与账户对应的用户一致时，根据掌中药物区域获取掌中药物数据；
通过口腔药物区域获取口腔药物数据；
在口腔药物数据与手持药物数据一致时，根据用户含药前的口腔图像和用户含药后的口腔图像对应的舌上和舌下区域判断用户是否将口腔药物吞服；
当判断结果为是时，判定掌中药物数据为用户的服药数据。
可选的，方法还包括：
在服药数据与账户对应的待服药数据不匹配时，向用户发送提示信息。
依据本发明的第二个方面，提供了一种服药监督装置，所述装置包括：
验证模块，用于判断采集到的人脸图像与账户对应的人脸图像是否匹配；
图像采集模块，用于在判断结果为是时，按照预设的规则采集用户的服药图像；
服药数据模块，用于根据服药图像获取用户的服药数据；
服药检测模块，用于在服药数据与账户对应的待服药数据匹配时，判定用户服药完成。
可选的，图像采集模块包括：
手持药物采集单元，用于采集用户手持药物图像，手持药物图像中包含用户的人脸区域和掌中药物区域；
含药前口腔采集单元，用于采集用户含药前的口腔图像，口腔图像中包含用户的舌上和舌下区域；
含药时口腔采集单元，用于采集用户含药时的口腔图像，口腔图像中包含用户的口腔药物区域；
含药后的口腔采集单元，用于采集用户含药后的口腔图像，口腔图像中包括用户的舌上和舌下区域。
可选的，服药数据模块包括：
掌中药物检测单元，用于在检测到人脸区域对应的用户与账户对应的用户一致时，根据掌中药物区域获取掌中药物数据；
舌上药物检测单元，用于通过口腔药物区域获取口腔药物数据；
药物吞服检测单元，用于在口腔药物数据与手持药物数据一致时，根据用户含药前的口腔图像和用户含药后的口腔图像对应的舌上和舌下区域判断用户是否将口腔药物吞服；
服药单元，用于在判断结果为是时，判定掌中药物数据为用户的服药数据。
可选的，装置还包括：
提醒模块，用于在服药数据与账户对应的待服药数据不匹配时，向用户发送提示信息。
依据本发明的第三个方面，一种计算设备，包括：处理器、存储器及通信总线；
通信总线用于实现处理器和存储器之间的连接通信；
处理器用于执行存储器中存储的应用程序的服药监督程序，以实现本发明实施例所提供的服药监督方法的步骤。
依据本发明的第四个方面，提供了一种计算机可读存储介质，计算机可读存储介质存储有应用程序的服药监督程序，当应用程序的服药监督程序被至少一个处理器执行时，实现本发明实施例所提供的服药监督方法的步骤。
根据本发明的一种服药监督的方法、装置、计算机可读存储介质及设备，通过判断采集到的人脸图像与账户对应的人脸图像匹配时，按照预设的采集规则采集用户的服药图像，根据服药图像获取用户的服药数据，在服药数据与账户对应的待服药数据匹配时，判定用户服药完成。通过对用户的身份进行验证，以及对用户服药的过程进行监督，解决了现有技术中不能监督患者是否按规定进行服药的技术问题。
上述说明仅是本发明实施例技术方案的概述，为了能够更清楚了解本发明实施例的技术手段，而可依照说明书的内容予以实施，并且为了让本发明实施例的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明实施例的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明实施例的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：
图1为本发明第一实施例提供的一种服药监督方法的流程图；
图2为本发明第二实施例提供的一种服药监督方法的流程图；
图3为本发明第三实施例提供的一种服药监督方法的流程图；
图4为本发明第四实施例提供的一种服药监督方法的流程图；
图5为本发明第五实施例提供的一种服药监督装置的功能模块示意图；
图6为本发明第六实施例提供的一种服药监督装置的功能模块示意图；
图7为本发明第七实施例提供的一种服药监督装置的功能模块示意图；
图8为本发明第八实施例提供的一种服药监督装置的功能模块示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。
请参阅图1，为本发明第一实施提供的一种服药监督方法的流程图。本实施例中，所述包括如下步骤：
步骤S101，判断采集到的人脸图像与账户对应的人脸图像是否匹配。
具体实施时，用户首先在终端设备上登录账户；登陆后，终端设备采集用户的人脸图像，将采集到的人脸图像与账户对应的人脸图像进行比对，以确定该用户是否为账户对应用户。
步骤S102，当判断结果为是时，按照预设的规则采集用户的服药图像。
在采集到的人脸图像为账户对应的人脸图像时，按照预设的采集规则采集用户的服药图像，通过采集到的服药图像获取用户的服药过程。例如，通过视频记录用户的服药过程，在视频中获取关键帧，将关键帧提取作为用户的服药图像。可以清楚的是，为了使采集到的服药图像更能体现用户的服药过程，可以设定用户服药过程的动作规则，以便于终端设备可以采集预设动作对应的服药图像；如，需要用户将终端设备放置在自己的正前方，移动终端设备前置摄像头采集的画面中通过人机距离判定模块判断用户的上半身是否占到整个画面的2/3以上，如果不符合要求，提示用户调整与终端设备的距离，以满足上半身占到终端设备屏幕2/3以上。
步骤S103，根据服药图像获取用户的服药数据。
具体实施时，在采集到的服药图像中采集用户的服药数据，如，在多张关键帧对应的服药图像中识别药物数据，根据多张服药图像对应的药物数据，得到用户对应的服药数据。例如，采集用户服药前后的掌上药物数据，掌上药物数据在服药前后的差值为用户的服药数据；当然，这只是其中的一种获取用户服药数据的方式，在具体实施过程中，根据实际需要还可以通过检测用户服药动作对应的其它服药图像来检测用户的服药数据。
步骤S104，在服药数据与账户对应的待服药数据匹配时，判定用户服药完成。
本实施例中，首先判断采集到的人脸图像与账户对应的人脸图像是否匹配，进而判断采集到的人脸图像是否为账户对应的用户；在确定采集到的人脸图像是账户对应的用户时，采集用户的服药过程对应的服药图像，进一步地对服药图像进行识别获取用户的服药数据，在服药数据与账户对应的待服药数据匹配时，判定用户服药完成。通过对用户的身份进行验证，以及对用户服药的过程进行监督，解决了现有技术中不能监督患者是否按规定进行服药的技术问题。
请参阅图2，为本发明第二实施提供的一种服药监督方法的流程图。本实施例中，所述服药监督方法包括如下步骤：
步骤S201，判断采集到的人脸图像与账户对应的人脸图像是否匹配。
在判断采集到的人脸图像与账户对应的人脸图像匹配时，执行步骤S202；在判断采集到的人脸图像与账户对应的人脸图像不匹配时，生成提示信息，提醒用户按照预设的采集规则进行采集，当多次采集人脸图像均与所述账户对应的人脸图像都不一致时，将采集到的人脸图像上传到数据库，并向账户患者对应的关联人发送服药未完成提示，服药未完成提示中可包括获取的的人脸图像。
步骤S202，采集用户手持药物图像，手持药物图像中包含用户的人脸区域和掌中药物区域；采集用户含药前的口腔图像，口腔图像中包含用户的舌上和舌下区域；采集用户含药时的口腔图像，口腔图像中包含用户的口腔药物区域；采集用户含药后的口腔图像，口腔图像中包括用户的舌上和舌下区域。
具体实施时，对终端设备对应的显示区域进行区域划分，划分成用户的上半身采集区域和药品采集区域，终端设备显示采集到的用户图像，用户可通过终端设备的显示区域观察是否满足预设的采集规则。当满足采集规则时，采集用户手持药物图像，手持药物图像中包含用户的人脸区域和掌中药物区域。同时采集用户含药前的口腔图像，口腔图像中包含用户的舌上和舌下区域；采集用户含药时的口腔图像，口腔图像中包含用户的口腔药物区域；采集用户含药后的口腔图像，口腔图像中包括用户的舌上和舌下区域。
步骤S203，根据服药图像获取用户的服药数据。
根据获取到的服药图像获取用户的服药数据，例如，比较服药前后的口腔图像对应的舌上舌下区域、以及含药时的口腔图像，检测服药前后对应的舌上舌下区域的药物残余，以及含药时的口腔图像对应的药物数量，获取用户的服药数据。
步骤S204，在服药数据与账户对应的待服药数据匹配时，判定用户服药完成。
其中，步骤S201至步骤S203、以及步骤S204已在第二实施例中进行了详细说明，在此不作赘述。
本实施例中，通过采集用户手持药物图像，手持药物图像中包含用户的人脸区域和掌中药物区域；采集用户含药前的口腔图像，口腔图像中包含用户的舌上和舌下区域；采集用户含药时的口腔图像，口腔图像中包含用户的口腔药物区域；采集用户含药后的口腔图像，口腔图像中包括用户的舌上和舌下区域。对采集到的手持药物图像、口腔图像、以及含药前后的口腔图像获取用户的服药数据，记录了用户服药的整个过程，对用户服药的过程进行监督，解决了现有技术中不能监督患者是否按规定进行服药的技术问题。
请参阅图3，为本发明第三实施提供的一种服药监督方法的流程图。本实施例中，所述服药监督方法包括如下步骤：
步骤S301，判断采集到的人脸图像与账户对应的人脸图像是否匹配。
步骤S302，采集用户手持药物图像，手持药物图像中包含用户的人脸区域和掌中药物区域；采集用户含药前的口腔图像，口腔图像中包含用户的舌上和舌下区域；采集用户含药时的口腔图像，口腔图像中包含用户的口腔药物区域；采集用户含药后的口腔图像，口腔图像中包括用户的舌上和舌下区域。
步骤S303，在检测到人脸区域对应的用户与账户对应的用户一致时，根据掌中药物区域获取掌中药物数据。
具体实施时，为了保证服药用户为账户对应的用户，通过检测服药用户的人脸图像，将该人脸图像与账户对应的人脸图像进行比对，以便于判断服药用户是否为账户对应的用户。在保证服药用户为账户对应的用户时，根据掌中药物区域获取掌中的药物数据。
步骤S304，通过口腔药物区域获取口腔药物数据。
具体实施时，检测到掌中药物数据后，提示用户进行服药，在服药的过程中，用户将掌中的药物投入口腔。检测到用户将药物投入口腔后，获取口腔药物区域的药物数据。其中，口腔药物区域可以是舌上区域或舌下区域，检测口腔药物数据主要是为了保证用户将掌中药物数据完全投入口腔药物区域，防止用户中途遗失药物或故意丢弃药物，没有将掌中药物全部放入口腔药物区域。
步骤S305，在口腔药物数据与手持药物数据一致时，根据用户含药前的口腔图像和用户含药后的口腔图像对应的所述舌上和舌下区域判断用户是否将口腔药物吞服。
具体实施时，在检测到口腔药物数据与手持药物数据一致时，根据用户含药前的口腔图像与含药后的口腔图像对应的舌上舌下区域判断用户是否将口腔药物区域对应的药物完全服用。可以清楚的是，获取用户含药前的口腔图像是为了与用户口腔药物区域和含药后的口腔图像进行比对，以确定用户是否将口腔药物区域内的药物吞服。
步骤S306，当判断结果为是时，判定掌中药物数据为用户的服药数据。
具体实施时，在检测到用户口腔数据与手持数据一致时，判定掌中药物数据为用户的服药数据，以确定用户将掌中药物完全吞服。其中，获取掌中药物区域图像是为了更方便地获取掌中药物数据是否为账户对应的药物数据，其中，掌中药物数据的品类和数量可以通过药物的颜色和、形状。以及颗粒数目来区分，口腔药物数据只需要检测药品数量，减少口腔药物数据的获取难度。
步骤S307，在服药数据与账户对应的待服药数据匹配时，判定用户服药完成。
其中，步骤S301至步骤S303、以及步骤S307已在第二实施例中进行了详细说明，在此不作赘述。
本实施例中，通过口腔药物区域获取口腔药物数据，在口腔药物数据与手持药物数据一致时，根据用户含药前的口腔图像和用户含药后的口腔图像对应的所述舌上和舌下区域判断用户是否将口腔药物吞服，对用户的服药过程进行监督，直到药物完全吞服，保证了监督用户服药过程完整性，解决了现有技术中不能监督患者是否按规定进行服药的技术问题。
请参阅图4，为本发明第四实施提供的一种服药监督方法的流程图。本实施例中，所述服药监督方法包括如下步骤：
步骤S401，判断采集到的人脸图像与账户对应的人脸图像是否匹配。
步骤S402，采集用户手持药物图像，手持药物图像中包含用户的人脸区域和掌中药物区域；采集用户含药前的口腔图像，口腔图像中包含用户的舌上和舌下区域；采集用户含药时的口腔图像，口腔图像中包含用户的口腔药物区域；采集用户含药后的口腔图像，口腔图像中包括用户的舌上和舌下区域。
步骤S403，在检测到人脸区域对应的用户与账户对应的用户一致时，根据掌中药物区域获取掌中药物数据。
步骤S404，通过口腔药物区域获取口腔药物数据。
步骤S405，在口腔药物数据与手持药物数据一致时，根据用户含药前的口腔图像和用户含药后的口腔图像对应的所述舌上和舌下区域判断用户是否将口腔药物吞服。
具体实施时，在判断用户将口腔药物吞服后执行步骤S406；在判断用户没有将口腔药物吞服时，向用户发提示信息，或向该用户对应关联人发送用户为完成服药提示。
步骤S406，判断采集到的人脸图像与账户对应的人脸图像是否匹配。
在判断采集到的人脸图像与账户对应的人脸图像匹配时，执行步骤S407；在判断采集到的人脸图像与账户对应的人脸图像不匹配时，执行步骤S408。
步骤S407，判定用户服药完成。
具体实施时，在采集到用户判断服药数据与账户对应的待服药数据匹配时，生成服药完成提示，也可以像用户对应的关联人发送服药完成提示。
步骤S408，向用户发送提示信息。
本实施例中，用户服药数据可能与账户对应的待服药数据不匹配，存在多种情况：其中，在服药数据对应的药品小于账户对应的服药数据对应的药品时，向用户发送继续服药提示，重新检测用户用药；在服药数据对应的药品数据大于账户对应的服药数据对应的药品时，向用户发送警告，当然，可以在掌中药物数据对应的药品大于账户对应药品时就发出警告。通过对用户的身份进行验证，以及对用户服药的过程进行监督，在用户服药数据与账户对应的服药数据不一致时向用户发送提示信息，同时解决了现有技术中不能监督患者是否按规定进行服药的技术问题。
请参阅图5，为本发明第五实施例提供的一种服药监督装置的功能模块示意图。应用于计算机设备，该服药监督装置包括验证模块110、图像采集模块120、服药数据模块130、以及服药检测模块140。该装置主要用来实现本发明实施例提供的服药监督方法，该方法主要用来解决现有技术中不能监督患者是否按规定进行服药的技术问题。
其中，该计算机设备包括但不限于移动电话、手机、智能手机、平板电脑、个人电脑、个人数字助理、媒体播放器、服务器和其他电子设备。
验证模块110，用于判断采集到的人脸图像与账户对应的人脸图像是否匹配。
具体实施时，用户首先在终端设备上登录账户；登陆后，终端设备采集用户的人脸图像，将采集到的人脸图像与账户对应的人脸图像进行比对，以确定该用户是否为账户对应用户。
图像采集模块120，用于在判断结果为是时，按照预设的规则采集用户的服药图像。
在采集到的人脸图像为账户对应的人脸图像时，按照预设的采集规则采集用户的服药图像，通过采集到的服药图像获取用户的服药过程。例如，通过视频记录用户的服药过程，在视频中获取关键帧，将关键帧提取作为用户的服药图像。可以清楚的是，为了使采集到的服药图像更能体现用户的服药过程，可以设定用户服药过程的动作规则，以便于终端设备可以采集预设动作对应的服药图像；如，需要用户将终端设备放置在自己的正前方，移动终端设备前置摄像头采集的画面中通过人机距离判定模块判断用户的上半身是否占到整个画面的2/3以上，如果不符合要求，提示用户调整与终端设备的距离，以满足上半身占到终端设备屏幕2/3以上。
服药数据模块130，用于根据服药图像获取用户的服药数据。
具体实施时，在采集到的服药图像中采集用户的服药数据，如，在多张关键帧对应的服药图像中识别药物数据，根据多张服药图像对应的药物数据，得到用户对应的服药数据。例如，采集用户服药前后的掌上药物数据，掌上药物数据在服药前后的差值为用户的服药数据；当然，这只是其中的一种获取用户服药数据的方式，在具体实施过程中，根据实际需要还可以通过检测用户服药动作对应的其它服药图像来检测用户的服药数据。
服药检测模块140，用于在服药数据与账户对应的待服药数据匹配时，判定用户服药完成。
本实施例中，首先判断采集到的人脸图像与账户对应的人脸图像是否匹配，进而判断采集到的人脸图像是否为账户对应的用户；在确定采集到的人脸图像是账户对应的用户时，采集用户的服药过程对应的服药图像，进一步地对服药图像进行识别获取用户的服药数据，在服药数据与账户对应的待服药数据匹配时，判定用户服药完成。通过对用户的身份进行验证，以及对用户服药的过程进行监督，解决了现有技术中不能监督患者是否按规定进行服药的技术问题。
请参阅图6，为本发明第六实施例提供的服药监督装置的功能模块示意图。应用于计算机设备，该计算机设备包括但不限于移动电话、手机、智能手机、平板电脑、个人电脑、个人数字助理、媒体播放器、服务器和其他电子设备。该服药监督装置包括验证模块110、图像采集模块120、服药数据模块130、以及服药检测模块140。在第五实施例的基础上，图像采集模块120包括：
手持药物采集单元121，用于采集用户手持药物图像，手持药物图像中包含用户的人脸区域和掌中药物区域；含药前口腔采集单元122，用于采集用户含药前的口腔图像，口腔图像中包含用户的舌上和舌下区域；含药时口腔采集单元123，用于采集用户含药时的口腔图像，口腔图像中包含用户的口腔药物区域；含药后的口腔采集单元124，用于采集用户含药后的口腔图像，口腔图像中包括用户的舌上和舌下区域。
具体实施时，对终端设备对应的显示区域进行区域划分，划分成用户的上半身采集区域和药品采集区域，终端设备显示采集到的用户图像，用户可通过终端设备的显示区域观察是否满足预设的采集规则。当满足采集规则时，采集用户手持药物图像，手持药物图像中包含用户的人脸区域和掌中药物区域。同时采集用户含药前的口腔图像，口腔图像中包含用户的舌上和舌下区域；采集用户含药时的口腔图像，口腔图像中包含用户的口腔药物区域；采集用户含药后的口腔图像，口腔图像中包括用户的舌上和舌下区域。
本实施例中，通过采集用户手持药物图像，手持药物图像中包含用户的人脸区域和掌中药物区域；采集用户含药前的口腔图像，口腔图像中包含用户的舌上和舌下区域；采集用户含药时的口腔图像，口腔图像中包含用户的口腔药物区域；采集用户含药后的口腔图像，口腔图像中包括用户的舌上和舌下区域。对采集到的手持药物图像、口腔图像、以及含药前后的口腔图像获取用户的服药数据，记录了用户服药的整个过程，对用户服药的过程进行监督，解决了现有技术中不能监督患者是否按规定进行服药的技术问题。
请参阅图7，为本发明第七实施例提供的服药监督装置的功能模块示意图。应用于计算机设备，该计算机设备包括但不限于移动电话、手机、智能手机、平板电脑、个人电脑、个人数字助理、媒体播放器、服务器和其他电子设备。该服药监督装置包括验证模块110、图像采集模块120、服药数据模块130、以及服药检测模块140。在第六实施例的基础上，服药数据模块130包括：
掌中药物检测单元131，用于在检测到人脸区域对应的用户与账户对应的用户一致时，根据掌中药物区域获取掌中药物数据。
具体实施时，为了保证服药用户为账户对应的用户，通过检测服药用户的人脸图像，将该人脸图像与账户对应的人脸图像进行比对，以便于判断服药用户是否为账户对应的用户。在保证服药用户为账户对应的用户时，根据掌中药物区域获取掌中的药物数据。
舌上药物检测单元132，用于通过口腔药物区域获取口腔药物数据。
具体实施时，检测到掌中药物数据后，提示用户进行服药，在服药的过程中，用户将掌中的药物投入口腔。检测到用户将药物投入口腔后，获取口腔药物区域的药物数据。其中，口腔药物区域可以是舌上区域或舌下区域，检测口腔药物数据主要是为了保证用户将掌中药物数据完全投入口腔药物区域，防止用户中途遗失药物或故意丢弃药物，没有将掌中药物全部放入口腔药物区域。
药物吞服检测单元133，用于在口腔药物数据与手持药物数据一致时，根据用户含药前的口腔图像和用户含药后的口腔图像对应的舌上和舌下区域判断用户是否将口腔药物吞服。
具体实施时，在检测到口腔药物数据与手持药物数据一致时，根据用户含药前的口腔图像与含药后的口腔图像对应的舌上舌下区域判断用户是否将口腔药物区域对应的药物完全服用。可以清楚的是，获取用户含药前的口腔图像是为了与用户口腔药物区域和含药后的口腔图像进行比对，以确定用户是否将口腔药物区域内的药物吞服。
服药单元134，用于在判断结果为是时，判定掌中药物数据为用户的服药数据。
具体实施时，在检测到用户口腔数据与手持数据一致时，判定掌中药物数据为用户的服药数据，以确定用户将掌中药物完全吞服。其中，获取掌中药物区域图像是为了更方便地获取掌中药物数据是否为账户对应的药物数据，其中，掌中药物数据的品类和数量可以通过药物的颜色和、形状。以及颗粒数目来区分，口腔药物数据只需要检测药品数量，减少口腔药物数据的获取难度。
本实施例中，通过口腔药物区域获取口腔药物数据，在口腔药物数据与手持药物数据一致时，根据用户含药前的口腔图像和用户含药后的口腔图像对应的所述舌上和舌下区域判断用户是否将口腔药物吞服，对用户的服药过程进行监督，直到药物完全吞服，保证了监督用户服药过程完整性，解决了现有技术中不能监督患者是否按规定进行服药的技术问题。
请参阅图8，为本发明第八实施例提供的服药监督装置的功能模块示意图。应用于计算机设备，该计算机设备包括但不限于移动电话、手机、智能手机、平板电脑、个人电脑、个人数字助理、媒体播放器、服务器和其他电子设备。该服药监督装置包括验证模块110、图像采集模块120、服药数据模块130、以及服药检测模块140。在第五实施例的基础上，所述装置还包括：
提醒模块150，用于在服药数据与账户对应的待服药数据不匹配时，向用户发送提示信息。
本实施例中，用户服药数据可能与账户对应的待服药数据不匹配，存在多种情况：其中，在服药数据对应的药品小于账户对应的服药数据对应的药品时，向用户发送继续服药提示，重新检测用户用药；在服药数据对应的药品数据大于账户对应的服药数据对应的药品时，向用户发送警告，当然，可以在掌中药物数据对应的药品大于账户对应药品时就发出警告。通过对用户的身份进行验证，以及对用户服药的过程进行监督，在用户服药数据与账户对应的服药数据不一致时向用户发送提示信息，同时解决了现有技术中不能监督患者是否按规定进行服药的技术问题。
本发明实施例还提供了一种计算机设备，包括：处理器、存储器及通信总线；通信总线用于实现处理器和存储器之间的连接通信；
处理器用于执行存储器中存储的服药监督程序，以实现如下步骤：
步骤S101，判断采集到的人脸图像与账户对应的人脸图像是否匹配。
步骤S102，当判断结果为是时，按照预设的规则采集用户的服药图像。
步骤S103，根据服药图像获取用户的服药数据。
步骤S104，在服药数据与账户对应的待服药数据匹配时，判定用户服药完成。
可选的，执行的步骤可替换为步骤S201至步骤S204、步骤S301至步骤S307、以及步骤S401至步骤S408。
由于在第一实施例至第四实施例中已经对服药监督方法实施过程进行了详细说明，本实施例中不再赘述。
本实施例中，该计算机设备包括但不限于移动电话、手机、智能手机、平板电脑、个人电脑、个人数字助理、媒体播放器、服务器和其他电子设备。
本发明实施例还提供了一种计算机可读存储介质，该计算机可读存储介质存储有服药监督方法，当服药监督方法被至少一个处理器执行时，导致至少一个处理器执行如下步骤：
步骤S101，判断采集到的人脸图像与账户对应的人脸图像是否匹配。
步骤S102，当判断结果为是时，按照预设的规则采集用户的服药图像。
步骤S103，根据服药图像获取用户的服药数据。
步骤S104，在服药数据与账户对应的待服药数据匹配时，判定用户服药完成。
可选的，执行的步骤可替换为步骤S201至步骤S204、步骤S301至步骤S307、以及步骤S401至步骤S408。
由于在第一实施例至第四实施例中已经对服药监督方法实施过程进行了详细说明，本实施例中不再赘述。
本实施例计算机可读存储介质包括但不限于为：ROM、RAM、磁盘或光盘等。
综上所述，本发明实施例公开了一种服药监督的方法、装置、计算机可读存储介质及设备，通过判断采集到的人脸图像与账户对应的人脸图像匹配时，按照预设的采集规则采集用户的服药图像，根据服药图像获取用户的服药数据，在服药数据与账户对应的待服药数据匹配时，判定用户服药完成。通过对用户的身份进行验证，以及对用户服药的过程进行监督，解决了现有技术中不能监督患者是否按规定进行服药的技术问题。
在本申请所提供的实施例中，应该理解到，所揭露的装置和方法，也可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，附图中的流程图和框图显示了根据本发明的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分，所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现方式中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
另外，在本发明各个实施例中的各功能模块可以集成在一起形成一个独立的部分，也可以是各个模块单独存在，也可以两个或两个以上模块集成形成一个独立的部分。
总之，以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种服药监督方法，其特征在于，所述方法包括：
判断采集到的人脸图像与账户对应的人脸图像是否匹配；
当判断结果为是时，按照预设的规则采集用户的服药图像；
根据所述服药图像获取用户的服药数据；
在所述服药数据与所述账户对应的待服药数据匹配时，判定用户服药完成。
2.如权利要求1所述的方法，其特征在于，所述按照预设的规则采集用户的服药图像，包括：
采集用户手持药物图像，所述手持药物图像中包含用户的人脸区域和掌中药物区域；
采集用户含药前的口腔图像，所述口腔图像中包含用户的舌上和舌下区域；
采集用户含药时的口腔图像，所述口腔图像中包含用户的口腔药物区域；
采集用户含药后的口腔图像，所述口腔图像中包括用户的舌上和舌下区域。
3.如权利要求2所述的方法，其特征在于，所述根据所述服药图像获取用户的服药数据，包括：
在检测到所述人脸区域对应的用户与所述账户对应的用户一致时，根据所述掌中药物区域获取掌中药物数据；
通过所述口腔药物区域获取口腔药物数据；
在所述口腔药物数据与所述手持药物数据一致时，根据所述用户含药前的口腔图像和所述用户含药后的口腔图像对应的所述舌上和舌下区域判断用户是否将口腔药物吞服；
当判断结果为是时，判定掌中药物数据为用户的服药数据。
4.如权利要求1所述的方法，其特征在于，所述方法还包括：
在所述服药数据与所述账户对应的待服药数据不匹配时，向用户发送提示信息。
5.一种服药监督装置，其特征在于，所述装置包括：
验证模块，用于判断采集到的人脸图像与账户对应的人脸图像是否匹配；
图像采集模块，用于在判断结果为是时，按照预设的规则采集用户的服药图像；
服药数据模块，用于根据所述服药图像获取用户的服药数据；
服药检测模块，用于在所述服药数据与所述账户对应的待服药数据匹配时，判定用户服药完成。
6.如权利要求5所述的装置，其特征在于，所述图像采集模块包括：
手持药物采集单元，用于采集用户手持药物图像，所述手持药物图像中包含用户的人脸区域和掌中药物区域；
含药前口腔采集单元，用于采集用户含药前的口腔图像，所述口腔图像中包含用户的舌上和舌下区域；
户含药时口腔采集单元，用于采集用户含药时的口腔图像，所述口腔图像中包含用户的口腔药物区域；
含药后的口腔采集单元，用于采集用户含药后的口腔图像，所述口腔图像中包括用户的舌上和舌下区域。
7.如权利要求6所述的装置，其特征在于，所述服药数据模块包括：
掌中药物检测单元，用于在检测到所述人脸区域对应的用户与所述账户对应的用户一致时，根据所述掌中药物区域获取掌中药物数据；
舌上药物检测单元，用于通过所述口腔药物区域获取口腔药物数据；
药物吞服检测单元，用于在所述口腔药物数据与所述手持药物数据一致时，根据所述用户含药前的口腔图像和所述用户含药后的口腔图像对应的所述舌上和舌下区域判断用户是否将口腔药物吞服；
服药单元，用于在判断结果为是时，判定掌中药物数据为用户的服药数据。
8.如权利要求5所述的装置，其特征在于，所述装置还包括：
提醒模块，用于在所述服药数据与所述账户对应的待服药数据不匹配时，向用户发送提示信息。
9.一种计算设备，其特征在于，包括：处理器、存储器及通信总线；
所述通信总线用于实现处理器和存储器之间的连接通信；
所述处理器用于执行所述存储器中存储的应用程序的服药监督方法程序，以实现如权利要求1至4中任意一项所述的方法的步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有应用程序的服药监督方法程序，当所述应用程序的服药监督方法程序被至少一个处理器执行时，实现如权利要求1至4任意一项所述的方法步骤。
CN201810638442.7A 2018-06-20 2018-06-20 一种服药监督方法、装置、可读存储介质及设备 Pending CN108766519A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810638442.7A CN108766519A (zh) 2018-06-20 2018-06-20 一种服药监督方法、装置、可读存储介质及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810638442.7A CN108766519A (zh) 2018-06-20 2018-06-20 一种服药监督方法、装置、可读存储介质及设备

Publications (1)

Publication Number Publication Date
CN108766519A true CN108766519A (zh) 2018-11-06

Family

ID=63979509

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810638442.7A Pending CN108766519A (zh) 2018-06-20 2018-06-20 一种服药监督方法、装置、可读存储介质及设备

Country Status (1)

Country Link
CN (1) CN108766519A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109800632A (zh) * 2018-12-11 2019-05-24 广东省结核病控制中心 一种用于结核病患者的服药行为识别方法及系统
CN111009297A (zh) * 2019-12-05 2020-04-14 中新智擎科技有限公司 一种用户服药行为的监督方法、装置及智能机器人
CN111402987A (zh) * 2019-12-31 2020-07-10 武汉星巡智能科技有限公司 基于可见光视频的用药提醒方法、装置、设备及存储介质
CN111627514A (zh) * 2020-04-16 2020-09-04 厦门宸力科技有限公司 一种自助服药监测方法、服药机和系统
CN113823376A (zh) * 2021-08-12 2021-12-21 平安国际智慧城市科技股份有限公司 智能服药提醒方法、装置、设备及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040059312A (ko) * 2002-12-28 2004-07-05 삼성전자주식회사 혀영상으로부터 관심영역 추출방법 및 혀영상을 이용한건강 모니터링방법 및 장치
CN106558312A (zh) * 2016-11-17 2017-04-05 浙江省海宁市看守所 监督服药的方法
CN107315904A (zh) * 2017-05-26 2017-11-03 深圳市南山区慢性病防治院 患者服药远程监控系统及方法
CN107451592A (zh) * 2017-06-30 2017-12-08 广东数相智能科技有限公司 一种处方药品核对方法及装置
CN107890422A (zh) * 2017-10-16 2018-04-10 深圳市南山区慢性病防治院 一种监督管理慢性病患者服药的新型智能药盒

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040059312A (ko) * 2002-12-28 2004-07-05 삼성전자주식회사 혀영상으로부터 관심영역 추출방법 및 혀영상을 이용한건강 모니터링방법 및 장치
CN106558312A (zh) * 2016-11-17 2017-04-05 浙江省海宁市看守所 监督服药的方法
CN107315904A (zh) * 2017-05-26 2017-11-03 深圳市南山区慢性病防治院 患者服药远程监控系统及方法
CN107451592A (zh) * 2017-06-30 2017-12-08 广东数相智能科技有限公司 一种处方药品核对方法及装置
CN107890422A (zh) * 2017-10-16 2018-04-10 深圳市南山区慢性病防治院 一种监督管理慢性病患者服药的新型智能药盒

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109800632A (zh) * 2018-12-11 2019-05-24 广东省结核病控制中心 一种用于结核病患者的服药行为识别方法及系统
CN111009297A (zh) * 2019-12-05 2020-04-14 中新智擎科技有限公司 一种用户服药行为的监督方法、装置及智能机器人
CN111009297B (zh) * 2019-12-05 2023-09-19 中新智擎科技有限公司 一种用户服药行为的监督方法、装置及智能机器人
CN111402987A (zh) * 2019-12-31 2020-07-10 武汉星巡智能科技有限公司 基于可见光视频的用药提醒方法、装置、设备及存储介质
CN111402987B (zh) * 2019-12-31 2024-05-10 武汉星巡智能科技有限公司 基于可见光视频的用药提醒方法、装置、设备及存储介质
CN111627514A (zh) * 2020-04-16 2020-09-04 厦门宸力科技有限公司 一种自助服药监测方法、服药机和系统
CN111627514B (zh) * 2020-04-16 2023-02-10 厦门宸力科技有限公司 一种自助服药监测方法、服药机和系统
CN113823376A (zh) * 2021-08-12 2021-12-21 平安国际智慧城市科技股份有限公司 智能服药提醒方法、装置、设备及存储介质
CN113823376B (zh) * 2021-08-12 2023-08-15 深圳平安智慧医健科技有限公司 智能服药提醒方法、装置、设备及存储介质

Similar Documents

Publication Publication Date Title
CN108766519A (zh) 一种服药监督方法、装置、可读存储介质及设备
US11417422B2 (en) Medication adherence monitoring system and method
US20220122698A1 (en) Apparatus and Method for Recognition of Medication Administration Indicator
Vargas-Cuentas et al. Developing an eye-tracking algorithm as a potential tool for early diagnosis of autism spectrum disorder in children
Palmer et al. Face pareidolia recruits mechanisms for detecting human social attention
AU2018335288B2 (en) Apparatus and method for recognition of suspicious activities
CN105120827B (zh) 用于可疑活动辨别的装置和方法
Anton-Erxleben et al. Evaluating comparative and equality judgments in contrast perception: Attention alters appearance
US10028653B2 (en) Assessment of low contrast visual sensitivity
CN109887568A (zh) 基于医嘱的健康管理系统
US20160196503A1 (en) Method and apparatus for recognition of patient activity
CN106971084B (zh) 一种家庭健康管理系统及方法
JP2017522104A (ja) 目状態決定システム
CN105940428A (zh) 信息处理装置、信息处理方法及程序
CN113516017B (zh) 服药过程的监督方法、装置、终端设备及存储介质
CN107273691A (zh) 一种监控患者药物使用情况的系统及方法
CN106415654A (zh) 信息处理装置、信息处理方法及程序
CN110660454A (zh) 一种癌痛实时评估仪及其评估方法
Corradi-Dell’Acqua et al. Pain management decisions in emergency hospitals are predicted by brain activity during empathy and error monitoring
Sibley et al. An evaluation of KELVIN, an artificial intelligence platform, as an objective assessment of the MDS UPDRS part III
CN110544533A (zh) 依据医嘱进行健康监控的系统
EP3949832A1 (en) Illness aggravation estimation system
CN111724896B (zh) 一种基于多刺激图片或视频erp的毒瘾评估系统
CN116492227B (zh) 基于人工智能的服药提示方法及系统
KR20130107519A (ko) 텔리-덴탈 스마트 케어 시스템 및 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20181106

RJ01 Rejection of invention patent application after publication