CN114420281A - 一种家庭健康助理装置及其实现方法 - Google Patents

Abstract

本发明提供一种家庭健康助理装置，其包括微处理器和存储器、麦克风、喇叭、采集图片的摄像头；该摄像头对一药盒进行拍照得到一基准照片，根据该基准照片录入一段与该基准照片一一对应的基准语音，该基准语音为用使用者听得懂的语言通过该麦克风录入该药盒药品的医生处方指导服药方法的一段声音，并将该基准照片和该基准语音的数据存储在该存储器中；当使用者拿起该药盒放在该摄像头的拍照位置时，该微处理器将收到的该药盒的照片与该基准照片进行比较，如果比较图片成功则通过该喇叭播放对应录入的基准语音以提示服药方法，如果比较图片失败则该喇叭播放识别错误的语音信息。本发明还提供一种家庭健康助理装置的实现方法。

Description

一种家庭健康助理装置及其实现方法

技术领域

本发明涉及一种健康辅助装置及其实现方法，尤其涉及一种家庭健康助理装置及其实现方法。

背景技术

目前，随着经济的发展和人们生活水平越来越高，健康问题已成为人们普遍关心的问题。当今社会人口老龄化越来越严重，越来越多的老人身体患有多种慢性疾病，需要长期吃药。有的老人不识字，记忆力不好，每次医院买回新药，在吃药前都要问家人，按照医生说明该怎么吃药。然而，多种药有不同的吃法，而且分早中晚吃，这样会给老人带来很大的麻烦。同时家人不是每次吃药前都在老人身边，有时候家人也担心老人会吃错了药。家人只好打来电话询问，或者通过视频电话按照药盒上的文字指导来告知老人怎么吃药。长此以往，家人都会觉得非常疲惫，万一有一天家人自己都忘记了，会给老人带来极大的健康风险。

因此，有必要设计一款没有语言障碍的普及型的家庭健康助理装置，并可及时提醒使用者按时吃药，已经成为设计者要去突破的课题。

发明内容

针对上述现有技术存在的不足，本发明的目的是提供一种家庭健康助理装置，有效解决了现有的家庭健康助理装置具有语言障碍、普及率不高以及使用不方便的问题。

本发明的技术问题是通过以下技术方案实现的：提供一种家庭健康助理装置，其包括主板，所述主板上设有微处理器和存储器，该家庭健康助理装置还包括录入声音的麦克风、播放语音的喇叭、以及采集图片的摄像头；

如果所述主板上只设有一组微处理器和存储器时，所述摄像头对一药盒进行拍照得到一基准照片，根据所述基准照片录入一段与所述基准照片一一对应的基准语音，所述基准语音为用使用者听得懂的语言通过所述麦克风录入所述药盒药品的医生处方指导服药方法的一段声音，并将所述基准照片和所述基准语音的数据存储在所述存储器中；当使用者拿起所述药盒放在所述摄像头的拍照位置时，所述家庭健康助理装置的微处理器将收到的所述摄像头采集到的所述药盒的照片与所述基准照片进行比较，如果比较图片成功则通过所述喇叭播放对应录入的基准语音以提示服药方法，如果比较图片失败则所述喇叭播放识别错误的语音信息；

如果所述主板上设有至少两组独立工作的微处理器和存储器时，所述摄像头对一药盒进行拍照得到一基准照片，根据所述基准照片录入一段与所述基准照片一一对应的基准语音，所述基准语音为用使用者听得懂的语言通过所述麦克风录入所述药盒药品的医生处方指导服药方法的一段声音，并将所述基准照片和所述基准语音的数据分别存储在所述至少两组存储器中；当使用者拿起所述药盒放在所述摄像头的拍照位置时，所述家庭健康助理装置的所述至少两组微处理器分别将收到的所述摄像头采集到的所述药盒的照片与所述至少两组对应的存储器中的基准照片进行比较，如果每一组比较图片都成功则通过所述喇叭播放对应录入的基准语音以提示服药方法，如果任意一组比较图片失败则所述喇叭播放识别错误的语音信息。

较佳地，进一步包括物体接近开关，当所述物体接近开关感应到所述摄像头下没有物体接近时，所述家庭健康助理装置在设定的时间内就自动进入省电待机状态，当所述物体接近开关感应到物体接近时立即唤醒所述家庭健康助理装置开始工作。

较佳地，进一步包括显示屏，所述家庭健康助理装置的微处理器自动识别所述药盒的图片并显示所述图片和对应所述药盒的所述基准照片在所述显示屏上。

较佳地，进一步包括定时语音提醒使用者吃药或已经按医嘱吃过药时不要重复吃药的语音提醒模块。

较佳地，进一步包括无线通信模块，所述无线通信模块将使用者的服药数据传入到云端服务器。

较佳地，所述无线通信模块包括蓝牙模块、Wifi模块、Zigbee模块、GSM模块、5G模块、及RFID模块。

较佳地，所述无线通信模块同时将所述基准照片和与所述基准照片对应的基准语音发送到所述云端服务器；当使用者拿起所述药盒放在所述摄像头的拍照位置时，所述摄像头采集到的所述药盒的图片分别与所述存储器储存的基准照片以及所述云端服务器上存储的基准照片进行比较，如果两次比较结果都是成功识别图片，则通过所述喇叭播放对应录入的基准语音以提示服药方法；如果两次比较结果有一次识别失败，则通过所述喇叭播放识别错误的语音信息。

较佳地，所述无线通信模块同时将所述基准照片和与所述基准照片对应的基准语音发送到所述云端服务器；当使用者拿起所述药盒放在所述摄像头的拍照位置时，所述至少两组独立工作的微处理器将所述摄像头采集到的所述药盒的照片分别与所述至少两组对应的存储器中的基准照片进行比较，所述云端服务器将接收到所述摄像头采集到的所述药盒的图片和所述云端服务器存储的基准照片进行比较；如果每一组比较图片成功则通过所述喇叭播放对应录入的基准语音以提示服药方法，如果任意一组比较图片失败则所述喇叭播放识别错误的语音信息。

本发明的另一技术问题是通过以下技术方案实现的：提供一种家庭健康助理装置的实现方法，所述方法包括如下步骤：

提供一个家庭健康助理装置，所述家庭健康助理装置包括一主板，所述主板上设有微处理器和存储器，所述家庭健康助理装置还包括录入声音的麦克风、播放语音的喇叭、采集图片的摄像头；

通过所述摄像头对至少一药盒进行拍照得到一基准照片，根据所述基准照片录入一段与所述基准照片一一对应的基准语音，所述基准语音为用使用者听得懂的语言通过所述麦克风录入所述药盒药品的医生处方指导服药方法的一段声音；

将所述基准照片和所述基准语音的数据存储在所述存储器中；

当使用者拿起所述药盒放在所述摄像头的拍照位置时，所述微处理器将收到的所述摄像头采集到的所述药盒的照片与所述基准照片进行比较，如果比较图片成功则通过所述喇叭播放对应录入的基准语音以提示服药方法；如果比较图片失败则通过所述喇叭播放识别错误的语音信息；

如果所述主板上设有至少两组独立工作的微处理器和存储器时，所述基准照片和所述基准语音的数据分别存储在所述至少两组存储器中；当使用者拿起所述药盒放在所述摄像头的拍照位置时，所述家庭健康助理装置的所述至少两组微处理器分别将收到的所述摄像头采集到的所述药盒的照片与所述至少两组对应的存储器中的基准照片进行比较，如果每一组都比较图片成功则通过所述喇叭播放对应录入的基准语音以提示服药方法，如果任意一组比较图片失败则所述喇叭播放识别错误的语音信息。

较佳地，当所述家庭健康助理装置包括的物体接近开关感应到所述摄像头下没有物体接近时，所述家庭健康助理装置在设定的时间内就自动进入省电待机状态，当所述物体接近开关感应到物体接近时立即唤醒所述家庭健康助理装置开始工作。

较佳地，进一步包括语音提醒使用者吃药或不要重复吃药的语音提醒模块。

较佳地，进一步包括通过一无线通信模块将使用者的服药数据传入到云端服务器。

较佳地，通过所述无线通信模块同时将所述基准照片和与所述基准照片对应的基准语音发送到所述云端服务器；当使用者拿起所述药盒放在所述摄像头的拍照位置时，所述摄像头采集到的所述药盒的图片分别与所述存储器储存的基准照片以及所述云端服务器上存储的基准照片进行比较，如果两次比较结果都是成功识别图片，则通过所述喇叭播放对应录入的基准语音以提示服药方法；如果两次比较结果有一次识别失败，则通过所述喇叭播放识别错误的语音信息。

较佳地，通过所述无线通信模块同时将所述基准照片和与所述基准照片对应的基准语音发送到所述云端服务器；当使用者拿起所述药盒放在所述摄像头的拍照位置时，所述至少两组独立工作的微处理器将所述摄像头采集到的所述药盒的照片分别与所述至少两组对应的存储器中的基准照片进行比较，所述云端服务器将接收到所述摄像头采集到的所述药盒的图片和所述云端服务器存储的基准照片进行比较；如果每一组比较图片成功则通过所述喇叭播放对应录入的基准语音以提示服药方法，如果任意一组比较图片失败则所述喇叭播放识别错误的语音信息。

本发明的又一技术问题是通过以下技术方案实现的：一种家庭健康助理装置，包括录入声音的麦克风、播放语音的喇叭、采集图片的摄像头、以及无线通信模块；

所述摄像头对一药盒进行拍照得到一基准照片，根据所述基准照片录入一段与所述基准照片一一对应的基准语音，所述基准语音为用使用者听得懂的语言通过所述麦克风录入所述药盒药品的医生处方指导服药方法的一段声音，并通过所述无线通信模块将所述基准照片和所述基准语音的数据发送并存储在云端服务器的至少一独立工作的存储器中；当使用者拿起所述药盒放在所述摄像头的拍照位置时，所述云端服务器的至少一独立工作的微处理器将收到的所述摄像头采集到的所述药盒的照片与所述基准照片进行比较，如果比较图片成功则通过所述喇叭播放对应录入的基准语音以提示服药方法，如果比较图片失败则所述喇叭播放识别错误的语音信息。

采用上述技术方案后，本发明和现有技术相比所具有的优点是：本发明的家庭健康助理装置解决了语言和文字的冲突，使任何没有文字基础的人，可以识别复杂药物的医嘱服药提示并获得家人长期陪伴式的语音指导。在识别药盒成功后播放录音，在设置录音时可以在屏幕上或云端服务器设置服药人信息和药物剂量及时间，当用户拿起药盒吃药后按照录入信息保存用户的吃药记录，便于长期监督查询用户的服药依从性。通过对保存在云端服务器上绑定的基准照片和基准语音信息可为所需识别的药盒照片进行二次识别确认，以便在单机比对过程出现误判为两图片一致时，及时纠正错误防止误报，从而确保了用户服药信息指导的准确性和保证用户安全精准用药。

附图说明

图1是本发明的家庭健康助理装置的一结构示意图。

图2是本发明的家庭健康助理装置的另一结构示意图。

图3是本发明的家庭健康助理装置的主要结构框图。

图4是本发明的家庭健康助理装置的模块化实现方法结构图。

图5是本发明的家庭健康助理装置的实现方法的流程图。

具体实施方式

以下所述仅为本发明的较佳实施例，并不因此而限定本发明的保护范围。

如图1至图5所示，本发明涉及一种家庭健康助理装置100，其包括外壳10、设在该外壳10内的主板11，该主板11上设有用于运算的微处理器12和存储信息的存储器13、用于录入语音的麦克风14、用于播放语音的喇叭15、用于采集图片的至少一个摄像头16(朝下的采集摄像头)、设置在该外壳10上的开机按键20、以及为该主板11供电的外接电源或电池30。该家庭健康助理装置100可进一步包括一个前置摄像头40。该家庭健康助理装置100还可包括一个设置在外壳10表面且用于显示图像的显示屏50(可选配)和一个设在该主板11上的无线通信模块18(可选配)，该无线通信模块包括Wifi模块、ZIGBEE模块、蓝牙模块、GSM模块、5G模块、及RFID模块。该家庭健康助理装置可以单机独立工作，在加入无线通信模块后可远程联网通信。该家庭健康助理装置100还包括至少一个设置在该摄像头16旁边的物体接近开关19，该摄像头16两边还可设置朝下的无影灯(未显示)以采集清晰的图片便于提升运算处理识别效率。当该物体接近开关19感应到该摄像头16下没有物体接近时，该家庭健康助理装置100在设定的时间内(譬如5分钟后)就自动进入省电待机状态，当该物体接近开关19感应到有物体接近时立即唤醒家该家庭健康助理装置100开始工作，此时，在该摄像头16下放置药盒，该家庭健康助理装置100可以自动打开该摄像头16旁边的无影灯，该摄像头16自动抓取清晰的药盒图片传输给该微处理器12。

如图3所示，该家庭健康助理装置100的硬件功能模块包括：1、图像采集模块(相当于该家庭健康助理装置的眼睛)；2.语音输入模块(相当于该家庭健康助理装置的耳朵)；3.语音播放模块(相当于该家庭健康助理装置的嘴巴)；4.屏幕显示模块(相当于该家庭健康助理装置的脸蛋)；5.运算处理模块(相当于该家庭健康助理装置的大脑)。进一步地，该家庭健康助理装置的硬件功能模块还可包括无线通信模块(相当于该家庭健康助理装置对外沟通社交功能)。

在使用该家庭健康助理装置时，首先是定义用户人群：听力好的人群，可以是认字的人群，也可以是文盲但是可以看见的人群，还可以是视力弱或者没有视力的人群。在全世界语言不通的人群里，任何人只要用他听得懂的语言录音即可解决语音指导服药问题，对用户的文化水平没有要求，只要听力好能理解当地语言即可。正常使用是由自己的家人为家里的亲人提供语言录音支持，也可以是朋友或社工为其录音。这样就弥补了全球文盲因不识字，得不到文字指导的缺陷。因全世界人都可以听懂自己亲人或身边的朋友录制的语音，没有任何语言障碍，故该家庭健康助理装置是一款全球通用的健康产品。

该家庭健康助理装置的提示服药工作核心步骤为：

对于吃药分辨困难的人群，首先由录音者(用户的家人或亲友或本地医务人员)，按照医生处方的服药建议(不一定是药盒上药厂的出厂使用方法，也可以是处方，每个病人有不同的处方)，首先将每一个药盒放在该家庭健康助理装置的采集摄像头(朝下拍摄的)下面，开启该家庭健康助理装置的开机按键后，内部的微处理器和软件自动启动并在特定时间内(譬如3秒内)拍摄该药盒的一张或多张照片，作为药盒基准照片，然后再按照医生服药建议录制用法用量的基准语音，将这段基准语音与该组药盒基准照片绑定并储存起来；在采集用的摄像头抓取到对应的药盒照片与绑定的药盒基准照片比对一致时，该家庭健康助理装置的喇叭立即播放该对应绑定的基准语音。完成第一组录音和照片绑定后，立即可进行下一个药盒拍照和语音服药指导建议的录制，同时完成第二组药盒基准照片和基准语音的绑定，如此重复多次可以绑定多种药物(每种药物唯一对应一种药盒)的语音服药指导建议。在该家庭健康助理装置的开机状态下，用户将需要识别的药盒放在该摄像头16前，该摄像头16自动抓取药盒的照片传输给信息处理模块(即微处理器)，与该存储器内部存储的药盒基准照片进行比对，当本次采集药盒的照片与药盒基准照片比对一致时，该家庭健康助理装置的喇叭立即播放该药盒基准照片对应绑定的基准语音以提示服药方法。为了省电节能环保，在摄像头旁边设置一个或多个物体接近开关19，当该物体接近开关19感应到该摄像头16下没有物体接近时，该家庭健康助理装置在设定的时间内(譬如5分钟后)就自动进入省电待机状态，当该物体接近开关19感应到物体接近时立即唤醒该家庭健康助理装置开始工作，此时在该摄像头16下放置药盒，该家庭健康助理装置自动打开无影灯，该摄像头16自动抓取清晰的药盒图片传输给信息处理模块；该家庭健康助理装置根据运算处理结果播放对应的基准语音以提示服药方法。

在内置服药时间到了规定时间点时，该家庭健康助理装置的语音提醒模块通过该喇叭可语音提醒用户吃药，该采集用的摄像头自动朝下开启并进行图片识别模式，等待该物体接近开关19感应药盒接近时该摄像头自动抓取图片传输给微处理器(信息处理模块)进行比对识别。当用户可随机取出一盒药，放在该家庭健康助理装置的摄像头下面指定的位置，该采集摄像头自动拍摄药盒的图片并传输到微处理器并与之前录入的药盒基准照片进行对比，判断比对采集药盒图片与存储的药盒基准照片一致后，播放与对应的基准照片绑定的基准语音，指导用户按照医嘱安全精准服药。

当该家庭健康助理装置按照医生处方要求对药盒图片与录音绑定设置完成后，在任何时候，使用者可以自己打开自己的家庭健康助理装置的开关按键后，在该家庭健康助理装置的采集摄像头下放置药盒，即可获取亲人录制该药物的医生处方用法用量的语音播报提示。

对于用户听到服药建议后拿起药盒离开采集摄像头的可观察的视线时，该家庭健康助理装置的前置摄像头40自动打开并开始录像，用户按照服药建议的取药和服药过程被录像并存储下来。等用户再次放置另一药盒到朝下采集摄像头时，该采集摄像头自动抓取新图片传输给该家庭健康助理装置上的主板上的微处理器进行下一次比对，比对成功后播放本次服药建议，用户按照新建议进行安全精准服药。比对失败则提示识别错误信息。如此反复进行下一次操作，保证用户每一盒药物都能获得医生处方提示的安全精准用药指导，并且都是用户能听得懂亲人的语音在播报提示，消除了标准语言播报时不同地区用户听不懂的语言障碍，提升了该家庭健康助理装置应用范围，使之在全球任何一个国家和地区使用没有语言的障碍。

该家庭健康助理装置的核心优势是在全世界范围，没有语言和文化的障碍，提醒用户安全精准用药。让所有人有机会获得精准的医生医嘱支持，而不需要文字识别。

该家庭健康助理装置可以自动记录用户的服药情况，通过药盒采集图片比对成功后自动播放的录音来判断用户的服药依从性，比手工录入更加高效和精准。服药过程的视频监控也为用户自己提供了可视化的服药记录，便于用户查询确认自己是否服药。

更进一步地，该家庭健康助理装置设置两组或两组以上独立工作的存储器和微处理器。当该主板上只有一组存储器和微处理器(一个存储器和一个与之匹配的微处理器称为一组存储器和微处理器)时，可以为单机版独立工作。当设置有两组独立工作的存储器和微处理器时，每组的存储器都分别存储有基准照片和基准语音，每组的微处理器都分别对收到摄像头传输的采集图片进行识别，当两组微处理器都正确识别图片后，家庭健康助理装置才播报提示语音信息。当两组微处理器有任何一组识别错误或者出现故障，家庭健康助理装置即停止服药提示信息播报，而播放错误提示信息，以便保证用户服药的安全。因为这样设计设置，该家庭健康助理装置可以在全世界任何地方独立工作，不需要外部网络支持，使用市场范围更加广阔。如果该家庭健康助理装置装设有无线通信模块和一云端服务器(本机没有处理器，处理运算工作放在云端服务器)，该无线通信模块同时将所述基准照片和与所述基准照片对应的基准语音发送到该云端服务器；当使用者拿起该药盒放在该摄像头的拍照位置时，该两组独立工作的微处理器分别将收到的该摄像头采集到的该药盒的照片与该两组对应的存储器中的基准照片进行比较，该云端服务器将将接收到的所述摄像头采集到的所述药盒的图片与该云端服务器存储的基准照片进行比较；如果上述每一组比较图片成功则通过该喇叭播放对应录入的基准语音以提示服药方法，如果任意一组比较图片失败则该喇叭播放识别错误的语音信息。

可以理解，如果该家庭健康助理装置设置三组或三组以上的存储器和微处理器，比较方法与两组相同，在次不再赘述。

该家庭健康助理装置内的软件可以加载在任何智能设备上(智能手机，平板电脑，个人电脑，云计算电脑等)，为用户安全精准服药提供其能听得懂的语言的语音播报提示。

该家庭健康助理装置的具体功能如下：

该家庭健康助理装置在具备语音录入和播放的功能时，也可具备录像拍照功能和屏幕显示功能。屏幕显示功能是非必要的，用户是可选择的。

该家庭健康助理装置的核心功能是：该家庭健康助理装置可以通过摄像头对药盒(包装盒)拍照，按拍摄的照片用家人听得懂的地方语言录入该药盒药品的医生处方指导的服药方法。当服药人员拿起该药盒放在该家庭健康助理装置的摄像头下面(或前面)时，该家庭健康助理装置的摄像头自动采集图片并通过微处理器识别该药盒图片，如果比对结果是正确识别图片则显示药盒基准照片和本次采集图片在显示屏上，并且播放对应录入的基准语音提示服药方法；如果比对失败，屏幕只显示本次采集图片并语音播报图片识别错误的语音信息。当用户调整药盒位置后，摄像头自动抓取图片传给该微处理器运算处理，进行下一次图片识别比对工作。因为摄像头旁设置有物体接近开关，当用户不在摄像头下放置药盒时，在特定时间内(譬如5分钟)该家庭健康助理装置进入省电待机状态。

该家庭健康助理装置的实现家庭健康助理工作的具体步骤是：首先，按照开始录入的不同药盒照片和语音，一一对应，即第一张药盒的照片对应绑定第一段录入的语音，第二张另一药盒的照片对应绑定第二段录入的语音，第三张又一个药盒的照片对应绑定第三段录入的语音，以此类推。其次，每张不同的药盒照片是事先录入并存储在该家庭健康助理装置的存储器内，需要保证录入照片的清晰程度，以此照片作为比对的药盒基准照片；之后就是每次服药前用户将药盒(包装盒，盒内必须有药品)放在该家庭健康助理装置的摄像头下面(或摄像头前方)。通过识别比对采集的药盒图片与药盒基准照片是否一致，精准判断本次采集的图片对应播放哪一段语音提示，用于指导用户安全精准服药。综合来说，该家庭健康助理装置能对录入的图片和语音进行保存，在摄像头拍摄到对应的药盒图片时就播放该药盒基准照片对应绑定的基准语音提醒，用于指导耳朵能听清且生活能自理的用户安全精准服药。

作为一种选择，由于现在很多摄像头都可远程保存图像和语音，并且可以采集语音和播放语音，在可以联网的情况下，该家庭健康助理装置可以简化为一个联网的可双向语音通信的摄像头，该摄像头内置的语音录入麦克风和播放喇叭。所有图片比对的运算处理工作都在云端服务器进行处理，云端服务器通过分布式计算机进行两次或两次以上的图片识别运算，每次识别结果至少包括输出两台独立的工作服务器计算机的正确比对结果，根据这两组服务器运算的正确比对结果，云端服务器传输对应的基准语音给远程的摄像头播放出来以便提示用户服药方法。摄像头只需要接受远程播放的语音提示，同时摄像头在进行图片采集时立即录制用户能听懂的录音传送云端服务器即可，云端服务器根据采集的图片和语音进行绑定，当用户放置药盒给摄像头识别时，摄像头传输图片给云端服务器，云端服务器比对图片成功后发送对应绑定的语音给摄像头播放；如果比对失败则提示识图错误语音信息，用户可进行下一次识别(下一次识别时可以再次识别上次识别的药盒，也可以识别新的药盒)。这样的家庭健康助理只需可远程录音和播音的摄像头即可工作，可以大大降低家庭健康助理的硬件制造成本，适合大批量低成本制造，便于全世界推广，服务全球各地区的人民。

作为又一种选择，改造现有家庭的智能电视设备，通过配置外置的麦克风摄像头，安装家庭健康助理软件，可以让家里的智能电视机实现健康助理的功能。

该家庭健康助理装置可以是一种家庭智能机器人，有麦克风，喇叭，摄像头和显示屏，能连接互联网云端。当该家庭健康助理装置连接云端服务器时，云端数据库存储市场上在售药物的说明书，通过摄像头扫描药盒的二维码或商品条形码，可以传输给家庭健康助理装置药品说明书的标准用法用量，通过智能机器人家庭健康助理装置内置文字识别语音软件可进行语音播放。该家庭健康助理装置除了按照语音录入指导家人安全服药外，还可提醒家人改善生活习惯，也可以实现智能语音人机对话、远程连接亲人或医生进行视频通话、指导学生进行学习辅导等等。

该家庭健康助理装置还具备定时服药提醒功能，在通电的条件下，所有待机或关机状态都可进行计时工作，所以该家庭健康助理装置可以定时提醒家人按时服药。定时提示信息可以设置，在设置定时服药时间的后，立即录入语音进行绑定。当所定时间到时，喇叭播放对应绑定录入的提示语音。

该家庭健康助理装置可以不带有显示屏幕。如果该健康助理自身带显示屏，那么每次提示的语音时，屏幕上都会显示实时采集的药盒图片，如果药盒比对绑定信息成功，则屏幕显示本次采集的图片和比对成功的药盒基准照片，并播放对应绑定的语音提示服药信息。屏幕显示的本次采集药盒图片和基准照片，以便用户确认识别图片的一致性。如过采集图片比对失败，屏幕只显示本次采集的药盒图片，并且语音播报图片识别失败的语音信息，用户可调整药盒位置再次识别或换新的药盒进行下一次识别。

在该家庭健康助理装置可以联网的情况下，当用户没有录入语音提示的药物，用户可以选择云端识别模式，进入云端服务器智能识别提示，按照药盒查各药厂的药物标准说明书，按照说明书内容通过普通话播报药物的用法用量。这样对我们普通人没有看说明书的情况下也可以获得按照药厂药物的说明书指导进行服药，方便人们安全精准用药。

在联网状态下，对于需要特殊方言指导的家人，录音者可以远程按照药盒药品为家人拍摄基准照片和录制基准语音，传输云端服务器进行绑定，为用户的家庭健康助理更新绑定基准照片和基准语音信息。在设置云端服务器绑定信息成功后，用户也可通过家庭健康助理联网进行图片识别，获取服药指导建议。

通过该家庭健康助理装置的摄像头和屏幕显示，可以进行人脸识别，精准录入不同家人服药提示信息。

在该家庭健康助理装置配置无线通信模块(蓝牙、Wifi、Zigbee、GSM，5G、RFID等模块)时，通过该无线通信模块，可将家庭日常健康检测的医疗健康参数传输给家庭健康助理，以便健康助理对用户提供精准的日常生活的健康管理建议。

本发明还提供了一种家庭健康助理装置的实现方法，所述方法包括如下步骤：

提供一个家庭健康助理装置，所述家庭健康助理装置包括一主板，所述主板上设有微处理器和存储数据的存储器，所述家庭健康助理装置还包括录入声音的麦克风、播放语音的喇叭、采集图片的摄像头；

通过所述摄像头对至少一药盒进行拍照得到一基准照片，根据所述基准照片录入一段与所述基准照片一一对应的基准语音，所述基准语音为用使用者听得懂的语言通过所述麦克风录入所述药盒药品的医生处方指导服药方法的一段声音；

将所述基准照片和所述基准语音的数据存储在所述存储器中；

当使用者拿起所述药盒放在所述摄像头的拍照位置时，所述微处理器将收到的所述摄像头采集到的所述药盒的照片与所述基准照片进行比较，如果比较图片成功则通过所述喇叭播放对应录入的基准语音以提示服药方法；如果比较图片失败则通过所述喇叭播放识别错误的语音信息；

如果所述主板上设有至少两组独立工作的微处理器和存储器时，所述基准照片和所述基准语音的数据分别存储在所述至少两组存储器中；当使用者拿起所述药盒放在所述摄像头的拍照位置时，所述家庭健康助理装置的所述至少两组微处理器分别将收到的所述摄像头采集到的所述药盒的照片与所述至少两组对应的存储器中的基准照片进行比较，如果每一组都比较图片成功则通过所述喇叭播放对应录入的基准语音以提示服药方法，如果任意一组比较图片失败则所述喇叭播放识别错误的语音信息。

当所述家庭健康助理装置包括的物体接近开关感应到所述摄像头下没有物体接近时，所述家庭健康助理装置在设定的时间内就自动进入省电待机状态，当所述物体接近开关感应到物体接近时立即唤醒所述家庭健康助理装置开始工作。

该实现方法进一步包括语音提醒使用者吃药或不要重复吃药的语音提醒模块。

该实现方法进一步包括通过一无线通信模块将使用者的服药数据传入到云端服务器。

通过所述无线通信模块同时将所述基准照片和与所述基准照片对应的基准语音发送到所述云端服务器；当使用者拿起所述药盒放在所述摄像头的拍照位置时，所述摄像头采集到的所述药盒的图片分别与所述存储器储存的基准照片以及所述云端服务器上存储的基准照片进行比较，如果两次比较结果都是成功识别图片，则通过所述喇叭播放对应录入的基准语音以提示服药方法；如果两次比较结果有一次识别失败，则通过所述喇叭播放识别错误的语音信息。

通过所述无线通信模块同时将所述基准照片和与所述基准照片对应的基准语音发送到所述云端服务器；当使用者拿起所述药盒放在所述摄像头的拍照位置时，所述至少两组独立工作的微处理器将所述摄像头采集到的所述药盒的照片分别与所述至少两组对应的存储器中的基准照片进行比较，所述云端服务器将接收到所述摄像头采集到的所述药盒的图片和所述云端服务器存储的基准照片进行比较；如果每一组比较图片成功则通过所述喇叭播放对应录入的基准语音以提示服药方法，如果任意一组比较图片失败则所述喇叭播放识别错误的语音信息。

或者，本发明还提供了一种家庭健康助理装置的实现方法，所述方法包括如下步骤：

步骤S01：多次向家庭健康助理装置内录入不同药盒图片和绑定与不同药盒对应的用药提示语音；所述基准语音为用使用者听得懂的语言通过所述麦克风录入所述药盒药品的医生处方指导的服药方法的一段语音；

步骤S02：将所述基准照片和所述基准语音的数据存储在所述存储器中；

步骤S03：当使用者拿起所述药盒放在所述摄像头的拍照位置时，所述微处理器自动识别所述药盒的照片成功后并通过所述喇叭播放对应录入的基准语音以提示服药方法；

步骤S04：通过统计放置识别药盒播放提示的记录，判断用户是否按时服药；对于一天只要服用一次的药物，在一天内第二次放置图片时提示用户已经服药过一次，不要重复服药；对于每天需要多次服药的药物，可以根据采集的图片时间判断是一天内第几次服药，提示不要重复服药。

此外，该家庭健康助理装置的麦克风，喇叭，和屏幕都可以设置一个或多个，以便不同方向录音、播放以及显示。

可以理解，本发明还可提供一种网络版的家庭健康助理装置，该家庭健康助理装置包括录入声音的麦克风、播放语音的喇叭、采集图片的摄像头、以及无线通信模块。该家庭健康助理装置不含有微处理器和存储器。微处理器和存储器放在一云端服务器。该摄像头对一药盒进行拍照得到一基准照片，根据该基准照片录入一段与该基准照片一一对应的基准语音，该基准语音为用使用者听得懂的语言通过该麦克风录入该药盒药品的医生处方指导服药方法的一段声音，并通过该无线通信模块将该基准照片和该基准语音的数据发送并存储在该云端服务器的至少一独立工作的存储器中；当使用者拿起该药盒放在该摄像头的拍照位置时，该云端服务器的至少一独立工作的微处理器将收到的该摄像头采集到的该药盒的照片与该基准照片进行比较，如果比较图片成功则通过该喇叭播放对应录入的基准语音以提示服药方法，如果比较图片失败则该喇叭播放识别错误的语音信息。

本产品解决了语言和文字的冲突，使任何没有文字基础的人，可以识别复杂的药物并获得家人长期陪伴式的语音指导。在识别药盒成功后播放录音，对于有屏幕的家庭健康助理装置，在设置录音时可以在屏幕上设置服药人信息和药物剂量及时间，在用户拿走药盒吃药后按照录入信息保存用户吃药记录，便于长期查询用户服药依从性。对于没有屏幕的家庭健康助理装置，在可以联网的情况下，可以通过登录远程云端账户，为对应绑定的每一组图片语音信息设置服药人相关服药信息，在保存云端记录并可长期查询用户服药依从性。该家庭健康助理装置的麦克风，喇叭，和屏幕，接近开关和无影灯，都可以设置一个或多个，以便不同方向录音，和播放，以及显示，同时多角度感应物体接近，无影灯可最大化避免图片阴影，提升图片的识别率。通过对保存在双存储器里或云端服务器里的照片进行二次确认，确保了使用者服药指导信息的准确性，实现用户安全精准用药。

如果将识别软件安装在平板电脑或手机里，该家庭健康助理装置的前置或后置摄像头，都可以在摄像头前方拍照识别药盒，识别图片成功后播放特定录制的语音进行提示。

以上内容是结合具体的优选实施方式对本发明所作的进一步详细说明，不能认定本发明的具体实施只局限于这些说明。对于本发明所属技术领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干简单推演或替换，都应当视为属于本发明的保护范围。

Claims (15)

1.一种家庭健康助理装置，其包括主板，其特征在于：所述主板上设有微处理器和存储器，所述家庭健康助理装置还包括录入声音的麦克风、播放语音的喇叭、以及采集图片的摄像头；

如果所述主板上只设有一组微处理器和存储器时，所述摄像头对一药盒进行拍照得到一基准照片，根据所述基准照片录入一段与所述基准照片一一对应的基准语音，所述基准语音为用使用者听得懂的语言通过所述麦克风录入所述药盒药品的医生处方指导服药方法的一段声音，并将所述基准照片和所述基准语音的数据存储在所述存储器中；当使用者拿起所述药盒放在所述摄像头的拍照位置时，所述家庭健康助理装置的微处理器将收到的所述摄像头采集到的所述药盒的照片与所述基准照片进行比较，如果比较图片成功则通过所述喇叭播放对应录入的基准语音以提示服药方法，如果比较图片失败则所述喇叭播放识别错误的语音信息；

如果所述主板上设有至少两组独立工作的微处理器和存储器时，所述摄像头对一药盒进行拍照得到一基准照片，根据所述基准照片录入一段与所述基准照片一一对应的基准语音，所述基准语音为用使用者听得懂的语言通过所述麦克风录入所述药盒药品的医生处方指导服药方法的一段声音，并将所述基准照片和所述基准语音的数据分别存储在所述至少两组存储器中；当使用者拿起所述药盒放在所述摄像头的拍照位置时，所述家庭健康助理装置的所述至少两组微处理器分别将收到的所述摄像头采集到的所述药盒的照片与所述至少两组对应的存储器中的基准照片进行比较，如果每一组比较图片都成功则通过所述喇叭播放对应录入的基准语音以提示服药方法，如果任意一组比较图片失败则所述喇叭播放识别错误的语音信息。

2.根据权利要求1所述的一种家庭健康助理装置，其特征在于：进一步包括物体接近开关，当所述物体接近开关感应到所述摄像头下没有物体接近时，所述家庭健康助理装置在设定的时间内就自动进入省电待机状态，当所述物体接近开关感应到物体接近时立即唤醒所述家庭健康助理装置开始工作。

3.根据权利要求1所述的一种家庭健康助理装置，其特征在于：进一步包括显示屏，所述家庭健康助理装置的微处理器自动识别所述药盒的图片并显示所述图片和对应所述药盒的所述基准照片在所述显示屏上。

4.根据权利要求1所述的一种家庭健康助理装置，其特征在于：进一步包括定时语音提醒使用者吃药或已经按医嘱吃过药时不要重复吃药的语音提醒模块。

5.根据权利要求1所述的一种家庭健康助理装置，其特征在于：进一步包括无线通信模块，所述无线通信模块将使用者的服药数据传入到云端服务器。

6.根据权利要求5所述的一种家庭健康助理装置，其特征在于：所述无线通信模块包括蓝牙模块、Wifi模块、Zigbee模块、GSM模块、5G模块、及RFID模块。

7.根据权利要求5所述的一种家庭健康助理装置，其特征在于：所述无线通信模块同时将所述基准照片和与所述基准照片对应的基准语音发送到所述云端服务器；当使用者拿起所述药盒放在所述摄像头的拍照位置时，所述摄像头采集到的所述药盒的图片分别与所述存储器储存的基准照片以及所述云端服务器上的基准照片进行比较，如果两次比较结果都是成功识别图片，则通过所述喇叭播放对应录入的基准语音以提示服药方法；如果两次比较结果有一次识别失败，则通过所述喇叭播放识别错误的语音信息。

8.根据权利要求5所述的一种家庭健康助理装置，其特征在于：所述无线通信模块同时将所述基准照片和与所述基准照片对应的基准语音发送到所述云端服务器；

当使用者拿起所述药盒放在所述摄像头的拍照位置时，所述至少两组独立工作的微处理器将收到的所述摄像头采集到的所述药盒的照片分别与所述至少两组对应的存储器中的基准照片进行比较，所述云端服务器将接收到所述摄像头采集到的所述药盒的图片和所述云端服务器存储的基准照片进行比较；如果每一组比较图片成功则通过所述喇叭播放对应录入的基准语音以提示服药方法，如果任意一组比较图片失败则所述喇叭播放识别错误的语音信息。

9.一种家庭健康助理装置的实现方法，其特征在于：所述方法包括如下步骤：

提供一个家庭健康助理装置，所述家庭健康助理装置包括一主板，所述主板上设有微处理器和存储器，所述家庭健康助理装置还包括录入声音的麦克风、播放语音的喇叭、采集图片的摄像头；

通过所述摄像头对至少一药盒进行拍照得到一基准照片，根据所述基准照片录入一段与所述基准照片一一对应的基准语音，所述基准语音为用使用者听得懂的语言通过所述麦克风录入所述药盒药品的医生处方指导服药方法的一段声音；

将所述基准照片和所述基准语音的数据存储在所述存储器中；

当使用者拿起所述药盒放在所述摄像头的拍照位置时，所述微处理器将收到的所述摄像头采集到的所述药盒的照片与所述基准照片进行比较，如果比较图片成功则通过所述喇叭播放对应录入的基准语音以提示服药方法；如果比较图片失败则通过所述喇叭播放识别错误的语音信息；

如果所述主板上设有至少两组独立工作的微处理器和存储器时，所述基准照片和所述基准语音的数据分别存储在所述至少两组存储器中；当使用者拿起所述药盒放在所述摄像头的拍照位置时，所述家庭健康助理装置的所述至少两组微处理器分别将收到的所述摄像头采集到的所述药盒的照片与所述至少两组对应的存储器中的基准照片进行比较，如果每一组都比较图片成功则通过所述喇叭播放对应录入的基准语音以提示服药方法，如果任意一组比较图片失败则所述喇叭播放识别错误的语音信息。

10.根据权利要求9所述的实现方法，其特征在于：当所述家庭健康助理装置包括的物体接近开关感应到所述摄像头下没有物体接近时，所述家庭健康助理装置在设定的时间内就自动进入省电待机状态，当所述物体接近开关感应到物体接近时立即唤醒所述家庭健康助理装置开始工作。

11.根据权利要求9所述的实现方法，其特征在于：进一步包括语音提醒使用者吃药或不要重复吃药的语音提醒模块。

12.根据权利要求9所述的实现方法，其特征在于：进一步包括通过一无线通信模块将使用者的服药数据传入到云端服务器。

13.根据权利要求12所述的实现方法，其特征在于：通过所述无线通信模块同时将所述基准照片和与所述基准照片对应的基准语音发送到所述云端服务器；当使用者拿起所述药盒放在所述摄像头的拍照位置时，所述摄像头采集到的所述药盒的图片分别与所述存储器储存的基准照片以及所述云端服务器上存储的基准照片进行比较，如果两次比较结果都是成功识别图片，则通过所述喇叭播放对应录入的基准语音以提示服药方法；如果两次比较结果有一次识别失败，则通过所述喇叭播放识别错误的语音信息。

14.根据权利要求12所述的实现方法，其特征在于：通过所述无线通信模块同时将所述基准照片和与所述基准照片对应的基准语音发送到所述云端服务器；当使用者拿起所述药盒放在所述摄像头的拍照位置时，所述至少两组独立工作的微处理器将所述摄像头采集到的所述药盒的照片分别与所述至少两组对应的存储器中的基准照片进行比较，所述云端服务器将接收到所述摄像头采集到的所述药盒的图片和所述云端服务器存储的基准照片进行比较；如果每一组比较图片成功则通过所述喇叭播放对应录入的基准语音以提示服药方法，如果任意一组比较图片失败则所述喇叭播放识别错误的语音信息。

15.一种家庭健康助理装置，其特征在于：包括录入声音的麦克风、播放语音的喇叭、采集图片的摄像头、以及无线通信模块；

所述摄像头对一药盒进行拍照得到一基准照片，根据所述基准照片录入一段与所述基准照片一一对应的基准语音，所述基准语音为用使用者听得懂的语言通过所述麦克风录入所述药盒药品的医生处方指导服药方法的一段声音，并通过所述无线通信模块将所述基准照片和所述基准语音的数据发送并存储在云端服务器的至少一独立工作的存储器中；当使用者拿起所述药盒放在所述摄像头的拍照位置时，所述云端服务器的至少一独立工作的微处理器将收到的所述摄像头采集到的所述药盒的照片与所述基准照片进行比较，如果比较图片成功则通过所述喇叭播放对应录入的基准语音以提示服药方法，如果比较图片失败则所述喇叭播放识别错误的语音信息。

Images