CN112643650A - 基于机器人的儿童任务托管方法、装置、设备及存储介质 - Google Patents
基于机器人的儿童任务托管方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN112643650A CN112643650A CN202011436405.1A CN202011436405A CN112643650A CN 112643650 A CN112643650 A CN 112643650A CN 202011436405 A CN202011436405 A CN 202011436405A CN 112643650 A CN112643650 A CN 112643650A
- Authority
- CN
- China
- Prior art keywords
- target
- task
- child
- playing
- robot
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Programme-controlled manipulators
- B25J9/0003—Home robots, i.e. small robots for domestic use
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Programme-controlled manipulators
- B25J9/16—Programme controls
Landscapes
- Engineering & Computer Science (AREA)
- Robotics (AREA)
- Mechanical Engineering (AREA)
- Manipulator (AREA)
Abstract
本发明公开了一种基于机器人的儿童任务托管方法,该方法包括:当接收到任务播放指令时,获取任务播放指令对应的目标任务,并通过预设机器人获取目标环境图像;对目标环境图像进行人体识别,若识别结果为目标环境图像中存在目标任务对应的目标儿童,则控制预设机器人向目标儿童对应的目标位置移动;当检测到预设机器人到达目标位置时,停止移动;播放目标任务,并在目标任务被播放期间,生成播放反馈信息,并向目标任务对应的目标终端发送播放反馈信息。本发明还公开了一种装置、设备及存储介质。本发明通过对目标儿童播放对应的目标任务,并向目标终端发送包含目标儿童对于目标任务处理情况的反馈信息,实现了对目标儿童的任务监督与照看。
Description
技术领域
本发明涉及智能机器人领域,尤其涉及基于机器人的儿童任务托管方法、装置、设备及存储介质。
背景技术
随着科学技术的快速发展,机器人已应用于各行各业中,例如,儿童照看机构,例如,幼儿园和托儿所等。
现有的儿童照看机构大多未配备儿童看护机器人,且即使配备有儿童看护机器人,配备的机器人也只能完成视频监看、学习辅导以及语音提示功能,但这些功能等同于摄像装置、学习平板以及智能音箱的结合体,并不能体现对儿童的照看。
发明内容
本发明的主要目的在于提供一种基于机器人的儿童任务托管方法、装置、设备及存储介质,旨在解决现有的儿童看护机器人仅仅是智能设备的结合体,并不能体现对儿童的照看的技术问题。
此外,为实现上述目的,本发明还提供一种基于机器人的儿童任务托管方法,所述基于机器人的儿童任务托管方法包括以下步骤:
当接收到任务播放指令时,获取所述任务播放指令对应的目标任务,并通过预设机器人获取目标环境图像;
对所述目标环境图像进行人体识别,若识别结果为所述目标环境图像中存在所述目标任务对应的目标儿童,则控制所述预设机器人向所述目标儿童对应的目标位置移动;
当检测到所述预设机器人到达所述目标位置时,停止移动;
播放所述目标任务,并在所述目标任务被播放期间,生成播放反馈信息,并向所述目标任务对应的目标终端发送所述播放反馈信息。
可选地,所述播放所述目标任务,并在所述目标任务被播放期间,生成播放反馈信息,并向所述目标任务对应的目标终端发送所述播放反馈信息的步骤包括:
播放所述目标任务,并在所述目标任务被播放期间,获取所述目标儿童的行为数据;
根据所述所有目标儿童的行为数据,确定第一儿童,并向所述第一儿童移动,在所述目标环境图像中仅包含所述第一儿童时,停止移动,其中,所述第一儿童为所述目标儿童中未完成所述目标任务的儿童;
播放所述第一儿童对应的第一私人版本任务,在所述第一私人版本任务播放完成后,再次播放所述目标任务,并在所述目标任务被播放期间,获取所述第一儿童的行为数据;
生成包含第一儿童的行为数据的播放反馈信息,并向所述目标任务对应的目标终端发送所述播放反馈信息。
可选地,所述播放所述第一儿童对应的第一私人版本任务,在所述第一私人版本任务播放完成后,再次播放所述目标任务,并在所述目标任务被播放期间,获取所述第一儿童的行为数据的步骤之后,包括:
根据所述第一儿童的行为数据,判断所述第一儿童是否完成所述目标任务;
若所述第一儿童未完成所述目标任务,则生成播放反馈信息,并向所述目标任务对应的目标终端发送所述播放反馈信息;
若所述第一儿童完成所述目标任务,则执行所述生成包含第一儿童的行为数据的播放反馈信息,并向所述目标任务对应的目标终端发送所述播放反馈信息的步骤。
可选地,所述根据所述所有目标儿童的行为数据,确定第一儿童的步骤包括:
获取所述目标任务的任务类型;
若所述任务类型为视频观看任务,则获取所述目标任务的视频播放时长,以及所述目标儿童的行为数据中的观看时长;
若所述视频播放时长与所述观看时长的差值大于第一预设阈值,则判定所述目标儿童为第一儿童。
可选地,所述获取所述目标任务的任务类型的步骤之后,包括:
若所述任务类型为语音听读任务,则获取所述目标任务的语音播放文本,以及所述目标儿童发出的目标语音;
对所述目标语音进行文字识别,得到目标文本并将所述语音播放文本与所述目标文本进行对比,得到文本相似度;
若所述文本相似度小于第二预设阈值,则判定所述目标儿童为第一儿童。
可选地,所述根据所述第一儿童的行为数据,判断所述第一儿童是否完成所述目标任务的步骤之后,包括:
若所述第一儿童未完成所述目标任务,则播放所述第一儿童对应的第二私人版本任务;
在所述第二私人版本任务播放完成后,再次播放所述目标任务,并获取所述第一儿童基于所述目标任务的完成信息;
将所述第二私人版本任务和所述完成信息反馈给所述目标任务对应的目标终端。
可选地,所述在所述第二私人版本任务播放完成后,再次播放所述目标任务,并获取所述第一儿童基于所述目标任务的完成信息的步骤之后,包括:
根据所述完成信息,判断所述第一儿童是否完成所述目标任务;
若所述第一儿童完成所述目标任务,则执行所述将所述第二私人版本任务和所述完成信息反馈给所述目标任务对应的目标终端的步骤;
若所述第一儿童未完成所述目标任务,则建立所述预设机器人与所述目标终端的通信连接。
此外,为实现上述目的,本发明还提供一种基于机器人的儿童任务托管装置,所述基于机器人的儿童任务托管装置包括:
目标任务获取模块,用于当接收到任务播放指令时,获取所述任务播放指令对应的目标任务,并通过预设机器人获取目标环境图像;
人体识别模块,用于对所述目标环境图像进行人体识别,若识别结果为所述目标环境图像中存在所述目标任务对应的目标儿童,则控制所述预设机器人向所述目标儿童对应的目标位置移动;
移动控制模块,用于当检测到所述预设机器人到达所述目标位置时,停止移动;
播放反馈模块,用于播放所述目标任务,并在所述目标任务被播放期间,生成播放反馈信息,并向所述目标任务对应的目标终端发送所述播放反馈信息。
此外,为实现上述目的,本发明还提供一种基于机器人的儿童任务托管设备,所述基于机器人的儿童任务托管设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的基于机器人的儿童任务托管程序,所述基于机器人的儿童任务托管程序被所述处理器执行时实现如上述的基于机器人的儿童任务托管方法的步骤。
此外,为实现上述目的,本发明还提供一种存储介质,所述存储介质上存储有基于机器人的儿童任务托管程序,所述基于机器人的儿童任务托管程序被处理器执行时实现如上述的基于机器人的儿童任务托管方法的步骤。
本发明实施例提出的一种基于机器人的儿童任务托管方法、装置、设备及存储介质。本发明实施例中当机器人接收到任务播放指令时,获取任务播放指令对应的目标任务,并通过预设机器人上安装的摄像装置,获取目标环境图像,然后对目标环境图像进行人体识别,在识别结果中存在目标任务对应的目标儿童时,向目标儿童对应的目标位置移动,到达目标位置后停止移动,最后,播放目标任务,并在目标任务播放期间,生成播放反馈信息,并向目标任务对应的目标终端发送播放反馈信息,本发明通过对目标儿童播放对应的目标任务,并向目标任务对应的目标终端发送包含目标儿童对于目标任务处理情况的反馈信息,实现了对目标儿童的任务监督与照看。
附图说明
图1为本发明实施例提供的基于机器人的儿童任务托管设备一种实施方式的硬件结构示意图;
图2为本发明基于机器人的儿童任务托管方法第一实施例的流程示意图;
图3为本发明基于机器人的儿童任务托管方法第二实施例的流程示意图;
图4为本发明基于机器人的儿童任务托管装置一实施例的功能模块示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
在后续的描述中,使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本发明的说明,其本身没有特定的意义。因此,“模块”、“部件”或“单元”可以混合地使用。
本发明实施例基于机器人的儿童任务托管终端(又叫终端、设备或者终端设备)可以是PC,也可以是智能手机、平板电脑和便携计算机等具有显示功能的可移动式终端设备。
如图1所示,该终端可以包括:处理器1001,例如CPU,网络接口1004,用户接口1003,存储器1005,通信总线1002。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器,也可以是稳定的存储器(non-volatile memory),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
可选地,终端还可以包括摄像头、RF(Radio Frequency,射频)电路,传感器、音频电路、WiFi模块等等。其中,传感器比如光传感器、运动传感器以及其他传感器。具体地,光传感器可包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示屏的亮度,接近传感器可在移动终端移动到耳边时,关闭显示屏和/或背光。作为运动传感器的一种,重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别移动终端姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;当然,移动终端还可配置陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
本领域技术人员可以理解,图1中示出的终端结构并不构成对终端的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图1所示,作为一种存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及基于机器人的儿童任务托管程序。
在图1所示的终端中,网络接口1004主要用于连接后台服务器,与后台服务器进行数据通信;用户接口1003主要用于连接客户端(用户端),与客户端进行数据通信;而处理器1001可以用于调用存储器1005中存储的基于机器人的儿童任务托管程序,所述基于机器人的儿童任务托管程序被处理器执行时实现下述实施例提供的基于机器人的儿童任务托管方法中的操作。
基于上述设备硬件结构,提出了本发明基于机器人的儿童任务托管方法的实施例。
参照图2,在本发明基于机器人的儿童任务托管方法的第一实施例中,所述基于机器人的儿童任务托管方法包括:
步骤S10,当接收到任务播放指令时,获取所述任务播放指令对应的目标任务,并通过预设机器人获取目标环境图像。
本实施例的方法应用于机器人,当机器人接收到任务播放指令时,获取任务播放指令对应的目标任务,播放指令可以是通过事先录入的目标任务的预约播放时间触发的,当有任务到达预约播放时间时,即触发生成任务播放指令,根据任务播放指令,获取对应的目标任务,目标人物可以是公共任务或私人任务,公共任务可以是托儿所或幼儿园等托管单位布置的,需要所有儿童参与完成的任务,私人任务可以是某儿童家长单独为该儿童布置的任务,只需要该儿童参与完成。当接收到任务播放指令时,获取任务播放指令对应的目标任务,并启动机器人上预设的摄像头,获取目标环境图像。
步骤S20,对所述目标环境图像进行人体识别,若识别结果为所述目标环境图像中存在所述目标任务对应的目标儿童,则控制所述预设机器人向所述目标儿童对应的目标位置移动。
对目标环境图像进行人体识别,确定目标环境图像对应的空间位置中是否有目标任务对应的目标儿童,目标儿童可以是一个也可以是多个,若识别结果为目标环境图像中,存在目标任务对应的目标儿童,则控制预设机器人向目标儿童对应的目标位置移动,其中,向目标位置移动的方式,包括距离和角度的调整,目的是为了便于交互,例如,当人与人之间需要交谈时,需要保持适当的距离,并确保对话者处于最佳的视觉角度,进而减少谈话时的外界干扰。当识别到目标环境图像中存在目标儿童时,确定与目标儿童的最佳交互位置为目标位置,并向目标位置移动以进行交互,需要说明的是,在机器人移动时,目标儿童可能会与机器人同时移动,因此,目标位置不是固定不变的,机器人可以对目标进行跟踪,随时对目标位置作出调整。
步骤S30,当检测到所述预设机器人到达所述目标位置时,停止移动。
当到达目标位置时,则停止移动并开始进行交互,若到达目标位置时,检测到目标儿童即将或正在移动,其对应的目标位置也会发生变化,则机器人可以跟随目标儿童移动,可知地,机器人还可以通过交互的方式给出提示信息,例如,通过语音提示目标儿童,有预约任务需要完成,请停止移动或寻找一个适合完成目标任务的最佳场所,执行目标任务,若目标任务任务是私人语音任务,可以提示目标儿童寻找一个较为安静的场所执行任务。
当到达目标位置时,获取目标儿童之间的目标距离,由于不对目标儿童进行行为限制,因此,在机器人移动期间,目标儿童可能也会移动,在到达目标位置时,机器人需要先获取与目标儿童之间的目标距离,以此来判断目标儿童是否发生了移动。
若目标距离小于或等于第三预设阈值,证明目标儿童未移动或移动距离较小,影响不大,则开始播放目标任务,并在目标任务播放期间获取目标儿童的行为数据,根据行为数据生成播放反馈信息,并将播放反馈信息发送至目标任务对应的目标终端。
若目标距离大于第三预设阈值,证明目标儿童在机器人移动期间也移动了,且移动距离超出了适合交互的范围,则根据获取得到的环境图像信息,再次确定目标儿童对应的目标位置,并向目标位置移动,直到移动到目标位置后,识别到与目标位儿童的目标距离小于或等于第三预设阈值。
可知地,若目标距离小于或等于第三预设阈值,还可以判断目标距离是否小于第四预设阈值,其中,第四预设阈值小于第三预设阈值,若目标距离小于第四预设阈值,输出移动提示信息,移动提示信息可以是语音信息,用于提示目标儿童移动到适合执行目标任务的场所,例如,当目标任务为语音听读任务时,若目标儿童当前处于一个较为喧闹的场所中如玩具区,可以提示目标儿童移动到教室等较为安静的区域。
需要说明的是,当到达目标位置后,检测到目标环境图像中包含目标儿童之外的儿童时,需要继续移动直到目标环境图像中仅包含目标儿童时才停止,以降低周围环境和其它儿童对交互的影响。当停止移动后可能会造成与目标儿童的距离过近,从而影响行为数据的获取,由此可以判定当前区域不适合播放目标任务,因此要输出移动提示信息提示目标儿童移动到适合的区域。在输出移动提示信息后,返回当接收到任务播放指令时,获取任务播放指令对应的目标任务,并通过预设机器人获取目标环境图像的步骤,目的是为了对目标儿童的移动轨迹进行跟踪。当目标距离大于或等于第四预设阈值时,播放目标任务,并在目标任务被播放期间,生成播放反馈信息,并将播放反馈信息发送至目标任务对应的目标终端。
步骤S40,播放所述目标任务,并在所述目标任务被播放期间,生成播放反馈信息,并向所述目标任务对应的目标终端发送所述播放反馈信息。
当到达目标位置,且检测到目标儿童当前处于可执行任务的状态时,播放目标任务,在目标任务播放期间,获取目标儿童的行为数据,并根据目标儿童的行为数据判断目标儿童对目标任务的完成情况,然后生成播放反馈信息,例如,“xxxx任务总计播放时长20分钟,xxx小朋友认真聆听时长总计18分钟,期间,做小动作5次,总计时长1分钟,离开任务范围1次,离开时长总计1分钟,本次学习率为90%(学习率=认真执行任务时长/任务播放总时长),确定已完成本次任务”。将播放反馈信息发送至目标任务对应的目标终端,目标儿童的监护人或家长,例如目标儿童的父母等,可以利用目标终端获取播放反馈信息,并通过播放反馈信息,及时掌握目标儿童对目标任务的完成情况。
具体地,步骤S40细化的步骤包括:
步骤a1,播放所述目标任务,并在所述目标任务被播放期间,获取所述目标儿童的行为数据。
步骤a2,根据所述所有目标儿童的行为数据,确定第一儿童,并向所述第一儿童移动,在所述目标环境图像中仅包含所述第一儿童时,停止移动,其中,所述第一儿童为所述目标儿童中未完成所述目标任务的儿童。
步骤a3,播放所述第一儿童对应的第一私人版本任务,在所述第一私人版本任务播放完成后,再次播放所述目标任务,并在所述目标任务被播放期间,获取所述第一儿童的行为数据。
步骤a4,生成包含第一儿童的行为数据的播放反馈信息,并向所述目标任务对应的目标终端发送所述播放反馈信息。
行为数据,是在目标任务播放期间,获取到的目标儿童执行目标任务时的状态,可以通过预设摄像头获取目标儿童执行目标任务时的图像信息,并对获取到的图像信息进行识别,若目标任务为公共任务,通过图像信息可能会识别到目标儿童中的两名儿童在交谈,或者目标儿童中的一位儿童在玩玩具等,都可以作为行为数据并进行标记,以作为是否完成目标任务的依据。若目标任务为公共任务,根据目标儿童的行为数据,判断目标儿童中未完成目标任务的儿童,作为第一儿童;若目标任务为私人任务,则根据目标儿童的行为数据,判断目标儿童是否完成目标任务,若目标儿童未完成任务,将目标儿童标记为第一儿童。在确定第一儿童后,向第一儿童移动,在目标环境图像中进包含第一儿童时,停止移动,播放第一儿童对应的第一私人版本任务,第一私人版本任务可以是第一儿童的监护人根据不同的应用场景事先录入的,用于叮嘱或安抚儿童的语音或视频,第一私人版本任务也可以是只针对单个儿童的私人版本的任务,在第一私人版本任务播放后,再次播放目标任务并获取第一儿童的行为数据。需要说明的是,在公共任务中,第一儿童可能包含多个儿童,此时可以按照预设原则,例如按照距离最近原则,向第一儿童中的每个儿童逐一播放对应的第一私人版本任务后,再播放目标任务。此外,第一私人版本任务也可以替换目标任务,即向第一儿童播放对应的第一私人版本任务。
具体地,步骤a3之后的步骤包括:
步骤b1,根据所述第一儿童的行为数据,判断所述第一儿童是否完成所述目标任务。
步骤b2,若所述第一儿童完成所述目标任务,则执行所述生成包含第一儿童的行为数据的播放反馈信息,并向所述目标任务对应的目标终端发送所述播放反馈信息的步骤。
再次播放目标任务时,获取第一儿童的行为数据,根据行为数据,再次判断第一儿童是否完成目标任务,若第一儿童完成了目标任务,则根据第一儿童的行为数据生成播放反馈信息,并发送至目标终端。
具体地,步骤a2细化的步骤包括:
步骤c1,获取所述目标任务的任务类型。
步骤c2,若所述任务类型为视频观看任务,则获取所述目标任务的视频播放时长,以及所述目标儿童的行为数据中的观看时长。
步骤c3,若所述视频播放时长与所述观看时长的差值大于第一预设阈值,则判定所述目标儿童为第一儿童。
目标任务的任务类型包括视频观看任务和语音听读任务,若目标任务为视频观看任务,则获取目标任务的播放时长,以及目标儿童的行为数据中的观看时长,即根据目标儿童在观看期间的行为数据,判断目标儿童观看实际视频的时长,若视频播放时长与观看时长的差值小于第一预设阈值,例如,第一预设阈值为3分钟时,若目标儿童在观看视频任务期间,被标记为做小动作的时间超过了3分钟,则可以确定目标儿童未完成目标任务,则将目标儿童标记为第一儿童。
具体地,步骤c1之后的步骤包括:
步骤d1,若所述任务类型为语音听读任务,则获取所述目标任务的语音播放文本,以及所述目标儿童发出的目标语音。
步骤d2,对所述目标语音进行文字识别,得到目标文本并将所述语音播放文本与所述目标文本进行对比,得到文本相似度。
步骤d3,若所述文本相似度小于第二预设阈值,则判定所述目标儿童为第一儿童。
若任务类型为语音听读任务,则获取目标任务的云因播放文本,以及目标儿童发出的目标语音,对目标语音进行文字识别,得到目标文本后,将目标文本与语音播放文本进行对比,得到文本相似度,若文本相似度小于第二预设阈值,则证明目标儿童没有认真执行目标任务,或执行结果未达到预期效果,因此可以确定目标儿童未完成目标任务,则将目标儿童标记为第一儿童。
在本实施例中,当机器人接收到任务播放指令时,获取任务播放指令对应的目标任务,并通过预设机器人上安装的摄像装置,获取目标环境图像,然后对目标环境图像进行人体识别,在识别结果中存在目标任务对应的目标儿童时,向目标儿童对应的目标位置移动,到达目标位置后停止移动,最后,播放目标任务,并在目标任务播放期间,生成播放反馈信息,并向目标任务对应的目标终端发送播放反馈信息,本发明通过对目标儿童播放对应的目标任务,并向目标任务对应的目标终端发送包含目标儿童对于目标任务处理情况的反馈信息,实现了对目标儿童的任务监督与照看。
进一步地,参照图3,在本发明上述实施例的基础上,提出了本发明基于机器人的儿童任务托管方法的第二实施例。
本实施例是第一实施例中步骤b1之后的步骤,本实施例与本发明上述实施例的区别在于:
步骤S50,若所述第一儿童未完成所述目标任务,则播放所述第一儿童对应的第二私人版本任务。
步骤S60,在所述第二私人版本任务播放完成后,再次播放所述目标任务,并获取所述第一儿童基于所述目标任务的完成信息。
步骤S70,将所述第二私人版本任务和所述完成信息反馈给所述目标任务对应的目标终端。
可知地,本实施例中的第二私人版本任务与上述实施例中的第一私人版本任务是针对目标任务的不同私人语音,在第一私人版本任务播放完成,并再次播放目标任务后,若第一儿童仍未完成目标任务,则更换不同私人语音,即播放第二私人版本任务,并在第二私人版本任务播放完成,并再次播放目标任务后,获取第一儿童基于目标任务的完成信息,并将第二私人版本任务和完成信息反馈给目标任务对应的目标终端,具体地,完成信息能够反映第一儿童是否完成目标任务,反馈的方式可以是向目标终端(例如第一儿童的监护人的手机)发送第一儿童执行目标任务时的视频图像,可以理解的是,上述实施例中第一私人版本任务和行为数据也可以发送给目标终端,作为第一儿童的监护人参考第一私人版本任务和第二私人版本任务有效性的资料。
具体地,步骤S60之后的步骤包括:
步骤e1,根据所述完成信息,判断所述第一儿童是否完成所述目标任务。
步骤e2,若所述第一儿童完成所述目标任务,则执行所述将所述第二私人版本任务和所述完成信息反馈给所述目标任务对应的目标终端的步骤。
步骤e3,若所述第一儿童未完成所述目标任务,则建立所述预设机器人与所述目标终端的通信连接。
可知地,当第二私人版本任务播放完成,并再次播放目标任务后,还需根据第一儿童基于目标任务的完成信息,判断第一儿童是否完成所述目标任务,若第一儿童仍未完成目标任务,则在目标任务对应的私人语音足够的情况下,再次播放其他版本的私人语音,即第三私人版本任务等私人版本任务,若目标任务对应的私人语音不够多的情况下,第一儿童在第二私人版本任务播放完成,并再次播放目标任务后,仍未完成目标任务,则建立机器人与目标终端的通信连接,这个时候,机器人就能与目标终端的持有者,即第一儿童的监护人通信连接,以通过监护人与第一儿童的联系,来帮助第一儿童完成任务。
在本实施例中,通过持续跟进第一儿童完成目标任务的情况,选择反馈给目标终端,或者与目标终端建立通信连接,来多渠道帮助第一儿童完成目标任务,减少了人工成本。
此外,参照图4,本发明实施例还提出一种基于机器人的儿童任务托管装置,所述基于机器人的儿童任务托管装置包括:
目标任务获取模块10,用于当接收到任务播放指令时,获取所述任务播放指令对应的目标任务,并通过预设机器人获取目标环境图像;
人体识别模块20,用于对所述目标环境图像进行人体识别,若识别结果为所述目标环境图像中存在所述目标任务对应的目标儿童,则控制所述预设机器人向所述目标儿童对应的目标位置移动;
移动控制模块30,用于当检测到所述预设机器人到达所述目标位置时,停止移动;
播放反馈模块40,用于播放所述目标任务,并在所述目标任务被播放期间,生成播放反馈信息,并向所述目标任务对应的目标终端发送所述播放反馈信息。
可选地,所述播放反馈模块40,包括:
行为数据获取单元,用于播放所述目标任务,并在所述目标任务被播放期间,获取所述目标儿童的行为数据;
第一儿童确定单元,用于根据所述所有目标儿童的行为数据,确定第一儿童,并向所述第一儿童移动,在所述目标环境图像中仅包含所述第一儿童时,停止移动,其中,所述第一儿童为所述目标儿童中未完成所述目标任务的儿童;
第一私人版本任务播放单元,用于播放所述第一儿童对应的第一私人版本任务,在所述第一私人版本任务播放完成后,再次播放所述目标任务,并在所述目标任务被播放期间,获取所述第一儿童的行为数据;
播放反馈信息发送单元,用于生成包含第一儿童的行为数据的播放反馈信息,并向所述目标任务对应的目标终端发送所述播放反馈信息。
可选地,所述基于机器人的儿童任务托管装置,包括:
第一判断模块,用于根据所述第一儿童的行为数据,判断所述第一儿童是否完成所述目标任务;
第一播放反馈信息发送模块,用于若所述第一儿童未完成所述目标任务,则生成播放反馈信息,并向所述目标任务对应的目标终端发送所述播放反馈信息;
第一步骤执行模块,用于若所述第一儿童完成所述目标任务,则执行所述生成包含第一儿童的行为数据的播放反馈信息,并向所述目标任务对应的目标终端发送所述播放反馈信息的步骤。
可选地,所述第一判断模块,包括:
任务类型或获取单元,用于获取所述目标任务的任务类型;
时长获取单元,用于若所述任务类型为视频观看任务,则获取所述目标任务的视频播放时长,以及所述目标儿童的行为数据中的观看时长;
判定单元,用于若所述视频播放时长与所述观看时长的差值大于第一预设阈值,则判定所述目标儿童为第一儿童。
可选地,所述基于机器人的儿童任务托管装置,包括:
目标语音获取模块,用于若所述任务类型为语音听读任务,则获取所述目标任务的语音播放文本,以及所述目标儿童发出的目标语音;
文本对比模块,用于对所述目标语音进行文字识别,得到目标文本并将所述语音播放文本与所述目标文本进行对比,得到文本相似度;
判定模块,用于若所述文本相似度小于第二预设阈值,则判定所述目标儿童为第一儿童。
可选地,所述基于机器人的儿童任务托管装置,包括:
第二私人版本任务播放模块,用于若所述第一儿童未完成所述目标任务,则播放所述第一儿童对应的第二私人版本任务;
完成信息获取模块,用于在所述第二私人版本任务播放完成后,再次播放所述目标任务,并获取所述第一儿童基于所述目标任务的完成信息;
反馈模块,用于将所述第二私人版本任务和所述完成信息反馈给所述目标任务对应的目标终端。
可选地,所述基于机器人的儿童任务托管装置,包括:
第二判断模块,用于根据所述完成信息,判断所述第一儿童是否完成所述目标任务;
步骤执行模块,用于若所述第一儿童完成所述目标任务,则执行所述将所述第二私人版本任务和所述完成信息反馈给所述目标任务对应的目标终端的步骤;
通信连接建立模块,用于若所述第一儿童未完成所述目标任务,则建立所述预设机器人与所述目标终端的通信连接。
此外,本发明实施例还提出一种存储介质,所述存储介质上存储有基于机器人的儿童任务托管程序,所述基于机器人的儿童任务托管程序被处理器执行时实现上述实施例提供的基于机器人的儿童任务托管方法中的操作。
上述各程序模块所执行的方法可参照本发明方法各个实施例,此处不再赘述。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体/操作/对象与另一个实体/操作/对象区分开来,而不一定要求或者暗示这些实体/操作/对象之间存在任何这种实际的关系或者顺序;术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
对于装置实施例而言,由于其基本相似于方法实施例,所以描述得比较简单,相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的,其中作为分离部件说明的单元可以是或者也可以不是物理上分开的。可以根据实际的需要选择中的部分或者全部模块来实现本发明方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的基于机器人的儿童任务托管方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (10)
1.一种基于机器人的儿童任务托管方法,其特征在于,所述基于机器人的儿童任务托管方法包括以下步骤:
当接收到任务播放指令时,获取所述任务播放指令对应的目标任务,并通过预设机器人获取目标环境图像;
对所述目标环境图像进行人体识别,若识别结果为所述目标环境图像中存在所述目标任务对应的目标儿童,则控制所述预设机器人向所述目标儿童对应的目标位置移动;
当检测到所述预设机器人到达所述目标位置时,停止移动;
播放所述目标任务,并在所述目标任务被播放期间,生成播放反馈信息,并向所述目标任务对应的目标终端发送所述播放反馈信息。
2.如权利要求1所述的基于机器人的儿童任务托管方法,其特征在于,所述播放所述目标任务,并在所述目标任务被播放期间,生成播放反馈信息,并向所述目标任务对应的目标终端发送所述播放反馈信息的步骤包括:
播放所述目标任务,并在所述目标任务被播放期间,获取所述目标儿童的行为数据;
根据所述所有目标儿童的行为数据,确定第一儿童,并向所述第一儿童移动,在所述目标环境图像中仅包含所述第一儿童时,停止移动,其中,所述第一儿童为所述目标儿童中未完成所述目标任务的儿童;
播放所述第一儿童对应的第一私人版本任务,在所述第一私人版本任务播放完成后,再次播放所述目标任务,并在所述目标任务被播放期间,获取所述第一儿童的行为数据;
生成包含第一儿童的行为数据的播放反馈信息,并向所述目标任务对应的目标终端发送所述播放反馈信息。
3.如权利要求2所述的基于机器人的儿童任务托管方法,其特征在于,所述播放所述第一儿童对应的第一私人版本任务,在所述第一私人版本任务播放完成后,再次播放所述目标任务,并在所述目标任务被播放期间,获取所述第一儿童的行为数据的步骤之后,包括:
根据所述第一儿童的行为数据,判断所述第一儿童是否完成所述目标任务;
若所述第一儿童完成所述目标任务,则执行所述生成包含第一儿童的行为数据的播放反馈信息,并向所述目标任务对应的目标终端发送所述播放反馈信息的步骤。
4.如权利要求2所述的基于机器人的儿童任务托管方法,其特征在于,所述根据所述所有目标儿童的行为数据,确定第一儿童的步骤包括:
获取所述目标任务的任务类型;
若所述任务类型为视频观看任务,则获取所述目标任务的视频播放时长,以及所述目标儿童的行为数据中的观看时长;
若所述视频播放时长与所述观看时长的差值大于第一预设阈值,则判定所述目标儿童为第一儿童。
5.如权利要求4所述的基于机器人的儿童任务托管方法,其特征在于,所述获取所述目标任务的任务类型的步骤之后,包括:
若所述任务类型为语音听读任务,则获取所述目标任务的语音播放文本,以及所述目标儿童发出的目标语音;
对所述目标语音进行文字识别,得到目标文本并将所述语音播放文本与所述目标文本进行对比,得到文本相似度;
若所述文本相似度小于第二预设阈值,则判定所述目标儿童为第一儿童。
6.如权利要求3所述的基于机器人的儿童任务托管方法,其特征在于,所述根据所述第一儿童的行为数据,判断所述第一儿童是否完成所述目标任务的步骤之后,包括:
若所述第一儿童未完成所述目标任务,则播放所述第一儿童对应的第二私人版本任务;
在所述第二私人版本任务播放完成后,再次播放所述目标任务,并获取所述第一儿童基于所述目标任务的完成信息;
将所述第二私人版本任务和所述完成信息反馈给所述目标任务对应的目标终端。
7.如权利要求6所述的基于机器人的儿童任务托管方法,其特征在于,所述在所述第二私人版本任务播放完成后,再次播放所述目标任务,并获取所述第一儿童基于所述目标任务的完成信息的步骤之后,包括:
根据所述完成信息,判断所述第一儿童是否完成所述目标任务;
若所述第一儿童完成所述目标任务,则执行所述将所述第二私人版本任务和所述完成信息反馈给所述目标任务对应的目标终端的步骤;
若所述第一儿童未完成所述目标任务,则建立所述预设机器人与所述目标终端的通信连接。
8.一种基于机器人的儿童任务托管装置,其特征在于,所述基于机器人的儿童任务托管装置包括:
目标任务获取模块,用于当接收到任务播放指令时,获取所述任务播放指令对应的目标任务,并通过预设机器人获取目标环境图像;
人体识别模块,用于对所述目标环境图像进行人体识别,若识别结果为所述目标环境图像中存在所述目标任务对应的目标儿童,则控制所述预设机器人向所述目标儿童对应的目标位置移动;
移动控制模块,用于当检测到所述预设机器人到达所述目标位置时,停止移动;
播放反馈模块,用于播放所述目标任务,并在所述目标任务被播放期间,生成播放反馈信息,并向所述目标任务对应的目标终端发送所述播放反馈信息。
9.一种基于机器人的儿童任务托管设备,其特征在于,所述基于机器人的儿童任务托管设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的程序,所述程序被所述处理器执行时实现如权利要求1至7中任一项所述的方法的步骤。
10.一种存储介质,其特征在于,所述存储介质上存储有程序,所述程序被处理器执行时实现如权利要求1至7中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011436405.1A CN112643650A (zh) | 2020-12-10 | 2020-12-10 | 基于机器人的儿童任务托管方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011436405.1A CN112643650A (zh) | 2020-12-10 | 2020-12-10 | 基于机器人的儿童任务托管方法、装置、设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112643650A true CN112643650A (zh) | 2021-04-13 |
Family
ID=75350657
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011436405.1A Pending CN112643650A (zh) | 2020-12-10 | 2020-12-10 | 基于机器人的儿童任务托管方法、装置、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112643650A (zh) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103718125A (zh) * | 2011-08-02 | 2014-04-09 | 微软公司 | 寻找被呼叫方 |
CN106228982A (zh) * | 2016-07-27 | 2016-12-14 | 华南理工大学 | 一种基于教育服务机器人的交互式学习系统与交互方法 |
CN109961048A (zh) * | 2019-03-26 | 2019-07-02 | 北京儒博科技有限公司 | 人机交互学习过程中学生召回方法、装置、机器人和介质 |
CN110561453A (zh) * | 2019-09-16 | 2019-12-13 | 北京觅机科技有限公司 | 一种绘本机器人的引导式陪读方法 |
CN110559639A (zh) * | 2019-08-02 | 2019-12-13 | 焦作大学 | 体操运动的机器人教学方法 |
CN111095150A (zh) * | 2017-09-14 | 2020-05-01 | 索尼互动娱乐股份有限公司 | 机器人作为私人教练 |
CN111597915A (zh) * | 2020-04-24 | 2020-08-28 | 深圳优地科技有限公司 | 一种无人放牧方法、装置、终端和计算机可读存储介质 |
-
2020
- 2020-12-10 CN CN202011436405.1A patent/CN112643650A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103718125A (zh) * | 2011-08-02 | 2014-04-09 | 微软公司 | 寻找被呼叫方 |
CN106228982A (zh) * | 2016-07-27 | 2016-12-14 | 华南理工大学 | 一种基于教育服务机器人的交互式学习系统与交互方法 |
CN111095150A (zh) * | 2017-09-14 | 2020-05-01 | 索尼互动娱乐股份有限公司 | 机器人作为私人教练 |
CN109961048A (zh) * | 2019-03-26 | 2019-07-02 | 北京儒博科技有限公司 | 人机交互学习过程中学生召回方法、装置、机器人和介质 |
CN110559639A (zh) * | 2019-08-02 | 2019-12-13 | 焦作大学 | 体操运动的机器人教学方法 |
CN110561453A (zh) * | 2019-09-16 | 2019-12-13 | 北京觅机科技有限公司 | 一种绘本机器人的引导式陪读方法 |
CN111597915A (zh) * | 2020-04-24 | 2020-08-28 | 深圳优地科技有限公司 | 一种无人放牧方法、装置、终端和计算机可读存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109521927B (zh) | 机器人互动方法和设备 | |
EP3696648A1 (en) | Interaction method and device | |
CN108604179A (zh) | 设备上语音助理的实现 | |
US11551682B2 (en) | Method of performing function of electronic device and electronic device using same | |
US20150298315A1 (en) | Methods and systems to facilitate child development through therapeutic robotics | |
KR102561712B1 (ko) | 음성 인식 장치 및 그 동작 방법 | |
KR20200076169A (ko) | 놀이 컨텐츠를 추천하는 전자 장치 및 그의 동작 방법 | |
KR20170000752A (ko) | 인공 지능에 기초한 휴먼 컴퓨터 인터랙션 방법, 장치 및 단말 설비 | |
WO2015155977A1 (ja) | 連携システム、装置、方法、および記録媒体 | |
KR20210058757A (ko) | 중점 학습 내용 결정 방법, 장치, 기기 및 저장 매체 | |
US10569420B1 (en) | Interfacing with autonomous devices | |
EP3677392B1 (en) | Robot and method of controlling the same | |
CN102736378B (zh) | 投影装置及投影方法 | |
CN112643650A (zh) | 基于机器人的儿童任务托管方法、装置、设备及存储介质 | |
CN104765686B (zh) | 测试应用程序的方法及装置 | |
KR20140015672A (ko) | 캐릭터 어학 학습 서비스 제공 장치 및 방법 | |
US20220215833A1 (en) | Method and device for converting spoken words to text form | |
TWI731496B (zh) | 包含機器人之互動平台 | |
CN107589987A (zh) | 软件控制方法、装置及计算机可读存储介质 | |
CN111081090B (zh) | 一种点读场景下的信息输出方法及学习设备 | |
JP7182990B2 (ja) | 情報処理システムおよびプログラム | |
CN110427141A (zh) | 一种多屏交互的方法及系统 | |
CN111145604A (zh) | 绘本识别方法、装置及计算机可读存储介质 | |
JPWO2020149031A1 (ja) | 応答処理装置及び応答処理方法 | |
CN110764618A (zh) | 一种仿生交互系统、方法及相应的生成系统和方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210413 |