CN109300341A - 交互式早教机器人及其交互方法 - Google Patents

交互式早教机器人及其交互方法 Download PDF

Info

Publication number
CN109300341A
CN109300341A CN201811008653.9A CN201811008653A CN109300341A CN 109300341 A CN109300341 A CN 109300341A CN 201811008653 A CN201811008653 A CN 201811008653A CN 109300341 A CN109300341 A CN 109300341A
Authority
CN
China
Prior art keywords
information
touch
identified
interactive
identification
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811008653.9A
Other languages
English (en)
Inventor
梅俊峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hefei Hong Hui Technology Co Ltd
Original Assignee
Hefei Hong Hui Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hefei Hong Hui Technology Co Ltd filed Critical Hefei Hong Hui Technology Co Ltd
Priority to CN201811008653.9A priority Critical patent/CN109300341A/zh
Publication of CN109300341A publication Critical patent/CN109300341A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/06Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • G09B5/065Combinations of audio and video presentations, e.g. videotapes, videodiscs, television systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412Digitisers structurally integrated in a display

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Business, Economics & Management (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Human Computer Interaction (AREA)
  • Toys (AREA)

Abstract

本发明提供了一种交互式早教机器人及其交互方法。所述交互式早教机器人包括可实现多点触控的触控主体、与所述触控主体适配的待识别体以及用于识别所述待识别体的识别装置,所述触控主体内预存有多媒体信息;所述触控主体和/或所述识别装置对所述待识别体进行识别,以与存储在触控主体内的多媒体信息匹配,并通过所述触控主体显示和/或播放,以实现交互。本发明的交互式早教机器人及其交互方法实现了真实玩具或书籍与多媒体信息间的叠加交互,满足了儿童动手、动脑及益智开发的需求,实现了多媒体信息和儿童玩具或书籍间的有机结合。

Description

交互式早教机器人及其交互方法
技术领域
本发明涉及一种交互式早教机器人及其交互方法,属于益智教育玩具领域。
背景技术
游戏和阅读是儿童成长过程中的重要元素,儿童可在游戏和阅读过程中完成对现实社会的初步认知和实践。同时,玩具是儿童成长过程中的重要伙伴,也是儿童探索世界获取知识的方式之一,在儿童游戏的过程中,则可以培养儿童的基本社交能力,特别是在团体互动游戏中,儿童可以学习如何与他人相处继而促进儿童的情感和社会化的发展;而在阅读过程中,则可帮助儿童增加他的背景知识,将别人的经验内化为自己的,激发儿童的想象力和思维能力,帮助儿童实现人格的塑造。
事实上,随着社会城市化进程的不断加快,儿童团体互动游戏逐渐减少,陪伴儿童更多的是各式各样的玩具和书籍,这些玩具和书籍虽可在一定程度上陪伴儿童的成长,但由于其不具备交互及引导功能,因此,儿童无法在游戏和阅读过程中获取积极、正向的引导,致使儿童的游戏和阅读过程仅仅是单一的玩耍过程,限制了儿童的情感、社会化、想象力及思维能力的发展。
有鉴于此,有必要提供一种新的适合儿童使用的交互式玩具,以解决上述问题。
发明内容
本发明的目的在于提供一种交互式早教机器人及其交互方法,以通过将多媒体信息结合到现实场景中,实现了真实玩具或书籍与多媒体信息间的叠加交互,满足了儿童动手、动脑及益智开发的需求,实现了多媒体信息和儿童玩具或书籍间的有机结合。
为实现上述发明目的,本发明提供了一种交互式早教机器人,所述交互式早教机器人包括可实现多点触控的触控主体、与所述触控主体适配的待识别体以及用于识别所述待识别体的识别装置,所述触控主体内预存有多媒体信息;所述触控主体和/或所述识别装置对所述待识别体进行识别,以与存储在触控主体内的多媒体信息匹配,并通过所述触控主体显示和/或播放,以实现交互。
作为本发明的进一步改进,所述交互式早教机器人还包括连接在所述触控主体上的成像显示装置,所述成像显示装置包括图像采集单元和图像显示单元,所述图像采集单元可对待识别体的外部轮廓进行识别,并传递至所述触控主体中进行处理,以匹配相应的多媒体信息并通过所述成像显示装置和/或触控主体进行显示播放。
作为本发明的进一步改进,所述触控主体包括触摸显示单元、与所述触摸显示单元电性连接的控制装置以及分别连接在所述控制装置上的语音播放单元、信息交换存储单元及自定义装置;所述识别装置分别与所述触摸显示单元和所述控制装置电性连接,以接收识别所述触摸显示单元传递的识别信息,并在识别后传递给所述控制装置进行多媒体信息的匹配,所述多媒体信息预存在所述信息交换存储单元中。
作为本发明的进一步改进,所述触摸显示单元为结合有互动按键的电容式触控屏,按压所述互动按键和/或触碰所述电容式触控屏,可控制所述控制装置产生相应的交互信号,并使得所述电容式触控屏的显示内容发生变化。
作为本发明的进一步改进,所述交互式早教机器人还包括与所述自定义装置对应设置的多个自定义构件,所述自定义构件以打印或粘附的形式设置在所述待识别体上并可被所述识别装置识别,以通过所述自定义装置匹配多媒体信息和/或定义交互信息。
作为本发明的进一步改进,所述识别装置用于识别交互信息和待识别体,所述识别装置包括语音识别单元、图像识别单元、状态识别单元及手势识别单元,以至少对交互信息中包含的和/或待识别体携带的语音信息、图像信息、物体形状、物体颜色、运动轨迹及手势信息进行识别。
作为本发明的进一步改进,所述识别装置至少包括红外摄像头、双目视觉传感器、激光散斑检测装置、深度摄像头及单目摄像头中的一种或几种。
作为本发明的进一步改进,所述待识别体为识别信息和交互信息的承载体,所述识别信息和所述交互信息均可被所述识别装置识别;且所述识别信息至少包括所述待识别体的形状信息和位置信息;所述交互信息至少包括语音信息、动作信息、运动位置、运动轨迹及运动方式信息。
为实现上述发明目的,本发明还提供了一种交互式早教机器人的交互方法,所述交互式早教机器人包括触控主体、与所述触控主体适配的待识别体以及用于识别所述待识别体的识别装置;所述触控主体包括触摸显示单元、与所述触摸显示单元电性连接的控制装置以及分别连接在所述控制装置上的语音播放单元、信息交换存储单元及自定义装置,所述交互式早教机器人的交互方法主要包括以下步骤:
S1、获取待识别体特定的识别信息;
S2、将所述识别信息与控制装置中的预设信息列表进行匹配,获取相应的多媒体信息;
S3、所述多媒体信息通过触摸显示单元和语音播放单元进行显示播放,若针对所述多媒体信息中包含的交互信息做出回应,则可产生相应的反馈信号;
S4、所述控制装置根据所述反馈信号执行预设操作,推进多媒体信息的发展。
作为本发明的进一步改进,所述预设信息列表包括:所述待识别体的形状、位置和图文信息与所述多媒体信息的对应关系。
本发明的有益效果是:本发明的交互式早教机器人及其交互方法,利用触控主体和识别装置对待识别体进行识别,并通过触控主体调用与待识别体匹配的多媒体信息,将现实场景中的待识别体融入多媒体信息中,形成了与儿童之间文字、声音、影像的交互,使得儿童可在游戏过程中学习、思考和探索,丰富了儿童的玩耍过程,有利于提高儿童的想象力和创造力;同时,本发明的交互式早教机器人结构简单、操作方便,适于推广及使用。
附图说明
图1是本发明交互式早教机器人的系统框图。
图2是本发明交互式早教机器人的交互方法的流程示意图。
图3是本发明交互式早教机器人的使用结构示意图。
具体实施方式
为了使本发明的目的、技术方案和优点更加清楚,下面结合附图和具体实施例对本发明进行详细描述。
请参阅图1所示,本发明揭示了一种交互式早教机器人100。所述交互式早教机器人100包括可实现多点触控的触控主体1、与所述触控主体1适配的待识别体2以及用于识别所述待识别体2的识别装置3。所述触控主体1内预存有多媒体信息;所述触控主体1和/或所述识别装置3对所述待识别体2进行识别,并与存储在触控主体1内的多媒体信息匹配,进一步通过所述触控主体1显示和/或播放,以实现与儿童的交互。
所述触控主体1包括触摸显示单元11、语音播放单元12、信息交换存储单元13、自定义装置14以及分别与所述触摸显示单元11、语音播放单元12、信息交换存储单元13、自定义装置14电性连接的控制装置15。
所述触摸显示单元11主要用于显示与所述待识别体2匹配的多媒体信息,同时,所述触摸显示单元11还用于检测所述待识别体2。具体来讲,在本发明中,所述触摸显示单元11为电容式触控屏,当手指或其它设有导电材料的待识别体2与所述电容式触控屏接触时,所述电容式触控屏上产生交互信号(即耦合电容)并传递给所述识别装置3进行识别,进一步由所述控制装置15匹配相应的多媒体信息。
进一步的,在本发明的一个实施例中,所述触摸显示单元11为结合有互动按键(未图示)的电容式触控屏,如此设置,儿童既可以通过按压所述互动按键产生识别信号和/或交互信号;也可通过触碰所述电容式触控屏上显示的信息产生相应的交互信号,进一步通过所述识别装置3和所述控制装置15匹配相应的多媒体信息,使得所述电容式触控屏的显示内容随之变化。
所述语音播放单元12连接在所述控制装置15上,且可在所述控制装置15的控制作用下,播放多媒体信息中的声音信息。具体来讲,本发明的所述多媒体信息至少包括图形信息、声音信息、视频信息及交互游戏中的一种或几种;因此,为保证多媒体信息播放显示的完整性,所述触控显示单元11和所述语音播放单元12通常在所述控制装置15的控制作用下协同工作,其中,所述触控显示单元11主要用于播放多媒体信息中的影像信息,所述影像信息包括静止图形信息、视频中的动态图形信息等任何以图形的方式显示的信息,而语音播放单元12则主要用于播放所述多媒体信息中的音频信息,所述音频信息包括任何以声音的方式播放的信息。
进一步的,在本发明的一个实施例中,所述语音播放单元12与所述触摸显示单元11一体设置,以达到减小所述触控主体1体积的目的,使得本发明的交互式早教机器人100适于儿童使用。当然,在其他实施例中,所述语音播放单元12还可与所述触摸显示单元11分体设置,即在本发明中所述触摸显示单元11和所述语音播放单元12的具体安装位置和安装形式,可根据实际需要进行选择,于此不与限制。
所述信息交换存储单元13用于存储所述多媒体信息,且在本发明的一个实施例中,所述信息交换存储单元13还设有信息交互端口(未图示),所述信息交互端口至少包括HDMI接口、USB接口、I/O接口、无线网关或以太网接口中的一种或几种,且所述信息交换存储单元13可在所述控制装置15的控制下,通过所述信息交互端口获取多媒体信息。进一步的,当所述信息交互存储单元13通过无线网关或以太网接口连接至互联网时,所述多媒体信息还可包括通过控制装置15在网络中直接调用的互联网信息。
所述自定义装置14用于定义待识别体2的识别信息和交互信息,并与所述信息交换存储单元13中的多媒体信息匹配,如此设置,一方面保证所述交互式早教机器人100可将不同的待识别体2匹配至多媒体信息中,同时,可根据实际需要更换与多媒体信息相匹配的待识别体2;另一方面,还可定义待识别体2的交互信息,使得所述待识别体2上的交互信息与所述多媒体信息中的内容节点相匹配,保证交互过程顺畅进行。
进一步的,所述交互式早教机器人100还包括与所述自定义装置14对应设置的多个自定义构件141,所述自定义构件141以打印或粘附的形式设置在所述待识别体2上并可被所述识别装置3识别,以进一步通过所述自定义装置14进行定义并匹配多媒体信息和/或交互信息。
具体来讲,本发明的所述交互式早教机器人100可对具有明确含义的待识别体2如词语、常见的动画形象、图片、照片等进行识别,所述控制装置15在接收到相应的识别信息后,可直接匹配多媒体信息;进一步的,当同一待识别体2同时对应多种多媒体信息时,所述控制装置15可通过所述触摸显示单元11和/或所述语音播放单元12提示相应的选择信息,进一步的,儿童可根据需要发送与选择信息对应的交互指令,以选择所需多媒体信息并完成后续的互动过程。
而当所述待识别体2携带的识别信息不可识别或者不具有识别信息时,就需要通过所述自定义装置14定义所述待识别体2的识别信息,并匹配相应的多媒体信息。具体来讲,所述自定义装置14同时具有图形识别功能和语音识别功能,即,所述自定义装置14既可定义录入的语音信息,也可定义录入的图形信息,进一步的,通过所述自定义装置14定义录入的语音信息,一方面可作为交互信息,另一方面可叠加到多媒体信息中,作为多媒体信息的一部分进行播放。
当通过所述自定义装置14定义录入的图形信息时,所述图形信息主要包括所述待识别体2上自定义构件141排布形成的图形信息和/或所述待识别体2自身的形状信息,事实上,由于不同的待识别体2上所述自定义构件141的使用数量和/或排布形式不同,可以保证每个所述待识别体2彼此间具有不同的识别信息。
进一步的,当所述自定义装置14根据所述自定义构件141的排布和/或待识别体2的形状信息限定所述待识别体2的识别信息后,可进一步通过所述自定义装置14和控制装置15将所述待识别体2的识别信息与所述信息交换存储单元13中的多媒体信息相匹配,并根据所述多媒体信息的推进节点定义所述待识别体2及相应的交互信息;待识别体2的定义结束后,当所述待识别体2仍处于所述识别装置3的识别区域内时,所述待识别体2可被识别,并可通过控制装置15匹配相应的多媒体信息进行播放。
所述控制装置15为所述交互式早教机器人100的主要控制协调单元,用于接收所述识别装置3和/或所述成像显示装置4传递的识别信息和交互信息,并针对所述识别信息和交互信息匹配相应的多媒体信息,最后传递给所述触摸显示单元11、所述语音播放单元12和所述成像显示装置4进行播放。
具体来讲,所述控制装置15在接收所述识别装置3和/或所述成像显示装置4传递的识别信息和/或交互信息后,会自动匹配存储或间接存储在所述信息交换存储单元13中的多媒体信息,并传递至所述触摸显示单元11、所述语音播放单元12和所述成像显示装置4进行显示播放;进一步的,所述控制装置15还用于根据所述交互信息调整多媒体信息,以通过所述交互信息激发多媒体信息的推进,并通过触摸显示单元11、所述语音播放单元12和所述成像显示装置4进行联动显示。
需要说明的是,在本发明的一个实施例中,所述触控主体1为设置有自定义装置14和控制装置15的手机、平板电脑等具有电容式触控屏的电子装置,所述自定义装置14和所述控制装置15可以以内置的形式直接安装在电子装置中,或者以外接设备的形式连接在所述电子装置上,所述电子装置上设有与所述自定义装置14和所述控制装置15进行交互的交互端口,进一步的,所述成像显示装置4也采用外接的方式与所述控制装置15电性连接。
所述待识别体2为识别信息和交互信息的承载体,可以是任何具有一定信息承载能力的对象;其中,所述交互信息至少包括语音信息、动作信息、运动位置、运动轨迹及运动方式信息,所述识别信息至少包括所述待识别体2的形状信息和位置信息;而当所述待识别体2的识别信息由所述自定义构件141组成时,所述形状信息即为自定义构件141在所述待识别体2上组成的图形信息。
进一步的,为了防止所述待识别体2在多媒体信息匹配的过程中发生混乱,每个所述待识别体2具有唯一的识别信息,如此设置,所述识别装置3可通过所述识别信息区分不同的待识别体2。
在本发明实施例中,所述待识别体2为非电子化信息载体,如玩具、书籍、卡片、人体等实体类信息承载体;此时,所述识别信息可为所述待识别体2上的图像、文字、人脸表情、手部动作等抽象信息。
所述识别装置3分别与所述触摸显示单元11、所述控制装置15及所述成像显示装置4电性连接,以对所述触摸显示单元11和所述成像显示装置4传递的识别信息进行识别,并进一步传递至控制装置15中进行处理,以匹配多媒体信息。所述识别装置3包括音频识别单元31和影像识别单元32,所述音频识别单元31用于接收识别语音交互信息;所述影像识别单元32用于识别所述现实场景内一个或多个待识别体2的识别信息及发生在每个所述待识别体2上的交互信息。
进一步的,在本发明中所述影像识别单元32至少包括红外摄像头、双目视觉传感器、激光散斑检测装置、深度摄像头及单目摄像头中的一种或几种。
所述交互式早教机器人100还包括连接在所述触控主体1上的成像显示装置4。具体来讲,所述成像显示装置4分别与所述控制装置15和识别装置3电性连接,且所述成像显示装置4包括图像采集单元41和图像显示单元42,所述图像采集单元41可对待识别体2的外部轮廓进行识别,并传递至所述识别装置3中进行处理,以匹配相应的多媒体信息,并通过所述图像显示单元42和/或触摸显示单元11进行显示播放。
进一步的,所述图像显示单元42既可与所述触摸显示单元11显示同样的内容,使得所述交互式早教机器人100播放的多媒体信息更具有立体性及真实感;也可以分别进行播放,提升多媒体信息播放的多元互动性。
在本发明中,所述图像显示单元42为投影装置,优选的,所述投影装置为具有自动调焦功能的投影装置,如此设置,所述投影装置可根据投影位置自动调节多媒体信息的播放清晰度。
需要说明的是,本发明的交互式早教机器人100还应包括电源组件、信息输入组件等其他组件,在本发明的说明书部分中仅示例性的给出部分组件,并不意味着本发明的所述交互式早教机器人100仅包括上述组件。
请参阅图2所示,为本发明提供的一种交互式早教机器人的交互方法,所述交互式早教机器人的交互方法包括以下步骤:
S1、获取待识别体2特定的识别信息;
S2、将所述识别信息与控制装置15中的预设信息列表进行匹配,获取相应的多媒体信息;
S3、所述多媒体信息通过触摸显示单元11、语音播放单元12和/或成像显示装置4进行显示播放,若针对所述多媒体信息中包含的交互信息做出回应,则可产生相应的反馈信号;
S4、所述控制装置15根据所述反馈信号执行预设操作,推进多媒体信息的发展。
以下说明书部分将对所述交互式早教机器人的交互方法进行详细阐述。
所述步骤S1具体包括:
S11、启动所述交互式早教机器人100,使得所述触控主体1、识别装置3以及成像显示装置4均处于工作状态;
S12、将待识别体2放置于所述触摸显示单元11上,以使得所述待识别体2的识别信息可被所述触摸显示单元11和/或所述图像采集单元41识别。
需要说明的是,在所述步骤S12中,所述待识别体2的放置既可为用户自发进行的,也可为用户在接收到所述交互式早教机器人100的指令后进行的;进一步的,当所述待识别体2的放置是根据交互式早教机器人100的指令进行时,所述指令既可为通过所述语音播放单元12播放的声音指令,也可为由所述触摸显示单元11显示播放的位置区域指令,此时,只有将所述待识别体2放置于所述位置区域内,所述待识别体2的识别信息才可被所述影像识别单元32和/或所述图像采集单元41识别。
所述步骤S2具体为:将所述待识别体2的识别信息与所述控制装置15中的预设信息列表进行匹配,获取相应的多媒体信息;具体来讲,所述预设信息列表包括:所述待识别体2所携带的识别信息与所述多媒体信息的对应关系以及所述交互信息与所述多媒体信息的对应关系。
事实上,由于多媒体信息中包含大量的信息,单纯依靠识别装置3和图像采集单元41对待识别体2的识别信息和交互信息进行采集并与多媒体信息的内容匹配,可能出现多媒体信息与识别信息、交互信息匹配混乱的现象,此时则需要通过自定义装置14关联交互信息与多媒体信息中的节点内容,以保证待识别体2和多媒体信息交互过程的顺畅进行,而所述预设信息列表则是将所述多媒体信息中节点信息提取并按照时间顺序排列,进一步通过所述自定义装置14、控制装置15与待识别体2的交互信息匹配,使得控制装置15在接收到相应的交互信息后,根据时间顺序对应识别预设信息列表中的内容。
在所述步骤S3和S4中,当发出的反馈信号与预设信息列表中的时间顺序、定义的预设信息均吻合时,则推动多媒体信息的发展;若不吻合,则可通过触摸显示单元11、影像识别单元41和/或语音播放单元12再次进行提示,直至待识别体2的位置或待识别体2的形态或用户发出的语音反馈信息符合预设信息列表的预设内容,则多媒体信息进入下一播放阶段。
以下说明书部分将结合具体实施例对本发明的交互式早教机器人的交互方法进行详细阐述。
请一并参阅图2和图3所示,在本实施例中,所述待识别体2为儿童玩具,所述儿童玩具包括设置在其底部的多个自定义构件141,所述自定义构架141构成了儿童玩具唯一的识别信息。
将儿童玩具的设有自定义构件141的一侧放置在所述触摸显示单元11上,所述触摸显示单元11和/或所述图像采集单元41开始采集所述儿童玩具的识别信息,并由所述识别装置3对所述识别信息进行识别;所述识别装置3将识别到的识别信息传送至控制装置15中,由所述控制装置15匹配预设信息列表,若识别信息符合预设信息列表中的预设信息,则通过控制装置15调用信息交换存储单元13中的多媒体信息,将场景推进至下一阶段;若不符合,则发出相应的提示信息,提示儿童将所述儿童玩具移动至指定位置,或发出相应的语音交互信息,完成儿童与多媒体信息间的交互。
需要说明的是,在本发明的实施例中,仅以所述待识别体2为儿童玩具进行举例说明,当然在其他实施例中,所述待识别体2还可为书籍、绘本、卡片等;当所述待识别体2为书籍或绘本时,所述交互式早教机器人100可以朗读书籍或绘本中的内容,并可以互动游戏的形式引导儿童进行重复朗读,继而达到引导儿童主动学习的目的。
综上所述,本发明的交互式早教机器人100及交互式早教机器人的交互方法,利用识别装置3和图像采集单元42对放置在触摸显示单元11上的待识别体2进行识别,并通过控制装置15匹配调用与识别信息相关的多媒体信息,进一步通过所述触控显示单元11、语音播放单元12和图像显示单元41进行播放,将现实场景中的待识别体2融入到多媒体信息中,形成了多媒体信息与儿童之间文字、声音、影像的交互,使得儿童可在游戏过程中学习、思考和探索,丰富了儿童的玩耍过程,有利于提高儿童的想象力和创造力。同时,本发明的交互式早教机器人100结构简单、操作方便,适于推广及使用。
以上实施例仅用以说明本发明的技术方案而非限制,尽管参照较佳实施例对本发明进行了详细说明,本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或者等同替换,而不脱离本发明技术方案的精神和范围。

Claims (10)

1.一种交互式早教机器人,其特征在于:包括可实现多点触控的触控主体、与所述触控主体适配的待识别体以及用于识别所述待识别体的识别装置,所述触控主体内预存有多媒体信息;所述触控主体和/或所述识别装置对所述待识别体进行识别,以与存储在触控主体内的多媒体信息匹配,并通过所述触控主体显示和/或播放,以实现交互。
2.根据权利要求1所述的交互式早教机器人,其特征在于:所述交互式早教机器人还包括连接在所述触控主体上的成像显示装置,所述成像显示装置包括图像采集单元和图像显示单元,所述图像采集单元可对待识别体的外部轮廓进行识别,并传递至所述触控主体中进行处理,以匹配相应的多媒体信息并通过所述成像显示装置和/或触控主体进行显示播放。
3.根据权利要求1所述的交互式早教机器人,其特征在于:所述触控主体包括触摸显示单元、与所述触摸显示单元电性连接的控制装置以及分别连接在所述控制装置上的语音播放单元、信息交换存储单元及自定义装置;所述识别装置分别与所述触摸显示单元和所述控制装置电性连接,以接收识别所述触摸显示单元传递的识别信息,并在识别后传递给所述控制装置进行多媒体信息的匹配,所述多媒体信息预存在所述信息交换存储单元中。
4.根据权利要求3所述的交互式早教机器人,其特征在于:所述触摸显示单元为结合有互动按键的电容式触控屏,按压所述互动按键和/或触碰所述电容式触控屏,可控制所述控制装置产生相应的交互信号,并使得所述电容式触控屏的显示内容发生变化。
5.根据权利要求3所述的交互式早教机器人,其特征在于:所述交互式早教机器人还包括与所述自定义装置对应设置的多个自定义构件,所述自定义构件以打印或粘附的形式设置在所述待识别体上并可被所述识别装置识别,以通过所述自定义装置匹配多媒体信息和/或定义交互信息。
6.根据权利要求5所述的交互式早教机器人,其特征在于:所述识别装置用于识别交互信息和待识别体,所述识别装置包括语音识别单元、图像识别单元、状态识别单元及手势识别单元,以至少对交互信息中包含的和/或待识别体携带的语音信息、图像信息、物体形状、物体颜色、运动轨迹及手势信息进行识别。
7.根据权利要求6所述的交互式早教机器人,其特征在于:所述识别装置至少包括红外摄像头、双目视觉传感器、激光散斑检测装置、深度摄像头及单目摄像头中的一种或几种。
8.根据权利要求1所述的交互式早教机器人,其特征在于:所述待识别体为识别信息和交互信息的承载体,所述识别信息和所述交互信息均可被所述识别装置识别;且所述识别信息至少包括所述待识别体的形状信息和位置信息;所述交互信息至少包括语音信息、动作信息、运动位置、运动轨迹及运动方式信息。
9.一种交互式早教机器人的交互方法,所述交互式早教机器人包括触控主体、与所述触控主体适配的待识别体以及用于识别所述待识别体的识别装置;所述触控主体包括触摸显示单元、与所述触摸显示单元电性连接的控制装置以及分别连接在所述控制装置上的语音播放单元、信息交换存储单元及自定义装置,其特征在于,所述交互式早教机器人的交互方法主要包括以下步骤:
S1、获取待识别体特定的识别信息;
S2、将所述识别信息与控制装置中的预设信息列表进行匹配,获取相应的多媒体信息;
S3、所述多媒体信息通过触摸显示单元和语音播放单元进行显示播放,若针对所述多媒体信息中包含的交互信息做出回应,则可产生相应的反馈信号;
S4、所述控制装置根据所述反馈信号执行预设操作,推进多媒体信息的发展。
10.根据权利要求9所述的交互式早教机器人的交互方法,其特征在于,所述预设信息列表包括:所述待识别体的形状、位置和图文信息与所述多媒体信息的对应关系。
CN201811008653.9A 2018-08-30 2018-08-30 交互式早教机器人及其交互方法 Pending CN109300341A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811008653.9A CN109300341A (zh) 2018-08-30 2018-08-30 交互式早教机器人及其交互方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811008653.9A CN109300341A (zh) 2018-08-30 2018-08-30 交互式早教机器人及其交互方法

Publications (1)

Publication Number Publication Date
CN109300341A true CN109300341A (zh) 2019-02-01

Family

ID=65165722

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811008653.9A Pending CN109300341A (zh) 2018-08-30 2018-08-30 交互式早教机器人及其交互方法

Country Status (1)

Country Link
CN (1) CN109300341A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110349461A (zh) * 2019-06-11 2019-10-18 北京光年无限科技有限公司 基于儿童专用智能设备的教育与娱乐结合方法及系统
CN114288684A (zh) * 2021-12-31 2022-04-08 深圳数联天下智能科技有限公司 智能玩具的控制方法及装置、智能玩具及介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102077260A (zh) * 2008-06-27 2011-05-25 悠进机器人股份公司 利用机器人的交互式学习系统和在儿童教育中操作该系统的方法
CN102446428A (zh) * 2010-09-27 2012-05-09 北京紫光优蓝机器人技术有限公司 基于机器人的交互式学习系统及其交互方法
CN104656653A (zh) * 2015-01-15 2015-05-27 长源动力(北京)科技有限公司 一种基于机器人的交互系统及方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102077260A (zh) * 2008-06-27 2011-05-25 悠进机器人股份公司 利用机器人的交互式学习系统和在儿童教育中操作该系统的方法
CN102446428A (zh) * 2010-09-27 2012-05-09 北京紫光优蓝机器人技术有限公司 基于机器人的交互式学习系统及其交互方法
CN104656653A (zh) * 2015-01-15 2015-05-27 长源动力(北京)科技有限公司 一种基于机器人的交互系统及方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110349461A (zh) * 2019-06-11 2019-10-18 北京光年无限科技有限公司 基于儿童专用智能设备的教育与娱乐结合方法及系统
CN114288684A (zh) * 2021-12-31 2022-04-08 深圳数联天下智能科技有限公司 智能玩具的控制方法及装置、智能玩具及介质
CN114288684B (zh) * 2021-12-31 2024-05-28 深圳数联天下智能科技有限公司 智能玩具的控制方法及装置、智能玩具及介质

Similar Documents

Publication Publication Date Title
CN106056996B (zh) 一种多媒体交互教学系统及方法
CN107340865A (zh) 多模态虚拟机器人交互方法和系统
CN208622062U (zh) 增强现实交互系统
CN103377568B (zh) 一种多功能儿童体感教育系统
CN106200886A (zh) 一种基于语言交互操控的移动智能玩具及玩具使用方法
CN109215413A (zh) 一种基于移动增强现实的模具设计教学方法、系统及移动终端
CN109271018A (zh) 基于虚拟人行为标准的交互方法及系统
CN110457091A (zh) 多参与者实时通信用户界面
CN208141466U (zh) 一种基于机器人的签到装置及系统
CN107704169A (zh) 虚拟人的状态管理方法和系统
CN107784355A (zh) 虚拟人多模态交互数据处理方法和系统
CN106514665B (zh) 教育机器人及其控制方法
CN204650422U (zh) 一种基于语言交互操控的移动智能玩具
CN106781841A (zh) 一种ar教画装置及其教画系统
CN107808191A (zh) 虚拟人多模态交互的输出方法和系统
CN106730234A (zh) 一种智能情绪疏导系统
CN109300341A (zh) 交互式早教机器人及其交互方法
CN111680137A (zh) 在线课堂互动方法、装置、存储介质及终端
CN106445170A (zh) 基于ar的互动投影系统
Wu et al. Object recognition-based second language learning educational robot system for Chinese preschool children
CN108416420A (zh) 基于虚拟人的肢体交互方法及系统
CN107817701A (zh) 设备控制方法、装置、计算机可读存储介质及终端
CN108874156A (zh) 增强现实交互系统及其使用方法
CN110406275A (zh) 一种移动式写绘机器人
CN106898189A (zh) 一种绘画学习训练装置及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190201

RJ01 Rejection of invention patent application after publication