CN107038759A - 基于ar的学习检测方法及装置 - Google Patents

基于ar的学习检测方法及装置 Download PDF

Info

Publication number
CN107038759A
CN107038759A CN201710147833.4A CN201710147833A CN107038759A CN 107038759 A CN107038759 A CN 107038759A CN 201710147833 A CN201710147833 A CN 201710147833A CN 107038759 A CN107038759 A CN 107038759A
Authority
CN
China
Prior art keywords
content
detected
character
image
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710147833.4A
Other languages
English (en)
Inventor
封林毅
周雪松
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SHENZHEN THINKSKY TECHNOLOGY Co Ltd
Original Assignee
SHENZHEN THINKSKY TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SHENZHEN THINKSKY TECHNOLOGY Co Ltd filed Critical SHENZHEN THINKSKY TECHNOLOGY Co Ltd
Priority to CN201710147833.4A priority Critical patent/CN107038759A/zh
Publication of CN107038759A publication Critical patent/CN107038759A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/20Education
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/06Electrically-operated educational appliances with both visual and audible presentation of the material to be studied

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Tourism & Hospitality (AREA)
  • General Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Economics (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Electrically Operated Instructional Devices (AREA)

Abstract

本发明适用于软件领域,提供了一种基于AR的学习检测方法及装置。所述方法包括:在AR场景下显示3D模型图像;基于接收的信息输出指令输出与所述3D模型图像相关的字符和/或音频;基于用户已学习的内容确定待检测内容;显示与所述待检测内容相关的字符或图像以及作为干扰项的字符或图像;播放与所述待检测内容相关的音频;接收用户发出的字符或图像选择指令,以选中对应的字符或图像;判断用户选中的字符或图像是否为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像;若匹配,判定所述待检测内容的检测通过;否则,判定所述待检测内容的检测没有通过。通过上述方法,能够便于吸引学龄期儿童通过AR技术学习。

Description

基于AR的学习检测方法及装置
技术领域
本发明实施例属于软件领域,尤其涉及一种基于AR的学习检测方法及装置。
背景技术
增强现实(Augmented Reality,AR)技术,是一种实时地计算摄影机影像的位置及角度并加上相应图像、视频、3D模型的技术,这种技术的目标是在屏幕上把虚拟世界套在现实世界并进行互动。
现在的AR技术主要是针对具有较完善动作、思想的人开发的应用,但缺少针对学龄期儿童的学习教育开发的应用。而实际上,由于AR技术结合了虚拟与现实,因此,与传统的书本相比趣味性更大,也更能吸引学龄期儿童的注意力,从而提高学习效率。
故,有必要提供一种新的技术方案以解决上述技术问题。
发明内容
本发明实施例提供了一种基于AR的学习检测方法及装置,旨在解决现有的方法中,缺少基于AR技术且针对学龄期儿童的学习教育开发的应用的问题。
本发明实施例的第一方面,提供了一种基于AR的学习检测方法,所述学习检测方法包括:
在AR场景下显示3D模型图像;
基于接收的信息输出指令输出与所述3D模型图像相关的字符和/或音频;
基于用户已学习的内容确定待检测内容;
显示与所述待检测内容相关的字符或图像以及作为干扰项的字符或图像;
播放与所述待检测内容相关的音频;
接收用户发出的字符或图像选择指令,以选中对应的字符或图像;
判断用户选中的字符或图像是否为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像;
在用户选中的字符或图像为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像时,判定所述待检测内容的检测通过;
在用户选中的字符或图像不为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像时,判定所述待检测内容的检测没有通过。
本发明实施例的第二方面,提供了一种基于AR的学习检测装置,所述学习检测装置包括:
3D模型图像显示单元,用于在AR场景下显示3D模型图像;
学习内容输出单元,用于基于接收的信息输出指令输出与所述3D模型图像相关的字符和/或音频;
待检测内容确定单元,用于基于用户已学习的内容确定待检测内容;
显示选择项单元,用于显示与所述待检测内容相关的字符或图像以及作为干扰项的字符或图像;
音频播放单元,用于播放与所述待检测内容相关的音频;
选择指令接收单元,用于接收用户发出的字符或图像选择指令,以选中对应的字符或图像;
学习内容匹配判断单元,用于判断用户选中的字符或图像是否为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像;
检测通过判定单元,用于在用户选中的字符或图像为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像时,判定所述待检测内容的检测通过;
检测没有通过判定单元,用于在用户选中的字符或图像不为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像时,判定所述待检测内容的检测没有通过。
在本发明实施例中,由于能够在AR场景下显示3D模型图像,且基于接收的信息输出指令能够输出与所述3D模型图像相关的字符和/或音频,因此,便于吸引学龄期儿童通过AR技术学习3D模型图像对应的字符、图像、音频,并且,还能够基于用户已学习的内容确定待检测内容,以检测用户的学习效果,从而进一步巩固了学习成效,提高了学习效率。
附图说明
图1是本发明第一实施例提供的一种基于AR的学习检测方法的流程图;
图2是本发明第二实施例提供的一种基于AR的学习检测装置的结构图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明实施例中,在AR场景下显示3D模型图像,基于接收的信息输出指令输出与所述3D模型图像相关的字符和/或音频,基于用户已学习的内容确定待检测内容,显示与所述待检测内容相关的字符或图像以及作为干扰项的字符或图像,播放与所述待检测内容相关的音频,接收用户发出的字符或图像选择指令,以选中对应的字符或图像,判断用户选中的字符或图像是否为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像,在用户选中的字符或图像为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像时,判定所述待检测内容的检测通过,在用户选中的字符或图像不为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像时,判定所述待检测内容的检测没有通过。
为了说明本发明所述的技术方案,下面通过具体实施例来进行说明。
实施例一:
图1示出了本发明第一实施例提供的一种基于AR的学习检测方法的流程图,详述如下:
步骤S11,在AR场景下显示3D模型图像。
具体地,启动AR应用,在AR场景下通过摄像装置(如摄像头或照相机等)扫描摄像装置前方的对象(该对象通常为一张图片),将被扫描的对象与预设的3D模型图像比较,若被扫描的对象与预设的3D模型图像中的一个相同,则显示该对象对应的3D模型图像。
当针对低龄幼儿时,该3D模型图像通常为某一个动物或植物或一首诗词、童谣对应的图像。
需要指出的是,可动态显示3D模型图像,且在显示的过程中,可同时结合3D模型图像的动作发出对应的语音。
步骤S12,基于接收的信息输出指令输出与所述3D模型图像相关的字符和/或音频。
其中,与3D模型图像相关的字符包括中文字符和/或英文字符,例如,假设该3D模型图像为牛的图像,则在终端(如手机、电脑等)将显示牛的3D模型图像,当接收到的信息输出指令为中文输出指令时,显示中文“牛”,和/或,用普通话发出“niu”的读音;当接收到的信息输出指令为英文输出指令时,显示英文“cow”,和/或,用英文发出“cow”的读音。
步骤S13,基于用户已学习的内容确定待检测内容。
其中,当终端已显示某个3D模型图像,且在显示该某个3D模型图像时终端接收到信息输出指令,则判定用户已学习该某个3D模型图像。
需要指出的是,确定的待检测内容可为用户已学习的一个或多个字符或图像。
步骤S14,显示与所述待检测内容相关的字符或图像以及作为干扰项的字符或图像。
其中,干扰项的字符或图像是指不需检测的内容,其可以为用户已学习的内容,也可以为用户未学习的内容,主要起到干扰用户的目的。例如,假设待检测内容为“cow”,干扰项的字符为“draw”,则在显示“cow”这一字符时,还同时显示干扰项的字符“draw”。
步骤S15,播放与所述待检测内容相关的音频。
具体地,当待检测内容为字符时,播放与所述待检测内容相关的音频为播放该字符的读音,例如,当字符为中文时,用普通话播放该中文对应的音频;当字符为英文时,用英文播放该英文对应的音频。当待检测内容为图像时,播放与所述待检测内容相关的音频主要为通过普通话和/或英文播放图像对应的音频。
可选地,可动态显示某一个卡通形象(如AR应用的主打卡通形象),通过该动态显示的卡通形象“播放”与所述待检测内容相关的音频,以增强用户与应用的交互性,从而通过增加趣味性来提高用户使用AR应用的时长。
可选地,为了便于用户知悉播放音频之后的操作,则在步骤S15之后,包括:提醒用户在显示的字符或图像中选择与音频对应的字符或图像。
步骤S16,接收用户发出的字符或图像选择指令,以选中对应的字符或图像。
具体地,用户可通过触摸显示的字符或图像发出选择指令,当用户点击或触摸字符或图像所在的屏幕位置时,表明用户选中该字符或图像。当然,为了降低用户误触屏幕而判定为用户选中字符或图像,则在检测到用户点击或触摸字符或图像所在的屏幕位置时,进一步判断用户点击或触摸的时长和/或压强等是否满足预设条件,若满足,才判定用户发出字符或图像选择指令。
步骤S17,判断用户选中的字符或图像是否为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像。
由于显示的字符或图像中还包括干扰项,因此,用户选中的字符或图像也可能为与当前播放结束的待检测内容相关的视频不匹配的字符或图像。
该步骤中,当播放与所述待检测内容相关的音频后,锁定与音频对应的待检测内容,如在待检测内容为字符或图像时,锁定与音频对应的字符或图像,当用户从显示的字符或图像中选中某一个字符或图像时,将用户选中的某一个字符或图像与锁定的字符或图像比较,以判断两者是否相同。
步骤S18,在用户选中的字符或图像为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像时,判定所述待检测内容的检测通过。
具体地,可通过语音“答对了,你真棒”等提示用户检测通过,当然,也可以在语音提示的基础上,在对应的字符或图像上用“√”标记用户在该字符或图像上的检测通过。
步骤S19,在用户选中的字符或图像不为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像时,判定所述待检测内容的检测没有通过。
具体地,可通过语音“下次努力,加油”等提示用户检测没有通过,当然,也可以在语音提示的基础上,在对应的字符或图像上用“×”标记用户在该字符或图像上的检测没有通过。
可选地,所述步骤S13,包括:
A1、将用户本次检测之前且上一次检测之后的已学习的内容确定为待检测内容。具体地,将用户两次检测之间的已学习的内容确定为待检测内容,主要用于加强用户最近一次学习的内容。
或者,
A2、将用户本次检测之前的已学习的内容确定为待检测内容。具体地,将用户已学习的所有内容都确定为待检测内容,主要用于巩固已学习的内容。
可选地,为了使得确定的待检测内容更有针对性,所述步骤S13,包括:
A1’、确定用户已学习的内容的权重,并依据权重高低对所述用户已学习的内容进行排序。具体地,假设可设置的权重最大值为M,最小值为0,为了便于计算,权重值可取为整数。在确定用户已学习的内容的权重时,可将用户本次检测之前且上一次检测之后的已学习的内容的权重置为大于M/2且小于M的值,例如可将同一次学习的内容的权重值都置为相同值,当然,也可根据用户在学习过程中的观看时长、发出信息输出指令的次数等设置不同的权重,例如,将用户观看时长更长的内容的权重置为更大,将发出信息输出指令的次数更多的权重置为更大等。
A2’、将排序在前的指定个数的所述用户已学习的内容确定为待检测内容。
具体地,考虑到终端的屏幕有限,以及,考虑到一次检测内容不易过多,以免用户产生倦怠情绪,则只将排序在前的指定个数的用户已学习的内容确定为待检测内容,如只将排序在前的5个用户已学习的内容确定为待检测内容。
可选地,
在所述步骤S18之后,包括:
降低检测通过的所述待检测内容的权重。具体地,每当用户答对一次待检测内容,则降低一次该待检测内容的权重,例如,在原基础上,每次降低最大权重值的10%。
在所述步骤S19之后,包括:
提高检测通过的所述待检测内容的权重。具体地,每当用户答错一次待检测内容,则提高一次该待检测内容的权重,例如,在原基础上,每次提高最大权重值的10%。
可选地,所述待检测内容为字符或图像,且所述字符或图像的个数大于1,则在所述步骤S19之后,包括:
B1、判断检测没有通过的字符或图像的个数是否大于或等于待检测的字符或图像的一半。
B2、在检测没有通过的字符或图像的个数大于或等于待检测的字符或图像的一半时,重新确定待检测的字符或图像。
上述B1和B2中,若用户答错过半的待检测的字符或图像,则为了避免过度打击用户的信心,则需重新确定待检测的字符或图像,在重新确定之后再执行步骤S14。
可选地,所述重新确定待检测的字符或图像具体包括:
选取至少一个用户最近一次检测通过的字符或图像;
将所述至少一个用户最近一次检测通过的字符或图像以及用户上一次检测没有通过的字符或图像组合为新的待检测的字符或图像。
由于新的待检测的字符或图像包括至少一个用户最近一次检测通过的字符或图像,因此,用户在新的一轮检测中,将拥有至少一次检测通过的机会,从而避免过度打击用户的信心。
本发明第一实施例中,在AR场景下显示3D模型图像,基于接收的信息输出指令输出与所述3D模型图像相关的字符和/或音频,基于用户已学习的内容确定待检测内容,显示与所述待检测内容相关的字符或图像以及作为干扰项的字符或图像,播放与所述待检测内容相关的音频,接收用户发出的字符或图像选择指令,以选中对应的字符或图像,判断用户选中的字符或图像是否为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像,在用户选中的字符或图像为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像时,判定所述待检测内容的检测通过,在用户选中的字符或图像不为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像时,判定所述待检测内容的检测没有通过。由于能够在AR场景下显示3D模型图像,且基于接收的信息输出指令能够输出与所述3D模型图像相关的字符和/或音频,因此,便于吸引学龄期儿童通过AR技术学习3D模型图像对应的字符、图像、音频,并且,还能够基于用户已学习的内容确定待检测内容,以检测用户的学习效果,从而进一步巩固了学习成效,提高了学习效率。
应理解,在本发明实施例中,上述各过程的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
实施例二:
图2示出了本发明第二实施例提供的一种基于AR的学习检测装置的结构图,该一种基于AR的学习检测装置可应用于各种终端中,该终端可以包括经无线接入网RAN与一个或多个核心网进行通信的用户设备,该用户设备可以是移动电话(或称为“蜂窝”电话)、具有移动设备的计算机等,例如,用户设备还可以是便携式、袖珍式、手持式、计算机内置的或者车载的移动装置,它们与无线接入网交换语音和/或数据。又例如,该移动设备可以包括智能手机、平板电脑、个人数字助理PDA、销售终端POS或车载电脑等。为了便于说明,仅示出了与本发明实施例相关的部分。
该基于AR的学习检测装置包括:
3D模型图像显示单元21,用于在AR场景下显示3D模型图像。
当针对低龄幼儿时,该3D模型图像通常为某一个动物或植物或一首诗词、童谣对应的图像。
需要指出的是,可动态显示3D模型图像,且在显示的过程中,可同时结合3D模型图像的动作发出对应的语音。
学习内容输出单元22,用于基于接收的信息输出指令输出与所述3D模型图像相关的字符和/或音频。
其中,与3D模型图像相关的字符包括中文字符和/或英文字符。
待检测内容确定单元23,用于基于用户已学习的内容确定待检测内容。
需要指出的是,确定的待检测内容可为用户已学习的一个或多个字符或图像。
显示选择项单元24,用于显示与所述待检测内容相关的字符或图像以及作为干扰项的字符或图像。
其中,干扰项的字符或图像是指不需检测的内容,其可以为用户已学习的内容,也可以为用户未学习的内容,主要起到干扰用户的目的。
音频播放单元25,用于播放与所述待检测内容相关的音频。
可选地,可动态显示某一个卡通形象(如AR应用的主打卡通形象),通过该动态显示的卡通形象“播放”与所述待检测内容相关的音频,以增强用户与应用的交互性,从而通过增加趣味性来提高用户使用AR应用的时长。
可选地,为了便于用户知悉播放音频之后的操作,则所述基于AR的学习检测装置包括:选择提醒单元,用于提醒用户在显示的字符或图像中选择与音频对应的字符或图像。
选择指令接收单元26,用于接收用户发出的字符或图像选择指令,以选中对应的字符或图像。
具体地,用户可通过触摸显示的字符或图像发出选择指令,当用户点击或触摸字符或图像所在的屏幕位置时,表明用户选中该字符或图像。当然,为了降低用户误触屏幕而判定为用户选中字符或图像,则在检测到用户点击或触摸字符或图像所在的屏幕位置时,进一步判断用户点击或触摸的时长和/或压强等是否满足预设条件,若满足,才判定用户发出字符或图像选择指令。
学习内容匹配判断单元27,用于判断用户选中的字符或图像是否为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像。
检测通过判定单元28,用于在用户选中的字符或图像为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像时,判定所述待检测内容的检测通过。
检测没有通过判定单元29,用于在用户选中的字符或图像不为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像时,判定所述待检测内容的检测没有通过。
可选地,所述待检测内容确定单元23包括:
第一待检测内容确定模块,用于将用户本次检测之前且上一次检测之后的已学习的内容确定为待检测内容。
或者,
第二待检测内容确定模块,用于将用户本次检测之前的已学习的内容确定为待检测内容。
可选地,为了使得确定的待检测内容更有针对性,所述待检测内容确定单元23包括:
学习内容权重确定模块,用于确定用户已学习的内容的权重,并依据权重高低对所述用户已学习的内容进行排序。具体地,假设可设置的权重最大值为M,最小值为0,为了便于计算,权重值可取为整数。在确定用户已学习的内容的权重时,可将用户本次检测之前且上一次检测之后的已学习的内容的权重置为大于M/2且小于M的值,例如可将同一次学习的内容的权重值都置为相同值,当然,也可根据用户在学习过程中的观看时长、发出信息输出指令的次数等设置不同的权重,例如,将用户观看时长更长的内容的权重置为更大,将发出信息输出指令的次数更多的权重置为更大等。
学习内容选择模块,用于将排序在前的指定个数的所述用户已学习的内容确定为待检测内容。具体地,考虑到终端的屏幕有限,以及,考虑到一次检测内容不易过多,以免用户产生倦怠情绪,则只将排序在前的指定个数的用户已学习的内容确定为待检测内容,如只将排序在前的5个用户已学习的内容确定为待检测内容。
可选地,所述基于AR的学习检测装置包括:
权重降低单元,用于降低检测通过的所述待检测内容的权重。具体地,每当用户答对一次待检测内容,则降低一次该待检测内容的权重,例如,在原基础上,每次降低最大权重值的10%。
权重提高单元,用于提高检测通过的所述待检测内容的权重。具体地,每当用户答错一次待检测内容,则提高一次该待检测内容的权重,例如,在原基础上,每次提高最大权重值的10%。
可选地,所述待检测内容为字符或图像,且所述字符或图像的个数大于1,则所述基于AR的学习检测装置包括:
检测没有通过的学习内容个数判断单元,用于判断检测没有通过的字符或图像的个数是否大于或等于待检测的字符或图像的一半。
待检测的字符或图像重新确定单元,用于在检测没有通过的字符或图像的个数大于或等于待检测的字符或图像的一半时,重新确定待检测的字符或图像。
可选地,所述待检测的字符或图像重新确定单元包括:
检测通过学习内容选取模块,用于选取至少一个用户最近一次检测通过的字符或图像;
检测没有通过学习内容选取模块,用于将所述至少一个用户最近一次检测通过的字符或图像以及用户上一次检测没有通过的字符或图像组合为新的待检测的字符或图像。
由于新的待检测的字符或图像包括至少一个用户最近一次检测通过的字符或图像,因此,用户在新的一轮检测中,将拥有至少一次检测通过的机会,从而避免过度打击用户的信心。
本发明第二实施例中,由于能够在AR场景下显示3D模型图像,且基于接收的信息输出指令能够输出与所述3D模型图像相关的字符和/或音频,因此,便于吸引学龄期儿童通过AR技术学习3D模型图像对应的字符、图像、音频,并且,还能够基于用户已学习的内容确定待检测内容,以检测用户的学习效果,从而进一步巩固了学习成效,提高了学习效率。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。

Claims (10)

1.一种基于AR的学习检测方法,其特征在于,所述学习检测方法包括:
在AR场景下显示3D模型图像;
基于接收的信息输出指令输出与所述3D模型图像相关的字符和/或音频;
基于用户已学习的内容确定待检测内容;
显示与所述待检测内容相关的字符或图像以及作为干扰项的字符或图像;
播放与所述待检测内容相关的音频;
接收用户发出的字符或图像选择指令,以选中对应的字符或图像;
判断用户选中的字符或图像是否为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像;
在用户选中的字符或图像为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像时,判定所述待检测内容的检测通过;
在用户选中的字符或图像不为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像时,判定所述待检测内容的检测没有通过。
2.根据权利要求1所述的学习检测方法,其特征在于,所述基于用户已学习的内容确定待检测内容,包括:
将用户本次检测之前且上一次检测之后的已学习的内容确定为待检测内容;
或者,
将用户本次检测之前的已学习的内容确定为待检测内容。
3.根据权利要求1所述的学习检测方法,其特征在于,所述基于用户已学习的内容确定待检测内容,包括:
确定用户已学习的内容的权重,并依据权重高低对所述用户已学习的内容进行排序;
将排序在前的指定个数的所述用户已学习的内容确定为待检测内容。
4.根据权利要求3所述的学习检测方法,其特征在于,
在所述在用户选中的字符或图像为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像时,判定所述待检测内容的检测通过之后,包括:
降低检测通过的所述待检测内容的权重;
在所述在用户选中的字符或图像不为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像时,判定所述待检测内容的检测没有通过,判定所述待检测内容的检测没有通过之后,包括:
提高检测通过的所述待检测内容的权重。
5.根据权利要求1所述的学习检测方法,其特征在于,所述待检测内容为字符或图像,且所述字符或图像的个数大于1,则在所述在用户选中的字符或图像不为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像时,判定所述待检测内容的检测没有通过之后,包括:
判断检测没有通过的字符或图像的个数是否大于或等于待检测的字符或图像的一半;
在检测没有通过的字符或图像的个数大于或等于待检测的字符或图像的一半时,重新确定待检测的字符或图像。
6.一种基于AR的学习检测装置,其特征在于,所述学习检测装置包括:
3D模型图像显示单元,用于在AR场景下显示3D模型图像;
学习内容输出单元,用于基于接收的信息输出指令输出与所述3D模型图像相关的字符和/或音频;
待检测内容确定单元,用于基于用户已学习的内容确定待检测内容;
显示选择项单元,用于显示与所述待检测内容相关的字符或图像以及作为干扰项的字符或图像;
音频播放单元,用于播放与所述待检测内容相关的音频;
选择指令接收单元,用于接收用户发出的字符或图像选择指令,以选中对应的字符或图像;
学习内容匹配判断单元,用于判断用户选中的字符或图像是否为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像;
检测通过判定单元,用于在用户选中的字符或图像为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像时,判定所述待检测内容的检测通过;
检测没有通过判定单元,用于在用户选中的字符或图像不为与当前播放结束的所述待检测内容相关的音频匹配的字符或图像时,判定所述待检测内容的检测没有通过。
7.根据权利要求6所述的学习检测装置,其特征在于,所述待检测内容确定单元包括:
第一待检测内容确定模块,用于将用户本次检测之前且上一次检测之后的已学习的内容确定为待检测内容;
或者,
第二待检测内容确定模块,用于将用户本次检测之前的已学习的内容确定为待检测内容。
8.根据权利要求6所述的学习检测装置,其特征在于,所述待检测内容确定单元包括:
学习内容权重确定模块,用于确定用户已学习的内容的权重,并依据权重高低对所述用户已学习的内容进行排序;
学习内容选择模块,用于将排序在前的指定个数的所述用户已学习的内容确定为待检测内容。
9.根据权利要求8所述的学习检测装置,其特征在于,所述学习检测装置包括:
权重降低单元,用于降低检测通过的所述待检测内容的权重;
权重提高单元,用于提高检测通过的所述待检测内容的权重。
10.根据权利要求6所述的学习检测装置,其特征在于,所述待检测内容为字符或图像,且所述字符或图像的个数大于1,则所述学习检测装置包括:
检测没有通过的学习内容个数判断单元,用于判断检测没有通过的字符或图像的个数是否大于或等于待检测的字符或图像的一半;
待检测的字符或图像重新确定单元,用于在检测没有通过的字符或图像的个数大于或等于待检测的字符或图像的一半时,重新确定待检测的字符或图像。
CN201710147833.4A 2017-03-13 2017-03-13 基于ar的学习检测方法及装置 Pending CN107038759A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710147833.4A CN107038759A (zh) 2017-03-13 2017-03-13 基于ar的学习检测方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710147833.4A CN107038759A (zh) 2017-03-13 2017-03-13 基于ar的学习检测方法及装置

Publications (1)

Publication Number Publication Date
CN107038759A true CN107038759A (zh) 2017-08-11

Family

ID=59534372

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710147833.4A Pending CN107038759A (zh) 2017-03-13 2017-03-13 基于ar的学习检测方法及装置

Country Status (1)

Country Link
CN (1) CN107038759A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111639221A (zh) * 2020-05-14 2020-09-08 广东小天才科技有限公司 一种3d模型的加载显示方法及电子设备

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101673477A (zh) * 2009-09-27 2010-03-17 东莞市步步高教育电子产品有限公司 一种卡片学习系统及方法
CN101833877A (zh) * 2010-03-24 2010-09-15 杭州全动科技有限公司 一种学前儿童的启迪教育方法
CN103021217A (zh) * 2011-09-20 2013-04-03 虞思华 一种交互式学习系统
CN104268547A (zh) * 2014-08-28 2015-01-07 小米科技有限责任公司 一种基于图片内容播放音乐的方法及装置
WO2016134091A1 (en) * 2015-02-19 2016-08-25 St. Jude Children's Research Hospital, Inc. Method for improving learning
CN106200960A (zh) * 2016-07-07 2016-12-07 深圳市大熊动漫文化有限公司 电子互动产品的内容显示方法及装置
CN106340213A (zh) * 2016-08-19 2017-01-18 苏州七彩部落网络科技有限公司 一种利用ar实现辅助教育的方法及设备

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101673477A (zh) * 2009-09-27 2010-03-17 东莞市步步高教育电子产品有限公司 一种卡片学习系统及方法
CN101833877A (zh) * 2010-03-24 2010-09-15 杭州全动科技有限公司 一种学前儿童的启迪教育方法
CN103021217A (zh) * 2011-09-20 2013-04-03 虞思华 一种交互式学习系统
CN104268547A (zh) * 2014-08-28 2015-01-07 小米科技有限责任公司 一种基于图片内容播放音乐的方法及装置
WO2016134091A1 (en) * 2015-02-19 2016-08-25 St. Jude Children's Research Hospital, Inc. Method for improving learning
CN106200960A (zh) * 2016-07-07 2016-12-07 深圳市大熊动漫文化有限公司 电子互动产品的内容显示方法及装置
CN106340213A (zh) * 2016-08-19 2017-01-18 苏州七彩部落网络科技有限公司 一种利用ar实现辅助教育的方法及设备

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111639221A (zh) * 2020-05-14 2020-09-08 广东小天才科技有限公司 一种3d模型的加载显示方法及电子设备
CN111639221B (zh) * 2020-05-14 2024-04-19 广东小天才科技有限公司 一种3d模型的加载显示方法及电子设备

Similar Documents

Publication Publication Date Title
JP5843207B2 (ja) 直観的コンピューティング方法及びシステム
CN104461318B (zh) 基于增强现实技术的点读方法及系统
US9607436B2 (en) Generating augmented reality exemplars
US20170168782A1 (en) System and method for creating a universally compatible application development system
US11514203B2 (en) Computer aided systems and methods for creating custom products
CN110035314A (zh) 信息的展示方法和装置、存储介质、电子装置
Befu Globalization theory from the bottom up: Japan's contribution
CN107040824A (zh) 一种发送弹幕的方法及终端
CN107688637A (zh) 信息推送方法、装置、存储介质及电子终端
CN107911736A (zh) 直播互动方法及系统
CN109391834A (zh) 一种播放处理方法、装置、设备和存储介质
CN106156237B (zh) 信息处理方法、信息处理装置及用户设备
CN108108012A (zh) 信息交互方法和装置
US20190294767A1 (en) Method and system for incorporating marketing in user authentication
CN108108996A (zh) 视频中的广告投放方法、装置、计算机设备及可读介质
CN109064387A (zh) 图像特效生成方法、装置和电子设备
CN106200960A (zh) 电子互动产品的内容显示方法及装置
CN109254650A (zh) 一种人机交互方法和装置
CN108289230A (zh) 一种电视购物内容的推荐方法、装置、设备和存储介质
CN107704613A (zh) 一种信息管理方法、终端及计算机可读存储介质
CN106921724A (zh) 游戏推广内容处理方法和装置
CN107085592A (zh) 基于认知卡片的早教方法及装置
CN110457596A (zh) 一种资源推荐处理方法及装置
CN104166779A (zh) 在游戏终端中模拟纸牌游戏的实现方法及装置
CN106383625A (zh) 一种用于儿童答题的互动方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
AD01 Patent right deemed abandoned

Effective date of abandoning: 20210319

AD01 Patent right deemed abandoned