CN108831230B - 一种自动跟踪学习内容的学习互动方法及智慧台灯 - Google Patents
一种自动跟踪学习内容的学习互动方法及智慧台灯 Download PDFInfo
- Publication number
- CN108831230B CN108831230B CN201810746382.0A CN201810746382A CN108831230B CN 108831230 B CN108831230 B CN 108831230B CN 201810746382 A CN201810746382 A CN 201810746382A CN 108831230 B CN108831230 B CN 108831230B
- Authority
- CN
- China
- Prior art keywords
- learning
- desk lamp
- content
- student
- intelligent desk
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 62
- 230000003993 interaction Effects 0.000 title claims abstract description 29
- 238000006073 displacement reaction Methods 0.000 claims abstract description 28
- 238000012795 verification Methods 0.000 claims description 7
- 239000004744 fabric Substances 0.000 description 25
- 206010011469 Crying Diseases 0.000 description 14
- 230000008451 emotion Effects 0.000 description 14
- 238000013528 artificial neural network Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 6
- 239000000284 extract Substances 0.000 description 6
- 238000004422 calculation algorithm Methods 0.000 description 4
- 238000004590 computer program Methods 0.000 description 4
- 230000007613 environmental effect Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 239000002245 particle Substances 0.000 description 4
- 238000007781 pre-processing Methods 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 238000009432 framing Methods 0.000 description 2
- 238000012417 linear regression Methods 0.000 description 2
- 230000008035 nerve activity Effects 0.000 description 2
- 230000001734 parasympathetic effect Effects 0.000 description 2
- 210000005037 parasympathetic nerve Anatomy 0.000 description 2
- 238000013139 quantization Methods 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B7/00—Electrically-operated teaching apparatus or devices working with questions and answers
- G09B7/02—Electrically-operated teaching apparatus or devices working with questions and answers of the type wherein the student is expected to construct an answer to the question which is presented or wherein the machine gives an answer to the question presented by a student
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/20—Education
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B19/00—Teaching not covered by other main groups of this subclass
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B5/00—Electrically-operated educational appliances
- G09B5/06—Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
- G09B5/067—Combinations of audio and projected visual presentation, e.g. film, slides
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Educational Administration (AREA)
- Educational Technology (AREA)
- General Physics & Mathematics (AREA)
- Tourism & Hospitality (AREA)
- Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Entrepreneurship & Innovation (AREA)
- Economics (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Electrically Operated Instructional Devices (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
一种自动跟踪学习内容的学习互动方法及智慧台灯，该方法包括：在检测到书本被放置在智慧台灯的摄像头的下方时，控制摄像头拍下书本内容对应的书本内容图像；在书本内容图像中确定出书本内容上的基准位置坐标以及基准位置坐标对应的学习区域；根据书本内容相对于基准位置坐标发生的位移，控制书本内容图像相对于基准位置坐标发生该位移；确定书本内容图像相对于基准位置坐标发生该位移后被移动到学习区域中的学习内容；控制智慧台灯的麦克风检测书本内容上的基准位置坐标对应的学习区域被触及时外界发出的提问语音；确定出提问语音对应的与学习区域内的学习内容相关的回答语音并播放。实施本发明实施例，能够有效的提升学生的学习效率。
Description
技术领域
本发明涉及人机交互技术领域，具体涉及一种自动跟踪学习内容的学习互动方法及智慧台灯。
背景技术
目前，很多低年级的学生在学习上通常会遇到各种问题，例如某一些字不会读、某一些题不会做或者某一些句子的含义无法理解等等。在实践中发现，很多低年级的学生的嘴巴比较灵活，在学习上遇到问题时总喜欢问身边的大人，例如“爸爸这个题怎么做”、“爸爸这个字怎么读”、“爸爸这句话什么意思”等等，如果大人不在学生的身边，则会影响学生的学习效率。
发明内容
本发明实施例公开了一种自动跟踪学习内容的学习互动方法及智慧台灯，能够提升学生的学习效率。
本发明实施例第一方面公开一种自动跟踪学习内容的学习互动方法，所述方法包括：
智慧台灯在检测到书本被放置在所述智慧台灯的摄像头的下方时，控制所述摄像头拍下书本内容对应的书本内容图像；
所述智慧台灯在所述书本内容图像中确定出所述书本内容上的基准位置坐标以及所述基准位置坐标对应的学习区域；
所述智慧台灯根据所述书本内容相对于所述基准位置坐标发生的位移，控制所述书本内容图像相对于所述基准位置坐标发生所述位移；
所述智慧台灯确定所述书本内容图像相对于所述基准位置坐标发生所述位移后被移动到所述学习区域中的学习内容；
所述智慧台灯控制所述智慧台灯的麦克风检测所述书本内容上的基准位置坐标对应的学习区域被触及时外界发出的提问语音；
所述智慧台灯确定出所述提问语音对应的与所述学习区域内的学习内容相关的回答语音；
所述智慧台灯控制所述智能台灯的扬声器播放所述回答语音。
作为一种可选的实施方式，在本发明实施例第一方面中，所述方法还包括：
所述智慧台灯将所述回答语音转换成回答文本；
所述智慧台灯控制所述智慧台灯的投射部件将所述回答文本投射至所述书本内容上进行显示。
作为一种可选的实施方式，在本发明实施例第一方面中，所述智慧台灯控制所述智慧台灯的麦克风检测所述书本内容上的基准位置坐标对应的学习区域被触及时外界发出的提问语音之后，所述方法还包括：
所述智能台灯校验所述提问语音的声纹特征是否与数据库中的某一学生的声纹特征相匹配，如果相匹配，执行所述的确定出所述提问语音对应的与所述学习区域内的学习内容相关的回答语音。
作为一种可选的实施方式，在本发明实施例第一方面中，所述智慧台灯控制所述智慧台灯的投射单元将所述回答文本投射至所述书本内容上进行显示之后，所述方法还包括：
所述智慧台灯以所述学生的声纹特征为依据，查询出所述学生的声纹特征绑定的所述学生的个人属性信息；其中，所述学生的个人属性信息至少包括所述学生的身份信息和所述学生对应的目标课程表，所述目标课程表至少包括所述学生学习的多个不同的学习科目以及每一个所述学习科目对应的教师终端标识；
所述智慧台灯以所述学习内容为依据，从所述目标课程表中查询出所述学习内容对应的目标学习科目；以及，从所述目标课程表中查询出所述目标学习科目对应的目标教师终端标识；
所述智慧台灯将所述学生的身份信息、所述学习内容以及所述目标教师终端标识上报给云平台，以使所述云平台根据所述目标教师终端标识，将所述学生的身份信息和所述学习内容发送给所述目标教师终端标识所属的教师终端。
作为一种可选的实施方式，在本发明实施例第一方面中，所述学生的个人属性信息还包括所述学生对应的监护人终端标识，所述方法还包括：
所述智慧台灯将所述学生的身份信息、所述学习内容以及所述监护人终端标识上报给云平台，以使所述云平台根据所述监护人终端标识，将所述学生的身份信息和所述学习内容发送给所述监护人终端标识所属的监护人终端。
本发明实施例第二方面公开一种智慧台灯，包括：
摄像头控制单元，用于在检测到书本被放置在所述智慧台灯的摄像头的下方时，控制所述摄像头拍下书本内容对应的书本内容图像；
第一确定单元，用于在所述书本内容图像中确定出所述书本内容上的基准位置坐标以及所述基准位置坐标对应的学习区域；
位移控制单元，用于根据所述书本内容相对于所述基准位置坐标发生的位移，控制所述书本内容图像相对于所述基准位置坐标发生所述位移；
第二确定单元，用于确定所述书本内容图像相对于所述基准位置坐标发生所述位移后被移动到所述学习区域中的学习内容；
麦克风控制单元，用于控制所述智慧台灯的麦克风检测所述书本内容上的基准位置坐标对应的学习区域被触及时外界发出的提问语音；
第一处理单元，用于确定出所述提问语音对应的与所述学习区域内的学习内容相关的回答语音；
扬声器控制单元，用于控制所述智能台灯的扬声器播放所述回答语音。
作为一种可选的实施方式，在本发明实施例第二方面中，所述智慧台灯还包括：
第二处理单元，用于将所述回答语音转换成回答文本；
投射控制单元，用于控制所述智慧台灯的投射部件将所述回答文本投射至所述书本内容上进行显示。
作为一种可选的实施方式，在本发明实施例第二方面中，所述智慧台灯还包括：
声纹校验单元，用于在所述麦克风控制单元控制所述智慧台灯的麦克风检测所述书本内容上的基准位置坐标对应的学习区域被触及时外界发出的提问语音之后，校验所述提问语音的声纹特征是否与数据库中的某一学生的声纹特征相匹配；
所述第一处理单元，具体用于在所述声纹校验单元的校验结果为匹配时，确定出所述提问语音对应的与所述学习区域内的学习内容相关的回答语音。
作为一种可选的实施方式，在本发明实施例第二方面中，所述智慧台灯还包括：
信息查询单元，用于在所述投射控制单元控制所述智慧台灯的投射单元将所述回答文本投射至所述书本内容上进行显示之后，以所述学生的声纹特征为依据，查询出所述学生的声纹特征绑定的所述学生的个人属性信息；其中，所述学生的个人属性信息至少包括所述学生的身份信息和所述学生对应的目标课程表，所述目标课程表至少包括所述学生学习的多个不同的学习科目以及每一个所述学习科目对应的教师终端标识；
所述信息查询单元，还用于以所述学习内容为依据，从所述目标课程表中识别出所述学习内容对应的目标学习科目；以及，从所述目标课程表中识别出所述目标学习科目对应的目标教师终端标识；
信息上报单元，用于将所述学生的身份信息、所述学习内容以及所述目标教师终端标识上报给云平台，以使所述云平台根据所述目标教师终端标识，将所述学生的身份信息和所述学习内容发送给所述目标教师终端标识所属的教师终端。
作为一种可选的实施方式，在本发明实施例第二方面中，所述学生的个人属性信息还包括所述学生对应的监护人终端标识，所述信息上报单元还用于将所述学生的身份信息、所述学习内容以及所述监护人终端标识上报给云平台，以使所述云平台根据所述监护人终端标识，将所述学生的身份信息和所述学习内容发送给所述监护人终端标识所属的监护人终端。
本发明实施例第三方面公开一种智慧台灯，包括：
存储有可执行程序代码的存储器；
与所述存储器耦合的处理器；
所述处理器调用所述存储器中存储的所述可执行程序代码，执行本发明实施例第一方面公开的所述自动跟踪学习内容的学习互动方法。
本发明实施例第四方面公开一种计算机可读存储介质，其存储计算机程序，其中，所述计算机程序使得计算机执行本发明实施例第一方面公开的所述自动跟踪学习内容的学习互动方法。
与现有技术相比，本发明实施例具有以下有益效果：
本发明实施例借助语音和拍照技术，创造出一种可以自动跟踪学习内容、帮助学生解决学习上遇到的问题的学习互动方法及智慧台灯，在不打乱学习过程的情况下，学生只需要把书本放在智慧台灯的摄像头的下方，并且在学习过程中可以移动书本内容，使得智慧台灯可以自动跟踪书本内容被移动后落入学习区域中的学习内容，并且在检测到学习区域被触及时发出的提问语音(即一点一问)后，可以获得学习区域中的学习内容相关的对应于提问语音的回答语音，从而可以实现即使大人不在学生的身边的情况下，也能够提升学生的学习效率。此外，本发明实施例可以自动跟踪学习内容，在书本内容发生位移后，智慧台灯在摄像头不需要重新拍摄书本内容图像的情况下即可定位到学习内容，不仅提高了定位学习内容的准确率，还可以避免摄像头反复的拍摄书本内容图像带来的额外功耗。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例公开的一种自动跟踪学习内容的学习互动方法的流程示意图；
图2是本发明实施例公开的另一种自动跟踪学习内容的学习互动方法的流程示意图；
图3是本发明实施例公开的一种智慧台灯的结构示意图；
图4是本发明实施例公开的另一种智慧台灯的结构示意图；
图5是本发明实施例公开的另一种智慧台灯的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
需要说明的是，本发明实施例及附图中的术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明实施例公开了一种自动跟踪学习内容的学习互动方法及智慧台灯，能够提升学生的学习效率。以下分别进行详细说明。
实施例一
请参阅图1，图1是本发明实施例公开的一种自动跟踪学习内容的学习互动方法的流程示意图。如图1所示，该自动跟踪学习内容的学习互动方法可以包括以下步骤：
101、智慧台灯在检测到书本被放置在智慧台灯的摄像头的下方时，控制摄像头拍下书本内容对应的书本内容图像。
作为一种可选的实施方式，本发明实施例中，智慧台灯的摄像头的下方可以铺设有织物基压力传感器阵列，该织物基压力传感器阵列可以通讯连接智慧台灯，当某一书本被放置在智慧台灯的摄像头的下方的该织物基压力传感器阵列上面时，该织物基压力传感器阵列可以检测到书本的按压力并上报给智慧台灯，以使智慧台灯获悉该织物基压力传感器阵列检测到书本被放置在智慧台灯的摄像头的下方，相应地，智慧台灯在该织物基压力传感器阵列检测到书本被放置在智慧台灯的摄像头的下方时，控制摄像头拍下书本内容对应的书本内容图像。
作为一种可选的实施方式，本发明实施例中，为了降低智慧台灯的功耗，智慧台灯在该织物基压力传感器阵列检测到书本被放置在智慧台灯的摄像头的下方时，智慧台灯可以先检测是否收到该织物基压力传感器阵列上报的、用于触发智慧台灯去控制摄像头拍下书本内容对应的书本内容图像的指定轨迹(如三角形轨迹)，如果未收到指定轨迹，那么智慧台灯在该织物基压力传感器阵列检测到书本被放置在智慧台灯的摄像头的下方时，也无需启动摄像头；如果收到指定轨迹，那么智慧台灯在该织物基压力传感器阵列检测到书本被放置在智慧台灯的摄像头的下方时，可以启动摄像头，并控制摄像头拍下书本内容对应的书本内容图像。其中，该织物基压力传感器阵列可以检测学生在书本内容上输入的指定轨迹，并上报给智慧台灯。
102、智慧台灯在书本内容图像中确定出书本内容上的基准位置坐标以及基准位置坐标对应的学习区域。
举例来说，学生可以在被放置在智慧台灯的摄像头的下方的书本内容上划出某一个内容区域(如矩形状的内容区域)作为学习区域，并且学生可以在学习区域上选择的某一个位置点(如学习区域的左上角位置点)作为书本内容上的基准位置坐标，其中，基准位置坐标对应于学习区域；或者，学生可以在被放置在智慧台灯的摄像头的下方的书本内容上划出某一个内容区域(如矩形状的内容区域)作为学习区域，并且学生可以在书本内容上选择的任一位置点(如书本内容的左上角位置点)作为书本内容上的基准位置坐标，其中，基准位置坐标对应于学习区域。
相应地，智慧台灯的摄像头的下方铺设的织物基压力传感器阵列可以捕获到该书本内容上的基准位置坐标以及基准位置坐标对应的学习区域，并上报给智慧台灯；相应地，智慧台灯可以在书本内容图像中确定出该书本内容上的基准位置坐标以及基准位置坐标对应的学习区域。
本发明实施例中，书本内容图像相对于书本内容的镜像，相应地，基准位置坐标在书本内容上的位置与基准位置坐标在书本内容图像的位置也互为镜像；学习区域在书本内容上的位置与学习区域在书本内容图像的位置也互为镜像。
103、智慧台灯根据书本内容相对于基准位置坐标发生的位移，控制书本内容图像相对于基准位置坐标发生上述位移。
其中，上述位移是一个有大小和方向的物理量，即矢量。
104、智慧台灯确定书本内容图像相对于基准位置坐标发生上述位移后被移动到学习区域中的学习内容。
105、智慧台灯控制智慧台灯的麦克风检测书本内容上的基准位置坐标对应的学习区域被触及时外界发出的提问语音。
本发明实施例中，学生可以通过手指或者学习笔按压被放置在智慧台灯的摄像头下方的书本内容上的基准位置坐标对应的学习区域的某一位置，使得智慧台灯可以识别出书本内容上的基准位置坐标对应的学习区域被触及。其中，提问语音可以是学生针对学习区域中的学习内容的提问语音，其中，学习区域中的学习内容可以是一道题、一个字、一个词组或者一句话等等，而提问语音可以是“这个题怎么做”、“这个字怎么读”、“这个词组什么意思”、“这句话什么意思”等等。
106、智慧台灯确定出提问语音对应的与学习区域内的学习内容相关的回答语音。
举例来说，当智慧台灯识别出触及位置位于学习区域内的学习内容中的某一个句号的后面时，智慧台灯可以识别该句号是否为某一整段的学习内容的最后一个句号，如果是，则可以将该整段的学习内容作为最终的学习区域内的学习内容，相应地，提问语音可以是“这段话什么意思”、“这个题怎么做”等等；相应地，确定出的提问语音对应的与上述学习内容相关的回答语音可以为“这段话的意思是……”、“这个题的解答方式是……”等等；
如果该句号不是为某一整段的学习内容的最后一个句号，而是某一整段的学习内容的中间一个句号，则可以将该句号前面的一句话作为最终的学习区域内的学习内容，相应地，提问语音可以是“这句话什么意思”、“这句话怎么读”等等；相应地，确定出的提问语音对应的与上述学习内容相关的回答语音可以为“这句话的意思是……”、“这句话的读法是……”等等；
或者，当智慧台灯识别出触及位置位于学习区域内的学习内容中的某一个逗号的后面时，智慧台灯可以将该逗号前面的一句话作为最终的学习区域内的学习内容，相应地，提问语音可以是“这句话什么意思”、“这句话怎么读”等等；相应地，确定出的提问语音对应的与上述学习内容相关的回答语音可以为“这句话的意思是……”、“这句话的读法是……”等等；
又或者，当智慧台灯识别出触及位置位于学习区域内的学习内容中的某一个字所占区域上时，智慧台灯可以将该字作为最终的学习区域内的学习内容，相应地，提问语音可以是“这个字怎么读”、“这个字什么意思”等等；相应地，确定出的提问语音对应的与上述学习内容相关的回答语音可以为“这个字的读法是……”、“这个字的意思是……”等等；
又或者，当智慧台灯识别出触及位置位于学习区域内的学习内容中的某一词组所占区域的中间时，智慧台灯可以将该词组作为最终的学习区域内的学习内容，相应地，提问语音可以是“这个词组什么意思”、“这个词组怎么读”等等；相应地，确定出的提问语音对应的与上述学习内容相关的回答语音可以为“这个词组的意思是……”、“这个词组的读法是……”等等。
107、智慧台灯控制智能台灯的扬声器播放上述回答语音。
可见，图1所描述的方法借助语音和拍照技术，创造出一种可以自动跟踪学习内容、帮助学生解决学习上遇到的问题的学习互动方法及智慧台灯，在不打乱学习过程的情况下，学生只需要把书本放在智慧台灯的摄像头的下方，并且在学习过程中可以移动书本内容，使得智慧台灯可以自动跟踪书本内容被移动后落入学习区域中的学习内容，并且在检测到学习区域被触及时发出的提问语音(即一点一问)后，可以获得学习区域中的学习内容相关的对应于提问语音的回答语音，从而可以实现即使大人不在学生的身边的情况下，也能够提升学生的学习效率。此外，本发明实施例可以自动跟踪学习内容，在书本内容发生位移后，智慧台灯在摄像头不需要重新拍摄书本内容图像的情况下即可定位到学习内容，不仅提高了定位学习内容的准确率，还可以避免摄像头反复的拍摄书本内容图像带来的额外功耗。
实施例二
请参阅图2，图2是本发明实施例公开的另一种自动跟踪学习内容的学习互动方法的流程示意图。如图2所示，该自动跟踪学习内容的学习互动方法可以包括以下步骤：
201、智慧台灯在检测到书本被放置在智慧台灯的摄像头的下方时，控制摄像头拍下书本内容对应的书本内容图像。
202、智慧台灯在书本内容图像中确定出书本内容上的基准位置坐标以及基准位置坐标对应的学习区域。
203、智慧台灯根据书本内容相对于基准位置坐标发生的位移，控制书本内容图像相对于基准位置坐标发生上述位移。
204、智慧台灯确定书本内容图像相对于基准位置坐标发生上述位移后被移动到学习区域中的学习内容。
205、智慧台灯控制智慧台灯的麦克风检测书本内容上的基准位置坐标对应的学习区域被触及时外界发出的提问语音。
206、智能台灯校验提问语音的声纹特征是否与数据库中的某一学生的声纹特征相匹配，如果相匹配，执行步骤207-步骤213；如果不相匹配，结束本流程。
本发明实施例中，实施上述步骤206，可以提高基于智慧台灯的人机交互的合法性和专属性。
207、智慧台灯确定出提问语音对应的与学习区域内的学习内容相关的回答语音。
208、智慧台灯控制智能台灯的扬声器播放上述回答语音。
209、智慧台灯将上述回答语音转换成回答文本。
210、智慧台灯控制智慧台灯的投射部件将上述回答文本投射至上述拍摄区域进行显示。
其中，智慧台灯的投射部件包括但不限于激光投射部件、自然光投射部件。
211、智慧台灯以该学生的声纹特征为依据，查询出该学生的声纹特征绑定的该学生的个人属性信息；其中，该学生的个人属性信息至少包括该学生的身份信息和该学生对应的目标课程表，该目标课程表至少包括该学生学习的多个不同的学习科目以及每一个学习科目对应的教师终端标识。
其中，教师终端标识可以是教师终端的手机号码或教师终端安装的教学应用的账号信息。
212、智慧台灯以该学习内容为依据，从该目标课程表中查询出该学习内容对应的目标学习科目；以及，从该目标课程表中查询出该目标学习科目对应的目标教师终端标识。
213、智慧台灯将该学生的身份信息、该学习内容以及该目标教师终端标识上报给云平台，以使云平台根据该目标教师终端标识，将该学生的身份信息和该学习内容发送给该目标教师终端标识所属的教师终端。
本发明实施例中，实施上述步骤211-步骤213，使教师可以收集到某一些学生在该教师所教科目(如语文)上遇到存在问题的学习内容，从而使得该教师可以针对性的向每一个学生进一步讲解该学生遇到存在问题的学习内容，从而有利于提升该学生的学习效率。
作为一种可选的实施方式，本发明实施例中，该学生的个人属性信息还可以包括该学生对应的监护人终端标识。相应地，图2所描述的方法还可以包括：
智慧台灯将该学生的身份信息、该学习内容以及该监护人终端标识上报给云平台，以使云平台根据该监护人终端标识，将该学生的身份信息和该学习内容发送给该监护人终端标识所属的监护人终端，使监护人可以收集到其监护的学生遇到存在问题的学习内容，从而使得监护人可以针对性的向其监护的学生进一步讲解该学生遇到存在问题的学习内容，从而有利于提升该学生的学习效率。
可见，图2所描述的方法借助语音和拍照技术，创造出一种可以自动跟踪学习内容、帮助学生解决学习上遇到的问题的学习互动方法及智慧台灯，在不打乱学习过程的情况下，学生只需要把书本放在智慧台灯的摄像头的下方，并且在学习过程中可以移动书本内容，使得智慧台灯可以自动跟踪书本内容被移动后落入学习区域中的学习内容，并且在检测到学习区域被触及时发出的提问语音(即一点一问)后，可以获得学习区域中的学习内容相关的对应于提问语音的回答语音，从而可以实现即使大人不在学生的身边的情况下，也能够提升学生的学习效率。此外，本发明实施例可以自动跟踪学习内容，在书本内容发生位移后，智慧台灯在摄像头不需要重新拍摄书本内容图像的情况下即可定位到学习内容，不仅提高了定位学习内容的准确率，还可以避免摄像头反复的拍摄书本内容图像带来的额外功耗。
作为一种可选的实施方式，在图2所描述的方法中，该学生的个人属性信息还可以包括该学生穿戴的可穿戴设备的标识，相应地，图2所描述的方法还可以包括以下步骤：
智慧台灯检测智慧台灯当前是否无线连接有可穿戴设备，如果智慧台灯当前无线连接有可穿戴设备，那么智慧台灯可以识别无线连接的可穿戴设备的标识与该学生穿戴的可穿戴设备的标识是否相同，如果相同，通知该学生穿戴的可穿戴设备启动可穿戴设备的录音咪头对环境音源进行监控，并且可穿戴设备可以校验监控到的环境音源与数据库中的儿童哭泣音源是否相匹配，若匹配，可穿戴设备播放目标音乐，目标音乐用于吸引转移学生的注意力，缓解学生在学习上遇到困难时产生的情绪。
作为一种可选的实施方式，本发明实施例中，由于录音咪头监控到的环境音源会含有背景噪声，因此，可穿戴设备可以先对含有背景噪声的环境音源进行预离散采样和量化得到数据帧，并对数据帧构建基于Morlet小波函数的小波神经网络，对于小波神经网络参数构建粒子群适应度函数，再通过粒子群算法得到小波神经网络的最优参数，将数据帧输入小波神经网络进行滤波，从而去除噪声，提取得到语音信号；进一步地，可穿戴设备可以校验提取出的语音信号的声纹特征是否与数据库中的儿童哭泣音源的声纹特征相匹配，如果相匹配，可穿戴设备播放目标音乐，目标音乐用于吸引转移学生的注意力，缓解学生在学习上遇到困难时产生的情绪。其中，实施上述实施方式，可以提高对不同环境声源的噪声特征的适应度。
其中，可穿戴设备校验提取出的语音信号的声纹特征是否与数据库中的儿童哭泣音源的声纹特征相匹配，包括：
可穿戴设备对提取出的语音信号进行预处理，预处理包括预加重、分帧和加窗处理；
可穿戴设备从预处理后的语音信号中提取声纹特征MFCC、LPCC、△MFCC、△LPCC、能量、能量的一阶差分以及GFCC共同组成第一多维特征向量，其中：MFCC为梅尔频率倒谱系数，LPCC为线性预测倒谱系数，△MFCC为MFCC的一阶差分，△LPCC为LPCC的一阶差分，GFCC为Gammatone滤波器倒谱系数；
可穿戴设备判断第一多维特征向量是否与数据库中的儿童哭泣音源的声纹特征对应的第二多维向量完全匹配，如果完全匹配，则准确的校验出提取出的语音信号的声纹特征与数据库中的儿童哭泣音源的声纹特征相匹配。
本发明实施例中，目标音乐可以是可穿戴设备预设的用于吸引转移学生的注意力，缓解学生在学习上遇到困难时产生的情绪的音乐；或者，也可以是可穿戴设备从云端获取的用于吸引转移学生的注意力，缓解学生在学习上遇到困难时产生的情绪的音乐，本发明实施例不作限定。
作为一种可选的实施方式，本发明实施例中，如果可穿戴设备校验提取出的语音信号的声纹特征与数据库中的儿童哭泣音源的声纹特征不匹配，可穿戴设备可以采集儿童的心电图数据，并对心电图数据进行去噪处理，采用心电图R波提取算法提取经过去噪处理的心电图数据中的R波峰值，以及计算经过去噪处理的心电图数据中相邻R波之间RR间距；以及，可穿戴设备可以计算RR间距的频域指标、时域指标及非线性指标；其中，频域指标包括副交感神经活性指标，时域指标包括短程心率变动性指标；短程心率变动性指标通过获取RR间距差值平方和的均方根来计算；副交感神经活性指标通过快速傅里叶变换来计算；非线性指标通过分形维数计算方法来计算；以及，可穿戴设备根据频域指标、时域指标及非线性指标，分析学生的情绪的活力值；活力值为根据时域指标、频域指标及非线性指标建立的多元线性回归方程计算得到的值；以及，可穿戴设备根据活力值识别佩戴可穿戴设备的学生的情绪是否不稳定，如果不稳定，可穿戴设备播放目标音乐，目标音乐用于吸引转移学生的注意力，缓解学生在学习上遇到困难时产生的情绪。
实施例三
请参阅图3，图3是本发明实施例公开的一种智慧台灯的结构示意图。如图3所示，该智慧台灯可以包括：
摄像头控制单元301，用于在检测到书本被放置在智慧台灯的摄像头的下方时，控制摄像头拍下书本内容对应的书本内容图像；
第一确定单元302，用于在书本内容图像中确定出书本内容上的基准位置坐标以及基准位置坐标对应的学习区域；
位移控制单元303，用于根据书本内容相对于基准位置坐标发生的位移，控制书本内容图像相对于基准位置坐标发生该位移；
第二确定单元304，用于确定书本内容图像相对于基准位置坐标发生该位移后被移动到学习区域中的学习内容；
麦克风控制单元305，用于控制智慧台灯的麦克风检测书本内容上的基准位置坐标对应的学习区域被触及时外界发出的提问语音；
第一处理单元306，用于确定出提问语音对应的与学习区域内的学习内容相关的回答语音；
扬声器控制单元307，用于控制智能台灯的扬声器播放所述回答语音。
作为一种可选的实施方式，本发明实施例中，智慧台灯的摄像头的下方可以铺设有织物基压力传感器阵列，该织物基压力传感器阵列可以通讯连接智慧台灯，当某一书本被放置在智慧台灯的摄像头的下方的该织物基压力传感器阵列上面时，该织物基压力传感器阵列可以检测到书本的按压力并上报给智慧台灯，以使摄像头控制单元301获悉该织物基压力传感器阵列检测到书本被放置在智慧台灯的摄像头的下方，相应地，摄像头控制单元301在该织物基压力传感器阵列检测到书本被放置在智慧台灯的摄像头的下方时，控制摄像头拍下书本内容对应的书本内容图像。
作为一种可选的实施方式，本发明实施例中，为了降低智慧台灯的功耗，摄像头控制单元301在该织物基压力传感器阵列检测到书本被放置在智慧台灯的摄像头的下方时，摄像头控制单元301可以先检测是否收到该织物基压力传感器阵列上报的、用于触发智慧台灯去控制摄像头拍下书本内容对应的书本内容图像的指定轨迹(如三角形轨迹)，如果未收到指定轨迹，那么摄像头控制单元301在该织物基压力传感器阵列检测到书本被放置在智慧台灯的摄像头的下方时，也无需启动摄像头；如果收到指定轨迹，那么摄像头控制单元301在该织物基压力传感器阵列检测到书本被放置在智慧台灯的摄像头的下方时，可以启动摄像头，并控制摄像头拍下书本内容对应的书本内容图像。其中，该织物基压力传感器阵列可以检测学生在书本内容上输入的指定轨迹，并上报给智慧台灯。
举例来说，学生可以在被放置在智慧台灯的摄像头的下方的书本内容上划出某一个内容区域(如矩形状的内容区域)作为学习区域，并且学生可以在学习区域上选择的某一个位置点(如学习区域的左上角位置点)作为书本内容上的基准位置坐标，其中，基准位置坐标对应于学习区域；或者，学生可以在被放置在智慧台灯的摄像头的下方的书本内容上划出某一个内容区域(如矩形状的内容区域)作为学习区域，并且学生可以在书本内容上选择的任一位置点(如书本内容的左上角位置点)作为书本内容上的基准位置坐标，其中，基准位置坐标对应于学习区域。
相应地，智慧台灯的摄像头的下方铺设的织物基压力传感器阵列可以捕获到该书本内容上的基准位置坐标以及基准位置坐标对应的学习区域，并上报给智慧台灯；相应地，第一确定单元302可以在书本内容图像中确定出该书本内容上的基准位置坐标以及基准位置坐标对应的学习区域。
本发明实施例中，书本内容图像相对于书本内容的镜像，相应地，基准位置坐标在书本内容上的位置与基准位置坐标在书本内容图像的位置也互为镜像；学习区域在书本内容上的位置与学习区域在书本内容图像的位置也互为镜像。
本发明实施例中，智慧台灯的摄像头的下方铺设的织物基压力传感器阵列可以将书本内容相对于基准位置坐标发生的位移上报给智慧台灯，相应地，位移控制单元303可以根据书本内容相对于基准位置坐标发生的位移，控制书本内容图像相对于所述基准位置坐标发生该位移。
本发明实施例中，学生可以通过手指或者学习笔按压被放置在智慧台灯的摄像头下方的书本内容上的基准位置坐标对应的学习区域的某一位置，使得麦克风控制单元305可以识别出书本内容上的基准位置坐标对应的学习区域被触及。其中，提问语音可以是学生针对学习区域中的学习内容的提问语音，其中，学习区域中的学习内容可以是一道题、一个字、一个词组或者一句话等等，而提问语音可以是“这个题怎么做”、“这个字怎么读”、“这个词组什么意思”、“这句话什么意思”等等。
可见，图3所描述智慧台灯借助语音和拍照技术，创造出一种可以自动跟踪学习内容、帮助学生解决学习上遇到的问题的学习互动方法及智慧台灯，在不打乱学习过程的情况下，学生只需要把书本放在智慧台灯的摄像头的下方，并且在学习过程中可以移动书本内容，使得智慧台灯可以自动跟踪书本内容被移动后落入学习区域中的学习内容，并且在检测到学习区域被触及时发出的提问语音(即一点一问)后，可以获得学习区域中的学习内容相关的对应于提问语音的回答语音，从而可以实现即使大人不在学生的身边的情况下，也能够提升学生的学习效率。此外，本发明实施例可以自动跟踪学习内容，在书本内容发生位移后，智慧台灯在摄像头不需要重新拍摄书本内容图像的情况下即可定位到学习内容，不仅提高了定位学习内容的准确率，还可以避免摄像头反复的拍摄书本内容图像带来的额外功耗。
实施例四
请参阅图4，图4是本发明实施例公开的另一种智慧台灯的结构示意图。其中，图4所示的智慧台灯是由图3所示的智慧台灯进行优化得到的。图4所示的智慧台灯除了包括图3所示的智慧台灯的全部组件之外，还包括：
第二处理单元308，用于将回答语音转换成回答文本；
投射控制单元309，用于控制智慧台灯的投射部件将回答文本投射至书本内容上进行显示；其中，智慧台灯的投射部件包括但不限于激光投射部件、自然光投射部件；
声纹校验单元310，用于在麦克风控制单元305控制智慧台灯的麦克风检测书本内容上的基准位置坐标对应的学习区域被触及时外界发出的提问语音之后，校验提问语音的声纹特征是否与数据库中的某一学生的声纹特征相匹配；
第一处理单元306，具体用于在声纹校验单元310的校验结果为匹配时，确定出提问语音对应的与学习区域内的学习内容相关的回答语音；
信息查询单元311，用于在投射控制单元309控制智慧台灯的投射单元将回答文本投射至书本内容上进行显示之后，以该学生的声纹特征为依据，查询出该学生的声纹特征绑定的该学生的个人属性信息；其中，该学生的个人属性信息至少包括该学生的身份信息和该学生对应的目标课程表，该目标课程表至少包括该学生学习的多个不同的学习科目以及每一个学习科目对应的教师终端标识；
信息查询单元311，还用于以该学习内容为依据，从目标课程表中识别出该学习内容对应的目标学习科目；以及，从目标课程表中识别出目标学习科目对应的目标教师终端标识；
信息上报单元312，用于将该学生的身份信息、该学习内容以及目标教师终端标识上报给云平台，以使云平台根据目标教师终端标识，将该学生的身份信息和该学习内容发送给目标教师终端标识所属的教师终端，使教师可以收集到某一些学生在该教师所教科目(如语文)上遇到存在问题的学习内容，从而使得该教师可以针对性的向每一个学生进一步讲解该学生遇到存在问题的学习内容，从而有利于提升该学生的学习效率。
作为一种可选的实施方式，本发明实施例中，该学生的个人属性信息还可以包括该学生对应的监护人终端标识，信息上报单元312还用于将该学生的身份信息、该学习内容以及监护人终端标识上报给云平台，以使云平台根据监护人终端标识，将该学生的身份信息和该学习内容发送给监护人终端标识所属的监护人终端，使监护人可以收集到其监护的学生遇到存在问题的学习内容，从而使得监护人可以针对性的向其监护的学生进一步讲解该学生遇到存在问题的学习内容，从而有利于提升该学生的学习效率。
可见，图4所描述的智慧台灯借助语音和拍照技术，创造出一种可以自动跟踪学习内容、帮助学生解决学习上遇到的问题的学习互动方法及智慧台灯，在不打乱学习过程的情况下，学生只需要把书本放在智慧台灯的摄像头的下方，并且在学习过程中可以移动书本内容，使得智慧台灯可以自动跟踪书本内容被移动后落入学习区域中的学习内容，并且在检测到学习区域被触及时发出的提问语音(即一点一问)后，可以获得学习区域中的学习内容相关的对应于提问语音的回答语音，从而可以实现即使大人不在学生的身边的情况下，也能够提升学生的学习效率。此外，图4所描述的智慧台灯可以自动跟踪学习内容，在书本内容发生位移后，智慧台灯在摄像头不需要重新拍摄书本内容图像的情况下即可定位到学习内容，不仅提高了定位学习内容的准确率，还可以避免摄像头反复的拍摄书本内容图像带来的额外功耗。
作为一种可选的实施方式，在图4所描述的智慧台灯中，该学生的个人属性信息还可以包括该学生穿戴的可穿戴设备的标识，相应地，第一处理单元306还可以执行以下操作：
第一处理单元306检测智慧台灯当前是否无线连接有可穿戴设备，如果智慧台灯当前无线连接有可穿戴设备，那么第一处理单元306可以识别无线连接的可穿戴设备的标识与该学生穿戴的可穿戴设备的标识是否相同，如果相同，第一处理单元306通知该学生穿戴的可穿戴设备启动可穿戴设备的录音咪头对环境音源进行监控，并且可穿戴设备可以校验监控到的环境音源与数据库中的儿童哭泣音源是否相匹配，若匹配，可穿戴设备播放目标音乐，目标音乐用于吸引转移学生的注意力，缓解学生在学习上遇到困难时产生的情绪。
作为一种可选的实施方式，本发明实施例中，由于录音咪头监控到的环境音源会含有背景噪声，因此，可穿戴设备可以先对含有背景噪声的环境音源进行预离散采样和量化得到数据帧，并对数据帧构建基于Morlet小波函数的小波神经网络，对于小波神经网络参数构建粒子群适应度函数，再通过粒子群算法得到小波神经网络的最优参数，将数据帧输入小波神经网络进行滤波，从而去除噪声，提取得到语音信号；进一步地，可穿戴设备可以校验提取出的语音信号的声纹特征是否与数据库中的儿童哭泣音源的声纹特征相匹配，如果相匹配，可穿戴设备播放目标音乐，目标音乐用于吸引转移学生的注意力，缓解学生在学习上遇到困难时产生的情绪。其中，实施上述实施方式，可以提高对不同环境声源的噪声特征的适应度。
其中，可穿戴设备校验提取出的语音信号的声纹特征是否与数据库中的儿童哭泣音源的声纹特征相匹配，包括：
可穿戴设备对提取出的语音信号进行预处理，预处理包括预加重、分帧和加窗处理；
可穿戴设备从预处理后的语音信号中提取声纹特征MFCC、LPCC、△MFCC、△LPCC、能量、能量的一阶差分以及GFCC共同组成第一多维特征向量，其中：MFCC为梅尔频率倒谱系数，LPCC为线性预测倒谱系数，△MFCC为MFCC的一阶差分，△LPCC为LPCC的一阶差分，GFCC为Gammatone滤波器倒谱系数；
可穿戴设备判断第一多维特征向量是否与数据库中的儿童哭泣音源的声纹特征对应的第二多维向量完全匹配，如果完全匹配，则准确的校验出提取出的语音信号的声纹特征与数据库中的儿童哭泣音源的声纹特征相匹配。
本发明实施例中，目标音乐可以是可穿戴设备预设的用于吸引转移学生的注意力，缓解学生在学习上遇到困难时产生的情绪的音乐；或者，也可以是可穿戴设备从云端获取的用于吸引转移学生的注意力，缓解学生在学习上遇到困难时产生的情绪的音乐，本发明实施例不作限定。
作为一种可选的实施方式，本发明实施例中，如果可穿戴设备校验提取出的语音信号的声纹特征与数据库中的儿童哭泣音源的声纹特征不匹配，可穿戴设备可以采集儿童的心电图数据，并对心电图数据进行去噪处理，采用心电图R波提取算法提取经过去噪处理的心电图数据中的R波峰值，以及计算经过去噪处理的心电图数据中相邻R波之间RR间距；以及，可穿戴设备可以计算RR间距的频域指标、时域指标及非线性指标；其中，频域指标包括副交感神经活性指标，时域指标包括短程心率变动性指标；短程心率变动性指标通过获取RR间距差值平方和的均方根来计算；副交感神经活性指标通过快速傅里叶变换来计算；非线性指标通过分形维数计算方法来计算；以及，可穿戴设备根据频域指标、时域指标及非线性指标，分析学生的情绪的活力值；活力值为根据时域指标、频域指标及非线性指标建立的多元线性回归方程计算得到的值；以及，可穿戴设备根据活力值识别佩戴可穿戴设备的学生的情绪是否不稳定，如果不稳定，可穿戴设备播放目标音乐，目标音乐用于吸引转移学生的注意力，缓解学生在学习上遇到困难时产生的情绪。
实施例五
请参阅图5，图5是本发明实施例公开的另一种智慧台灯的结构示意图。如图5所示，该智慧台灯可以包括：
存储有可执行程序代码的存储器501；
与存储器501耦合的处理器502；
其中，处理器502调用存储器501中存储的可执行程序代码，执行图1或图2所描述的方法。
可见，图5所描述的智慧台灯借助语音和拍照技术，创造出一种可以自动跟踪学习内容、帮助学生解决学习上遇到的问题的学习互动方法及智慧台灯，在不打乱学习过程的情况下，学生只需要把书本放在智慧台灯的摄像头的下方，并且在学习过程中可以移动书本内容，使得智慧台灯可以自动跟踪书本内容被移动后落入学习区域中的学习内容，并且在检测到学习区域被触及时发出的提问语音(即一点一问)后，可以获得学习区域中的学习内容相关的对应于提问语音的回答语音，从而可以实现即使大人不在学生的身边的情况下，也能够提升学生的学习效率。此外，图5所描述的智慧台灯可以自动跟踪学习内容，在书本内容发生位移后，智慧台灯在摄像头不需要重新拍摄书本内容图像的情况下即可定位到学习内容，不仅提高了定位学习内容的准确率，还可以避免摄像头反复的拍摄书本内容图像带来的额外功耗。
本发明实施例公开一种计算机可读存储介质，其存储计算机程序，其中，该计算机程序使得计算机执行图1或图2所描述的方法。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质包括只读存储器(Read-Only Memory，ROM)、随机存储器(Random Access Memory，RAM)、可编程只读存储器(Programmable Read-only Memory，PROM)、可擦除可编程只读存储器(Erasable Programmable Read Only Memory，EPROM)、一次可编程只读存储器(One-time Programmable Read-Only Memory，OTPROM)、电子抹除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory，EEPROM)、只读光盘(CompactDisc Read-Only Memory，CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。
以上对本发明实施例公开的一种自动跟踪学习内容的学习互动方法及智慧台灯进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种自动跟踪学习内容的学习互动方法，其特征在于，所述方法包括：
智慧台灯在检测到书本被放置在所述智慧台灯的摄像头的下方时，控制所述摄像头拍下书本内容对应的书本内容图像；
所述智慧台灯在所述书本内容图像中确定出所述书本内容上的基准位置坐标以及所述基准位置坐标对应的学习区域；
所述智慧台灯根据所述书本内容相对于所述基准位置坐标发生的位移，控制所述书本内容图像相对于所述基准位置坐标发生所述位移；
所述智慧台灯确定所述书本内容图像相对于所述基准位置坐标发生所述位移后被移动到所述学习区域中的学习内容；
所述智慧台灯控制所述智慧台灯的麦克风检测所述书本内容上的基准位置坐标对应的学习区域被触及时外界发出的提问语音；
所述智慧台灯确定出所述提问语音对应的与所述学习区域内的学习内容相关的回答语音；
所述智慧台灯控制所述智慧台灯的扬声器播放所述回答语音。
2.根据权利要求1所述的学习互动方法，其特征在于，所述方法还包括：
所述智慧台灯将所述回答语音转换成回答文本；
所述智慧台灯控制所述智慧台灯的投射部件将所述回答文本投射至拍摄区域进行显示。
3.根据权利要求2所述的学习互动方法，其特征在于，所述智慧台灯控制所述智慧台灯的麦克风检测所述书本内容上的基准位置坐标对应的学习区域被触及时外界发出的提问语音之后，所述方法还包括：
所述智慧 台灯校验所述提问语音的声纹特征是否与数据库中的某一学生的声纹特征相匹配，如果相匹配，执行所述的确定出所述提问语音对应的与所述学习区域内的学习内容相关的回答语音。
4.根据权利要求3所述的学习互动方法，其特征在于，所述智慧台灯控制所述智慧台灯的投射单元将所述回答文本投射至拍摄区域进行显示之后，所述方法还包括：
所述智慧台灯以所述学生的声纹特征为依据，查询出所述学生的声纹特征绑定的所述学生的个人属性信息；其中，所述学生的个人属性信息至少包括所述学生的身份信息和所述学生对应的目标课程表，所述目标课程表至少包括所述学生学习的多个不同的学习科目以及每一个所述学习科目对应的教师终端标识；
所述智慧台灯以所述学习内容为依据，从所述目标课程表中查询出所述学习内容对应的目标学习科目；以及，从所述目标课程表中查询出所述目标学习科目对应的目标教师终端标识；
所述智慧台灯将所述学生的身份信息、所述学习内容以及所述目标教师终端标识上报给云平台，以使所述云平台根据所述目标教师终端标识，将所述学生的身份信息和所述学习内容发送给所述目标教师终端标识所属的教师终端。
5.根据权利要求4所述的学习互动方法，其特征在于，所述学生的个人属性信息还包括所述学生对应的监护人终端标识，所述方法还包括：
所述智慧台灯将所述学生的身份信息、所述学习内容以及所述监护人终端标识上报给云平台，以使所述云平台根据所述监护人终端标识，将所述学生的身份信息和所述学习内容发送给所述监护人终端标识所属的监护人终端。
6.一种智慧台灯，其特征在于，包括：
摄像头控制单元，用于在检测到书本被放置在所述智慧台灯的摄像头的下方时，控制所述摄像头拍下书本内容对应的书本内容图像；
第一确定单元，用于在所述书本内容图像中确定出所述书本内容上的基准位置坐标以及所述基准位置坐标对应的学习区域；
位移控制单元，用于根据所述书本内容相对于所述基准位置坐标发生的位移，控制所述书本内容图像相对于所述基准位置坐标发生所述位移；
第二确定单元，用于确定所述书本内容图像相对于所述基准位置坐标发生所述位移后被移动到所述学习区域中的学习内容；
麦克风控制单元，用于控制所述智慧台灯的麦克风检测所述书本内容上的基准位置坐标对应的学习区域被触及时外界发出的提问语音；
第一处理单元，用于确定出所述提问语音对应的与所述学习区域内的学习内容相关的回答语音；
扬声器控制单元，用于控制所述智慧台灯的扬声器播放所述回答语音。
7.根据权利要求6所述的智慧台灯，其特征在于，所述智慧台灯还包括：
第二处理单元，用于将所述回答语音转换成回答文本；
投射控制单元，用于控制所述智慧台灯的投射部件将所述回答文本投射至所述书本内容上进行显示。
8.根据权利要求7所述的智慧台灯，其特征在于，所述智慧台灯还包括：
声纹校验单元，用于在所述麦克风控制单元控制所述智慧台灯的麦克风检测所述书本内容上的基准位置坐标对应的学习区域被触及时外界发出的提问语音之后，校验所述提问语音的声纹特征是否与数据库中的某一学生的声纹特征相匹配；
所述第一处理单元确定出所述提问语音对应的与所述学习区域内的学习内容相关的回答语音的方式为：
所述第一处理单元用于在所述声纹校验单元的校验结果为匹配时，确定出所述提问语音对应的与所述学习区域内的学习内容相关的回答语音。
9.根据权利要求8所述的智慧台灯，其特征在于，所述智慧台灯还包括：
信息查询单元，用于在所述投射控制单元控制所述智慧台灯的投射单元将所述回答文本投射至所述书本内容上进行显示之后，以所述学生的声纹特征为依据，查询出所述学生的声纹特征绑定的所述学生的个人属性信息；其中，所述学生的个人属性信息至少包括所述学生的身份信息和所述学生对应的目标课程表，所述目标课程表至少包括所述学生学习的多个不同的学习科目以及每一个所述学习科目对应的教师终端标识；
所述信息查询单元，还用于以所述学习内容为依据，从所述目标课程表中识别出所述学习内容对应的目标学习科目；以及，从所述目标课程表中识别出所述目标学习科目对应的目标教师终端标识；
信息上报单元，用于将所述学生的身份信息、所述学习内容以及所述目标教师终端标识上报给云平台，以使所述云平台根据所述目标教师终端标识，将所述学生的身份信息和所述学习内容发送给所述目标教师终端标识所属的教师终端。
10.根据权利要求9所述的智慧台灯，其特征在于，所述学生的个人属性信息还包括所述学生对应的监护人终端标识，所述信息上报单元还用于将所述学生的身份信息、所述学习内容以及所述监护人终端标识上报给云平台，以使所述云平台根据所述监护人终端标识，将所述学生的身份信息和所述学习内容发送给所述监护人终端标识所属的监护人终端。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810746382.0A CN108831230B (zh) | 2018-07-09 | 2018-07-09 | 一种自动跟踪学习内容的学习互动方法及智慧台灯 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810746382.0A CN108831230B (zh) | 2018-07-09 | 2018-07-09 | 一种自动跟踪学习内容的学习互动方法及智慧台灯 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN108831230A CN108831230A (zh) | 2018-11-16 |
| CN108831230B true CN108831230B (zh) | 2020-11-06 |
Family
ID=64135790
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201810746382.0A Active CN108831230B (zh) | 2018-07-09 | 2018-07-09 | 一种自动跟踪学习内容的学习互动方法及智慧台灯 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN108831230B (zh) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109637286A (zh) * | 2019-01-16 | 2019-04-16 | 广东小天才科技有限公司 | 一种基于图像识别的口语训练方法及家教设备 |
Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH03203766A (ja) * | 1989-12-29 | 1991-09-05 | Ricoh Co Ltd | 電子式学習機 |
| CN201159944Y (zh) * | 2008-03-06 | 2008-12-03 | 东莞市步步高教育电子产品有限公司 | 一种点读机 |
| CN101656024A (zh) * | 2009-09-08 | 2010-02-24 | 成都时代诺亚舟教育软件有限公司 | 一种电子学习装置及其实现方法 |
| TW201131529A (en) * | 2010-03-08 | 2011-09-16 | Inventec Appliances Corp | Touch-read system and operation method thereof |
| US8694522B1 (en) * | 2012-03-28 | 2014-04-08 | Amazon Technologies, Inc. | Context dependent recognition |
| CN104157171A (zh) * | 2014-08-13 | 2014-11-19 | 三星电子（中国）研发中心 | 一种点读系统及其方法 |
| CN104253904A (zh) * | 2014-09-04 | 2014-12-31 | 广东小天才科技有限公司 | 一种实现点读学习的方法及智能手机 |
| CN104766501A (zh) * | 2015-04-09 | 2015-07-08 | 广东小天才科技有限公司 | 一种点读机及其坐标校正方法 |
| CN107911424A (zh) * | 2017-11-01 | 2018-04-13 | 惠州Tcl移动通信有限公司 | 一种与客户端交互的点读功能实现系统、方法及智能手表 |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6834373B2 (en) * | 2001-04-24 | 2004-12-21 | International Business Machines Corporation | System and method for non-visually presenting multi-part information pages using a combination of sonifications and tactile feedback |
| JP2012073520A (ja) * | 2010-09-29 | 2012-04-12 | Nakanihon Koku Kk | 立体視画像表示処理装置、立体視画像表示処理方法及びプログラム |
| CN104575127B (zh) * | 2015-01-26 | 2017-04-19 | 广东小天才科技有限公司 | 一种点读机及检验和校正点读机书本偏位的方法 |
| CN104658351A (zh) * | 2015-03-17 | 2015-05-27 | 智慧流（福建）网络科技有限公司 | 一种点读方法、系统以及客户端 |
| CN106557235A (zh) * | 2015-09-29 | 2017-04-05 | 上海中兴软件有限责任公司 | 一种终端点读方法和装置、以及终端 |
| CN108037882A (zh) * | 2017-11-29 | 2018-05-15 | 佛山市因诺威特科技有限公司 | 一种点读方法及系统 |
-
2018
- 2018-07-09 CN CN201810746382.0A patent/CN108831230B/zh active Active
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH03203766A (ja) * | 1989-12-29 | 1991-09-05 | Ricoh Co Ltd | 電子式学習機 |
| CN201159944Y (zh) * | 2008-03-06 | 2008-12-03 | 东莞市步步高教育电子产品有限公司 | 一种点读机 |
| CN101656024A (zh) * | 2009-09-08 | 2010-02-24 | 成都时代诺亚舟教育软件有限公司 | 一种电子学习装置及其实现方法 |
| TW201131529A (en) * | 2010-03-08 | 2011-09-16 | Inventec Appliances Corp | Touch-read system and operation method thereof |
| US8694522B1 (en) * | 2012-03-28 | 2014-04-08 | Amazon Technologies, Inc. | Context dependent recognition |
| CN104157171A (zh) * | 2014-08-13 | 2014-11-19 | 三星电子（中国）研发中心 | 一种点读系统及其方法 |
| CN104253904A (zh) * | 2014-09-04 | 2014-12-31 | 广东小天才科技有限公司 | 一种实现点读学习的方法及智能手机 |
| CN104766501A (zh) * | 2015-04-09 | 2015-07-08 | 广东小天才科技有限公司 | 一种点读机及其坐标校正方法 |
| CN107911424A (zh) * | 2017-11-01 | 2018-04-13 | 惠州Tcl移动通信有限公司 | 一种与客户端交互的点读功能实现系统、方法及智能手表 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN108831230A (zh) | 2018-11-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6394709B2 (ja) | 話者識別装置および話者識別用の登録音声の特徴量登録方法 | |
| CN109410664B (zh) | 一种发音纠正方法及电子设备 | |
| CN109446315B (zh) | 一种解题辅助方法及解题辅助客户端 | |
| US11145222B2 (en) | Language learning system, language learning support server, and computer program product | |
| CN102737634A (zh) | 一种基于语音的认证方法及装置 | |
| CN110970036B (zh) | 声纹识别方法及装置、计算机存储介质、电子设备 | |
| CN108960157A (zh) | 一种基于智慧台灯的人机交互方法及智慧台灯 | |
| CN111081080B (zh) | 一种语音检测方法及学习设备 | |
| CN104462912B (zh) | 改进的生物密码安全 | |
| CN105895080A (zh) | 语音识别模型训练方法、说话人类型识别方法及装置 | |
| CN108806686B (zh) | 一种语音搜题应用的启动控制方法及家教设备 | |
| CN104965589A (zh) | 一种基于人脑智慧和人机交互的人体活体检测方法与装置 | |
| CN105679323B (zh) | 一种号码发现方法及系统 | |
| CN114677634A (zh) | 面签识别方法、装置、电子设备及存储介质 | |
| KR20240040683A (ko) | 웹 브라우저 기반의 비대면 학습에서 인공지능을 사용한 주의집중 학습 시스템 및 방법 | |
| CN108831230B (zh) | 一种自动跟踪学习内容的学习互动方法及智慧台灯 | |
| US20140163986A1 (en) | Voice-based captcha method and apparatus | |
| KR20170086233A (ko) | 라이프 음성 로그 및 라이프 영상 로그를 이용한 점증적 음향 모델 및 언어 모델 학습 방법 | |
| KR20230169880A (ko) | 웹 브라우저 기반의 비대면 학습에서 인공지능을 사용한 주의집중 학습 시스템 및 방법 | |
| Kao et al. | Voice Response Questionnaire System for Speaker Recognition Using Biometric Authentication Interface. | |
| JP7347511B2 (ja) | 音声処理装置、音声処理方法、およびプログラム | |
| CN113691382A (zh) | 会议记录方法、装置、计算机设备及介质 | |
| CN110931020B (zh) | 一种语音检测方法及装置 | |
| CN111081227B (zh) | 一种听写内容的识别方法及电子设备 | |
| CN115620713A (zh) | 对话意图识别方法、装置、设备以及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |