CN209486938U - 一种智能点读棒 - Google Patents

一种智能点读棒 Download PDF

Info

Publication number
CN209486938U
CN209486938U CN201821914550.4U CN201821914550U CN209486938U CN 209486938 U CN209486938 U CN 209486938U CN 201821914550 U CN201821914550 U CN 201821914550U CN 209486938 U CN209486938 U CN 209486938U
Authority
CN
China
Prior art keywords
processor
reader body
described reader
intelligent point
key switch
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201821914550.4U
Other languages
English (en)
Inventor
李玮超
聂卓赟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huaqiao University
Original Assignee
Huaqiao University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huaqiao University filed Critical Huaqiao University
Priority to CN201821914550.4U priority Critical patent/CN209486938U/zh
Application granted granted Critical
Publication of CN209486938U publication Critical patent/CN209486938U/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

本实用新型公开了一种智能点读棒包括点读本体,点读本体的头部设有广角摄像头,中部设有按键开关,处理器、神经网络加速芯片、扬声器及联网模块都设置在点读本体的内部,在现实环境中,广角摄像头捕捉所要识别的物体,处理器结合神经网络加速芯片运行部署好的深度学习网络进行识别,再通过联网模块网络搜索得到结果相关的简介或云端的内容,然后进行TTS语音合成,并通过扬声器播放,本实用新型在使用的过程中,不用扫描二维码,免去了因为二维码容易脱落、损坏,而不能识别信息的麻烦,且可以按照用户兴趣自行游览,且操作简单、便于使用,能够取代传统人工讲解的工作。

Description

一种智能点读棒
技术领域
本实用新型涉及一种点读棒,特别是涉及一种智能点读棒。
背景技术
儿童的传统启蒙教育,一般采用学习卡片、学习机、视频教学等教学辅助用具进行学习,只是停留在二维平面上的接触,缺乏与真实环境的互动性,儿童只能停留在某个静态的空间中去学习或认识事物,很难有机会从视觉和听觉结合起来去认识身边的事物,限制了儿童的学习范围。
除了在早教市场,在博物馆、文化馆、画展和植物园等地方缺少专业的讲解人员,且所讲解的内容不一定能够完全覆盖到每个人的兴趣。目前市面上传统的电子讲解器与讲解系统还需要人工工作,且不具有反复讲解性,耗时耗力,游览者一旦不留神即错过。
虽然目前市面上还有一种比较新的二维码扫描讲解系统,能够反复观看内容,但常常随着时间推移,二维码容易磨损、脱落或被破坏导致失效。且二维码存在一定的安全风险。
实用新型内容
本实用新型提供了一种智能点读棒,其解决了上述存在的问题。
本实用新型解决其技术问题所采用的技术方案是:一种智能点读棒,包括点读本体、处理器、神经网络加速芯片、广角摄像头、按键开关、扬声器及联网模块,所述点读本体呈棒状,所述广角摄像头设置在所述点读本体的头部,所述点读本体的中部设有所述按键开关,所述点读本体的中后部形成握柄,所述神经网络加速芯片和所述处理器连接并都设置在所述点读本体的内部,所述广角摄像头与所述处理器连接,所述按键开关与所述处理器连接,所述扬声器和所述联网模块都与所述处理器连接。
进一步的,所述扬声器设置在该点读本体内部,所述点读本体中部对应该扬声器设有出音孔。
进一步的,所述点读本体上还包括蓝牙设备,所述蓝牙设备和所述处理器连接。
进一步的,所述按键开关包含VCC、GND和数字信号输出口三个引脚,三个所述引脚都与所述处理器连接。
进一步的,所述点读本体的侧面上中部设有卡槽和LED指示灯,所述点读本体的尾部设有充电口和USB接口。
进一步的,所述神经网络加速芯片采用的是Movidius或AX2145或小鼠Mipy5。
进一步的,所述处理器采用的是半导体ARM。
进一步的,所述按键开关的形状为正方形。
相较于现有技术,本实用新型具有以下有益效果:
1、本实用新型包括点读本体,点读本体的头部设有广角摄像头,中部设有按键开关,处理器、神经网络加速芯片、扬声器及联网模块都设置在点读本体的内部,在现实环境中,广角摄像头捕捉所要识别的物体,处理器结合神经网络加速芯片运行部署好的深度学习网络进行识别,再通过联网模块网络搜索得到结果相关的简介或云端的内容,然后进行TTS语音合成,并通过扬声器播放,本实用新型在使用的过程中,不用扫描二维码,免去了因为二维码容易脱落、损坏,而不能识别信息的麻烦,且可以按照用户兴趣自行游览,且操作简单、便于使用,取代了传统人工讲解的工作。
2、本实用新型的点读本体还设有蓝牙设备,蓝牙设备和处理器连接,处理器将网络搜索的内容发送到蓝牙,通过蓝牙传输到播放设备,进行播放,满足了不同场合对声音大小的需求。
以下结合附图及实施例对本实用新型作进一步详细说明;但本实用新型的一种智能点读棒不局限于实施例。
附图说明
图1是本实用新型的控制结构示图;
图2是本实用新型的外形图;
图3是本实用新型的程序流程图。
具体实施方式
实施例,请参见图1至图3所示,本实用新型的一种智能点读棒,包括点读本体、处理器、神经网络加速芯片、广角摄像头1、按键开关7、扬声器及联网模块3,所述点读本体呈棒状,所述广角摄像头1设置在所述点读本体的头部,所述点读本体的中部设有所述按键开关7,所述点读本体的中后部形成握柄8,所述神经网络加速芯片和所述处理器连接并都设置在所述点读本体的内部,所述广角摄像头1与所述处理器连接,所述按键开关7与所述处理器连接,所述扬声器和所述联网模块3都与所述处理器连接。广角摄像头1用于采集物体图像,在捕获完成后,处理器会结合神经网络加速芯片运行部署好的深度学习网络,深度学习网络通过卷积提取输入图像的信息,经过特定的池化再卷积等相关操作步骤,最后以softmax的形式输出,得到能够最大程度模拟被识别物体的结果。在深度学习处理图像得到结果后,结合TTS语音合成技术,由按下按键模块次数决定通过哪种方式播报。或者可以在有网络的情况下,结合网络连接模块,搜索所识别结果或映射的云端内容,播报出与之相匹配的内容。联网模块3用于处理器与网络进行信息交互。部署的深度学习网络可以进行优化更新与替换,进行不同场合的定制化部署。
本实施例中,所述扬声器设置在该点读本体内部,所述点读本体中部对应该扬声器设有出音孔5。
本实施例中,所述点读本体上还包括蓝牙设备2,所述蓝牙设备2和所述处理器连接。
本实施例中,所述按键开关7包含VCC、GND和数字信号输出口三个引脚,三个所述引脚都与所述处理器连接。GPIO由程序定义为信号输入口,用于驱动用户不同的操作请求。按下对应按键次数,程序控制摄像头开始捕获。
本实施例中,所述点读本体的侧面上中部设有卡槽4和LED指示灯6,所述点读本体的尾部设有充电口9和USB接口10。
本实施例中,所述神经网络加速芯片采用的是Movidius或AX2145或小鼠Mipy5。
本实施例中,所述处理器采用的是半导体ARM。
本实施例中,所述按键开关7的形状为正方形。
本实施例中,在使用的过程中,可以根据图像识别的难易程度在两种模式中进行切换,具体为:
(1)当按键开关7按下一次后,广角摄像头1会捕获当前所要识别的物体的图像信息,然后处理器会结合神经网络加速芯片,使用部署好的深度学习模型对图像信息进行处理,得到文本结果。得到文本结果后,使用TTS转语音技术,处理器会判断蓝牙设备2是否连接成功,如果连接成功,通过蓝牙设备2输出,否则通过扬声器输出。
(2)当按键开关7连续按下两次后,处理器判断网络是否连接成功。如果网络连接成功,同样的会按照第一种模式一样得到物体识别的文本结果。得到文本结果后,会使用联网模块3在网络中对该结果进行搜索,或者映射到指定云端的内容。使用TTS转语音技术,处理器判断蓝牙设备2是否连接成功,成功则通过蓝牙设备2输出,否则通过扬声器输出;如果网络连接不成功,会进行语音提示。
上述实施例仅用来进一步说明本实用新型的一种智能点读棒,但本实用新型并不局限于实施例,凡是依据本实用新型的技术实质对以上实施例所作的任何简单修改、等同变化与修饰,均落入本实用新型技术方案的保护范围内。

Claims (8)

1.一种智能点读棒,其特征在于:包括点读本体、处理器、神经网络加速芯片、广角摄像头、按键开关、扬声器及联网模块,所述点读本体呈棒状,所述广角摄像头设置在所述点读本体的头部,所述点读本体的中部设有所述按键开关,所述点读本体的中后部形成握柄,所述神经网络加速芯片和所述处理器连接并都设置在所述点读本体的内部,所述广角摄像头与所述处理器连接,所述按键开关与所述处理器连接,所述扬声器和所述联网模所述扬声器设置在该点块都与所述处理器连接。
2.根据权利要求1所述的智能点读棒,其特征在于:读本体内部,所述点读本体中部对应该扬声器设有出音孔。
3.根据权利要求2所述的智能点读棒,其特征在于:所述点读本体上还包括蓝牙设备,所述蓝牙设备和所述处理器连接。
4.根据权利要求1所述的智能点读棒,其特征在于:所述按键开关包含VCC、GND和数字信号输出口三个引脚,三个所述引脚都与所述处理器连接。
5.根据权利要求4所述的智能点读棒,其特征在于:所述点读本体的侧面上中部设有卡槽和LED指示灯,所述点读本体的尾部设有充电口和USB接口。
6.根据权利要求1所述的智能点读棒,其特征在于:所述神经网络加速芯片采用的是Movidius或AX2145或小鼠Mipy5。
7.根据权利要求1所述的智能点读棒,其特征在于:所述处理器采用的是半导体ARM。
8.根据权利要求1所述的智能点读棒,其特征在于:所述按键开关的形状为正方形。
CN201821914550.4U 2018-11-20 2018-11-20 一种智能点读棒 Active CN209486938U (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201821914550.4U CN209486938U (zh) 2018-11-20 2018-11-20 一种智能点读棒

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201821914550.4U CN209486938U (zh) 2018-11-20 2018-11-20 一种智能点读棒

Publications (1)

Publication Number Publication Date
CN209486938U true CN209486938U (zh) 2019-10-11

Family

ID=68116212

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201821914550.4U Active CN209486938U (zh) 2018-11-20 2018-11-20 一种智能点读棒

Country Status (1)

Country Link
CN (1) CN209486938U (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110781879A (zh) * 2019-10-31 2020-02-11 广东小天才科技有限公司 一种点读目标识别方法、系统、存储介质及电子设备
CN111639581A (zh) * 2020-05-26 2020-09-08 厦门市思芯微科技有限公司 一种指读儿童机器人系统

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110781879A (zh) * 2019-10-31 2020-02-11 广东小天才科技有限公司 一种点读目标识别方法、系统、存储介质及电子设备
CN110781879B (zh) * 2019-10-31 2023-04-28 广东小天才科技有限公司 一种点读目标识别方法、系统、存储介质及电子设备
CN111639581A (zh) * 2020-05-26 2020-09-08 厦门市思芯微科技有限公司 一种指读儿童机器人系统

Similar Documents

Publication Publication Date Title
CN106648146B (zh) 点图形、使用点图形的信息重放及输入输出方法
US8285552B2 (en) System and method for simulating expression of message
WO2017088340A1 (zh) 图像信息处理方法、装置和计算机存储介质
CN113395542B (zh) 基于人工智能的视频生成方法、装置、计算机设备及介质
US6522417B1 (en) Communication terminal device that processes received images and transmits physical quantities that affect the receiving communication terminal device
CN109448453B (zh) 基于图像识别追踪技术的点读问答方法与系统
KR20100062207A (ko) 화상통화 중 애니메이션 효과 제공 방법 및 장치
CN106157956A (zh) 语音识别的方法及装置
CN111857334B (zh) 人体手势字母的识别方法、装置、计算机设备及存储介质
CN107742446A (zh) 图书阅读器
CN209486938U (zh) 一种智能点读棒
CN107066081B (zh) 一种虚拟现实系统的交互控制方法和装置及虚拟现实设备
CN111541951B (zh) 基于视频的交互处理方法、装置、终端及可读存储介质
CN111491123A (zh) 视频背景处理方法、装置及电子设备
CN110544287A (zh) 一种配图处理方法及电子设备
CN108510988A (zh) 一种用于聋哑人的语言识别系统及方法
CN111063024A (zh) 三维虚拟人驱动方法、装置、电子设备及存储介质
Krishnaraj et al. A Glove based approach to recognize Indian Sign Languages
CN109760067B (zh) 会打纸牌的智能机器人系统以及设备
KR101979285B1 (ko) 프로그래밍 학습 및 창의력 향상 교육 시스템
CN109214379A (zh) 基于图像识别追踪技术的多功能点读指点件及点读方法
US20080122867A1 (en) Method for displaying expressional image
CN111768729A (zh) 一种vr场景自动解说方法、系统和存储介质
CN105468249A (zh) 智能互动系统及其控制方法
JP2003085571A (ja) 塗り絵玩具

Legal Events

Date Code Title Description
GR01 Patent grant
GR01 Patent grant