CN108933916A - 一种自适应调节方法、ar智能学习眼镜及系统 - Google Patents

一种自适应调节方法、ar智能学习眼镜及系统 Download PDF

Info

Publication number
CN108933916A
CN108933916A CN201710212503.9A CN201710212503A CN108933916A CN 108933916 A CN108933916 A CN 108933916A CN 201710212503 A CN201710212503 A CN 201710212503A CN 108933916 A CN108933916 A CN 108933916A
Authority
CN
China
Prior art keywords
information
module
image
data
intelligence learning
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710212503.9A
Other languages
English (en)
Other versions
CN108933916B (zh
Inventor
王峰
王涛
王官军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenyang Wanlian Polytron Technologies Inc
Original Assignee
Shenyang Wanlian Polytron Technologies Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenyang Wanlian Polytron Technologies Inc filed Critical Shenyang Wanlian Polytron Technologies Inc
Priority to CN201710212503.9A priority Critical patent/CN108933916B/zh
Publication of CN108933916A publication Critical patent/CN108933916A/zh
Application granted granted Critical
Publication of CN108933916B publication Critical patent/CN108933916B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00—Electrically-operated educational appliances
    • G09B5/08—Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations
    • G09B5/12—Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations different stations being capable of presenting different information simultaneously
    • G09B5/125—Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations different stations being capable of presenting different information simultaneously the stations being mobile
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Acoustics & Sound (AREA)
  • Business, Economics & Management (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Electrically Operated Instructional Devices (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开了一种自适应调节方法、AR智能学习眼镜及系统，其包括图像采集模块、拾音模块、侦测模块、分析模块、存储模块以及数据传输模块，由该AR智能学习眼镜构成的系统还包括云服务器、移动终端和PC机，该AR智能学习眼镜的调节方法包括：获取图像采集模块以及拾音模块的当前方位，并捕获用户头部的运动轨迹和偏移信息，建立数据偏移模型，调节图像采集模块。本发明解决了传统的图像捕捉设备无法清晰捕捉远距离的图像信息，且无法还原出远距离的声音信息的问题，能对图像捕捉范围内的特征信息进行锁定并自动调节偏移距离，能自适应运动状态的用户头部，并调节图像采集模块的偏移方向和偏移距离。

Description

一种自适应调节方法、AR智能学习眼镜及系统
技术领域
本发明涉及智能穿戴技术领域，特别是一种自适应调节方法、AR智能学习眼镜及系统。
背景技术
随着社会经济的快速发展，以及现代化教育模式的改变，传统的听、读等学习模式已经越来越不适用快节奏化的学习生活。学生在听课的同时，很难将笔记记录用于后期复习。现有电子产品公司针对该情况开发的录音笔，但该录音笔不能捕获老师讲课的图像以及黑板上的文字记录，同样也具有很大的缺陷。
随着智能穿戴技术的发展，人们的视觉体验和听觉体验得到了很大的改变，如现有的智能手表、VR智能眼镜、AR智能眼镜等，甚至部分产品也带有摄像和存储的功能，但这些设备只能够在很短的有效距离内保证清晰摄像，无法保证多达10米以上距离的高灵敏度录音录像，也不能保证场景声音和图像的还原。
正是基于以上的原因，虽然AR眼镜发展迅猛，但是在教育领域的使用价值却并没有得到完全的挖掘，市场推广普及效果不佳。
发明内容
本发明的目的在于克服现有技术的不足，提供一种自适应调节方法、AR智能学习眼镜及系统，本申请解决了传统图像捕捉设备无法清晰捕捉远距离图像信息，且无法还原出远距离的声音信息的问题，能实现智能跟踪录像，不同距离状态下使用时手动变倍和自动对焦，并能将捕获的语音转换为文字信息，有利于学生在课后复习和课后重温学习。
本发明的目的是通过以下技术方案来实现的：一种自适应调节方法，该方法基于AR智能学习眼镜，包括以下步骤：
S1、获取图像采集模块捕获的视频图像信息，选取视频图像信息中的一特征信息作为第一图像特征信息，由预设的第一图像特征信息在视频图像信息中的比例阀值调节图像采集模块的焦距和偏移信息，所述偏移信息包括偏移方向和偏移距离；
S2、获取拾音模块捕获的声音信息，并选取并锁定方位内的一声音特征信息为第一声音特征信息，建立声音放大及去噪模型，移除除了第一声音特征信息以外的其他声音信息；
S3、由侦测模块获取用户头部的轨迹信息、偏移信息以及加速度信息，并获取图像采集模块的当前方位以及预偏移范围；
S4、计算并建立用户头部运动轨迹的轨迹点与图像采集模块当前方位的偏移模型，计算并建立图像采集模块与第一特征信息之间的偏移模型，计算并建立拾音模块与第一声音特征信息之间的偏移模型；
S5、调节图像采集模块，并再次执行步骤S2到步骤S5。
本发明中，设定该自适应调节方法还包括手动变倍和自动对焦的步骤，具体如下：
获取第一图像特征信息在自然光和测量光下的归一化对比度值，并将该归一化对比度值作为镜头对焦的参考值，并对该参考值进行自动调节。
本发明中，设定该自适应调节方法还包括语音转换文字的步骤，具体如下：
获取第一声音特征信息，并将获取的第一声音特征信息与数据库中的数据相比对，获得该语音对应的文字信息，并将文字信息转换为TXT格式。
本发明中，设定AR智能学习眼镜建立wifi热点，并通过wifi热点与移动终端建立数据链接通道，移动终端通过加密设置后可查看、删除或拷贝AR智能学习眼镜上的数据信息。
本发明中，设定数据在进行数据上传时需要进行数据加密。
本发明中，设定自适应调节方法还包括帐号管理步骤，具体包括：
注册并建立AR智能学习眼镜的管理账户，并在云服务器中为该管理账户分配一数据存储区域；
AR智能学习眼镜登录管理账户，向云服务器上传数据信息，并存储分配给该账户的数据存储区域；
移动终端登录管理账户，自动建立与云服务器的数据传输链路，并获取云服务器存储的该账户数据信息。
一种AR智能学习眼镜，包括眼镜框以及设于眼镜框两侧的左眼镜腿和右眼镜腿，左眼镜腿和右眼镜腿上分别设有左控制箱和右控制箱，该智能学习眼镜还包括：
图像采集模块，用于捕获远距离的视频图像信息，并锁定视频图像信息中的第一图像特征信息，建立第一图像特征信息与视频图像信息的比例阀值，并跟随第一图像特征信息进行焦距调节和镜头移动；
拾音模块，用于捕获某一方向或捕获某一位置的声音信息，标记并锁定第一声音特征信息，建立声音放大及去噪模型，对第一声音特征信息以外的声音进行去噪处理；
侦测模块，用于捕获用户头部运动的轨迹信息、偏移信息以及加速度信息，捕获图像采集模块和拾音模块的工作状态以及偏移信息，所述偏移信息包括偏移方向和偏移距离；
分析模块，用于计算并建立用户头部运动轨迹的轨迹点与图像采集模块当前方位的偏移模型，计算并建立图像采集模块与第一特征信息之间的偏移模型，计算并建立拾音模块与第一声音特征信息之间的偏移模型；
存储模块，用于存储图像采集模块和拾音模块获取的数据信息；
数据传输模块，用于建立数据加密模型，并与外部设备建立数据连接链路，实现数据加密、数据上传和数据下载。
本发明中，所述第一图像特征信息包括黑板、投影屏幕、字迹、人物、教具以及实验物品中的任意一种。
本发明中，所述第一声音特征信息包括投影设备、人物、教具以及实验物品发出的声音中的任意一种。
一种AR智能学习系统，在AR智能学习眼镜的基础上，还包括移动终端、云服务器和PC机，AR智能学习眼镜通过网络分别与云服务器和移动终端相连，云服务器还通过路由设备分别与移动终端与PC机相连。
本发明的有益效果是：
(1)解决了传统图像捕捉设备无法清晰捕捉远距离图像信息以及无法还原出远距离的声音信息的问题，能对捕捉的视频图像信息进行自适应跟踪、定位；
(2)能对图像捕捉范围内的特征信息进行锁定并自动调节偏移距离，能自适应运动状态的用户头部，并调节图像采集模块的偏移方向和偏移距离；
(3)能在改变拍摄距离后实现手动变倍和自动对焦，便于用户在学习过程中，适应各个距离的拍摄和图像录制；
(4)能将语音转换为文字，并存储在TXT格式，便于学生课后复习；
(5)设有数据加密方式，便于采集的数据信息不被外部设备获取；
(6)设有管理账户，并为每个管理账户分配一个云服务器的数据存储区域，有利于用户的多方式数据提取。
附图说明
图1为本发明自适应调节的流程示意图；
图2为本发明变倍自动对焦的功能框图；
图3为本发明语音转文字TXT的功能模块框图；
图4为本发明AR学习眼镜的立体图；
图5为本发明AR智能学习眼镜的俯视图；
图6为本发明AR智能学习眼镜的正视图；
图7为本发明AR智能学习眼镜的仰视图；
图中，10-眼镜框，11-眼镜腿，12-左控制箱，13-右控制箱，14-摄像头，17-麦克风装置，18-显示器固定支架，19-微型显示器，20-凹型弹性链条，21-强光LED灯，101-MCU，102-摄像头，103-光学传感器，104-SD卡，105-显示模块，106-指示灯，107-按键模块，201-高灵敏度单指向MCI，202-全指向MIC，203-放大器，204-降噪模块，205-微处理器，206-CPU，207-TXT文件。
具体实施方式
下面结合附图进一步详细描述本发明的技术方案，但本发明的保护范围不局限于以下所述。
实施例1：
本实施例提供一种自适应调节方法，该方法基于AR智能学习眼镜，如图1所示，包括以下步骤：
S1、获取图像采集模块捕获的视频图像信息，选取视频图像信息中的一特征信息作为第一图像特征信息，由预设的第一图像特征信息在视频图像信息中的比例阀值调节图像采集模块的焦距和偏移信息，所述偏移信息包括偏移方向和偏移距离；
S2、获取拾音模块捕获的声音信息，并选取并锁定方位内的一声音特征信息为第一声音特征信息，建立声音放大及去噪模型，移除除了第一声音特征信息以外的其他声音信息；
S3、由侦测模块获取用户头部的轨迹信息、偏移信息以及加速度信息，并获取图像采集模块的当前方位以及预偏移范围；
S4、计算并建立用户头部运动轨迹的轨迹点与图像采集模块当前方位的偏移模型，计算并建立图像采集模块与第一特征信息之间的偏移模型，计算并建立拾音模块与第一声音特征信息之间的偏移模型；
S5、调节图像采集模块，并再次执行步骤S2到步骤S5。
本实施例主要应用于学生课堂时使用，当学生在课堂听讲时，学生的头部不会一成不变，会随着时间的变化，产生一定的偏移量，或发生侧头、低头、抬头或向后转的动作，但是，当发生这些动作时，戴在学生头部的智能学习眼镜则无法捕捉远处老师的场景。因此，本实施例提供该自适应调节方法，其能锁定需要拍摄的第一图像信息和需要声音录制的第一声音信息，并计算在学生头部转动时，产生的偏移信息，并根据偏移信息自动调节镜头，以达到最佳图像采集的位置。
本实施例在应用过程中，还能针对远处的声音特征信息建立去噪模型，移除近距离的噪声影响，并放大远处的声音信息，以便于后期学生再次观看时，不会受到噪音的影响。
实施例2：
本实施例在实施例1的基础上，本实施例还包括手动变倍和自动对焦的步骤，具体如下：
获取第一图像特征信息在自然光和测量光下的归一化对比度值，并将该归一化对比度值作为镜头对焦的参考值，并对该参考值进行自动调节。
进一步的，如图2所示，本实施例包括摄像头102、光学传感器103、MCU 101、SD卡104、显示模块105、指示灯106和按键模块107，所述摄像头102与光学传感器103相连，光学传感器103的信号端与MCU 101的信号端相连，SD卡104的信号端与MCU 101相连，显示模块105、指示灯106和按键模块107分别和MCU 101的信号端相连。
本实施例针对学生改变拍摄距离后，需要手动调节焦距和调节倍数的缺点。很多学生对焦距调节不会，容易调节到错误的焦距，造成后期图像模糊或图像过小等情况发生，本实施例在改变距离后，会根据现有的距离进行判断比对，并根据比对结果进行自动微调，从而实现自动对焦，无需学生手动调节，便于使用。
实施例3：
本实施例在实施例1的基础上，还包括语音转换文字的步骤，具体如下：
获取第一声音特征信息，并将获取的第一声音特征信息与数据库中的数据相比对，获得该语音对应的文字信息，并将文字信息转换为TXT格式。
本实施例所述的语音转换文字能将老师在课堂讲课的内容转换为文字，并将转换的文字存为TXT格式，并录入存储器中。
进一步地，如图3所示，本实施例包括高灵敏度单指向MIC 201、全指向MIC 202、放大器203、降噪模块204、微处理器205和CPU 206，高灵敏度单指向MIC 201通过放大器203与降噪模块204相连，全指向MIC 202通过放大器203与降噪模块204相连，降噪模块204上设有A/D转换模块，降噪模块204的信号输出端与微处理器205的信号输入端相连，微处理器205的信号输出端与CPU 206相连，CPU 206将语音信号转换为TXT文件207，并存于与CPU 206相连的存储器内，在本实施例中，为了保证后面的处理有足够好的声源质量，这里选择的是高灵敏度单指向MIC 201和全指向MIC 202，目的是为了获取更加微弱的声源信号，以便后面的降噪等处理。同时，带有AGC(自动增益功能)的放大器能够保证MIC工作的最佳的状态；降噪模块204的功能主要是预降噪，包括双MIC降噪、回声消除，动态范围控制等基本的降噪处理，为后续的人声增强做准备。所述微处理器用于完成人声增强，清晰的人声，才是实现录制高质量媒体和语音TXT的保证。所述CPU 206主要是利用相应的语音提取算法，实现语音高转换率成TXT文件207并存于存储器中；同时，也可以执行摄像功能，实现远距离的录像录音成媒体文件一并存于存储器中，方便取用。本实施例中所述的存储器可以为SD卡104。
实施例4：
本实施例提供一种AR智能学习眼镜，包括眼镜框10以及设于眼镜框10两侧的左眼镜腿和右眼镜腿，左眼镜腿和右眼镜腿上分别设有左控制箱12和右控制箱13，该智能学习眼镜还包括：
图像采集模块，用于捕获远距离的视频图像信息，并锁定视频图像信息中的第一图像特征信息，建立第一图像特征信息与视频图像信息的比例阀值，并跟随第一图像特征信息进行焦距调节和镜头移动；
拾音模块，用于捕获某一方向或捕获某一位置的声音信息，标记并锁定第一声音特征信息，建立声音放大及去噪模型，对第一声音特征信息以外的声音进行去噪处理；
侦测模块，用于捕获用户头部运动的轨迹信息、偏移信息以及加速度信息，捕获图像采集模块和拾音模块的工作状态以及偏移信息，所述偏移信息包括偏移方向和偏移距离；
分析模块，用于计算并建立用户头部运动轨迹的轨迹点与图像采集模块当前方位的偏移模型，计算并建立图像采集模块与第一特征信息之间的偏移模型，计算并建立拾音模块与第一声音特征信息之间的偏移模型；
存储模块，用于存储图像采集模块和拾音模块获取的数据信息；
数据传输模块，用于建立数据加密模型，并与外部设备建立数据连接链路，实现数据加密、数据上传和数据下载。
本实施例中，所述第一图像特征信息包括黑板、投影屏幕、字迹、人物、教具以及实验物品中的任意一种。
本实施例中，所述第一声音特征信息包括投影设备、人物、教具以及实验物品发出的声音中的任意一种。
本实施例中，如图4至图7，还包括眼镜框10、眼镜腿11、左控制箱12、右控制箱13、摄像头14以及分别设置在左控制箱12和右控制箱13内的PCB电路板，所述眼镜框10和所述眼镜腿11可变扭力弹性连接，所述眼镜框10包括横梁和设于横梁下方的凹型弹性链条20，凹型弹性链条20通过凹槽导轨链接可左右移动，并向下延伸半包裹住眼镜片，凹型弹性链条20末端再用相应的弹性缎带进行最终加固，眼镜腿11包括左眼镜腿和右眼镜腿，左控制箱12和右控制箱13分别通过磁性夹片固定在左眼镜腿和右眼镜腿上，左控制箱12和右控制箱13前端分别设有双色指示灯，左控制箱12前端还设有显示器固定支架18，显示器固定支架18尾端设有双轴旋转机构，显示器固定支架18的顶端设有微型显示器19，右控制箱13前端还设有强光LED灯21，左控制箱12上设有wifi天线108，右控制箱13上设有蓝牙天线104，左控制箱12和右控制箱13尾端还分别固定连接有电池，所述摄像头14固定在左控制箱12侧壁，摄像头14前端设有镜头和麦克风装置17，摄像头14上表面设有镜头调倍旋钮。
本实施例提供一种基于自适应调节方法的智能学习眼镜，该眼镜能戴在学生头部，并随着学生的头部转动而转动，同时，在学生眼睛偏移时，如学生低头思考时，对应录制黑板内容和老师讲课内容，从而起到完整的课堂在线，实现对知识的全面掌握。
实施例5：
本实施例与上述几个实施例的不同之处在于，本实施例提供一种AR智能学习系统，在AR智能学习眼镜的基础上，还包括移动终端、云服务器和PC机，AR智能学习眼镜通过网络分别与云服务器和移动终端相连，云服务器还通过路由设备分别与移动终端与PC机相连。
本实施例主要用在教育领域的智能眼镜只是实现了现场的录制，然后通过手机或者PC端进行回放，或者从云端回放，这些方式都是需要其他终端进行配合。对于学生而言，上一堂课存在的少许问题本可以是通过课后立即回放得到解决，而不是再拿手机进行回放。同时，对于大多数学校而言，特别是中小学生，在学习期间更是不允许使用手机。
以上所述实施例仅表达了本发明的具体实施方式，其描述较为具体和详细，但并不能因此而理解为对本发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。

Claims (10)

1.一种自适应调节方法，该方法基于AR智能学习眼镜，其特征在于，包括以下步骤：
S1、获取图像采集模块捕获的视频图像信息，选取视频图像信息中的一特征信息作为第一图像特征信息，由预设的第一图像特征信息在视频图像信息中的比例阀值调节图像采集模块的焦距和偏移信息，所述偏移信息包括偏移方向和偏移距离；
S2、获取拾音模块捕获的声音信息，并选取并锁定方位内的一声音特征信息为第一声音特征信息，建立声音放大及去噪模型，移除除了第一声音特征信息以外的其他声音信息；
S3、由侦测模块获取用户头部的轨迹信息、偏移信息以及加速度信息，并获取图像采集模块的当前方位以及预偏移范围；
S4、计算并建立用户头部运动轨迹的轨迹点与图像采集模块当前方位的偏移模型，计算并建立图像采集模块与第一特征信息之间的偏移模型，计算并建立拾音模块与第一声音特征信息之间的偏移模型；
S5、调节图像采集模块，并再次执行步骤S2到步骤S5。
2.根据权利要求1所述一种自适应调节方法，其特征在于，设定该自适应调节方法还包括手动变倍和自动对焦的步骤，具体如下：
获取第一图像特征信息在自然光和测量光下的归一化对比度值，并将该归一化对比度值作为镜头对焦的参考值，并对该参考值进行自动调节。
3.根据权利要求1所述一种自适应调节方法，其特征在于，设定该自适应调节方法还包括语音转换文字的步骤，具体如下：
获取第一声音特征信息，并将获取的第一声音特征信息与数据库中的数据相比对，获得该语音对应的文字信息，并将文字信息转换为TXT格式。
4.根据权利要求1所述一种自适应调节方法，其特征在于，设定AR智能学习眼镜建立wifi热点，并通过wifi热点与移动终端建立数据链接通道，移动终端通过加密设置后可查看、删除或拷贝AR智能学习眼镜上的数据信息。
5.根据权利要求4所述一种自适应调节方法，其特征在于，设定数据在进行数据上传时需要进行数据加密。
6.根据权利要求1所述一种自适应调节方法，其特征在于，设定自适应调节方法还包括帐号管理步骤，具体包括：
注册并建立AR智能学习眼镜的管理账户，并在云服务器中为该管理账户分配一数据存储区域；
AR智能学习眼镜登录管理账户，向云服务器上传数据信息，并存储分配给该账户的数据存储区域；
移动终端登录管理账户，自动建立与云服务器的数据传输链路，并获取云服务器存储的该账户数据信息。
7.一种AR智能学习眼镜，包括眼镜框以及设于眼镜框两侧的左眼镜腿和右眼镜腿，其特征在于，左眼镜腿和右眼镜腿上分别设有左控制箱和右控制箱，该智能学习眼镜还包括：
图像采集模块，用于捕获远距离的视频图像信息，并锁定视频图像信息中的第一图像特征信息，建立第一图像特征信息与视频图像信息的比例阀值，并跟随第一图像特征信息进行焦距调节和镜头移动；
拾音模块，用于捕获某一方向或捕获某一位置的声音信息，标记并锁定第一声音特征信息，建立声音放大及去噪模型，对第一声音特征信息以外的声音进行去噪处理；
侦测模块，用于捕获用户头部运动的轨迹信息、偏移信息以及加速度信息，捕获图像采集模块和拾音模块的工作状态以及偏移信息，所述偏移信息包括偏移方向和偏移距离；
分析模块，用于计算并建立用户头部运动轨迹的轨迹点与图像采集模块当前方位的偏移模型，计算并建立图像采集模块与第一特征信息之间的偏移模型，计算并建立拾音模块与第一声音特征信息之间的偏移模型；
存储模块，用于存储图像采集模块和拾音模块获取的数据信息；
数据传输模块，用于建立数据加密模型，并与外部设备建立数据连接链路，实现数据加密、数据上传和数据下载。
8.根据权利要求7所述AR智能学习眼镜，其特征在于，所述第一图像特征信息包括黑板、投影屏幕、字迹、人物、教具以及实验物品中的任意一种。
9.根据权利要求7所述AR智能学习眼镜，其特征在于，所述第一声音特征信息包括投影设备、人物、教具以及实验物品发出的声音中的任意一种。
10.AR智能学习系统，基于权利要求7所述AR智能学习眼镜的基础上，其特征在于，还包括移动终端、云服务器和PC机，AR智能学习眼镜通过网络分别与云服务器和移动终端相连，云服务器还通过路由设备分别与移动终端与PC机相连。
CN201710212503.9A 2017-05-23 2017-05-23 一种自适应调节方法、ar智能学习眼镜及系统 Expired - Fee Related CN108933916B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710212503.9A CN108933916B (zh) 2017-05-23 2017-05-23 一种自适应调节方法、ar智能学习眼镜及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710212503.9A CN108933916B (zh) 2017-05-23 2017-05-23 一种自适应调节方法、ar智能学习眼镜及系统

Publications (2)

Publication Number Publication Date
CN108933916A true CN108933916A (zh) 2018-12-04
CN108933916B CN108933916B (zh) 2020-09-08

Family

ID=64450523

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710212503.9A Expired - Fee Related CN108933916B (zh) 2017-05-23 2017-05-23 一种自适应调节方法、ar智能学习眼镜及系统

Country Status (1)

Country Link
CN (1) CN108933916B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110706553A (zh) * 2019-11-13 2020-01-17 北京音悦荚科技有限责任公司 一种基于ar增强现实的乐器辅助学习系统及方法和装置
CN111768659A (zh) * 2020-05-15 2020-10-13 四川科华天府科技有限公司 一种基于ar互动教学设备的变焦系统
CN113342173A (zh) * 2021-06-30 2021-09-03 厦门元馨智能科技有限公司 一种基于体感操作一体眼镜的自适应学习方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130242077A1 (en) * 2012-03-16 2013-09-19 Chin-Teng Lin Image control system able to detect electrooculography
CN204883092U (zh) * 2015-09-10 2015-12-16 陈包容 一种基于视线追踪技术的智能眼镜
CN106228982A (zh) * 2016-07-27 2016-12-14 华南理工大学 一种基于教育服务机器人的交互式学习系统与交互方法
CN106454098A (zh) * 2016-10-31 2017-02-22 深圳晨芯时代科技有限公司 一种虚拟现实拍摄及显示的方法、系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130242077A1 (en) * 2012-03-16 2013-09-19 Chin-Teng Lin Image control system able to detect electrooculography
CN204883092U (zh) * 2015-09-10 2015-12-16 陈包容 一种基于视线追踪技术的智能眼镜
CN106228982A (zh) * 2016-07-27 2016-12-14 华南理工大学 一种基于教育服务机器人的交互式学习系统与交互方法
CN106454098A (zh) * 2016-10-31 2017-02-22 深圳晨芯时代科技有限公司 一种虚拟现实拍摄及显示的方法、系统

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110706553A (zh) * 2019-11-13 2020-01-17 北京音悦荚科技有限责任公司 一种基于ar增强现实的乐器辅助学习系统及方法和装置
CN110706553B (zh) * 2019-11-13 2022-02-01 北京音悦荚科技有限责任公司 一种基于ar增强现实的乐器辅助学习系统及方法和装置
CN111768659A (zh) * 2020-05-15 2020-10-13 四川科华天府科技有限公司 一种基于ar互动教学设备的变焦系统
CN113342173A (zh) * 2021-06-30 2021-09-03 厦门元馨智能科技有限公司 一种基于体感操作一体眼镜的自适应学习方法

Also Published As

Publication number Publication date
CN108933916B (zh) 2020-09-08

Similar Documents

Publication Publication Date Title
WO2020078237A1 (zh) 音频处理方法和电子设备
CN105306862B (zh) 一种基于3d虚拟合成技术的情景视频录制系统、方法及情景实训学习方法
CN105187723B (zh) 一种无人飞行器的摄像处理方法
CN109658352A (zh) 图像信息的优化方法及装置、电子设备和存储介质
CN103581606B (zh) 一种多媒体采集装置和方法
CN108933916A (zh) 一种自适应调节方法、ar智能学习眼镜及系统
CN105653032B (zh) 显示调整方法及装置
CN109782850A (zh) 支持多种网络接入的全交互智能教育机
CN110599835A (zh) 一种交互式计算机远程教育系统
CN111325853A (zh) 一种基于增强现实眼镜的远程辅导系统及方法
CN111402096A (zh) 一种在线授课质量管理方法、系统、设备和介质
US11875080B2 (en) Object sharing method and apparatus
CN110933350A (zh) 一种电子云镜录播系统、方法及装置
CN109635787B (zh) 一种跟踪摄像教学系统
CN209002068U (zh) 智能云镜摄像机
CN116132794A (zh) 一种自动导播装置
CN205901924U (zh) 音视频二合一采集设备
CN109255996A (zh) 一种在线课堂的播放优化方法及系统
CN109104667A (zh) 一种智能音响的控制方法、系统及智能音响
CN110971924A (zh) 一种直播过程中美颜的方法、设备、存储介质及系统
CN213028363U (zh) 一种虚拟现实眼镜
CN117768597A (zh) 一种导播方法、装置、设备和存储介质
CN108848366B (zh) 基于3d摄像机的信息获取装置及方法
CN204929034U (zh) 一种基于图像跟踪的录播系统
CN105894585A (zh) 一种远程视频的实时播放方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20200908

Termination date: 20210523

CF01 Termination of patent right due to non-payment of annual fee