CN115482807A - 一种用于智能终端语音交互的检测方法及系统 - Google Patents
一种用于智能终端语音交互的检测方法及系统 Download PDFInfo
- Publication number
- CN115482807A CN115482807A CN202210960307.0A CN202210960307A CN115482807A CN 115482807 A CN115482807 A CN 115482807A CN 202210960307 A CN202210960307 A CN 202210960307A CN 115482807 A CN115482807 A CN 115482807A
- Authority
- CN
- China
- Prior art keywords
- rod
- voice
- intelligent
- block
- motor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 78
- 230000003993 interaction Effects 0.000 title claims abstract description 45
- 238000012360 testing method Methods 0.000 claims abstract description 80
- 230000000694 effects Effects 0.000 claims abstract description 26
- 230000007246 mechanism Effects 0.000 claims description 120
- 238000000034 method Methods 0.000 claims description 38
- 238000002372 labelling Methods 0.000 claims description 34
- 238000009434 installation Methods 0.000 claims description 21
- 230000006870 function Effects 0.000 claims description 9
- 230000000670 limiting effect Effects 0.000 claims description 8
- 238000004804 winding Methods 0.000 claims description 8
- 238000000605 extraction Methods 0.000 claims description 6
- 238000012546 transfer Methods 0.000 claims description 6
- 241000282414 Homo sapiens Species 0.000 claims description 5
- 230000003028 elevating effect Effects 0.000 claims description 5
- 238000001125 extrusion Methods 0.000 claims description 5
- 238000003058 natural language processing Methods 0.000 claims description 4
- 230000000007 visual effect Effects 0.000 claims description 4
- 230000002146 bilateral effect Effects 0.000 claims description 3
- 238000013527 convolutional neural network Methods 0.000 claims description 3
- 238000005520 cutting process Methods 0.000 claims description 3
- 238000009432 framing Methods 0.000 claims description 3
- 239000011159 matrix material Substances 0.000 claims description 3
- 238000007781 pre-processing Methods 0.000 claims description 3
- 238000003860 storage Methods 0.000 claims description 3
- 241000283984 Rodentia Species 0.000 claims description 2
- 238000003825 pressing Methods 0.000 claims description 2
- 238000010521 absorption reaction Methods 0.000 claims 1
- 230000035939 shock Effects 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 12
- 230000008569 process Effects 0.000 description 7
- 230000005540 biological transmission Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000005406 washing Methods 0.000 description 3
- 230000004888 barrier function Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000005315 distribution function Methods 0.000 description 2
- 230000003014 reinforcing effect Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000013016 damping Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000013102 re-test Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000012827 research and development Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/01—Assessment or evaluation of speech recognition systems
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0212—Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory
- G05D1/0214—Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory in accordance with safety or protection criteria, e.g. avoiding hazardous areas
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Multimedia (AREA)
- Aviation & Aerospace Engineering (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Manipulator (AREA)
Abstract
本发明公开一种用于智能终端语音交互的检测方法及系统，结合了目标检测算法和自主导航机器人，可以对通用的智能化设备的智能功能进行测试，在可容忍的误判率下，达到了代替大量人力、人机协同完成智能化设备测试。本发明利用人机协同的理念，最小化人工操作，最大化智能操作，由机器人和算法平台代替人工完成枯燥单一的任务，并具备标准化、可复检的效果。
Description
技术领域
本发明涉及智能检测领域，具体而言，涉及一种用于智能终端语音交互的智能检测方法及系统。
背景技术
对于智能化洗衣机、智能化空调等等的智能化设备，现有的测试方法仍然采用人工方式，即人工的和被测智能化设备进行语音或视觉交互。然而人工方式存在以下缺陷：第一，由于人为主观性，将会带来例如语音播报内容不一致、语音响度(分贝量)不一致等问题，即缺乏标准化；第二，人工测试无法记录测试过程中的完整信息，后续无法进行测试效果的复检；第三，面对众多的智能化设备种类和各式各样的智能化设备型号，完成所有的测试工作将要投入大量的人力成本，同时还存在着劳动强度大和工作效率低的问题。
例如中国发明专利(申请号：CN211711342184.3)所公开的一种滚筒洗衣机的自动测试方法，可以用简易的方法来收集滚筒洗衣机的性能数据，便于研发人员、实验人员进行现场分析，可以减小研发时间、分析问题的时间，并且不受到场地的限制。但在具体实施时依旧存在着，面对众多的家电种类和各式各样的家电型号，完成所有的测试工作将要投入大量的人力成本，同时还存在着劳动强度大和工作效率低的问题；
例如中国发明专利(CN112405561A)公开了一种基于语音交互的智能家电智能化水平测试系统，包括机器人本体和控制系统；其中机器人本体包括磁导航循迹移动平台、电动升降器和舵机转向器；控制系统包括上位机、下位机、语音交互装置、路线规划装置和数据采集存储装置；该测试过程呈现流水线式，测试方法严格统一、高度一致、测试工作高效，采用模块化集成的思想，在满足使用需求的前提下采用简单经济的现有资源，节约成本。但在实际使用，仍存在一定的缺点，如所以针对智能家电的智能能力测试缺乏良好的定位追溯能力，并且缺乏对智能化设备的语音和视频的交互测试能力，并且机器人在运动时缺乏良好的避障功能，影响到对家电测试适配能力，容易因测试范围内障碍导致损坏。
发明内容
本发明的目的是为了克服现有技术中完成所有的测试工作将要投入大量的人力成本，同时还存在着劳动强度大和工作效率低的问题，提供一种用于智能终端语音交互的检测方法及系统。
本发明的目的是通过以下技术方案实现的：
一种用于智能终端语音交互的检测方法，包括如下步骤：
S101.测试人员通过测试系统平台制定测试任务；
S102.智能机器人按照测试任务自主导航到达选定位置后，通过自身运动组件调节相对应操作和观察高度；
S103.通过智能机器人的音响播放语音指令控制智能化设备，判断智能操控效果，摄像机录制对应的视频或照片用以对比操控效果；
S104.将获取到的视频或照片输入到对应的文字识别算法或目标检测算法；
S105.将识别到的文字目标和语音指令进行匹配得出测试结果，生成测试报告。
进一步的，S101包括：测试人员在系统平台选择家电种类、智能机器人到达位置、音响播放高度、测试次数和待测试语音指令，且系统平台通过数据库筛选智能化设备空调不具备的指令，数据库通过SOL协议进行指令检索，且同时通过测试人员进行手工判断整体测试精度；
S102包括：智能机器人模拟人类进行语音播放，其中智能机器人包括上位机、下位机；
上位机包括工控机、信息采集机构、激光雷达、音响麦克风、可移动挂壁；其中可移动挂壁用于放置音响麦克风，音响麦克风用于播放语音指令，用于进行智能化设备语音功能测试；
下位机包括单片机、IMU、超声波传感器、电机驱动及编码器电机；
S103包括：生成操控效果文本，且操控效果文本通过单片机中集成的云端算法转换为可播放语音格式，操控效果文本具体包括特征提取、模式匹配和参考模式库三个单元，且特征提取通过对语音进行预处理来提取语音特征，通过对声波的声纹的首尾静音切除，并通过对声音分帧后，提取MFCC特征，声音变为观察矩阵，并采用声母和韵母作为音素集，组成读出的单词；
系统平台通过和大华网络摄像头及智能机器人进行交互，完成每段语音指令对应的视频录制及保存；
S104包括：将用于文字识别的各段语音指令对应的视频或图片传入到文字检测算法中得到图中的文字区域坐标，再将文字区域的坐标信息传入到文字识别算法，文字识别算法包括检测提取得到坐标信息后，通过投影直方图分割出单行的文本的图片，对单行的文本进行分割字符，并通过卷积神经网络对分割字符进行校正处理，得到校正后的文本；
将用于目标检测的视频或照片传入到目标检测算法中，若检测出目标则会在图中标记为规则矩形，并保存文字类别信息；
所述S105包括：将语音指令通过自然语言处理提取出关键词，并将文字识别得到的文字目标以及目标检测得到的文字类别信息分别与语音指令关键词进行匹配，若匹配成功则标记为成功，否则为失败；
所有测试任务完成后，生成测试任务报告。
进一步的，S101还包括：测试人员在系统平台内输入待测试语音指令，智能机器人即将到达的位置、音响播放的高度、播放的方言类别、测试次数；
其中，输入的语音指令将通过算法转换为机器人可播放的音频；
S102包括：智能机器人能够实现自主导航到达测试人员指定位置和高度，进行指令播放；
S103包括：通过影像采集装置对智能化设备面板录制或拍摄，完成智能化设备面板对语音指令做出反馈的视觉采集工作；
S104包括：通过将影像采集装置采集的视频流或照片输入到目标检测器yolov5中得到相应目标的坐标和类别，跳帧检测视频，当检测到目标，对应目标会由规则框标记出，且将目标种类存放到label[]中，照片同上；
S105包括：将检测到的文字目标和语音指令进行关键词匹配，若匹配成功则说明智能化设备完成该条语音指令的反馈，若匹配失败则说明智能化设备未完成该语音指令；匹配失败后，贴标机构(3)会对未完成该语音指令智能化设备表面贴上不合格的标签；
所有测试任务完成后，生成测试任务报告。
本发明还提供一种用于智能终端语音交互检测方法的检测系统，包括承载板，所述承载板的下表面设置有用于避障减震的避障机构，所述避障机构的两端均安装有行走机构，所述承载板的上表面设置有调整机构，所述调整机构内安装有用于防坠保护的防坠机构，所述防坠机构连接有限位机构，所述调整机构的顶部安装有升降机构，所述升降机构的顶部安装有信息采集机构，所述信息采集机构的一侧设置有播报机构。
进一步的，所述避障机构包括与承载板固定的连接底座，所述连接底座的前后两端对称设置有组安装杆，每组安装杆设置有2个，所述安装杆与连接底座连接的另一端安装有连接块，所述安装杆的横截面呈“H”形结构，所述安装杆的内侧与第一连杆的一端铰接，第一连杆的另一端设置有第二连杆，所述第一连杆与第二连杆之间由强力弹簧相连接，第二连杆与连接底座连接；所述行走机构包括与连接块固定的驱动马达，所述驱动马达的输出端连接有输出轴，所述输出轴末端设置有行走轮，调整机构包括与承载板固定的安装箱，所述安装箱的上方一侧安装有伺服电机，所述伺服电机的输出端连接有伸入安装箱内部的传动杆，所述传动杆的左右两端均设置有固定块，所述固定块关于止动块的中轴线左右对称设置，所述固定块与止动块的外表面均呈啮齿状结构。
进一步的，所述安装箱内部设有支撑台，所述防坠机构包括与支撑台滑动连接的活动杆，所述活动杆的内部开设有两个凹槽，两个凹槽中分别设置有第一活动块和第二活动块，所述活动杆与第一活动块之间、活动杆与第二活动块之间均由第一弹簧相连接且第一活动块与第二活动块相对设置，所述活动杆的顶部一侧固定有挤压块，所述第一活动块与第二活动块均在活动杆的内部构成滑动结构，所述第一活动块和第二活动块均与止动块啮合连接，所述限位机构包括与止动块卡合连接的竖杆，所述竖杆的内部贯穿有固定杆，竖杆能够绕着固定杆做旋转运动，所述固定杆与竖杆连接的另一端设置有支撑板，支撑板上还安装有弹簧连接板，弹簧连接板上固定有第二弹簧，所述竖杆的上部一侧设有与止动块卡接的卡块，另一侧与第二弹簧接触；竖杆的下部被所述挤压块限制转动角度。
进一步的，所述升降机构包括与固定块啮合连接的控制杆，所述控制杆的顶端固定有安装座，所述安装座的一端安装有伺服马达，所述伺服马达的输出端连接有外表面呈螺纹状的连接杆，所述连接杆贯穿于安装套的内部，所述控制杆通过固定块构成升降结构，所述信息采集机构包括与安装套转动连接的齿轮，所述齿轮的前方设置有齿条，所述齿轮顶部安装有采集摄像头，所述齿轮通过连接杆在齿条的一侧构成滑动结构，所述播报机构包括与安装座固定连接的挂壁本体，所述挂壁本体的一侧设置有音响。
本发明还提供另一种用于智能终端语音交互检测方法的检测系统，包括行走机构，其特征在于，所述行走机构的顶部设置有用于调整高度的升降机构，所述升降机构的顶部设置有用于标记的贴标机构，所述贴标机构的顶部设置有用于记录视频片段的影像采集装置，所述贴标机构的两侧设置有用于播放语音指令的音频装置。
进一步的，所述行走机构包括固定板，所述固定板的底端的四个角均固定连接有万向轮，所述固定板的四周嵌设固定有激光雷达，所述升降机构包括与固定板固定连接的升降框，所述升降框的顶端开设有升降槽，所述升降槽滑动连接有升降柱，所述升降柱的顶部固定连接有控制盒，所述控制盒的正面开设有放置口，所述升降柱的一侧固定设有齿条，所述升降框内设有位于齿条一侧的转动连接有齿轮轴，所述升降框内固定设有位于齿轮轴底部的第一步进电机，所述第一步进电机通过齿轮与齿轮轴啮合；
进一步的，所述贴标机构包括与放置口滑动连接的贴标盒，所述贴标盒的内部转动连接有两个缠绕盘，所述贴标盒内转动连接有位于缠绕盘一侧的导向轴，所述贴标盒内转动连接有位于导向轴一侧的贴标柱，所述贴标柱的顶部和底部开均设有放置槽，所述放置槽内转动连接有转动辊，所述控制盒内固定设有滑板，所述滑板的顶端开设有滑槽，所述滑板上固定安装位于滑槽一侧的第一电动伸缩杆，所述滑槽的内部滑动连接有电机板，所述电机板的一侧与第一电动伸缩杆的伸缩端固定连接，所述电机板的顶端设有第三步进电机，所述电机板上设有位于第三步进电机一侧的第二步进电机，所述第三步进电机与第二步进电机的转轴顶端均固定设有锥齿轮。
进一步的，所述影像采集装置包括与控制盒固定连接的第四步进电机，所述第四步进电机的转轴顶端固定连接有连接板，所述连接板的顶端固定连接有连接座，所述连接座的顶部固定连接有摄像头，所述连接板上固定设有位于连接座一侧的第二电动伸缩杆，所述第二电动伸缩杆与摄像头转动连接，所述音频装置包括与控制盒转动连接的第三电动伸缩杆，所述第三电动伸缩杆的伸缩端转动连接有挂壁，所述挂壁上固定连接有音箱，所述第三电动伸缩杆与挂壁的连接处转动连接有第五步进电机，所述第五步进电机用以驱动所述挂壁转动，所述第三电动伸缩杆的侧面转动连接有第六步进电机，所述第六步进电机用以驱动所述第三电动伸缩杆转动。
与现有技术相比，本发明的技术方案所带来的有益效果是：
1.通过设置的避障机构，避障机构使装置具有一定高度范围内的避障功能，替换了现有技术中直接操控行走运行，解决了在装置行走中产生高频率或激烈震动对装置内部精密仪器所造成的损伤，同时避障结构具有自复位功能，使装置行走的过程中更加平稳，提高了设备的实用性。
2.通过设置的调整机构可以便捷的控制安装座的升降滑动，使装置快速到达指定的位置和高度，方便装置设备的操控，便于使用。
3.通过防坠机构在安装座的升降过程中，可以使升降机构得到一个限位作用，达到一个防坠保护的目的，避免设备意外下坠而造成损伤。
4.通过设置的信息采集机构可在在控制采集摄像头左右滑动的同时带动采集摄像头转动，便于对选定物体的精准捕捉同时进行多方位的信息数据扫描，使结果更加精准，增强装置的实用性。
5.通过设置的贴标机构，实现了对不合格设备的标记，方便在统一检测完成后，工作人员对不合格产品的寻找，减少了工作人员需要发挥大量的时间去寻找不合格产品，提高了产品实用性，通过将贴标机构与放置口滑动连接，方便了当标签纸没有的时候，对标签纸的更换，进一步的提高了装置的实用性。
6.通过设有的激光雷达，防止了装置在移动时撞到不明物体，造成设备的损坏，提高了产品的实用性。
7.通过设置的升降装置，实现了调节控制盒的高度，进而实现对不同高度的智能化设备进行检测，增加了设备使用的范围，提高了装置的实用性。
8.通过设置的第二电动伸缩杆，第二电动伸缩杆具有调节摄像头角度，在通过设有的第三步进电机，实现了对摄像头方向的调整，方便了随便对摄像头进行调节，使拍摄角度达到最佳。
9.本发明结合了目标检测算法和自主导航机器人，可以对通用的智能化设备的智能功能进行测试，在可容忍的误判率下，达到了代替大量人力、人机协同完成智能化设备测试。
10.本发明利用人机协同的理念，最小化人工操作，最大化智能操作，由机器人和算法平台代替人工完成枯燥单一的任务，并具备标准化、可复检的效果。
附图说明
图1为本申请提供的用于智能终端语音交互的智能检测方法的其中一个实施方式的流程图；
图2为本申请提供的用于智能终端语音交互的智能检测方法的另一个实施方式的流程图；
图3为实施图1方法的用于智能终端语音交互的检测系统的整体正视结构示意图；
图4为实施图1方法的用于智能终端语音交互的检测系统的整体仰视示意图；
图5为实施图1方法的用于智能终端语音交互的检测系统的避障机构的结构示意图；
图6为实施图1方法的用于智能终端语音交互的检测系统的齿轮与齿条连接结构示意图；
图7为实施图1方法的用于智能终端语音交互的检测系统的升降机构的结构示意图；
图8为实施图1方法的用于智能终端语音交互的检测系统的调整机构的结构示意图；
图9为实施图1方法的用于智能终端语音交互的检测系统的限位机构的结构示意图；
图10为实施图1方法的用于智能终端语音交互的检测系统的防坠机构的结构示意图；
图11为实施图1方法的用于智能终端语音交互的检测系统中A处放大结构示意图；
图12为实施图2方法的用于智能终端语音交互的检测系统的整体结构示意图；
图13为实施图2方法的用于智能终端语音交互的检测系统的贴标机构平面图；
图14为实施图2方法的用于智能终端语音交互的检测系统的贴标机构平面图；
图15为实施图2方法的用于智能终端语音交互的检测系统的挂壁连接结构示意图；
图16为实施图2方法的用于智能终端语音交互的检测系统的影像采集装置剖面图；
图17为实施图2方法的用于智能终端语音交互的检测系统的齿轮轴连接示意图；
图18为实施图2方法的用于智能终端语音交互的检测系统的控制盒内侧面结构示意图；
图19为实施图2方法的用于智能终端语音交互的检测系统的控制盒内正面局部结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合附图，对本发明实施例中的技术方案进行清楚、完整的描述。显然，所描述的实施例是本发明的一部分实施例，而不是全部的实施例。
因此，以下对本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围，而是仅仅表示本发明的部分实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
需要说明的是，在不冲突的情况下，本发明中的实施例及实施例中的特征和技术方案可以相互组合。
应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。
在本发明的描述中，需要说明的是，术语“上”、“下”等指示的方位或位置关系为基于附图所示的方位或位置关系，或者是该发明产品使用时惯常摆放的方位或位置关系，或者是本领域技术人员惯常理解的方位或位置关系，这类术语仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。此外，术语“第一”、“第二”等仅用于区分描述，而不能理解为指示或暗示相对重要性。
实施例1：
如图1所示，一种用于智能终端语音交互的智能检测方法，具体步骤包括：
S101.制定测试系统平台，测试人员通过系统平台制定测试任务，通过测试任务判断智能化设备智能强度和工作状态；需要说明的是，测试系统平台具体为具有发射性能和接收性能的测试通讯产品，具体可设置为OTA测试系统平台；
S102.智能机器人按照多指标测试任务自主导航到达选定位置后，通过自身运动组件调节相对应操作和观察高度；
S103.通过智能机器人的音响播放语音指令控制智能化设备，判断智能操控效果，摄像机录制对应的视频或照片用以对比操控效果；
S104.将获取到的视频或照片输入到对应的文字识别算法或目标检测算法；
S105.将识别到的文字目标和语音指令进行匹配得出测试结果，生成测试报告；
其中：
S101包括：测试人员在系统平台选择家电种类(本实施例中以智能电视为例)、智能机器人到达位置、音响播放高度、测试次数和待测试语音指令，通过测试人员判断是否为首次测试，若是，则基于测试系统平台创建任务模板，通过测试系统平台采集任务参数，并通过数据库筛选智能电视不具备的指令，数据库通过SOL协议进行指令检索，且同时通过测试人员进行人工标注，判断整体测试精度，实现制定多指标任务；
若测试人员判断并非首次测试，则基于测试系统平台直接制定多指标任务；
S102包括：智能机器人模拟人类进行语音播放，其中智能机器人包括上位机、下位机，上位机包括工控机、信息采集机构8、激光雷达、音响麦克风、可移动挂壁，其中可移动挂壁用于放置音响麦克风，音响麦克风用于播放语音指令，用于进行智能化设备语音功能测试，下位机包括单片机、IMU、超声波传感器、电机驱动及编码器电机。
S103包括：生成操控效果文本，且操控效果文本通过云端算法转换为可播放语音格式，操控效果文本具体包括特征提取、模式匹配和参考模式库三个单元，且特征提取通过对语音进行预处理来提取语音特征，通过对声波的声纹的首尾静音切除，并通过对声音分帧后，提取MFCC特征，声音变为观察矩阵，并采用声母和韵母作为音素集，组成读出的单词，系统平台通过和大华网络摄像头及智能机器人进行交互，完成每段语音指令对应的视频录制及保存。
S104包括：
将用于文字识别的各段语音指令对应的视频或图片传入到文字检测算法中得到图中的文字区域坐标，再将坐标信息传入到文字识别算法，文字识别算法包括检测提取得到坐标信息后，通过投影直方图分割出单行的文本的图片，对单行的文本进行分割字符，通过卷积神经网络获得经过图像处理后，得到校正后的文本，提取后的特征文字信息，卷积神经网络通过每个神经元都与相邻层的神经元连接，能够辅助判断提取特征的判断，并通过隐藏层神经元的加权判断，提高对算法特征提取的精度；
将用于目标检测的视频或照片传入到目标检测算法中，若检测出目标则会在图中标记为规则矩形，并保存文字类别信息；
且提取文字区域坐标如式1所示，
S105包括：将语音指令通过自然语言处理提取出关键词，并将文字识别得到的文字目标以及目标检测得到的文字类别信息分别与语音指令关键词进行匹配，若匹配成功则标记为成功，否则为失败，所有测试任务完成后，生成测试任务报告。
实施例2：
如图2所示，一种用于智能终端语音交互的智能检测方法，包括：
S101.制定测试系统平台，测试人员通过系统平台制定测试任务，通过测试任务判断智能化设备智能强度和工作状态；测试人员在平台内输入待测试语音指令，智能机器人即将到达的位置、音响播放的高度、播放的方言类别、测试次数；
其中，输入的语音指令将通过算法转换为机器人可播放的音频。
S102.智能机器人按照测试任务自主导航到达选定位置后，通过自身运动组件调节相对应操作和观察高度；智能机器人模拟人类进行语音播放，其中智能机器人包括上位机、下位机；
上位机包括工控机、影像采集装置41、激光雷达、音响麦克风、可移动挂壁。其中可移动挂壁用于放置音响麦克风，音响麦克风用于播放语音指令；
下位机包括单片机、IMU、超声波传感器、电机驱动及编码器电机；
智能机器人能够实现自主导航到达测试人员指定位置和高度，进行指令播放。
S103.通过智能机器人的音响播放语音指令控制智能化设备，判断智能操控效果，摄像机录制对应的视频或照片用以对比操控效果；通过影像采集装置41对智能化设备面板录制或拍摄，完成智能化设备面板对语音指令做出反馈的视觉采集工作。
S104.将获取到的视频或照片输入到对应的文字识别算法或目标检测算法；通过将影像采集装置41采集的视频流或照片输入到目标检测器yolov5中可以得到相应目标的坐标和类别，跳帧检测视频，当检测到目标，该目标会由规则框标记出，且将目标种类存放到label[]中，照片同上。
S105.将识别到的文字目标和语音指令进行匹配得出测试结果，生成测试报告；将检测到的目标类别和指令进行关键词匹配，若匹配成功则说明智能化设备完成该条语音指令的反馈，若匹配失败则说明智能化设备未完成该语音指令；
匹配失败后，贴标机构会对未完成该语音指令的智能化设备表面贴上不合格的标签。
所有测试任务完成后，生成测试任务报告。
实施例3：
下面结合具体的工作方式对实施例1中的方案进行进一步的介绍，详见下文描述：
如图3-图11中所示，本实施方式提出一种用于智能终端语音交互的智能检测系统，包括承载板1，通过设有的承载板1，实现对装置设备主体的承载和输运，承载板1的底部设置有用于避障减震的避障机构2，通过设有避障机构2使装置具有一定高度范围内的避障功能，可对装置中的精密仪器进行保护，避障机构2的两端均安装有用于装置移动的行走机构3，通过设有行走机构3方便控制装置移动至选定位置，承载板1顶部设置有调整机构4，通过设有调整机构4，方便控制装置达到选定高度，调整机构4的内侧安装有用于防坠保护的防坠机构5，通过设有防坠机构5可避免装置机构的意外坠落，防坠机构5的后上方设置有限位机构6，通过设有限位机构6可有效提高装置运行的稳定性，调整机构4顶部安装有控制信息采集高度的升降机构7，通过设有升降机构7可调整信息采集的高度，增强装置的实用性，升降机构7的上端连接有信息采集机构8，通过设有信息采集机构8可对目标产品进行多方位的数据采集，信息采集机构8的左侧设置有播报机构9，通过设有播报机构9可对语音指令进行实时播放，便于装置操控。
作为优选的实施方式，在上述方式的基础上，进一步的，避障机构2包括与承载板1固定的连接底座201，连接底座201的前后两端对称设置有两组安装杆202，每组安装杆202设置有两个，安装杆202与连接底座201连接的另一端安装有连接块203，可通过与连接底座201和连接块203均为铰接的安装杆202，实现装置的应急避障，安装杆202的横截面呈“H”形结构，安装杆202的内侧铰接有第一连杆204，第一连杆204与安装杆202铰接的另一端设置有第二连杆205，第一连杆204与第二连杆205之间由强力弹簧206相连接，第二连杆205与连接底座201连接，通过第一连杆204在第二连杆205内部的伸缩，通过强力弹簧206可震动进行吸收和抵消，保证装置运行过程中的稳定性，行走机构3包括与连接块203固定的驱动马达301，驱动马达301的输出端连接有输出轴302，输出轴302与驱动马达301固定的另一端设置有行走轮303，便于控制装置移动至选定位置，调整机构4包括与承载板1固定的安装箱401，安装箱401的右上方安装有伺服电机402，伺服电机402的输出端连接有传动杆403，传动杆403的左右两端均设置有固定块404，固定块404关于止动块405的中轴线左右对称设置，固定块404与止动块405的外表面均呈啮齿状结构，方便控制升降机构7的运行，便于操控装置达到选定高度。
作为优选的实施方式，在上述方式的基础上，进一步的，安装箱401内部设有支撑台，防坠机构5包括与安装箱401滑动连接的活动杆501，活动杆501的内部开设有两个凹槽，两个凹槽中分别设置有第一活动块502和第二活动块504，活动杆501与第一活动块502之间、活动杆501与第二活动块504之间均由第一弹簧503相连接且第一活动块502与第二活动块504相对设置，活动杆501的顶部一侧固定有挤压块505，第一活动块502与第二活动块504均在活动杆501的内部构成滑动结构，第一活动块502和第二活动块504均与止动块405啮合连接，方便在控制升降机构7下移的过程中，带动竖杆601偏转，使升降机构7可稳定下移，限位机构6包括与止动块405卡合连接的竖杆601，竖杆601的内部贯穿有固定杆602，竖杆601能够绕着固定杆602做旋转运动，固定杆602与竖杆601连接的另一端设置有支撑板603，支撑板603上还安装有弹簧连接板，弹簧连接板上固定有第二弹簧604，竖杆601的上部一侧设有与止动块405卡接的卡块，另一侧与第二弹簧604接触；竖杆601的下部被所述挤压块505限制转动角度。在升降机构7的升起过程中，可对升降机构7提供安全限位，起到对装置的防护作用。
作为优选的实施方式，在上述方式的基础上，进一步的，升降机构7包括与固定块404啮合连接的控制杆701，控制杆701的顶端固定有安装座702，安装座702的左端安装有伺服马达703，伺服马达703的输出端连接有外表面呈螺纹状的连接杆704，连接杆704贯穿于安装套705的内部，控制杆701通过固定块404构成升降结构，可控制信息采集机构8的移动，实现对目标产品的多方位数据采集，信息采集机构8包括与安装套705转动连接的齿轮801，齿轮801的前方设置有齿条802，齿轮801与安装套705连接的另一端安装有采集摄像头803，齿轮801通过连接杆704在齿条802的后方构成滑动结构，通过与齿轮801啮合连接的齿条802，可实现控制在齿轮801滑动过程中的转动，播报机构9包括与安装座702固定连接的挂壁本体901，挂壁本体901的左侧设置有音响902，方便对语音指令的实时播报。
下面结合具体的工作方式对实施例1和实施例3中的方案进行进一步的介绍，详见下文描述：
具体的，本用于智能终端语音交互的智能检测系统在使用时，首先启动安装于连接块203内部的驱动马达301，通过输出轴302控制行走轮303旋转，使装置运行至选定的位置，并且在装置行走的过程中，当遇到小体积障碍物或地面凹凸处时，多组安装杆202同步合作运行，使处于障碍物上的行走轮303单独向上移动，其余行走轮303状态不变，相较于传统的行走，通过此结构的设计使用，可使装置具有避障功能，避免高强度震动对精密仪器造成损伤，并在越过障碍后，在强力弹簧206的作用下，可使第一连杆204在第二连杆205内部滑动复位，使行走轮303复位，可保证装置的稳定运行；
装置移动至选定位置后，启动安装于安装箱401右侧的伺服电机402，使传动杆403带动固定块404顺时针旋转，由于固定块404与控制杆701啮合连接，因此可使控制杆701带动安装座702向上升起至选定位置，方便对目标产品的检测，且通过竖杆601与止动块405的卡合，可对传动杆403进行限位，避免其受压转动，确保装置检测过程中的稳定，同时当传动杆403逆时针转动，带动控制杆701下移时，可通过与止动块405啮合的第二活动块504，使活动杆501带动挤压块505向前移动，并挤压竖杆601，使其以固定杆602为圆心旋转并与止动块405脱离，方便升降机构7的下移复位；
可通过安装于挂壁本体901上的音响902对语音指令进行播报，在对目标产品进行检测的过程中，可启动安装于安装座702左侧的伺服马达703，在连接杆704的旋转过程中可使安装套705在安装座702的内部凹槽中滑动，同时带动与转动连接于安装套705上方的齿轮801和采集摄像头803滑动，且由于齿轮801与齿条802啮合连接，因此在齿轮801的滑动的过程中，可在齿条802的作用下，使齿轮801带动采集摄像头803转动，使采集摄像头803的焦点始终对准检测产品，实现对选定产品进行多方位信息数据扫描的目的，使检测结果更加精准，增强装置的实用性。
在进行检测时，后台系统将待测试语音文本信息转为音频，并通过音响902播放待测试音频信息，同时采集摄像头803记录智能化设备对每段指令的反馈，将获取的视频或照片分别输入到文字识别模块和目标检测模块中，其中文字识别模块包括文字检测和文字识别，即：由文字检测得到文字区域的相关坐标并将文字坐标信息传送给文字识别算法进行识别得到文字信息，目标检测由yolov5标记视频或照片内的目标，并记录文字类别信息，将语音测试指令经过自然语言处理提取出关键词，并与文字识别或目标检测进行匹配，若匹配成功则标记为成功，否则为失败，待所有测试完成后，生成测试报告。
实施例4：
下面结合具体的工作方式对实施例2中的方案进行进一步的介绍，详见下文描述：
如图12-图19所示，本实施方式提出一种用于智能终端语音交互的智能检测系统，包括行走机构11，通过设有的行走机构11，实现了装置的移动的作用，行走机构11的顶部设置有用于调整高度的升降机构21，通过设有的升降机构21，实现了调节装置高度的作用，升降机构21的顶部设置有用于标记的贴标机构31，通过设有的贴标机构31，实现了不合格的智能化设备标记，方便在搬运时进行区分，贴标机构31的顶部设置有用于记录视频片段的影像采集装置41，通过设有的影像采集装置41，采集视频和照片的作用，贴标机构31的两侧设置有用于播放语音指令的音频装置51，通过设有的音频装置51，实现播放与语音和接收语音的作用。
作为优选的实施方式，在上述方式的基础上，进一步的，行走机构11包括固定板111，固定板111的底端的四个角均固定连接有万向轮113，固定板111的四周嵌设固定有激光雷达112，通过设有的激光雷达112，防止了装置在移动时撞到不明物体，造成设备的损坏，提高了产品的实用性。
作为优选的实施方式，在上述方式的基础上，进一步的，升降机构21包括与固定板111固定连接的升降框211，升降框211的顶端开设有升降槽，升降槽滑动连接有升降柱212，升降柱212的顶部固定连接有控制盒61，控制盒61的正面开设有放置口，升降柱212的一侧固定设有齿条213，升降框211内设有位于齿条213一侧的转动连接有齿轮轴214，升降框211内固定设有位于齿轮轴214底部的第一步进电机215，第一步进电机215通过齿轮与齿轮轴214啮合通过第一步进电机215的转动，实现了带动齿轮轴214的转动，在通过齿轮轴214与齿条213啮合，进而控制升降柱212的升降，实现了调节了控制盒61的高度，提高了装置的实用性。
作为优选的实施方式，在上述方式的基础上，进一步的，贴标机构31包括与放置口滑动连接的贴标盒311，贴标盒311的内部转动连接有两个缠绕盘312，贴标盒311内转动连接有位于缠绕盘312一侧的导向轴313，通过设有的缠绕盘312，实现了对标签带的缠绕存放，贴标盒311内转动连接有位于导向轴313一侧的贴标柱314，贴标柱314的顶部和底部开均设有放置槽，放置槽内转动连接有转动辊315，通过设有的转动辊315，方便了标签带在贴标柱314上的移动，提高了装置的实用性，控制盒61内固定设有滑板611，滑板611的顶端开设有滑槽，滑板611上固定安装位于滑槽一侧的第一电动伸缩杆612，滑槽的内部滑动连接有电机板613，电机板613的一侧与第一电动伸缩杆612的伸缩端固定连接，电机板613的顶端设有第三步进电机614，电机板613上设有位于第三步进电机614一侧的第二步进电机615，第三步进电机614与第二步进电机615的转轴顶端均固定设有锥齿轮，通过第三步进电机614和第二步进电机615分别与缠绕盘312和贴标柱314啮合，通过第三步进电机614转动，实现了控制标签带的移动，通过第二步进电机615的转动，实现了贴标柱314的角度调节，提高了设备的实用性。
作为优选的实施方式，在上述方式的基础上，进一步的，影像采集装置41包括与控制盒61固定连接的第四步进电机411，第四步进电机411的转轴顶端固定连接有连接板412，连接板412的顶端固定连接有连接座413，连接座413的顶部固定连接有摄像头414，通过设有的摄像头414，实现了测试视频或照片的采集，通过设有的第四步进电机411，实现了摄像头414方向的调整，连接板412上固定设有位于连接座413一侧的第二电动伸缩杆415，第二电动伸缩杆415与摄像头414转动连接，通过控制第二电动伸缩杆415的伸缩，实现了摄像头414角度的调整。
作为优选的实施方式，在上述方式的基础上，进一步的，音频装置51包括与控制盒61转动连接的第三电动伸缩杆511，第三电动伸缩杆511的伸缩端转动连接有挂壁512，挂壁512上固定连接有音箱513，第三电动伸缩杆511与挂壁512的连接处转动连接有第五步进电机514，通过设有的五步进电机514驱动挂壁512转动，实现了对音箱513播放方向的调整，第三电动伸缩杆511的侧面转动连接有第六步进电机，通过设有的第三电动伸缩杆511和第六步进电机，第六步进电机用以驱动第三电动伸缩杆511转动，实现了调节挂壁512位置角度，进而实现了对音箱513位置的调整，提高了设备的实用性。
以上实施例仅用以说明本发明而并非限制本发明所描述的技术方案，尽管本说明书参照上述的各个实施例对本发明已进行了详细的说明，但本发明不局限于上述具体实施方式，因此任何对本发明进行修改或等同替换；而一切不脱离发明的精神和范围的技术方案及其改进，其均涵盖在本发明的权利要求范围当中。
本发明并不限于上文描述的实施方式。以上对具体实施方式的描述旨在描述和说明本发明的技术方案，上述的具体实施方式仅仅是示意性的，并不是限制性的。在不脱离本发明宗旨和权利要求所保护的范围情况下，本领域的普通技术人员在本发明的启示下还可做出很多形式的具体变换，这些均属于本发明的保护范围之内。
Claims (10)
1.一种用于智能终端语音交互的检测方法，其特征在于，包括如下步骤：
S101.测试人员通过测试系统平台制定测试任务；
S102.智能机器人按照测试任务自主导航到达选定位置后，通过自身运动组件调节相对应操作和观察高度；
S103.通过智能机器人的音响播放语音指令控制智能化设备，判断智能操控效果，摄像机录制对应的视频或照片用以对比操控效果；
S104.将获取到的视频或照片输入到对应的文字识别算法或目标检测算法；
S105.将识别到的文字目标和语音指令进行匹配得出测试结果，生成测试报告。
2.根据权利要求1所述的一种用于智能终端语音交互的检测方法，其特征在于，S101包括：测试人员在系统平台选择家电种类、智能机器人到达位置、音响播放高度、测试次数和待测试语音指令，且系统平台通过数据库筛选智能化设备空调不具备的指令，数据库通过SOL协议进行指令检索，且同时通过测试人员进行手工判断整体测试精度；
S102包括：智能机器人模拟人类进行语音播放，其中智能机器人包括上位机、下位机；
上位机包括工控机、信息采集机构、激光雷达、音响麦克风、可移动挂壁；其中可移动挂壁用于放置音响麦克风，音响麦克风用于播放语音指令，用于进行智能化设备语音功能测试；
下位机包括单片机、IMU、超声波传感器、电机驱动及编码器电机；
S103包括：生成操控效果文本，且操控效果文本通过单片机中集成的云端算法转换为可播放语音格式，操控效果文本具体包括特征提取、模式匹配和参考模式库三个单元，且特征提取通过对语音进行预处理来提取语音特征，通过对声波的声纹的首尾静音切除，并通过对声音分帧后，提取MFCC特征，声音变为观察矩阵，并采用声母和韵母作为音素集，组成读出的单词；
系统平台通过和大华网络摄像头及智能机器人进行交互，完成每段语音指令对应的视频录制及保存；
S104包括：将用于文字识别的各段语音指令对应的视频或图片传入到文字检测算法中得到图中的文字区域坐标，再将文字区域的坐标信息传入到文字识别算法，文字识别算法包括检测提取得到坐标信息后，通过投影直方图分割出单行的文本的图片，对单行的文本进行分割字符，并通过卷积神经网络对分割字符进行校正处理，得到校正后的文本；
将用于目标检测的视频或照片传入到目标检测算法中，若检测出目标则会在图中标记为规则矩形，并保存文字类别信息；
所述S105包括：将语音指令通过自然语言处理提取出关键词，并将文字识别得到的文字目标以及目标检测得到的文字类别信息分别与语音指令关键词进行匹配，若匹配成功则标记为成功，否则为失败；
所有测试任务完成后，生成测试任务报告。
3.根据权利要求1所述的一种用于智能终端语音交互的检测方法，其特征在于，S101包括：测试人员在系统平台内输入待测试语音指令，智能机器人即将到达的位置、音响播放的高度、播放的方言类别、测试次数；
其中，输入的语音指令将通过算法转换为机器人可播放的音频；
S102包括：智能机器人能够实现自主导航到达测试人员指定位置和高度，进行指令播放；
S103包括：通过影像采集装置对智能化设备面板录制或拍摄，完成智能化设备面板对语音指令做出反馈的视觉采集工作；
S104包括：通过将影像采集装置采集的视频流或照片输入到目标检测器yolov5中得到相应目标的坐标和类别，跳帧检测视频，当检测到目标，对应目标会由规则框标记出，且将目标种类存放到label[]中，照片同上；
S105包括：将检测到的文字目标和语音指令进行关键词匹配，若匹配成功则说明智能化设备完成该条语音指令的反馈，若匹配失败则说明智能化设备未完成该语音指令；匹配失败后，贴标机构(3)会对未完成该语音指令智能化设备表面贴上不合格的标签；
所有测试任务完成后，生成测试任务报告。
4.一种用于智能终端语音交互检测方法的检测系统，包括承载板(1)，其特征在于，所述承载板(1)的下表面设置有用于避障减震的避障机构(2)，所述避障机构(2)的两端均安装有行走机构(3)，所述承载板(1)的上表面设置有调整机构(4)，所述调整机构(4)内安装有用于防坠保护的防坠机构(5)，所述防坠机构(5)连接有限位机构(6)，所述调整机构(4)的顶部安装有升降机构(7)，所述升降机构(7)的顶部安装有信息采集机构(8)，所述信息采集机构(8)的一侧设置有播报机构(9)。
5.根据权利要求4所述的一种用于智能终端语音交互检测方法的检测系统，其特征在于，所述避障机构(2)包括与承载板(1)固定的连接底座(201)，所述连接底座(201)的前后两端对称设置有2组安装杆(202)，每组安装杆(202)设置有2个，所述安装杆(202)与连接底座(201)连接的另一端安装有连接块(203)，所述安装杆(202)的横截面呈“H”形结构，所述安装杆(202)的内侧与第一连杆(204)的一端铰接，第一连杆(204)的另一端设置有第二连杆(205)，所述第一连杆(204)与第二连杆(205)之间由强力弹簧(206)相连接，第二连杆(205)与连接底座(201)连接；所述行走机构(3)包括与连接块(203)固定的驱动马达(301)，所述驱动马达(301)的输出端连接有输出轴(302)，所述输出轴(302)末端设置有行走轮(303)，调整机构(4)包括与承载板(1)固定的安装箱(401)，所述安装箱(401)的上方一侧安装有伺服电机(402)，所述伺服电机(402)的输出端连接有伸入安装箱(401)内部的传动杆(403)，所述传动杆(403)的左右两端均设置有固定块(404)，所述固定块(404)关于止动块(405)的中轴线左右对称设置，所述固定块(404)与止动块(405)的外表面均呈啮齿状结构。
6.根据权利要求5所述的一种用于智能终端语音交互检测方法的检测系统，其特征在于，所述安装箱(401)内部设有支撑台，所述防坠机构(5)包括与支撑台滑动连接的活动杆(501)，所述活动杆(501)的内部开设有两个凹槽，两个凹槽中分别设置有第一活动块(502)和第二活动块(504)，所述活动杆(501)与第一活动块(502)之间、活动杆(501)与第二活动块(504)之间均由第一弹簧(503)相连接且第一活动块(502)与第二活动块(504)相对设置，所述活动杆(501)的顶部一侧固定有挤压块(505)，所述第一活动块(502)与第二活动块(504)均在活动杆(501)的内部构成滑动结构，所述第一活动块(502)和第二活动块(504)均与止动块(405)啮合连接，所述限位机构(6)包括与止动块(405)卡合连接的竖杆(601)，所述竖杆(601)的内部贯穿有固定杆(602)，竖杆(601)能够绕着固定杆(602)做旋转运动，所述固定杆(602)与竖杆(601)连接的另一端设置有支撑板(603)，支撑板(603)上还安装有弹簧连接板，弹簧连接板上固定有第二弹簧(604)，所述竖杆(601)的上部一侧设有与止动块(405)卡接的卡块，另一侧与第二弹簧(604)接触；竖杆(601)的下部被所述挤压块(505)限制转动角度。
7.根据权利要求6所述的一种用于智能终端语音交互检测方法的检测系统，其特征在于，所述升降机构(7)包括与固定块(404)啮合连接的控制杆(701)，所述控制杆(701)的顶端固定有安装座(702)，所述安装座(702)的一端安装有伺服马达(703)，所述伺服马达(703)的输出端连接有外表面呈螺纹状的连接杆(704)，所述连接杆(704)贯穿于安装套(705)的内部，所述控制杆(701)通过固定块(404)构成升降结构，所述信息采集机构(8)包括与安装套(705)转动连接的齿轮(801)，所述齿轮(801)的前方设置有齿条(802)，所述齿轮(801)顶部安装有采集摄像头(803)，所述齿轮(801)通过连接杆(704)在齿条(802)的一侧构成滑动结构，所述播报机构(9)包括与安装座(702)固定连接的挂壁本体(901)，所述挂壁本体(901)的一侧设置有音响(902)。
8.一种用于智能终端语音交互检测方法的检测系统，包括行走机构(11)，其特征在于，所述行走机构(11)的顶部设置有用于调整高度的升降机构(21)，所述升降机构(21)的顶部设置有用于标记的贴标机构(31)，所述贴标机构(31)的顶部设置有用于记录视频片段的影像采集装置(41)，所述贴标机构(31)的两侧设置有用于播放语音指令的音频装置(51)。
9.根据权利要求8所述的一种用于智能终端语音交互检测方法的检测系统，其特征在于，所述行走机构(11)包括固定板(111)，所述固定板(111)的底端的四个角均固定连接有万向轮(113)，所述固定板(111)的四周嵌设固定有激光雷达(112)，所述升降机构(21)包括与固定板(111)固定连接的升降框(211)，所述升降框(211)的顶端开设有升降槽，所述升降槽滑动连接有升降柱(212)，所述升降柱(212)的顶部固定连接有控制盒(61)，所述控制盒(61)的正面开设有放置口，所述升降柱(212)的一侧固定设有齿条(213)，所述升降框(211)内设有位于齿条(213)一侧的转动连接有齿轮轴(214)，所述升降框(211)内固定设有位于齿轮轴(214)底部的第一步进电机(215)，所述第一步进电机(215)通过齿轮与齿轮轴(214)啮合；
所述贴标机构(31)包括与放置口滑动连接的贴标盒(311)，所述贴标盒(311)的内部转动连接有两个缠绕盘(312)，所述贴标盒(311)内转动连接有位于缠绕盘(312)一侧的导向轴(313)，所述贴标盒(311)内转动连接有位于导向轴(313)一侧的贴标柱(314)，所述贴标柱(314)的顶部和底部开均设有放置槽，所述放置槽内转动连接有转动辊(315)，所述控制盒(61)内固定设有滑板(611)，所述滑板(611)的顶端开设有滑槽，所述滑板(611)上固定安装位于滑槽一侧的第一电动伸缩杆(612)，所述滑槽的内部滑动连接有电机板(613)，所述电机板(613)的一侧与第一电动伸缩杆(612)的伸缩端固定连接，所述电机板(613)的顶端设有第三步进电机(614)，所述电机板(613)上设有位于第三步进电机(614)一侧的第二步进电机(615)，所述第三步进电机(614)与第二步进电机(615)的转轴顶端均固定设有锥齿轮。
10.根据权利要求9所述的一种用于智能终端语音交互检测方法的检测系统，其特征在于，所述影像采集装置(41)包括与控制盒(61)固定连接的第四步进电机(411)，所述第四步进电机(411)的转轴顶端固定连接有连接板(412)，所述连接板(412)的顶端固定连接有连接座(413)，所述连接座(413)的顶部固定连接有摄像头(414)，所述连接板(412)上固定设有位于连接座(413)一侧的第二电动伸缩杆(415)，所述第二电动伸缩杆(415)与摄像头(414)转动连接，所述音频装置(51)包括与控制盒(61)转动连接的第三电动伸缩杆(511)，所述第三电动伸缩杆(511)的伸缩端转动连接有挂壁(512)，所述挂壁(512)上固定连接有音箱(513)，所述第三电动伸缩杆(511)与挂壁(512)的连接处转动连接有第五步进电机(514)，所述第五步进电机(514)用以驱动所述挂壁(512)转动，所述第三电动伸缩杆(511)的侧面转动连接有第六步进电机，所述第六步进电机用以驱动所述第三电动伸缩杆(511)转动。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210960307.0A CN115482807A (zh) | 2022-08-11 | 2022-08-11 | 一种用于智能终端语音交互的检测方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210960307.0A CN115482807A (zh) | 2022-08-11 | 2022-08-11 | 一种用于智能终端语音交互的检测方法及系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN115482807A true CN115482807A (zh) | 2022-12-16 |
Family
ID=84423018
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210960307.0A Pending CN115482807A (zh) | 2022-08-11 | 2022-08-11 | 一种用于智能终端语音交互的检测方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115482807A (zh) |
Citations (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110794749A (zh) * | 2019-11-28 | 2020-02-14 | 东台市鑫富达机械有限公司 | 一种粮食包装用自动化包装控制系统 |
| CN110852315A (zh) * | 2019-09-27 | 2020-02-28 | 武汉大学 | 环形文字快速识别方法及装置 |
| CN111523545A (zh) * | 2020-05-06 | 2020-08-11 | 青岛联合创智科技有限公司 | 一种结合深度信息的物品查找方法 |
| CN111783757A (zh) * | 2020-06-01 | 2020-10-16 | 成都科大极智科技有限公司 | 一种基于ocr技术的复杂场景下身份证识别方法 |
| CN111830836A (zh) * | 2019-04-17 | 2020-10-27 | 百度在线网络技术（北京）有限公司 | 家电设备的控制方法、装置、音箱及计算机存储介质 |
| CN112383451A (zh) * | 2020-11-30 | 2021-02-19 | 天津链数科技有限公司 | 一种基于语音交互的智能家电智能化水平测试系统及方法 |
| CN112530434A (zh) * | 2020-12-21 | 2021-03-19 | 云南电网有限责任公司玉溪供电局 | 电站自动化智能机器人值守调度系统 |
| CN112861737A (zh) * | 2021-02-11 | 2021-05-28 | 西北工业大学 | 一种基于图像暗通道与YoLov3的森林火灾烟雾检测方法 |
| CN113031813A (zh) * | 2021-03-18 | 2021-06-25 | Oppo广东移动通信有限公司 | 指令信息获取方法及装置、可读存储介质、电子设备 |
| CN113794876A (zh) * | 2021-09-17 | 2021-12-14 | 天津大学 | 一种面向家用智能电视的智能化测试装置 |
| CN114120969A (zh) * | 2022-01-29 | 2022-03-01 | 中国电子技术标准化研究院 | 智能终端的语音识别功能测试方法、系统、电子设备 |
| CN114487924A (zh) * | 2021-12-17 | 2022-05-13 | 江苏特创科技有限公司 | 一种线束自动化测试设备及其测试方法 |
-
2022
- 2022-08-11 CN CN202210960307.0A patent/CN115482807A/zh active Pending
Patent Citations (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111830836A (zh) * | 2019-04-17 | 2020-10-27 | 百度在线网络技术（北京）有限公司 | 家电设备的控制方法、装置、音箱及计算机存储介质 |
| CN110852315A (zh) * | 2019-09-27 | 2020-02-28 | 武汉大学 | 环形文字快速识别方法及装置 |
| CN110794749A (zh) * | 2019-11-28 | 2020-02-14 | 东台市鑫富达机械有限公司 | 一种粮食包装用自动化包装控制系统 |
| CN111523545A (zh) * | 2020-05-06 | 2020-08-11 | 青岛联合创智科技有限公司 | 一种结合深度信息的物品查找方法 |
| CN111783757A (zh) * | 2020-06-01 | 2020-10-16 | 成都科大极智科技有限公司 | 一种基于ocr技术的复杂场景下身份证识别方法 |
| CN112383451A (zh) * | 2020-11-30 | 2021-02-19 | 天津链数科技有限公司 | 一种基于语音交互的智能家电智能化水平测试系统及方法 |
| CN112530434A (zh) * | 2020-12-21 | 2021-03-19 | 云南电网有限责任公司玉溪供电局 | 电站自动化智能机器人值守调度系统 |
| CN112861737A (zh) * | 2021-02-11 | 2021-05-28 | 西北工业大学 | 一种基于图像暗通道与YoLov3的森林火灾烟雾检测方法 |
| CN113031813A (zh) * | 2021-03-18 | 2021-06-25 | Oppo广东移动通信有限公司 | 指令信息获取方法及装置、可读存储介质、电子设备 |
| CN113794876A (zh) * | 2021-09-17 | 2021-12-14 | 天津大学 | 一种面向家用智能电视的智能化测试装置 |
| CN114487924A (zh) * | 2021-12-17 | 2022-05-13 | 江苏特创科技有限公司 | 一种线束自动化测试设备及其测试方法 |
| CN114120969A (zh) * | 2022-01-29 | 2022-03-01 | 中国电子技术标准化研究院 | 智能终端的语音识别功能测试方法、系统、电子设备 |
Non-Patent Citations (1)
| Title |
|---|
| 赵喜云 李鵾: "电能计量", 31 March 2022, 湖南科学技术出版社, pages: 135 - 136 * |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN112414457B (zh) | 一种基于变电站工作的自动智能巡检方法 | |
| CN109357630A (zh) | 一种多类型工件批量视觉测量系统及方法 | |
| CN105467994B (zh) | 视觉与测距融合的送餐机器人室内定位方法 | |
| CN206459976U (zh) | 机器视觉图像采集装置 | |
| CN111340798A (zh) | 深度学习在产品外观瑕疵检测中的应用 | |
| CN111415585B (zh) | 一种柔性屏体弯折贴附机 | |
| CN205374009U (zh) | 一种镜头调焦机 | |
| CN209319821U (zh) | 一种换流站保护室巡检机器人 | |
| CN115482807A (zh) | 一种用于智能终端语音交互的检测方法及系统 | |
| CN107678445A (zh) | 一种基于无人机的智能舞台系统及其控制方法 | |
| CN208896097U (zh) | 一种贴膜机用转运机器人 | |
| CN205228996U (zh) | 一种航空喷雾雾滴图像现场采集装置 | |
| CN108364157B (zh) | 一种光学室内自动送货系统及自动送货方法 | |
| CN108020474A (zh) | 一种用于疲劳测试样品的质量检测系统 | |
| CN116616044A (zh) | 一种基于红外光谱多模态识别的嫩芽采茶机及采茶方法 | |
| CN109513632A (zh) | 一种换向器检测装置 | |
| CN113588666A (zh) | 一种幕墙缺陷检测、定位及统计方法 | |
| CN106770297B (zh) | 一种脉冲云孢子自动测报系统 | |
| CN110490834A (zh) | 基于激光清除异物装置的目标识别定位方法 | |
| CN114577126A (zh) | 一种非接触式双层复合石英坩埚壁厚检测方法 | |
| CN112405561A (zh) | 一种用于家电智能化水平测试的测试系统 | |
| CN112417193B (zh) | 野外虫草搜寻辨识方法及系统 | |
| CN112097659B (zh) | 一种利用无人机测量园林树木高度的测量方法及装置 | |
| CN112595229B (zh) | 一种测量材料体积的监控装置 | |
| CN112786506A (zh) | 一种rfid标签新型固晶设备机构 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |