CN116382721B - 一种智能交互平板的录屏方法及录屏装置 - Google Patents
一种智能交互平板的录屏方法及录屏装置 Download PDFInfo
- Publication number
- CN116382721B CN116382721B CN202310649350.XA CN202310649350A CN116382721B CN 116382721 B CN116382721 B CN 116382721B CN 202310649350 A CN202310649350 A CN 202310649350A CN 116382721 B CN116382721 B CN 116382721B
- Authority
- CN
- China
- Prior art keywords
- screen
- target
- recording
- screen recording
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000003993 interaction Effects 0.000 title claims abstract description 116
- 238000000034 method Methods 0.000 title claims abstract description 50
- 230000004044 response Effects 0.000 claims abstract description 74
- 238000004458 analytical method Methods 0.000 claims abstract description 29
- 238000001514 detection method Methods 0.000 claims abstract description 15
- 238000012544 monitoring process Methods 0.000 claims abstract description 12
- 238000012360 testing method Methods 0.000 claims description 50
- 230000002452 interceptive effect Effects 0.000 claims description 25
- 230000008569 process Effects 0.000 claims description 13
- 230000009471 action Effects 0.000 claims description 12
- 238000004891 communication Methods 0.000 claims description 11
- 238000010586 diagram Methods 0.000 claims description 10
- 238000004422 calculation algorithm Methods 0.000 claims description 7
- 238000007405 data analysis Methods 0.000 claims description 7
- 238000012545 processing Methods 0.000 claims description 7
- 238000007781 pre-processing Methods 0.000 claims description 3
- 238000013473 artificial intelligence Methods 0.000 abstract description 2
- 238000000605 extraction Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/60—Software deployment
- G06F8/61—Installation
- G06F8/63—Image based installation; Cloning; Build to order
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明涉及人工智能领域，公开了一种智能交互平板的录屏方法及录屏装置，用于实现用户自定义录屏区域并提高录屏数据的质量。方法包括：根据默认录屏区域生成目标埋点集群并生成智能交互平板的目标屏幕；基于目标屏幕对目标用户进行屏幕操作检测，得到第一操作数据；对第一操作数据进行操作解析，得到操作类型，并根据操作类型确定目标屏幕的屏幕响应模式；若屏幕响应模式为默认录屏模式，则确定默认录屏区域；若屏幕响应模式为自定义录屏模式，则根据第一操作数据生成对应的多边形屏幕区域，并将多边形屏幕区域作为目标屏幕区域；监测第二操作数据，根据第二操作数据对目标屏幕区域进行录屏，并根据录屏画质生成目标录屏数据。
Description
技术领域
本发明涉及人工智能领域，尤其涉及一种智能交互平板的录屏方法及录屏装置。
背景技术
智能交互平板是一种新型的计算机设备，它可以通过触摸屏、语音识别和视觉识别等技术实现人机交互。它可以用于家庭娱乐、教育和商业等多种场景，可以提供更加便捷的操作体验。
录屏方法是智能交互平板的一种重要功能，它可以将屏幕上的内容录制下来，以便后续分析和处理。录屏方法的基本原理是，通过捕获屏幕上的图像和声音，将其转换为视频文件，以便后续处理，但是现有方案的录屏效果不好，而且不能自主选择录屏区域。
发明内容
本发明提供了一种智能交互平板的录屏方法及录屏装置，用于实现用户自定义录屏区域并提高录屏数据的质量。
本发明第一方面提供了一种智能交互平板的录屏方法，所述智能交互平板的录屏方法包括：
获取智能交互平板的设备配置参数，并根据所述设备配置参数设置所述智能交互平板的录屏参数，其中，所述录屏参数包括：录屏画质以及默认录屏区域；
根据所述默认录屏区域生成目标埋点集群，并根据所述目标埋点集群对所述智能交互平板进行埋点设置，生成所述智能交互平板的目标屏幕；
基于所述目标屏幕，对目标用户进行屏幕操作检测，得到第一操作数据；
对所述第一操作数据进行操作解析，得到所述目标用户的操作类型，并根据所述操作类型确定所述目标屏幕的屏幕响应模式，其中，所述屏幕响应模式包括：默认录屏模式以及自定义录屏模式；
若所述屏幕响应模式为默认录屏模式，则确定所述第一操作数据的目标录屏区域为默认录屏区域；
若所述屏幕响应模式为自定义录屏模式，则根据所述第一操作数据生成对应的多边形屏幕区域，并将所述多边形屏幕区域作为目标屏幕区域；
监测所述目标用户的第二操作数据，根据所述第二操作数据对所述目标屏幕区域进行录屏，并根据所述录屏画质生成目标录屏数据。
结合第一方面，在本发明第一方面的第一实施方式中，所述获取智能交互平板的设备配置参数，并根据所述设备配置参数设置所述智能交互平板的录屏参数，其中，所述录屏参数包括：录屏画质以及默认录屏区域，包括：
获取智能交互平板的设备配置参数，其中，所述设备配置参数包括处理器型号、内存容量、显卡型号以及屏幕分辨率；
根据所述设备配置参数，设置所述智能交互平板的初始录屏参数；
对所述初始录屏参数进行测试，得到参数测试结果，并根据所述参数测试结果调整所述初始录屏参数，得到最佳录屏参数；
根据所述最佳录屏参数，确定所述智能交互平板的录屏画质以及默认录屏区域。
结合第一方面，在本发明第一方面的第二实施方式中，所述根据所述默认录屏区域生成目标埋点集群，并根据所述目标埋点集群对所述智能交互平板进行埋点设置，生成所述智能交互平板的目标屏幕，包括：
调用预置的埋点算法，计算所述默认录屏区域的屏幕埋点距离；
根据所述屏幕埋点距离计算所述默认录屏区域的目标埋点集群；
根据所述目标埋点集群对所述智能交互平板进行埋点设置，生成埋点信息，并将所述埋点信息记录到所述智能交互平板的内存中；
根据所述埋点信息，生成所述智能交互平板的目标屏幕。
结合第一方面，在本发明第一方面的第三实施方式中，所述基于所述目标屏幕，对目标用户进行屏幕操作检测，得到第一操作数据，包括：
基于所述目标屏幕，检测目标用户的屏幕点击操作，得到点击操作信息；
根据所述点击操作信息，获取所述目标屏幕的屏幕响应信息；
根据所述屏幕响应信息检测所述目标屏幕的操作轨迹数据；
根据所述操作轨迹数据，生成所述目标用户的第一操作数据。
结合第一方面，在本发明第一方面的第四实施方式中，所述对所述第一操作数据进行操作解析，得到所述目标用户的操作类型，并根据所述操作类型确定所述目标屏幕的屏幕响应模式，其中，所述屏幕响应模式包括：默认录屏模式以及自定义录屏模式，包括：
采用数据解析模型，对所述第一操作数据进行操作解析，得到所述目标用户的操作类型；
根据所述操作类型以及所述操作轨迹数据，确定所述目标屏幕的屏幕响应模式，其中，所述屏幕响应模式包括：默认录屏模式以及自定义录屏模式。
结合第一方面，在本发明第一方面的第五实施方式中，所述若所述屏幕响应模式为自定义录屏模式，则根据所述第一操作数据生成对应的多边形屏幕区域，并将所述多边形屏幕区域作为目标屏幕区域，包括：
若所述屏幕响应模式为自定义录屏模式，则根据所述第一操作数据获取所述操作轨迹数据；
对所述操作轨迹数据进行轨迹连通分析，构建所述第一操作数据生成对应的多边形屏幕区域；
将所述多边形屏幕区域作为所述目标屏幕区域。
结合第一方面，在本发明第一方面的第六实施方式中，所述监测所述目标用户的第二操作数据，根据所述第二操作数据对所述目标屏幕区域进行录屏，并根据所述录屏画质生成目标录屏数据，包括：
监测所述目标用户对预置屏幕录制组件的点击操作，得到第二操作数据；
根据所述第二操作数据，通过所述屏幕录制组件对所述目标屏幕区域进行录屏；
计算所述第二操作数据以及所述第一操作数据之间的操作间隔时长，并将所述操作间隔时长作为录屏时长；
根据所述录屏画质以及所述录屏时长，生成目标录屏数据。
本发明第二方面提供了一种智能交互平板的录屏装置，所述智能交互平板的录屏装置包括：
获取模块，用于获取智能交互平板的设备配置参数，并根据所述设备配置参数设置所述智能交互平板的录屏参数，其中，所述录屏参数包括：录屏画质以及默认录屏区域；
设置模块，用于根据所述默认录屏区域生成目标埋点集群，并根据所述目标埋点集群对所述智能交互平板进行埋点设置，生成所述智能交互平板的目标屏幕；
检测模块，用于基于所述目标屏幕，对目标用户进行屏幕操作检测，得到第一操作数据；
解析模块，用于对所述第一操作数据进行操作解析，得到所述目标用户的操作类型，并根据所述操作类型确定所述目标屏幕的屏幕响应模式，其中，所述屏幕响应模式包括：默认录屏模式以及自定义录屏模式；
处理模块，用于若所述屏幕响应模式为默认录屏模式，则确定所述第一操作数据的目标录屏区域为默认录屏区域；
生成模块，用于若所述屏幕响应模式为自定义录屏模式，则根据所述第一操作数据生成对应的多边形屏幕区域，并将所述多边形屏幕区域作为目标屏幕区域；
录屏模块，用于监测所述目标用户的第二操作数据，根据所述第二操作数据对所述目标屏幕区域进行录屏，并根据所述录屏画质生成目标录屏数据。
本发明第三方面提供了一种智能交互平板的录屏设备，包括：存储器和至少一个处理器，所述存储器中存储有指令；所述至少一个处理器调用所述存储器中的所述指令，以使得所述智能交互平板的录屏设备执行上述的智能交互平板的录屏方法。
本发明的第四方面提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述的智能交互平板的录屏方法。
本发明提供的技术方案中，根据默认录屏区域生成目标埋点集群并生成智能交互平板的目标屏幕；基于目标屏幕对目标用户进行屏幕操作检测，得到第一操作数据；对第一操作数据进行操作解析，得到操作类型，并根据操作类型确定目标屏幕的屏幕响应模式；若屏幕响应模式为默认录屏模式，则确定默认录屏区域；若屏幕响应模式为自定义录屏模式，则根据第一操作数据生成对应的多边形屏幕区域，并将多边形屏幕区域作为目标屏幕区域；监测第二操作数据，根据第二操作数据对目标屏幕区域进行录屏，并根据录屏画质生成目标录屏数据，本发明提供了一种可以自定义选择录屏区域的录屏方案，并且通过监听目标用户的两次操作数据进行录屏，生成目标录屏数据，进而实现了用户自定义录屏区域，并提高了录屏数据的质量。
附图说明
图1为本发明实施例中智能交互平板的录屏方法的一个实施例示意图；
图2为本发明实施例中对智能交互平板进行埋点设置的流程图；
图3为本发明实施例中屏幕操作检测的流程图；
图4为本发明实施例中确定目标屏幕的屏幕响应模式的流程图；
图5为本发明实施例中智能交互平板的录屏装置的一个实施例示意图；
图6为本发明实施例中智能交互平板的录屏设备的一个实施例示意图。
具体实施方式
本发明实施例提供了一种智能交互平板的录屏方法及录屏装置，用于实现用户自定义录屏区域并提高录屏数据的质量。本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等（如果存在）是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外，术语“包括”或“具有”及其任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
为便于理解，下面对本发明实施例的具体流程进行描述，请参阅图1，本发明实施例中智能交互平板的录屏方法的一个实施例包括：
S101、获取智能交互平板的设备配置参数，并根据设备配置参数设置智能交互平板的录屏参数，其中，录屏参数包括：录屏画质以及默认录屏区域；
可以理解的是，本发明的执行主体可以为智能交互平板的录屏装置，还可以是终端或者服务器，具体此处不做限定。本发明实施例以服务器为执行主体为例进行说明。
需要说明的是，该设配配置参数包括处理器型号、内存容量、显卡型号以及屏幕分辨率，具体的，服务器对该智能交互平板进行设备类型分析，确定对应的平板设备类型，进而服务器根据该平板设备类型对设备配置参数进行参数提取，得到对应的设备配置参数，进一步的，服务器根据设备配置参数进行录屏参数设置。
S102、根据默认录屏区域生成目标埋点集群，并根据目标埋点集群对智能交互平板进行埋点设置，生成智能交互平板的目标屏幕；
具体的，服务器调用预置的埋点算法，进一步的，服务器通过该埋点算法对该录屏区域进行埋点布局分析，确定对应的埋点布局数据，进一步的，服务器根据该埋点布局数据确定对应的目标埋点集群，最终，服务器根据该目标埋点集群对智能交互平板进行埋点设置，生成智能交互平板的目标屏幕。
S103、基于目标屏幕，对目标用户进行屏幕操作检测，得到第一操作数据；
需要说明的是，服务器对该目标屏幕进行数据监听，确定在数据监听过程中的屏幕单击事件，进而服务器根据该屏幕点击时间对目标用户进行屏幕操作检测，得到第一操作数据。
S104、对第一操作数据进行操作解析，得到目标用户的操作类型，并根据操作类型确定目标屏幕的屏幕响应模式，其中，屏幕响应模式包括：默认录屏模式以及自定义录屏模式；
具体的，在本发明实施例中，服务器通过数据解析模型对第一操作数据进行操作解析，得到目标用户的操作类型，进一步的，服务器对该目标用户的操作类型进行操作轨迹分析，确定该目标用户的操作轨迹，最终，服务器根据该目标用户的操作轨迹确定该目标屏幕的屏幕响应模式。
S105、若屏幕响应模式为默认录屏模式，则确定第一操作数据的目标录屏区域为默认录屏区域；
S106、若屏幕响应模式为自定义录屏模式，则根据第一操作数据生成对应的多边形屏幕区域，并将多边形屏幕区域作为目标屏幕区域；
具体的，若屏幕响应模式为默认录屏模式，则确定第一操作数据的目标录屏区域为默认录屏区域，若屏幕响应模式为自定义录屏模式，则根据第一操作数据生成对应的多边形屏幕区域，并将多边形屏幕区域作为目标屏幕区域，具体的，服务器对该第一操作数据进行操作轨迹连通区域分析，确定对应的轨迹连通区域，进一步的，服务器根据该轨迹连通区域生成对应的多边形屏幕区域。
S107、监测目标用户的第二操作数据，根据第二操作数据对目标屏幕区域进行录屏，并根据录屏画质生成目标录屏数据。
具体的，服务器监测该目标用户的第二操作数据，具体的，服务器在对目标屏幕区域进行录屏时，对预置屏幕录制组件的点击操作进行采集，确定对应的第二操作数据，进而服务器根据该第二操作数据对目标屏幕区域进行录屏，并根据录屏画质生成目标录屏数据。
本发明实施例中，根据默认录屏区域生成目标埋点集群并生成智能交互平板的目标屏幕；基于目标屏幕对目标用户进行屏幕操作检测，得到第一操作数据；对第一操作数据进行操作解析，得到操作类型，并根据操作类型确定目标屏幕的屏幕响应模式；若屏幕响应模式为默认录屏模式，则确定默认录屏区域；若屏幕响应模式为自定义录屏模式，则根据第一操作数据生成对应的多边形屏幕区域，并将多边形屏幕区域作为目标屏幕区域；监测第二操作数据，根据第二操作数据对目标屏幕区域进行录屏，并根据录屏画质生成目标录屏数据，本发明提供了一种可以自定义选择录屏区域的录屏方案，并且通过监听目标用户的两次操作数据进行录屏，生成目标录屏数据，进而实现了用户自定义录屏区域，并提高了录屏数据的质量。
在一具体实施例中，执行步骤S101的过程可以具体包括如下步骤：
（1）获取智能交互平板的设备配置参数，其中，设备配置参数包括处理器型号、内存容量、显卡型号以及屏幕分辨率；
（2）根据设备配置参数，设置智能交互平板的初始录屏参数；
（3）对初始录屏参数进行测试，得到参数测试结果，并根据参数测试结果调整初始录屏参数，得到最佳录屏参数；
（4）根据最佳录屏参数，确定智能交互平板的录屏画质以及默认录屏区域。
具体的，服务器获取智能交互平板的设备配置参数，其中，设备配置参数包括处理器型号、内存容量、显卡型号以及屏幕分辨率，根据设备配置参数，设置智能交互平板的初始录屏参数，其中，服务器初始化参数，进而服务器执行脚本，即启动智能交互平板，执行到达智能交互平板界面，执行测试命令，执行智能交互平板界面的动作并测试，等待测试时长结束，将测试文件从的智能交互平板SD卡拷贝到测试PC上，解析测试文件，即对测试文件按一帧帧图进行解析，获得一帧图测试过程中的测试时长，根据图片相似度阈值C判断动作D响应开始位置，判断动作D响应结束位置，获得动作D响应耗时的时间，并获得设置智能交互平板的初始录屏参数；进而服务器对初始录屏参数进行测试，得到参数测试结果，并根据参数测试结果调整初始录屏参数，得到最佳录屏参数，根据最佳录屏参数，确定智能交互平板的录屏画质以及默认录屏区域。
在一具体实施例中，如图2所示，执行步骤S102的过程可以具体包括如下步骤：
S201、调用预置的埋点算法，计算默认录屏区域的屏幕埋点距离；
S202、根据屏幕埋点距离计算默认录屏区域的目标埋点集群；
S203、根据目标埋点集群对智能交互平板进行埋点设置，生成埋点信息，并将埋点信息记录到智能交互平板的内存中；
S204、根据埋点信息，生成智能交互平板的目标屏幕。
具体的，服务器调用预置的埋点算法，计算默认录屏区域的屏幕埋点距离；根据屏幕埋点距离计算默认录屏区域的目标埋点集群，根据目标埋点集群对智能交互平板进行埋点设置，生成埋点信息，并将埋点信息记录到智能交互平板的内存中，其中，当服务器监测到埋点上报触发指令时，生成数据上报指令，解析并提取数据上报指令中的待验证埋点，其中，埋点是记录点击操作数据的预设代码脚本，根据预先生成的有效埋点列表判断待验证埋点是否为有效埋点，生成判断结果，当判断结果为有效埋点时，执行待验证埋点的代码片段，生成待验证埋点的流量数据，并将流量数据上报至数据库，同时，生成埋点信息，并将埋点信息记录到智能交互平板的内存中；进一步的，服务器根据目标埋点集群对智能交互平板进行埋点设置，生成埋点信息，并将埋点信息记录到智能交互平板的内存中，根据埋点信息，生成智能交互平板的目标屏幕。
在一具体实施例中，如图3所示，执行步骤S103的过程可以具体包括如下步骤：
S301、基于目标屏幕，检测目标用户的屏幕点击操作，得到点击操作信息；
S302、根据点击操作信息，获取目标屏幕的屏幕响应信息；
S303、根据屏幕响应信息检测目标屏幕的操作轨迹数据；
S304、根据操作轨迹数据，生成目标用户的第一操作数据。
具体的，服务器基于目标屏幕，检测目标用户的屏幕点击操作，得到点击操作信息，其中，服务器获取目标用户在第一预设时长内的操作信息，将目标用户的操作信息输入经过训练的刷点击识别模型的特征提取模块，得到点击操作信息，进一步的，服务器根据点击操作信息，获取目标屏幕的屏幕响应信息，根据屏幕响应信息检测目标屏幕的操作轨迹数据，其中，服务器通过预先配置的轨迹分析函数，按批量操作执行顺序，并根据屏幕响应信息检测目标屏幕的操作轨迹数据，最终，服务器根据操作轨迹数据，生成目标用户的第一操作数据。
在一具体实施例中，如图4所示，执行步骤S104的过程可以具体包括如下步骤：
S401、采用数据解析模型，对第一操作数据进行操作解析，得到目标用户的操作类型；
S402、根据操作类型以及操作轨迹数据，确定目标屏幕的屏幕响应模式，其中，屏幕响应模式包括：默认录屏模式以及自定义录屏模式。
在一具体实施例中，执行步骤S106的过程可以具体包括如下步骤：
（1）若屏幕响应模式为自定义录屏模式，则根据第一操作数据获取操作轨迹数据；
（2）对操作轨迹数据进行轨迹连通分析，构建第一操作数据生成对应的多边形屏幕区域；
（3）将多边形屏幕区域作为目标屏幕区域。
具体的，采用数据解析模型，对第一操作数据进行操作解析，得到目标用户的操作类型，根据操作类型以及操作轨迹数据，确定目标屏幕的屏幕响应模式，其中，屏幕响应模式包括：默认录屏模式以及自定义录屏模式，若屏幕响应模式为自定义录屏模式，则根据第一操作数据获取操作轨迹数据，对操作轨迹数据进行轨迹连通分析，构建第一操作数据生成对应的多边形屏幕区域，其中，服务器对操作轨迹数据进行预处理，将预处理后的操作轨迹数据采用按天分表的方式存入对象关系数据库，并构建时空索引，对存储的操作轨迹数据采用数据分析方法进行轨迹连通分析，构建第一操作数据生成对应的多边形屏幕区域，最终，服务器将多边形屏幕区域作为目标屏幕区域。
在一具体实施例中，执行步骤S107的过程可以具体包括如下步骤：
（1）监测目标用户对预置屏幕录制组件的点击操作，得到第二操作数据；
（2）根据第二操作数据，通过屏幕录制组件对目标屏幕区域进行录屏；
（3）计算第二操作数据以及第一操作数据之间的操作间隔时长，并将操作间隔时长作为录屏时长；
（4）根据录屏画质以及录屏时长，生成目标录屏数据。
具体的，监测目标用户对预置屏幕录制组件的点击操作，得到第二操作数据，根据第二操作数据，通过屏幕录制组件对目标屏幕区域进行录屏，其中，服务器响应于智能交互平板的录屏指令，启动JAVA进程，在JAVA进程中，通过设定的JAVA反射获取智能交互平板中的目标服务代理对象的目标模式设置方法，响应于自动化测试辅助智能交互平板的录屏权限申请请求，通过目标模式设置方法授予自动化测试辅助智能交互平板的录屏权限；在对目标智能交互平板进行自动化测试时，通过自动化测试辅助智能交互平板进行屏幕录制。进一步的，服务器计算第二操作数据以及第一操作数据之间的操作间隔时长，并将操作间隔时长作为录屏时长，最终，服务器根据录屏画质以及录屏时长，生成目标录屏数据。
上面对本发明实施例中智能交互平板的录屏方法进行了描述，下面对本发明实施例中智能交互平板的录屏装置进行描述，请参阅图5，本发明实施例中智能交互平板的录屏装置一个实施例包括：
获取模块501，用于获取智能交互平板的设备配置参数，并根据所述设备配置参数设置所述智能交互平板的录屏参数，其中，所述录屏参数包括：录屏画质以及默认录屏区域；
设置模块502，用于根据所述默认录屏区域生成目标埋点集群，并根据所述目标埋点集群对所述智能交互平板进行埋点设置，生成所述智能交互平板的目标屏幕；
检测模块503，用于基于所述目标屏幕，对目标用户进行屏幕操作检测，得到第一操作数据；
解析模块504，用于对所述第一操作数据进行操作解析，得到所述目标用户的操作类型，并根据所述操作类型确定所述目标屏幕的屏幕响应模式，其中，所述屏幕响应模式包括：默认录屏模式以及自定义录屏模式；
处理模块505，用于若所述屏幕响应模式为默认录屏模式，则确定所述第一操作数据的目标录屏区域为默认录屏区域；
生成模块506，用于若所述屏幕响应模式为自定义录屏模式，则根据所述第一操作数据生成对应的多边形屏幕区域，并将所述多边形屏幕区域作为目标屏幕区域；
录屏模块507，用于监测所述目标用户的第二操作数据，根据所述第二操作数据对所述目标屏幕区域进行录屏，并根据所述录屏画质生成目标录屏数据。
通过上述各个组成部分的协同合作，根据默认录屏区域生成目标埋点集群并生成智能交互平板的目标屏幕；基于目标屏幕对目标用户进行屏幕操作检测，得到第一操作数据；对第一操作数据进行操作解析，得到操作类型，并根据操作类型确定目标屏幕的屏幕响应模式；若屏幕响应模式为默认录屏模式，则确定默认录屏区域；若屏幕响应模式为自定义录屏模式，则根据第一操作数据生成对应的多边形屏幕区域，并将多边形屏幕区域作为目标屏幕区域；监测第二操作数据，根据第二操作数据对目标屏幕区域进行录屏，并根据录屏画质生成目标录屏数据，本发明提供了一种可以自定义选择录屏区域的录屏方案，并且通过监听目标用户的两次操作数据进行录屏，生成目标录屏数据，进而实现了用户自定义录屏区域，并提高了录屏数据的质量。
上面图5从模块化功能实体的角度对本发明实施例中的智能交互平板的录屏装置进行详细描述，下面从硬件处理的角度对本发明实施例中智能交互平板的录屏设备进行详细描述。
图6是本发明实施例提供的一种智能交互平板的录屏设备的结构示意图，该智能交互平板的录屏设备600可因配置或性能不同而产生比较大的差异，可以包括一个或一个以上处理器（central processing units，CPU）610（例如，一个或一个以上处理器）和存储器620，一个或一个以上存储智能交互平板633或数据632的存储介质630（例如一个或一个以上海量存储设备）。其中，存储器620和存储介质630可以是短暂存储或持久存储。存储在存储介质630的程序可以包括一个或一个以上模块（图示没标出），每个模块可以包括对智能交互平板的录屏设备600中的一系列指令操作。更进一步地，处理器610可以设置为与存储介质630通信，在智能交互平板的录屏设备600上执行存储介质630中的一系列指令操作。
智能交互平板的录屏设备600还可以包括一个或一个以上电源640，一个或一个以上有线或无线网络接口650，一个或一个以上输入输出接口660，和/或，一个或一个以上操作系统631，例如Windows Serve，MacOS X，Unix，Linux，FreeBSD等等。本领域技术人员可以理解，图6示出的智能交互平板的录屏设备结构并不构成对智能交互平板的录屏设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
本发明还提供一种智能交互平板的录屏设备，所述智能交互平板的录屏设备包括存储器和处理器，存储器中存储有计算机可读指令，计算机可读指令被处理器执行时，使得处理器执行上述各实施例中的所述智能交互平板的录屏方法的步骤。
本发明还提供一种计算机可读存储介质，该计算机可读存储介质可以为非易失性计算机可读存储介质，该计算机可读存储介质也可以为易失性计算机可读存储介质，所述计算机可读存储介质中存储有指令，当所述指令在计算机上运行时，使得计算机执行所述智能交互平板的录屏方法的步骤。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备（可以是个人计算机，服务器，或者网络设备等）执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器（read-only memory，ROM）、随机存取存储器（randomacceS memory，RAM）、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (6)
1.一种智能交互平板的录屏方法，其特征在于，所述智能交互平板的录屏方法包括：
获取智能交互平板的设备配置参数，并根据所述设备配置参数设置所述智能交互平板的录屏参数，其中，所述录屏参数包括：录屏画质以及默认录屏区域，具体包括：获取智能交互平板的设备配置参数，其中，所述设备配置参数包括处理器型号、内存容量、显卡型号以及屏幕分辨率；根据所述设备配置参数，设置所述智能交互平板的初始录屏参数；对所述初始录屏参数进行测试，得到参数测试结果，并根据所述参数测试结果调整所述初始录屏参数，得到最佳录屏参数；根据所述最佳录屏参数，确定所述智能交互平板的录屏画质以及默认录屏区域；其中，启动智能交互平板，执行到达智能交互平板界面，执行测试命令，执行智能交互平板界面的动作并测试，等待测试时长结束，将测试文件从智能交互平板SD卡拷贝到测试PC上，解析测试文件，即对测试文件按一帧图进行解析，获得一帧图测试过程中的测试时长，根据图片相似度阈值判断动作响应开始位置，判断动作响应结束位置，获得动作响应耗时的时间，并获得设置智能交互平板的初始录屏参数；对初始录屏参数进行测试，得到参数测试结果，并根据参数测试结果调整初始录屏参数，得到最佳录屏参数，根据最佳录屏参数，确定智能交互平板的录屏画质以及默认录屏区域；
根据所述默认录屏区域生成目标埋点集群，并根据所述目标埋点集群对所述智能交互平板进行埋点设置，生成所述智能交互平板的目标屏幕，具体包括：调用预置的埋点算法，计算所述默认录屏区域的屏幕埋点距离；根据所述屏幕埋点距离计算所述默认录屏区域的目标埋点集群；根据所述目标埋点集群对所述智能交互平板进行埋点设置，生成埋点信息，并将所述埋点信息记录到所述智能交互平板的内存中；根据所述埋点信息，生成所述智能交互平板的目标屏幕；其中，当监测到埋点上报触发指令时，生成数据上报指令，解析并提取数据上报指令中的待验证埋点，其中，埋点是记录点击操作数据的预设代码脚本，根据预先生成的有效埋点列表判断待验证埋点是否为有效埋点，生成判断结果，当判断结果为有效埋点时，执行待验证埋点的代码片段，生成待验证埋点的流量数据，并将流量数据上报至数据库，同时，生成埋点信息，并将埋点信息记录到智能交互平板的内存中，生成智能交互平板的目标屏幕；
基于所述目标屏幕，对目标用户进行屏幕操作检测，得到第一操作数据；
对所述第一操作数据进行操作解析，得到所述目标用户的操作类型，并根据所述操作类型确定所述目标屏幕的屏幕响应模式，其中，所述屏幕响应模式包括：默认录屏模式以及自定义录屏模式，具体包括：采用数据解析模型，对所述第一操作数据进行操作解析，得到所述目标用户的操作类型；根据所述操作类型以及操作轨迹数据，确定所述目标屏幕的屏幕响应模式；
若所述屏幕响应模式为默认录屏模式，则确定所述第一操作数据的目标录屏区域为默认录屏区域；
若所述屏幕响应模式为自定义录屏模式，则根据所述第一操作数据生成对应的多边形屏幕区域，并将所述多边形屏幕区域作为目标屏幕区域，具体包括：若所述屏幕响应模式为自定义录屏模式，则根据所述第一操作数据获取所述操作轨迹数据；对所述操作轨迹数据进行轨迹连通分析，构建所述第一操作数据生成对应的多边形屏幕区域；将所述多边形屏幕区域作为所述目标屏幕区域；其中，对操作轨迹数据进行预处理，将预处理后的操作轨迹数据存入对象关系数据库，并构建时空索引，对存储的操作轨迹数据进行轨迹连通分析，构建第一操作数据对应的多边形屏幕区域，将多边形屏幕区域作为目标屏幕区域；
监测所述目标用户的第二操作数据，根据所述第二操作数据对所述目标屏幕区域进行录屏，并根据所述录屏画质生成目标录屏数据。
2.根据权利要求1所述的智能交互平板的录屏方法，其特征在于，所述基于所述目标屏幕，对目标用户进行屏幕操作检测，得到第一操作数据，包括：
基于所述目标屏幕，检测目标用户的屏幕点击操作，得到点击操作信息；
根据所述点击操作信息，获取所述目标屏幕的屏幕响应信息；
根据所述屏幕响应信息检测所述目标屏幕的操作轨迹数据；
根据所述操作轨迹数据，生成所述目标用户的第一操作数据。
3.根据权利要求1所述的智能交互平板的录屏方法，其特征在于，所述监测所述目标用户的第二操作数据，根据所述第二操作数据对所述目标屏幕区域进行录屏，并根据所述录屏画质生成目标录屏数据，包括：
监测所述目标用户对预置屏幕录制组件的点击操作，得到第二操作数据；
根据所述第二操作数据，通过所述屏幕录制组件对所述目标屏幕区域进行录屏；
计算所述第二操作数据以及所述第一操作数据之间的操作间隔时长，并将所述操作间隔时长作为录屏时长；
根据所述录屏画质以及所述录屏时长，生成目标录屏数据。
4.一种智能交互平板的录屏装置，其特征在于，所述智能交互平板的录屏装置包括：
获取模块，用于获取智能交互平板的设备配置参数，并根据所述设备配置参数设置所述智能交互平板的录屏参数，其中，所述录屏参数包括：录屏画质以及默认录屏区域，具体包括：获取智能交互平板的设备配置参数，其中，所述设备配置参数包括处理器型号、内存容量、显卡型号以及屏幕分辨率；根据所述设备配置参数，设置所述智能交互平板的初始录屏参数；对所述初始录屏参数进行测试，得到参数测试结果，并根据所述参数测试结果调整所述初始录屏参数，得到最佳录屏参数；根据所述最佳录屏参数，确定所述智能交互平板的录屏画质以及默认录屏区域；其中，启动智能交互平板，执行到达智能交互平板界面，执行测试命令，执行智能交互平板界面的动作并测试，等待测试时长结束，将测试文件从智能交互平板SD卡拷贝到测试PC上，解析测试文件，即对测试文件按一帧图进行解析，获得一帧图测试过程中的测试时长，根据图片相似度阈值判断动作响应开始位置，判断动作响应结束位置，获得动作响应耗时的时间，并获得设置智能交互平板的初始录屏参数；对初始录屏参数进行测试，得到参数测试结果，并根据参数测试结果调整初始录屏参数，得到最佳录屏参数，根据最佳录屏参数，确定智能交互平板的录屏画质以及默认录屏区域；
设置模块，用于根据所述默认录屏区域生成目标埋点集群，并根据所述目标埋点集群对所述智能交互平板进行埋点设置，生成所述智能交互平板的目标屏幕，具体包括：调用预置的埋点算法，计算所述默认录屏区域的屏幕埋点距离；根据所述屏幕埋点距离计算所述默认录屏区域的目标埋点集群；根据所述目标埋点集群对所述智能交互平板进行埋点设置，生成埋点信息，并将所述埋点信息记录到所述智能交互平板的内存中；根据所述埋点信息，生成所述智能交互平板的目标屏幕；其中，当监测到埋点上报触发指令时，生成数据上报指令，解析并提取数据上报指令中的待验证埋点，其中，埋点是记录点击操作数据的预设代码脚本，根据预先生成的有效埋点列表判断待验证埋点是否为有效埋点，生成判断结果，当判断结果为有效埋点时，执行待验证埋点的代码片段，生成待验证埋点的流量数据，并将流量数据上报至数据库，同时，生成埋点信息，并将埋点信息记录到智能交互平板的内存中，生成智能交互平板的目标屏幕；
检测模块，用于基于所述目标屏幕，对目标用户进行屏幕操作检测，得到第一操作数据；
解析模块，用于对所述第一操作数据进行操作解析，得到所述目标用户的操作类型，并根据所述操作类型确定所述目标屏幕的屏幕响应模式，其中，所述屏幕响应模式包括：默认录屏模式以及自定义录屏模式，具体包括：采用数据解析模型，对所述第一操作数据进行操作解析，得到所述目标用户的操作类型；根据所述操作类型以及操作轨迹数据，确定所述目标屏幕的屏幕响应模式；
处理模块，用于若所述屏幕响应模式为默认录屏模式，则确定所述第一操作数据的目标录屏区域为默认录屏区域；
生成模块，用于若所述屏幕响应模式为自定义录屏模式，则根据所述第一操作数据生成对应的多边形屏幕区域，并将所述多边形屏幕区域作为目标屏幕区域，具体包括：若所述屏幕响应模式为自定义录屏模式，则根据所述第一操作数据获取所述操作轨迹数据；对所述操作轨迹数据进行轨迹连通分析，构建所述第一操作数据生成对应的多边形屏幕区域；将所述多边形屏幕区域作为所述目标屏幕区域；其中，对操作轨迹数据进行预处理，将预处理后的操作轨迹数据存入对象关系数据库，并构建时空索引，对存储的操作轨迹数据进行轨迹连通分析，构建第一操作数据对应的多边形屏幕区域，将多边形屏幕区域作为目标屏幕区域；
录屏模块，用于监测所述目标用户的第二操作数据，根据所述第二操作数据对所述目标屏幕区域进行录屏，并根据所述录屏画质生成目标录屏数据。
5.一种智能交互平板的录屏设备，其特征在于，所述智能交互平板的录屏设备包括：存储器和至少一个处理器，所述存储器中存储有指令；
所述至少一个处理器调用所述存储器中的所述指令，以使得所述智能交互平板的录屏设备执行如权利要求1-3中任一项所述的智能交互平板的录屏方法。
6.一种计算机可读存储介质，所述计算机可读存储介质上存储有指令，其特征在于，所述指令被处理器执行时实现如权利要求1-3中任一项所述的智能交互平板的录屏方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310649350.XA CN116382721B (zh) | 2023-06-02 | 2023-06-02 | 一种智能交互平板的录屏方法及录屏装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310649350.XA CN116382721B (zh) | 2023-06-02 | 2023-06-02 | 一种智能交互平板的录屏方法及录屏装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN116382721A CN116382721A (zh) | 2023-07-04 |
| CN116382721B true CN116382721B (zh) | 2023-08-08 |
Family
ID=86971455
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202310649350.XA Active CN116382721B (zh) | 2023-06-02 | 2023-06-02 | 一种智能交互平板的录屏方法及录屏装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN116382721B (zh) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104184904A (zh) * | 2014-09-10 | 2014-12-03 | 上海斐讯数据通信技术有限公司 | 一种自定义录制区域的手机屏幕录制方法 |
| CN108881767A (zh) * | 2018-07-17 | 2018-11-23 | 广州飞磨科技有限公司 | 一种录屏终端系统及利用其实现录屏的方法 |
| CN114189582A (zh) * | 2021-11-12 | 2022-03-15 | 惠州Tcl移动通信有限公司 | 基于移动终端的屏幕录制处理方法、装置、终端及介质 |
| CN114625449A (zh) * | 2022-03-14 | 2022-06-14 | 贵阳朗玛信息技术股份有限公司 | 一种iOS环境下录屏的控制方法和装置 |
| CN114840282A (zh) * | 2021-02-01 | 2022-08-02 | 广州视源电子科技股份有限公司 | 智能交互平板的录屏方法及录屏装置 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111858277B (zh) * | 2020-07-07 | 2024-02-27 | 广州三星通信技术研究有限公司 | 用于电子终端的录屏方法和录屏装置 |
-
2023
- 2023-06-02 CN CN202310649350.XA patent/CN116382721B/zh active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104184904A (zh) * | 2014-09-10 | 2014-12-03 | 上海斐讯数据通信技术有限公司 | 一种自定义录制区域的手机屏幕录制方法 |
| CN108881767A (zh) * | 2018-07-17 | 2018-11-23 | 广州飞磨科技有限公司 | 一种录屏终端系统及利用其实现录屏的方法 |
| CN114840282A (zh) * | 2021-02-01 | 2022-08-02 | 广州视源电子科技股份有限公司 | 智能交互平板的录屏方法及录屏装置 |
| CN114189582A (zh) * | 2021-11-12 | 2022-03-15 | 惠州Tcl移动通信有限公司 | 基于移动终端的屏幕录制处理方法、装置、终端及介质 |
| CN114625449A (zh) * | 2022-03-14 | 2022-06-14 | 贵阳朗玛信息技术股份有限公司 | 一种iOS环境下录屏的控制方法和装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN116382721A (zh) | 2023-07-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108874268B (zh) | 用户行为数据的采集方法及装置 | |
| CN110222263B (zh) | 应用程序维护控制方法、装置、服务器、终端及存储介质 | |
| CN110806965A (zh) | 自动测试方法、装置、设备和介质 | |
| CN116126580B (zh) | 触控显示的控制方法、装置、设备及存储介质 | |
| CN114996103A (zh) | 页面异常检测方法、装置、电子设备和存储介质 | |
| CN113297609A (zh) | 针对小程序进行隐私采集行为监控的方法及装置 | |
| CN114766093A (zh) | 一种录屏方法、装置及计算机可读存储介质 | |
| CN111310351A (zh) | 车间设备的状态监测方法、装置、终端设备及存储介质 | |
| CN109284221B (zh) | 一种预警系统及方法 | |
| CN111061647A (zh) | 一种软件性能自动化测试方法、装置及电子设备 | |
| CN116382721B (zh) | 一种智能交互平板的录屏方法及录屏装置 | |
| CN110275785B (zh) | 数据处理方法、装置、客户端和服务器 | |
| CN113505015A (zh) | 应用异常信息采集方法、装置、计算机设备和存储介质 | |
| CN112308417A (zh) | 在线测评的防作弊方法及系统 | |
| CN112100075A (zh) | 一种用户界面回放方法、装置、设备及存储介质 | |
| CN110955568A (zh) | 触摸屏问题的定位方法及装置、设备、存储介质 | |
| CN111597119A (zh) | 测试脚本更新方法、装置、存储介质及处理器 | |
| CN111857958B (zh) | 一种虚拟机的交互方法、装置、设备及存储介质 | |
| CN113778801B (zh) | 启动事件上报方法、装置、电子设备及存储介质 | |
| CN116991748B (zh) | 异常应用的预警方法、装置、电子设备及存储介质 | |
| CN113778836B (zh) | 云原生应用健康监测方法、装置、设备与可读存储介质 | |
| CN113836025B (zh) | 页面测试方法及装置、存储介质及电子设备 | |
| CN115145800A (zh) | 用于采集终端应用中用户操作行为的方法和装置 | |
| CN117640415A (zh) | 计算机网络的管理方法、装置、存储介质及电子设备 | |
| CN114281581A (zh) | 一种数据展示方法、装置、电子设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |