CN113132760B - 视频数据的获取方法、装置、电子设备及存储介质 - Google Patents
视频数据的获取方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN113132760B CN113132760B CN201911421431.4A CN201911421431A CN113132760B CN 113132760 B CN113132760 B CN 113132760B CN 201911421431 A CN201911421431 A CN 201911421431A CN 113132760 B CN113132760 B CN 113132760B
- Authority
- CN
- China
- Prior art keywords
- video data
- video
- server
- user name
- simulators
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/27—Server based end-user applications
- H04N21/274—Storing end-user multimedia data in response to end-user request, e.g. network recorder
- H04N21/2743—Video hosting of uploaded data from client
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
- H04N21/2407—Monitoring of transmitted content, e.g. distribution time, number of downloads
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/239—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests
- H04N21/2393—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests involving handling client requests
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/73—Querying
- G06F16/735—Filtering based on additional data, e.g. user or group profiles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
- G06F9/45504—Abstract machines for programme code execution, e.g. Java virtual machine [JVM], interpreters, emulators
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
- H04N21/2405—Monitoring of the internal components or processes of the server, e.g. server load
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
- H04N21/25808—Management of client data
- H04N21/25833—Management of client data involving client hardware characteristics, e.g. manufacturer, processing or storage capabilities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
- H04N21/25866—Management of end-user data
- H04N21/25891—Management of end-user data being end-user preferences
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Computer Graphics (AREA)
- Data Mining & Analysis (AREA)
- Computational Linguistics (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本发明实施例适用于互联网技术领域,提供了一种视频数据的获取方法、装置、电子设备及存储介质,其中,视频数据的获取方法包括:部署至少两台模拟器;所述至少两台模拟器中的每台模拟器用于模拟运行一台移动终端;通过所述至少两台模拟器分别向服务器发送视频访问请求;通过所述至少两台模拟器分别接收所述服务器根据对应的视频访问请求返回的视频数据;在通过所述至少两台模拟器分别接收所述服务器根据对应的视频访问请求返回的视频数据时,所述获取方法还包括:截取所述服务器根据对应的视频访问请求返回的视频数据,并将截取到的视频数据存储至设定数据库中。本发明实施例解决了网络监管过程中视频数据采集困难的问题。
Description
技术领域
本发明属于互联网技术领域,尤其涉及一种视频数据的获取方法、装置、电子设备及存储介质。
背景技术
目前,许多年轻人都喜欢在手机视频软件上上传视频,由于上传视频的数量多且内容杂,其中可能有一部分视频会给使用手机视频软件的青少年带来不良影响。因此,必须要对手机视频软件上的视频数据进行网络监管。
然而,由于手机视频软件大部分都加壳加密,导致目前在进行网络监管的过程中视频数据采集困难。
发明内容
有鉴于此,本发明实施例提供一种视频数据的获取方法、装置、电子设备及存储介质,以至少解决相关技术在进行网络监管的过程中视频数据采集困难的问题。
本发明实施例的技术方案是这样实现的:
第一方面,本发明实施例提供了一种视频数据的获取方法,该方法包括:
部署至少两台模拟器;所述至少两台模拟器中的每台模拟器用于模拟运行一台移动终端;
通过所述至少两台模拟器分别向服务器发送视频访问请求;所述服务器为视频应用对应的服务器;
通过所述至少两台模拟器分别接收所述服务器根据对应的视频访问请求返回的视频数据;
在通过所述至少两台模拟器分别接收所述服务器根据对应的视频访问请求返回的视频数据时,所述获取方法还包括:
截取所述服务器根据对应的视频访问请求返回的视频数据,并将截取到的视频数据存储至设定数据库中。
上述方案中,所述获取方法还包括:
每隔设定时间,统计所述设定数据库中所述至少两台模拟器中的每台模拟器对应的视频数据的数量;
当所述数量满足第一设定条件时,重启对应模拟器上的所述视频应用;所述第一设定条件表征所述数量异常。
上述方案中,所述获取方法还包括:
修改所述模拟器对应的参数;
所述参数包括以下至少一项:移动终端的序列号、移动终端的型号和介质访问控制层MAC地址。
上述方案中,所述通过所述至少两台模拟器分别向服务器发送视频访问请求时,所述方法包括:
获取所述视频应用对应的操作脚本;
执行所述操作脚本向所述视频应用对应的服务器发送视频访问请求。
上述方案中,所述通过所述至少两台模拟器分别向服务器发送视频访问请求时,所述方法包括:
向所述服务器发送携带有第一设定关键词的视频访问请求,以使所述服务器返回与所述第一设定关键词相关的第一视频数据;或
向所述服务器发送携带有第一用户名称的视频访问请求,以使所述服务器返回所述第一用户名称对应的用户账户上传的第二视频数据;或
向所述服务器发送携带有第二用户名称的视频访问请求,以使所述服务器返回第三视频数据;所述第三视频数据为所述服务器根据所述第二用户名称对应的用户账户的访问历史数据,向所述第二用户名称对应的用户账户推送的视频数据。
上述方案中,向所述服务器发送携带有第一用户名称的视频访问请求之前,所述获取方法还包括:
获取所述设定数据库中的视频数据对应的上传所述视频数据的用户账户;
根据所述用户账户的第一参数和对应的权重计算所述用户账户的分数;所述第一参数包括以下至少一项:所述用户账户接收到的互动信息的数量和关注所述用户账户的用户数量;
将所述分数大于第一设定值的用户账户对应的用户名称确定为第一用户名称。
上述方案中,所述获取方法还包括:
向所述服务器发送携带有第二设定关键词的用户名称访问请求,以使所述服务器返回与所述第二设定关键词相关的用户名称;
确定所述服务器返回的用户名称与所述第二设定关键词的关联度;
将所述关联度大于第二设定值的用户名称确定为第一用户名称
第二方面,本发明实施例提供了一种视频数据的获取装置,该装置包括:
部署模块,用于部署至少两台模拟器;所述至少两台模拟器中的每台模拟器用于模拟运行一台移动终端;
发送模块,用于通过所述至少两台模拟器分别向服务器发送视频访问请求;所述服务器为视频应用对应的服务器;
接收模块,用于通过所述至少两台模拟器分别接收所述服务器根据对应的视频访问请求返回的视频数据;
在通过所述至少两台模拟器分别接收所述服务器根据对应的视频访问请求返回的视频数据时,所述获取方法还包括:
截取模块,用于截取所述服务器根据对应的视频访问请求返回的视频数据,并将截取到的视频数据存储至设定数据库中。
第三方面,本发明实施例提供了一种电子设备,包括处理器和存储器,所述处理器和存储器相互连接,其中,所述存储器用于存储计算机程序,所述计算机程序包括程序指令,所述处理器被配置用于调用所述程序指令,执行本发明实施例第一方面提供的视频数据的获取方法的步骤。
第四方面,本发明实施例提供了一种计算机可读存储介质,包括:所述计算机可读存储介质存储有计算机程序。所述计算机程序被处理器执行时实现如本发明实施例第一方面提供的视频数据的获取方法的步骤。
本发明实施例通过部署至少两台模拟器,通过至少两台模拟器分别向视频应用的服务器发送视频访问请求,可以通过多台模拟器并行处理的方式获取到更多的视频数据,提高视频数据的采集效率。并在通过所述至少两台模拟器分别接收所述服务器根据对应的视频访问请求返回的视频数据时,截取所述服务器根据对应的视频访问请求返回的视频数据,能够避免对视频应用进行脱壳和解密,并且可以使得获取到的视频数据更具参考性。
附图说明
图1是本发明实施例提供的一种视频数据的获取方法的系统的结构示意图;
图2是本发明实施例提供的一种模拟器的示意图;
图3是本发明实施例提供的一种视频数据的获取方法的实现流程示意图;
图4是本发明实施例提供的另一种视频数据的获取方法的实现流程示意图;
图5是本发明实施例提供的另一种视频数据的获取方法的实现流程示意图;
图6是本发明实施例提供的另一种视频数据的获取方法的实现流程示意图;
图7是本发明实施例提供的另一种视频数据的获取方法的实现流程示意图;
图8是本发明应用实施例提供的一种电子设备的系统架构示意图;
图9是本发明应用实施例提供的一种视频数据的获取流程图;
图10是本发明应用实施例提供的另一种视频数据的获取流程图;
图11是本发明应用实施例提供的另一种视频数据的获取流程图;
图12是本发明应用实施例提供的一种第一用户名称的获取流程图;
图13是本发明实施例提供的一种视频数据的获取装置的结构示意图;
图14是本发明实施例提供的电子设备的硬件结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
应当理解,当在本说明书和所附权利要求书中使用时,术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在,但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
需要说明的是,本发明实施例所记载的技术方案之间,在不冲突的情况下,可以任意组合。
另外,在本发明实施例中,“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。
目前,许多年轻人都喜欢在手机视频软件上上传视频,由于在这些手机视频软件上上传视频的用户众多,导致这些手机视频软件上的视频的数量多且视频内容杂,可能存在有部分视频包含不适合未成年人观看的内容的情况,给使用手机视频软件的未成年人带来不良影响。因此,必须要对手机视频软件上的视频数据进行网络监管。
目前,相关技术有两种技术方案来获取这些手机视频软件中的视频数据。第一种方案:通过破解手机视频软件来采集视频数据,然而由于目前手机视频软件一般都会加密加壳,加壳是移动应用加密的一种方式,移动应用加壳是指在二进制的应用程序中植入一段代码,对原始二进制原文进行加密、隐藏、混淆。应用加壳后,在运行的时候会优先取得程序的控制权。移动应用加壳可以保护自己核心代码算法,提高破解的难度。脱壳是与加壳相反的过程,指对移动应用进行破解。所以在采集手机视频软件的视频数据的过程中,需要耗费大量的人力物力去脱壳和解密。即使破解成功,一旦手机视频软件修改加密参数,又必须重新进行破解,所以该技术方案难度和耗费都较大,并不适合监管手机视频软件上的视频数据。第二种方案:有的手机视频软件会提供相应的视频网站,以供用户下载该手机视频软件上的视频。然而并不是所有手机视频软件都提供有视频网站,而且视频网站在视频数据的更新速度上并没有手机视频软件那么及时,所以该技术方案也不适合监管手机视频软件上的视频数据。
针对上述相关技术中采集手机视频软件的视频数据困难的缺点,本发明实施例提供了一种视频数据的获取方法,能够避免对手机视频软件进行脱壳和解密,并且可以使得采集到的视频数据更具参考性。为了说明本发明所述的技术方案,下面通过具体实施例来进行说明。
参考图1,图1是应用本发明实施例提供的视频数据的获取方法的系统的结构示意图,如图1所示,该获取系统包括:电子设备和服务器。
在本发明实施例中,服务器为视频应用的服务器,视频应用的服务器中存储有视频应用上的用户信息和视频数据。当服务器接收到电子设备通过模拟器发送的视频访问请求后,服务器根据视频访问请求的具体内容,返回对应的视频数据给模拟器。电子设备主要以服务器或服务器集群的形式存在,电子设备上部署有至少两台模拟器,电子设备用于通过模拟器向服务器发送视频访问请求。模拟器用于模拟移动终端的操作环境,并运行移动终端上的视频应用。
这里,可以将每一台模拟器理解为就相当于一台移动终端。在实际应用中,以模拟安卓操作系统的移动终端为例,首先在电子设备上下载Android-X86的iso镜像文件,Android-X86是运行于X86PC机上的Android操作系统,可以在Android-X86上面运行安卓程序。然后在VMware中创建一个安卓模拟器,为该安卓模拟器导入Android-X86.iso镜像,并为该安卓模拟器分配内存和CPU,这样就创建好了一个安卓模拟器。在最后,启动该安卓模拟器,根据安卓界面引导完成安卓模拟器的配置,这样,就可以在安卓模拟器上安装和运行视频应用了。其中,VMware是一款桌面虚拟计算机软件,可以使得用户在单一的桌面上同时运行不同的操作系统,以及进行开发、测试和部署新的应用程序。当创建好一个安卓模拟器后,通过VMware可以直接克隆该安卓模拟器,以此获得多个安卓模拟器。参考图2,本发明的一实施例使用VMware软件克隆了19个安卓模拟器,加上本体一个20个安卓模拟器,20个安卓模拟器独立运行,互不干扰,在20个安卓模拟器上可以分别运行不同的视频软件。
在实际应用中,电子设备可以通过自动化测试框架Appium编写Python脚本,来控制所有的安卓模拟器。在多个安卓模拟器上分别运行不同的视频应用,可以提高获取视频的效率。应理解,电子设备在发送视频访问请求时,根据模拟器上运行的视频应用,将视频访问请求发送给该视频应用对应的服务器。
参考图3,图3是本发明实施例提供的一种视频数据的获取方法的实现流程示意图,该方法执行主体为图1所示的电子设备,视频数据的获取方法包括:
S101,部署至少两台模拟器;所述至少两台模拟器中的每台模拟器用于模拟运行一台移动终端。
部署好模拟器后,可以按照设定时间间隔修改所述模拟器对应的参数,或不定时修改所述模拟器对应的参数。例如,可以在每次启动模拟器时,就修改一次模拟器对应的参数,从而使得每次启动后模拟器的参数都不同。或者电子设备的使用者可通过设置在电子设备表面的输入面板触发模拟器参数修改的信号,该输入面板可以为机械按键面板或触摸显示屏等。所述参数包括以下至少一项:移动终端的序列号、移动终端的型号和介质访问控制层(Media Access Control,MAC)地址。通过修改模拟器的参数,可以避免模拟器被服务器识别,从而不对视频数据的采集造成影响。
在实际应用中,电子设备可以基于xposed框架(修改系统框架服务)来实现模拟器参数的修改,首先对模拟器进行root,然后基于xposed框架的Hook技术,对模拟器的参数进行修改。Xposed框架是一套开源的、在安卓高权限模式下运行的框架服务,可以在不修改安卓应用程序包(Android application package,APK)文件的情况下修改系统的框架服务。Hook技术又叫钩子函数,它可以把系统的程序拉出来修改代码片段。
S102,通过所述至少两台模拟器分别向服务器发送视频访问请求;所述服务器为视频应用对应的服务器。
在实际应用中,电子设备启动本地服务中的安卓调试桥(Android Debug Bridge,ADB)-server,ADB-server是一个始终在后台运行的服务进程,是与模拟器进行交互的唯一接口。通过adb shell去连接通过VMware已经启动的模拟器,adb shell是电脑连接安卓移动终端的脚本命令。通过adb shell分别连接所有的模拟器后,电子设备为每一个模拟器都启动一个Appium进程,Appium进程会通过操作脚本来控制视频应用,模拟人为点击操作。例如,通过操作脚本点击视频应用的视频搜索窗口,输入关键词,然后点击视频应用的搜索按钮,就可以向视频应用的服务器发送视频数据请求。
在本发明实施例中,针对不同的视频应用,电子设备需要执行不同的操作脚本来向视频应用对应的服务器发送视频访问请求。具体的,在实际应用中,电子设备首先获取所述视频应用对应的操作脚本;然后执行所述操作脚本向所述视频应用对应的服务器发送视频访问请求。
在一个实施例中,如图4所示,通过所述至少两台模拟器分别向服务器发送视频访问请求时,所述方法包括:
应理解,本发明实施例阐述的是视频访问请求的几种发送策略,本实施例中各步骤的序号的大小并不意味着执行顺序的先后。
S401,向所述服务器发送携带有第一设定关键词的视频访问请求,以使所述服务器返回与所述第一设定关键词相关的第一视频数据。
服务器接收到带有第一设定关键词的视频数据请求后,会将与第一设定关键词相关的视频数据返回给对应的模拟器。例如,如果第一设定关键词为篮球,则服务器会返回与篮球相关的视频数据给模拟器,与篮球相关的视频数据可以是标题带有篮球的视频数据,或者是标签备注为篮球的视频数据,或者是评论包含篮球的视频数据。
在实际应用中,可以设定每个第一设定关键词需要采集多少数量的视频数据。例如,假设一共包括10个第一设定关键词,每个第一设定关键词需要采集10条视频数据。如果某个第一设定关键词已经采集了10条视频数据了,则更换第一设定关键词,采集下一个第一设定关键词对应的视频数据。在这里,可以将这10个第一设定关键词进行采集顺序的排序,按照先后顺序采集第一设定关键词对应的视频数据。
S402,向所述服务器发送携带有第一用户名称的视频访问请求,以使所述服务器返回所述第一用户名称对应的用户账户上传的第二视频数据。
电子设备还可以通过操作脚本来向服务器发送携带有第一用户名称的视频访问请求,以使服务器返回第一用户名称对应的用户账户上传的第二视频数据。也就是说,第二视频数据是第一用户名称对应的用户账户上传到服务器的。在实际应用中,有一些用户会作为视频发布者发布一系列的视频数据,如果服务器接收到携带有该视频发布者的用户名称的视频访问请求,服务器会对应返回该视频发布者发布的所有视频数据。
在一实施例中,如图5所示,向所述服务器发送携带有第一用户名称的视频访问请求之前,所述获取方法还包括:
S501,获取所述设定数据库中的视频数据对应的上传所述视频数据的用户账户。
获取设定数据库中的视频数据对应的上传用户账户。
S502,根据所述用户账户的第一参数和对应的权重计算所述用户账户的分数;所述第一参数包括以下至少一项:所述用户账户接收到的互动信息的数量和关注所述用户账户的用户数量。
用户账户的第一参数包括用户账户接收到的互动信息的数量和关注用户账户的用户数量,也就是软件应用上常用的的点赞数、粉丝数和评论数。在这里,点赞数和评论数对应用户账户接收到的互动信息的数量,粉丝数对应关注用户账户的用户数量。如果某用户账户的粉丝数为30,则关注该用户账户的用户数量为30。如果某用户账户的点赞数和评论数分别为20和30,则该用户账户接收到的互动信息的数量为20+30=50。在实际应用中,可以分别为用户账户接收到的互动信息的数量和关注用户账户的用户数量设置一个权重,分别计算每个用户账户的得分,分数越高,说明该用户在该视频应用上的影响力或活跃度越大。例如,分别设置用户账户接收到的互动信息的数量和关注用户账户的用户数量的权重为60%、和40%,假设某用户账户用户账户接收到的互动信息的数量和关注用户账户的用户数量分别为10和20,则该用户账户的分数为60%×10+40%×20=14。
S503,将所述分数大于第一设定值的用户账户对应的用户名称确定为第一用户名称。
分别计算出各个用户账户的分数,确定其中分数大于第一设定值的用户账户。分数大于第一设定值说明该用户账户在视频应用中的影响力或活跃度较大,获取这些用户账户上传的视频数据,可以使得采集的视频数据更具参考性。在实际应用中,第一设定值可以根据总体分数水平来设置,例如,假设所有用户账户的分数平均值为100,则可以将第一设定值设置为100或略大于100的数值。
最后,将分数大于第一设定值的用户账户对应的用户名称确定为第一用户名称。在实际应用中,可以在数据库中创建一个数据表,命名为第一用户名称数据表,按照分数的大小进行排序,将分数大于第一设定值的用户账户对应的用户名称存储在第一用户名称数据表中。
除了上述确定第一用户名称的方法之外,还可以在视频软件上根据关键词的搜索结果来确定第一用户名称。参考图6,其示出了本发明实施例提供的另一种视频数据的获取方法的实现流程示意图,如图6所示,所述获取方法还包括:
S601,向所述服务器发送携带有第二设定关键词的用户名称访问请求,以使所述服务器返回与所述第二设定关键词相关的用户名称。
在实际应用中,视频应用有视频搜索窗口和用户搜索窗口,在对应窗口输入关键词,服务器会返回与关键词相关的内容。在视频搜索窗口输入关键词,服务器返回的是视频数据;在用户搜索窗口输入关键词,服务器返回的是用户名称。
S602,确定所述服务器返回的用户名称与所述第二设定关键词的关联度。
通常服务器返回的用户名称,会按照与关键词的关联度从大到小进行排名,排名靠前,说明与关键词的关联度越大。例如,假设第二设定关键词为篮球,若某用户账户上传的标题带有篮球的视频数据的数量越多,说明该用户账户的用户名称与篮球的关联度越大,则该用户账号的用户名称的排名就越靠前。
S603,将所述关联度大于第二设定值的用户名称确定为第一用户名称。
例如,将关联度大小为前10的用户名称确定为第一用户名称。在实际应用中,首先确定所有用户账户的关联度大小,按照关联度的大小进行排名,将排名第11的用户名称的关联度大小确定为第二设定值,那么将关联度大于第二设定值的用户名称确定为第一用户名称,也就是将排名前10的用户名称确定为第一用户名称。
因为排名越靠前,用户名称与关键词的关联度越大,说明当用户通过搜索关键词浏览视频时,该用户账户的视频被浏览的次数就越多。通过针对性的采集排名靠前的用户账户的视频数据,可以使得采集到的视频数据更具参考性。
S403,向所述服务器发送携带有第二用户名称的视频访问请求,以使所述服务器返回第三视频数据;所述第三视频数据为所述服务器根据所述第二用户名称对应的用户账户的访问历史数据,向所述第二用户名称对应的用户账户推送的视频数据。
在实际应用中,当用户打开视频软件后,视频软件会自动推送视频数据。这是因为用户账户在视频软件上登录后,会给服务器发送携带有第二用户名称的视频访问请求。服务器会根据该用户账户的历史访问数据,向视频软件推送与历史访问数据相似的视频数据。例如,如果用户账户的历史访问数据大部分是与篮球相关的,则推送与篮球相关的视频数据,服务器优先推送该用户账户未浏览过的视频数据。
S103,通过所述至少两台模拟器分别接收所述服务器根据对应的视频访问请求返回的视频数据。
通过模拟器接收服务器返回的视频数据,例如,如果通过模拟器A向服务器A发送视频访问请求,则服务器A将视频数据返回给模拟器A。
在通过所述至少两台模拟器分别接收所述服务器根据对应的视频访问请求返回的视频数据时,所述获取方法还包括:
S104,截取所述服务器根据对应的视频访问请求返回的视频数据,并将截取到的视频数据存储至设定数据库中。
电子设备可以通过抓包工具截取所述服务器根据对应的视频访问请求返回的视频数据。例如,在实际应用中,可以使用中间人代理(mitmproxy,man-in-the-middleproxy)工具来截取视频数据,mitmproxy是一款http代理工具,可用于中间人攻击,也可用于数据的抓取。在本发明实施例中,主要是用它来作为一种代理,抓取服务器返回的视频数据。具体实现流程为:基于mitmproxy用Python语言写一份操作脚本,然后用脚本命令mitmdump启动该操作脚本,用该操作脚本来截获和解析模拟器请求后返回的视频数据。还可以在操作脚本中增加ip代理切换机制,保证抓包工具的稳定运行,并且可以保护电子设备的ip不被发现。
电子设备截取到视频数据后,将视频数据存储在设定数据库中。在实际应用中,可以设置多个数据库,一个视频应用对应一个数据库,从视频应用对应的服务器中获取的视频数据都存储在该数据库中。还可以在数据库中根据视频类型、用户名称设置多个数据表,将视频数据根据用户名称、视频类型存储在对应的数据表中。
本发明实施例通过部署至少两台模拟器,通过至少两台模拟器分别向视频应用的服务器发送视频访问请求,可以通过多台模拟器并行处理的方式获取到更多的视频数据,提高视频数据的采集效率。并在通过所述至少两台模拟器分别接收所述服务器根据对应的视频访问请求返回的视频数据时,截取所述服务器根据对应的视频访问请求返回的视频数据,能够避免对视频应用进行脱壳和解密,解决了相关技术在进行网络监管的过程中视频数据采集困难的问题。并且通过关键词搜索视频可以使得获取到的视频数据具有针对性和参考性;通过搜索用户名称,可以获取到用户账户上传的最新的视频数据,使得获得的视频数据具有时效性。
在一个实施例中,如图7所示,所述获取方法还包括:
S701,每隔设定时间,统计所述设定数据库中所述至少两台模拟器中的每台模拟器对应的视频数据的数量。
例如,每隔10分钟统计设定数据库中每台模拟器对应的视频数据的数量。应理解,电子设备在存储视频数据时,会在数据库中备注该视频数据是对应哪个模拟器,例如,在实际应用中,可以在数据库中设置多个数据表,每个数据表对应一个模拟器,将视频数据存储在对应的数据表中,每隔10分钟统计各数据表中的视频数据的数量。
S702,当所述数量满足第一设定条件时,重启对应模拟器上的所述视频应用;所述第一设定条件表征所述数量异常。
因为电子设备会使用抓包工具持续截取视频数据并将视频数据存储在设定数据库中,因此,在正常情况下,设定数据库中的视频数据的数量会持续增长。如果设定数据库中的视频数据的数量的增长速度变慢或者停止,说明视频应用发生了故障,此时,重启该视频应用,以使得电子设备可以重新采集该视频应用上的视频数据,不对视频数据的采集效率造成影响。
第一设定条件表征所述数量异常,例如,假设正常情况下设定数据库中某模拟器对应的视频数据的数量每10分钟增加10个,当前设定数据库中该模拟器对应的视频数据的数量为40个,那么在正常情况下,10分钟后设定数据库中该模拟器对应的视频数据的数量应为50个。如果10分钟后设定数据库中该模拟器对应的视频数据的数量为43个,小于50个,则数量满足第一设定条件。
图8是本发明应用实施例提供的一种电子设备的系统架构示意图。在本发明实施例中,电子设备具体可以为服务器或服务器集群,在整个视频获取的架构中作为调度中心存在,用于对在其中运行的多台模拟器进行调度,具体调度内容如下:
调度中心首先传递参数给Appium控制器,Appium控制器是通过自动化测试框架Appium编写的操作脚本,可以控制模拟器的操作。Appium控制器通过控制命令来控制模拟器向视频应用的服务器发送视频访问请求,针对不同的模拟器,调度中心使用不同的Appium控制器来控制。例如,如图8所示,分别使用Appium控制器1、Appium控制器2和Appium控制器3来控制模拟器1、模拟器2和模拟器3。根据模拟器上运行的视频应用,将视频访问请求发送给视频应用对应的服务器。例如,如果模拟器1上运行的是视频软件1,则将视频访问请求发送给视频软件1的服务器。视频应用的服务器接收到视频访问请求后,根据视频访问请求的具体内容,服务器将视频数据返回给对应的模拟器。在视频数据的返回过程中,调度中心通过抓包代理工具Mitmproxy截取服务器返回的视频数据,并将视频数据存储在数据库中。Mitmproxy并不会影响服务器将视频数据发送给模拟器,可以理解为Mitmproxy将返回的视频数据复制了一份。
调度中心除了可以发送视频请求之外,调度中心还可以通过Appium控制器修改模拟器的参数,避免模拟器被服务器识别。调度中心还可以持续对数据库进行异常监控,具体可以每隔设定时间,统计数据库中每台模拟器对应的视频数据的数量;当数量异常时,重启对应模拟器上的视频应用,以此保障视频数据的正常采集。该实施例的具体实现过程详见上述方法实施例,这里不再赘述。
基于图8的系统架构,图9示出了本发明应用实施例提供的一种视频数据的获取流程:
S901,启动Appium控制器。
Appium控制器是通过自动化测试框架Appium编写的操作脚本,通过Appium控制器可以控制模拟器的操作。
S902,输入关键词进行视频搜索。
通过Appium控制器控制模拟器进行操作,在视频应用的搜索窗口输入关键词,以此向服务器发送视频访问请求,以使得服务器返回与关键词相关的第一视频数据。
S903,定时更新关键词。
每隔设定时间更新关键词,或者设定每个关键词采集设定数量的视频数据。例如,每隔10分钟在视频应用的搜索窗口输入新的关键词,或等当前关键词采集10条视频数据后在视频应用的搜索窗口输入新的关键词。
S904,通过抓包工具截取服务器返回的视频数据。
通过模拟器接收服务器根据视频访问请求返回的视频数据。
在通过模拟器接收服务器根据视频访问请求返回的视频数据时,通过抓包工具截取所述服务器根据对应的视频访问请求返回的视频数据。
S905,将截取的视频数据存储在数据库中。
基于图8的系统架构,图10示出了本发明应用实施例提供的另一种视频数据的获取流程:
S1001,启动Appium控制器。
S1002,接收服务器推荐的视频数据。
通过Appium控制器启动模拟器中的视频应用后,通常视频应用会自动登录上次登录过的用户账户,如果模拟器上的视频应用没有用户登录过,则可以通过Appium控制器输入用户账户信息进行登录。用户账户登录后,通过Appium控制器向服务器发送携带有第二用户名称的视频访问请求,以使服务器返回第三视频数据;所述第三视频数据为所述服务器根据所述第二用户名称对应的用户账户的访问历史数据,向所述第二用户名称对应的用户账户推送的视频数据。
S1003,定时更新服务器推荐的视频数据。
由于服务器每次向用户账户推荐一定数量的视频数据,如果推荐的视频数据不进行更新,用户在观看完服务器推荐的视频数据后,会导致没有视频数据可以继续观看。因此,需要及时更新推荐的视频数据。在实际应用中,可以每隔设定时间间隔向服务器发送视频更新请求,服务器根据视频更新请求返回一定数量的新的视频数据给模拟器。
S1004,通过抓包工具截取服务器推荐的视频数据。
S1005,将截取的视频数据存储在数据库中。
基于图8的系统架构,图11示出了本发明应用实施例提供的另一种视频数据的获取流程:
S1101,启动Appium控制器。
S1102,输入关键词进行用户搜索。
通过Appium控制器控制模拟器进行操作,在视频应用的搜索窗口输入关键词,以此向服务器发送携带有关键词的用户名称访问请求,以使所述服务器返回与关键词相关的用户名称。
S1103,确定第一用户名称。
具体的,可以获取所述设定数据库中的视频数据对应的上传所述视频数据的用户账户;根据所述用户账户的第一参数和对应的权重计算所述用户账户的分数;所述第一参数包括以下至少一项:所述用户账户接收到的互动信息的数量和关注所述用户账户的用户数量;将所述分数大于第一设定值的用户账户对应的用户名称确定为第一用户名称。
或者,向所述服务器发送携带有第二设定关键词的用户名称访问请求,以使所述服务器返回与所述第二设定关键词相关的用户名称;确定所述服务器返回的用户名称与所述第二设定关键词的关联度;将所述关联度大于第二设定值的用户名称确定为第一用户名称。
S1104,输入第一用户名称进行视频搜索。
通过Appium控制器控制模拟器进行操作,在视频应用的搜索窗口输入第一用户名称,以此向服务器发送携带有第一用户名称的视频访问请求,以使所述服务器返回与第一用户名称相关的视频数据。
S1105,定时更新第一用户名称。
由于每个用户账户上传的视频数据是有限的,如果一直采集该用户账户上传的视频数据,在采集完该用户账户上传的所有视频数据后,视频数据的采集将会停止。因此,为了防止数据采集停止下来,可以每隔设定时间更新第一用户名称。在实际应用中,通过Appium控制器控制模拟器进行操作,每隔设定时间在视频应用的搜索窗口输入新的第一用户名称,以此向服务器发送携带有新的第一用户名称的视频访问请求。或者,设定每个第一用户名称采集设定数量的视频数据。
S1106,通过抓包工具截取服务器返回的视频数据。
S1107,将截取的视频数据存储在数据库中。
图12示出了本发明应用实施例提供的一种第一用户名称的获取流程:
本发明应用实施例有两种获取第一用户名称的方法,第一种:首先从关键词数据库中获取关键词,关键词数据库存储在电子设备中,关键词数据库中存储有需要在视频软件上进行搜索的关键词。获取到关键词后,在视频软件的用户搜索窗口输入关键词搜索与关键词相关的用户名称。然后在搜索出的用户名称中确定其中与关键词关联度较大的第一用户名称,最后将第一用户名称存储在电子设备的第一用户名称数据库中。第二种:从设定数据库中确定出第一用户名称。具体的,首先获取设定数据库中的视频数据对应的上传所述视频数据的用户账户;然后根据用户账户的第一参数和对应的权重计算所述用户账户的分数;所述第一参数包括以下至少一项:用户账户接收到的互动信息的数量和关注用户账户的用户数量;最后将分数大于第一设定值的用户账户对应的用户名称确定为第一用户名称,将第一用户名称存储在第一用户名称数据库中。
上述实施例中未详细展开描述的步骤,其具体实现过程详见上述方法实施例,这里不再赘述。
本发明实施例提供了三种方法来获取视频应用上的视频数据,第一种通过采集关键词相关的视频数据;第二种通过采集服务器推荐的视频数据;第三种通过采集指定用户上传的视频数据。通过多种采集策略,本发明实施例可以使得采集到的视频数据更具参考性。
参考图13,图13是本发明实施例提供的一种视频数据的获取装置的示意图,设置于电子设备中,如图13所示,该装置包括:部署模块、发送模块、接收模块和截取模块。
部署模块,用于部署至少两台模拟器;所述至少两台模拟器中的每台模拟器用于模拟运行一台移动终端;
发送模块,用于通过所述至少两台模拟器分别向服务器发送视频访问请求;所述服务器为视频应用对应的服务器;
接收模块,用于通过所述至少两台模拟器分别接收所述服务器根据对应的视频访问请求返回的视频数据;
在通过所述至少两台模拟器分别接收所述服务器根据对应的视频访问请求返回的视频数据时,所述获取方法还包括:
截取模块,用于截取所述服务器根据对应的视频访问请求返回的视频数据,并将截取到的视频数据存储至设定数据库中。
所述装置还包括:
统计模块,用于每隔设定时间,统计所述设定数据库中所述至少两台模拟器中的每台模拟器对应的视频数据的数量;
重启模块,用于当所述数量满足第一设定条件时,重启对应模拟器上的所述视频应用;所述第一设定条件表征所述数量异常。
所述装置还包括:
修改模块,用于修改所述模拟器对应的参数;
所述参数包括以下至少一项:移动终端的序列号、移动终端的型号和介质访问控制层MAC地址。
所述发送模块具体用于:
获取所述视频应用对应的操作脚本;
执行所述操作脚本向所述视频应用对应的服务器发送视频访问请求。
所述发送模块具体用于:
向所述服务器发送携带有第一设定关键词的视频访问请求,以使所述服务器返回与所述第一设定关键词相关的第一视频数据;或
向所述服务器发送携带有第一用户名称的视频访问请求,以使所述服务器返回所述第一用户名称对应的用户账户上传的第二视频数据;或
向所述服务器发送携带有第二用户名称的视频访问请求,以使所述服务器返回第三视频数据;所述第三视频数据为所述服务器根据所述第二用户名称对应的用户账户的访问历史数据,向所述第二用户名称对应的用户账户推送的视频数据。
所述装置还包括:第一用户名称确定模块,用于:
获取所述设定数据库中的视频数据对应的上传所述视频数据的用户账户;
根据所述用户账户的第一参数和对应的权重计算所述用户账户的分数;所述第一参数包括以下至少一项:所述用户账户接收到的互动信息的数量和关注所述用户账户的用户数量;
将所述分数大于第一设定值的用户账户对应的用户名称确定为第一用户名称。
所述第一用户名称确定模块还用于:
向所述服务器发送携带有第二设定关键词的用户名称访问请求,以使所述服务器返回与所述第二设定关键词相关的用户名称;
确定所述服务器返回的用户名称与所述第二设定关键词的关联度;
将所述关联度大于第二设定值的用户名称确定为第一用户名称。
需要说明的是:上述实施例提供的视频数据的获取装置在进行视频数据的获取时,仅以上述各模块的划分进行举例说明,实际应用中,可以根据需要而将上述处理分配由不同的模块完成,即将装置的内部结构划分成不同的模块,以完成以上描述的全部或者部分处理。另外,上述实施例提供的视频数据的获取装置与视频数据的获取方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
图14是本发明一实施例提供的电子设备的示意图。如图14所示,该实施例的电子设备包括:处理器、存储器以及存储在所述存储器中并可在所述处理器上运行的计算机程序。所述处理器执行所述计算机程序时实现上述各个方法实施例中的步骤,例如图3所示的步骤101至104。或者,所述处理器执行所述计算机程序时实现上述各装置实施例中各模块/单元的功能,例如图13所示署模块、发送模块、接收模块和截取模块的功能。
示例性的,所述计算机程序可以被分割成一个或多个模块,所述一个或者多个模块被存储在所述存储器中,并由所述处理器执行,以完成本发明。所述一个或多个模块可以是能够完成特定功能的一系列计算机程序指令段,该指令段用于描述所述计算机程序在所述服务器中的执行过程。
所述电子设备可包括,但不仅限于,处理器、存储器。本领域技术人员可以理解,图14仅仅是电子设备的示例,并不构成对电子设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如所述电子设备还可以包括输入输出设备、网络接入设备、总线等。
所称处理器可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
所述存储器可以是所述电子设备的内部存储单元,例如电子设备的硬盘或内存。所述存储器也可以是所述电子设备的外部存储设备,例如所述电子设备上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。进一步地,所述存储器还可以既包括所述电子设备的内部存储单元也包括外部存储设备。所述存储器用于存储所述计算机程序以及所述电子设备所需的其他程序和数据。所述存储器还可以用于暂时地存储已经输出或者将要输出的数据。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将所述装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中,上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。另外,各功能单元、模块的具体名称也只是为了便于相互区分,并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
在本发明所提供的实施例中,应该理解到,所揭露的装置/电子设备和方法,可以通过其它的方式实现。例如,以上所描述的装置/电子设备实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口,装置或单元的间接耦合或通讯连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤。其中,所述计算机程序包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、电载波信号、电信信号以及软件分发介质等。需要说明的是,所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括电载波信号和电信信号。
以上所述实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围,均应包含在本发明的保护范围之内。
Claims (9)
1.一种视频数据的获取方法,其特征在于,包括:
部署至少两台模拟器;所述至少两台模拟器中的每台模拟器用于模拟运行一台移动终端;
通过所述至少两台模拟器分别向服务器发送视频访问请求;所述服务器为视频应用对应的服务器;其中,所述视频访问请求包括:携带有第一用户名称的视频访问请求;其中,所述第一用户名称为分数大于第一设定值的用户账号对应的用户名称;所述分数说明用户在视频应用上的影响力或活跃程度;或,所述第一用户名称为:通过向所述服务器发送携带有第二设定关键词的用户名称访问请求,所述服务器基于所述用户名称访问请求返回的用户名称中与所述第二设定关键词的关联度大于第二设定值的用户名称;
通过所述至少两台模拟器分别接收所述服务器根据对应的视频访问请求返回的视频数据;
在通过所述至少两台模拟器分别接收所述服务器根据对应的视频访问请求返回的视频数据时,所述获取方法还包括:
截取所述服务器根据对应的视频访问请求返回的视频数据,并将截取到的视频数据存储至设定数据库中,其中,存储至所述设定数据库中的视频数据,用于网络监管。
2.如权利要求1所述的获取方法,其特征在于,所述获取方法还包括:
每隔设定时间,统计所述设定数据库中所述至少两台模拟器中的每台模拟器对应的视频数据的数量;
当所述数量满足第一设定条件时,重启对应模拟器上的所述视频应用;所述第一设定条件表征所述数量异常。
3.如权利要求1所述的获取方法,其特征在于,所述获取方法还包括:
修改所述模拟器对应的参数;
所述参数包括以下至少一项:移动终端的序列号、移动终端的型号和介质访问控制层MAC地址。
4.如权利要求1所述的获取方法,其特征在于,所述通过所述至少两台模拟器分别向服务器发送视频访问请求时,所述方法包括:
获取所述视频应用对应的操作脚本;
执行所述操作脚本向所述视频应用对应的服务器发送视频访问请求。
5.如权利要求1所述的获取方法,其特征在于,所述通过所述至少两台模拟器分别向服务器发送视频访问请求,还包括:
向所述服务器发送携带有第一设定关键词的视频访问请求,以使所述服务器返回与所述第一设定关键词相关的第一视频数据;或
向所述服务器发送携带有第二用户名称的视频访问请求,以使所述服务器返回第三视频数据;所述第三视频数据为所述服务器根据所述第二用户名称对应的用户账户的访问历史数据,向所述第二用户名称对应的用户账户推送的视频数据。
6.如权利要求5所述的获取方法,其特征在于,向所述服务器发送携带有第一用户名称的视频访问请求之前,所述获取方法还包括:
获取所述设定数据库中的视频数据对应的上传所述视频数据的用户账户;
根据所述用户账户的第一参数和对应的权重计算所述用户账户的分数;所述第一参数包括以下至少一项:所述用户账户接收到的互动信息的数量和关注所述用户账户的用户数量;
将所述分数大于第一设定值的用户账户对应的用户名称确定为第一用户名称。
7.一种视频数据的获取装置,其特征在于,包括:
部署模块,用于部署至少两台模拟器;所述至少两台模拟器中的每台模拟器用于模拟运行一台移动终端;
发送模块,用于通过所述至少两台模拟器分别向服务器发送视频访问请求;所述服务器为视频应用对应的服务器;其中,所述视频访问请求包括:携带有第一用户名称的视频访问请求;其中,所述第一用户名称为分数大于第一设定值的用户账号对应的用户名称;所述分数说明用户在视频应用上的影响力或活跃程度;或,所述第一用户名称为:通过向所述服务器发送携带有第二设定关键词的用户名称访问请求,所述服务器基于所述用户名称访问请求返回的用户名称中与所述第二设定关键词的关联度大于第二设定值的用户名称;
接收模块,用于通过所述至少两台模拟器分别接收所述服务器根据对应的视频访问请求返回的视频数据;
在通过所述至少两台模拟器分别接收所述服务器根据对应的视频访问请求返回的视频数据时,所述获取方法还包括:
截取模块,用于截取所述服务器根据对应的视频访问请求返回的视频数据,并将截取到的视频数据存储至设定数据库中,其中,存储至所述设定数据库中的视频数据,用于网络监管。
8.一种电子设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至6任一项所述的视频数据的获取方法。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序包括程序指令,所述程序指令当被处理器执行时使所述处理器执行如权利要求1至6任一项所述的视频数据的获取方法。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911421431.4A CN113132760B (zh) | 2019-12-31 | 2019-12-31 | 视频数据的获取方法、装置、电子设备及存储介质 |
US17/789,649 US11812086B2 (en) | 2019-12-31 | 2020-12-29 | Video data obtaining method and apparatus, electronic device, and storage medium |
PCT/CN2020/141096 WO2021136307A1 (zh) | 2019-12-31 | 2020-12-29 | 视频数据的获取方法、装置、电子设备及存储介质 |
JP2022564689A JP7383176B2 (ja) | 2019-12-31 | 2020-12-29 | ビデオデータの取得方法、装置、電子デバイス及び記憶媒体 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911421431.4A CN113132760B (zh) | 2019-12-31 | 2019-12-31 | 视频数据的获取方法、装置、电子设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113132760A CN113132760A (zh) | 2021-07-16 |
CN113132760B true CN113132760B (zh) | 2022-12-16 |
Family
ID=76686553
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911421431.4A Active CN113132760B (zh) | 2019-12-31 | 2019-12-31 | 视频数据的获取方法、装置、电子设备及存储介质 |
Country Status (4)
Country | Link |
---|---|
US (1) | US11812086B2 (zh) |
JP (1) | JP7383176B2 (zh) |
CN (1) | CN113132760B (zh) |
WO (1) | WO2021136307A1 (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114257408A (zh) * | 2021-11-18 | 2022-03-29 | 珠海金智维信息科技有限公司 | 网络空间数据获取方法、系统及介质 |
JP2024063557A (ja) * | 2022-10-26 | 2024-05-13 | 株式会社東芝 | 情報処理方法、情報処理装置及びプログラム |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101355777A (zh) * | 2008-09-23 | 2009-01-28 | 余纯龙 | 基于总线截取及视频采集的远程手机测试系统及方法 |
CN102984028A (zh) * | 2012-11-30 | 2013-03-20 | 南京小网科技有限责任公司 | 移动终端远程集中测试的方法 |
CN103686198A (zh) * | 2013-12-30 | 2014-03-26 | 优视科技有限公司 | 视频数据的处理方法、装置和系统 |
CN104036194A (zh) * | 2014-05-16 | 2014-09-10 | 北京金山安全软件有限公司 | 一种应用程序中泄露隐私数据的漏洞检测方法及装置 |
CN107908952A (zh) * | 2017-10-25 | 2018-04-13 | 广州优视网络科技有限公司 | 识别真机和模拟器的方法、装置和终端 |
CN109446801A (zh) * | 2018-10-22 | 2019-03-08 | 武汉极意网络科技有限公司 | 检测模拟器访问的方法、装置、服务器及存储介质 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080145829A1 (en) * | 2006-12-15 | 2008-06-19 | Atellis, Inc. | Synchronous multi-media recording and playback with end user control of time, data, and event visualization for playback control over a network |
US9451043B2 (en) | 2013-09-13 | 2016-09-20 | Evie Labs, Inc. | Remote virtualization of mobile apps |
US20150089590A1 (en) * | 2013-09-20 | 2015-03-26 | Ramnarayan Krishnan | Methods for secure control of and secure data extraction from implantable medical devices using smartphones or other mobile devices |
US9916231B2 (en) | 2015-07-17 | 2018-03-13 | Magine Holding AB | Modular plug-and-play system for continuous model driven testing |
US10672026B2 (en) * | 2016-01-31 | 2020-06-02 | Assaf Toval | System and a method for surveying advertisements in mobile applications |
EP3516509A1 (en) * | 2016-09-27 | 2019-07-31 | Google LLC | Selective simulation of virtualized hardware inputs |
US10848805B1 (en) * | 2018-03-28 | 2020-11-24 | Electronic Arts Inc. | Contextual video recommendations within a video game |
CN109033072A (zh) | 2018-06-27 | 2018-12-18 | 广东省新闻出版广电局 | 一种基于互联网的视听节目监管系统 |
CN109688483A (zh) | 2018-12-17 | 2019-04-26 | 北京爱奇艺科技有限公司 | 一种获取视频的方法、装置及电子设备 |
CN110032472A (zh) * | 2019-03-05 | 2019-07-19 | 视联动力信息技术股份有限公司 | 一种应用程序的重启方法和装置 |
CN110351259A (zh) | 2019-06-28 | 2019-10-18 | 深圳数位传媒科技有限公司 | 一种基于网络抓包获取app认证信息的方法及装置 |
-
2019
- 2019-12-31 CN CN201911421431.4A patent/CN113132760B/zh active Active
-
2020
- 2020-12-29 JP JP2022564689A patent/JP7383176B2/ja active Active
- 2020-12-29 US US17/789,649 patent/US11812086B2/en active Active
- 2020-12-29 WO PCT/CN2020/141096 patent/WO2021136307A1/zh active Application Filing
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101355777A (zh) * | 2008-09-23 | 2009-01-28 | 余纯龙 | 基于总线截取及视频采集的远程手机测试系统及方法 |
CN102984028A (zh) * | 2012-11-30 | 2013-03-20 | 南京小网科技有限责任公司 | 移动终端远程集中测试的方法 |
CN103686198A (zh) * | 2013-12-30 | 2014-03-26 | 优视科技有限公司 | 视频数据的处理方法、装置和系统 |
CN104036194A (zh) * | 2014-05-16 | 2014-09-10 | 北京金山安全软件有限公司 | 一种应用程序中泄露隐私数据的漏洞检测方法及装置 |
CN107908952A (zh) * | 2017-10-25 | 2018-04-13 | 广州优视网络科技有限公司 | 识别真机和模拟器的方法、装置和终端 |
CN109446801A (zh) * | 2018-10-22 | 2019-03-08 | 武汉极意网络科技有限公司 | 检测模拟器访问的方法、装置、服务器及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
JP2023508610A (ja) | 2023-03-02 |
US11812086B2 (en) | 2023-11-07 |
CN113132760A (zh) | 2021-07-16 |
US20230039406A1 (en) | 2023-02-09 |
WO2021136307A1 (zh) | 2021-07-08 |
JP7383176B2 (ja) | 2023-11-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10565077B2 (en) | Using cognitive technologies to identify and resolve issues in a distributed infrastructure | |
US9996562B2 (en) | Automated database migration architecture | |
US20150046425A1 (en) | Methods and systems for searching software applications | |
US20170078361A1 (en) | Method and System for Collecting Digital Media Data and Metadata and Audience Data | |
CN110213234B (zh) | 应用程序文件的开发者识别方法、装置、设备及存储介质 | |
CN113132760B (zh) | 视频数据的获取方法、装置、电子设备及存储介质 | |
CN103678487A (zh) | 一种网页快照的生成方法和装置 | |
CA2988805C (en) | Datastore for aggregated measurements for metrics | |
CN105511962A (zh) | 渲染方法和装置 | |
US10242102B2 (en) | Network crawling prioritization | |
CN110012096A (zh) | 移动客户端服务更新管理方法、装置及系统 | |
CN107918564B (zh) | 数据传输异常处理方法、装置、电子设备及存储介质 | |
CN107648854B (zh) | 一种游戏分类方法、装置及电子设备 | |
CN103530551A (zh) | 基于移动互联网和云计算的软件限制方法和系统 | |
EP2846273A1 (en) | Methods and systems for searching software applications | |
CN104461741B (zh) | 基于图形设备接口的计算设备优化方法及装置 | |
CN109446441A (zh) | 一种通用的网络社区可信分布式采集存储系统 | |
CN109032696A (zh) | 一种页面调起方法、终端及计算机存储介质 | |
US10157210B2 (en) | Searching and accessing software application functionality using application connections | |
CN103530550A (zh) | 移动通讯终端上的文件/应用程序处理方法及装置 | |
US9378230B1 (en) | Ensuring availability of data in a set being uncorrelated over time | |
CN110674426A (zh) | 网页行为上报方法和装置 | |
US10482105B1 (en) | External verification of content popularity | |
CN112817816B (zh) | 埋点处理方法、装置、计算机设备和存储介质 | |
EP3087469A1 (en) | Dynamically sharing intents |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |