CN102098327A - 在线视频嗅探下载方法及装置 - Google Patents

在线视频嗅探下载方法及装置 Download PDF

Info

Publication number
CN102098327A
CN102098327A CN2010105892632A CN201010589263A CN102098327A CN 102098327 A CN102098327 A CN 102098327A CN 2010105892632 A CN2010105892632 A CN 2010105892632A CN 201010589263 A CN201010589263 A CN 201010589263A CN 102098327 A CN102098327 A CN 102098327A
Authority
CN
China
Prior art keywords
online video
video
smelt
browser
spy
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2010105892632A
Other languages
English (en)
Inventor
谭国强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Baidu Online Network Technology Beijing Co Ltd
Beijing Baidu Netcom Science and Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Priority to CN2010105892632A priority Critical patent/CN102098327A/zh
Priority to CN201410098851.4A priority patent/CN103905915B/zh
Publication of CN102098327A publication Critical patent/CN102098327A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明提供一种在线视频嗅探下载方法,包括:浏览器自动提取URL地址并发出网络请求打开网络页面;在线视频资源请求模块通过在线视频嗅探下载模块向所述浏览器动态地请求所述URL地址的在线视频资源;所述浏览器向服务器请求所述URL地址的在线视频资源;所述服务器返回与所述URL地址的在线视频资源相应的视频播放地址至所述浏览器;所述浏览器将所述视频播放地址返回至所述在线视频嗅探下载模块;所述在线视频嗅探下载模块下载所述视频播放地址上的在线视频的全部或部分原文件。与现有技术相比,本发明的有益效果是:通用性和扩展性都较好;不存在视频失效的问题,召回率较高;运行过程完全自动化,不需要人工参与;便于大规模应用。

Description

在线视频嗅探下载方法及装置
技术领域
本发明涉及一种在线视频嗅探下载方法及装置,尤其涉及一种用于获取动态生成的视频链接地址并下载该视频的在线视频嗅探下载方法及装置。
背景技术
随着互联网技术的发展,各种视频网站越来越多,用户可以通过视频网站进行视频共享。然而,现有的视频网站的视频链接地址是一般是由JavaScript动态产生的,通过内容提取系统,如Spider这样的工具对静态页面分析是无法得到动态产生的视频链接真实地址的,通常视频链接的真实地址只有在播放器,如Flash加载后通过浏览器向服务器发起请求时才能获得。因此,现有的视频网站大多只能通过相关网页进行在线观看,而不能将其下载到本地。
但是,在很多情况下,用户是希望将视频下载到本地的。例如,当用户需要重复观看曾经看过的视频时,若能将该视频下载到本地,则不仅观看方便(无需再次查找),同时也节约了网络流量,避免了网络拥塞;另外,若用户是搜索引擎开放商,则在更多的时候不仅需要视频的链接地址,还需要下载该视频,原因之一是:视频文件本身存储于第三方网站的服务器上,而第三方网站不会直接将视频文件提交给搜索引擎(即使提交也存在作弊可能),所以需要通过下载得到第三方视频网站的视频文件,原因之二是:搜索引擎为得到更多关于该视频的信息,如视频的清晰度等,需要下载得到第三方视频网站的视频文件。
为解决上述的技术问题,中国专利申请第200910187783.0号公开了一种在线视频自动下载的方法,该方法对被选择的视频网站和/或频道进行监控,当有更新的在线视频时,则判断在线视频地址是真实地址还是播放地址或播放链接,如果是真实地址,则直接进行下载,如果是播放地址或者播放链接,则先通过播放地址或链接打开该在线视频,对经过本地网卡的数据进行嗅探,提取该在线视频的真实地址进行下载。然而,该专利申请所公开的在线视频自动下载方法,需要用户打开某个播放页面来获取视频链接,且只能一次打开一个页面,不然无法将播放页和网卡分析的视频链接对应起来,操作繁琐,且不能大规模应用,而对于搜索引擎开放商而言,能够大规模应用是很重要的。
中国专利申请第200810180826.5号公开了一种针对视频网站的广域网爬虫系统,其包括:用于提取网页中的所有超链接的超链接扫描器;用于分析并提取网页中的指向视频的通用形式超链接的通用地址分析提取器;用于分析并提取网页中的视频的标识符号的视频标识提取器;用于将所述视频标识提取器提取的视频标识符号合成播放器所需的网页地址的播放地址合成器;用于在所述播放地址合成器合成的播放地址所指向的页面中提取视频真实存放地址的视频真实地址提取器;用于保存在所述通用地址分析提取器中被提取的指向视频的通用形式超链接的通用地址存储库;用于保存在所述视频真实地址提取器中被提取的视频真实存放地址超链接的真实地址存储库;用于下载在所述真实地址存储库中存储的视频真实存放地址超链接指向的视频数据的视频数据下载器;用于存储在所述视频数据下载器中下载的数据的视频数据存储库;用于向所述超链接扫描器提供需要处理的超链接的超链接喂食器。通过该针对视频网站的广域网爬虫系统可以有效地解决爬虫系统无法采集广域网中视频网站数据的问题,可以为视频爬虫系统中的核心技术转址功能提供通用框架,可以为搭建针对广域网视频的搜索引擎系统的重要组成部分视频数据采集系统提供通用的搭建架构。但是,该针对视频网站的广域网爬虫系统存在以下问题:
通用性较差:每个站点的标识来源和提取方法不同,每个站点的合成模板也不一样,不能适合所有站点;
扩展性较差:标识的生成方法和模板变化了需要重新挖掘新的模板;
召回率有限:不是所有站点都采用这种方法来发布标识,也不是所有站点都是通过这种方法来生成视频链接,很多视频链接由网站的swf文件动态生成(有独立的链接生成算法);
视频链接失效问题:很多站点生成的视频链接和session有关,会失效,这种类型的视频链接即使获取到了,也无法下载。
有鉴于此,需要本发明提供一种改进的在线视频嗅探下载方法和装置。
发明内容
本发明的目的在于提供一种改进的在线视频嗅探下载方法,该在线视频嗅探下载方法可下载动态生成的视频链接地址的视频内容。
本发明的目的还在于提供一种实现上述在线视频嗅探下载方法的视频搜索装置。
为实现上述发明目的之一,本发明的一种在线视频嗅探下载方法,包括以下步骤:
一种在线视频嗅探下载方法,其特征在于,所述在线视频嗅探下载方法包括以下步骤:
S1、浏览器自动提取URL地址并发出网络请求打开网络页面;
S2、在线视频资源请求模块通过在线视频嗅探下载模块向所述浏览器动态地请求所述URL地址的在线视频资源;
S3、所述浏览器向服务器请求所述URL地址的在线视频资源;
S4、所述服务器返回与所述URL地址的在线视频资源相应的视频播放地址至所述浏览器;
S5、所述浏览器将所述视频播放地址返回至所述在线视频嗅探下载模块;
S6、所述在线视频嗅探下载模块下载所述视频播放地址上的在线视频的全部或部分原文件。
作为本发明的进一步改进,在所述S5步骤和所述S6步骤间,还包括步骤:由所述在线视频嗅探下载模块将所述视频播放地址返回至在线视频资源请求模块。
作为本发明的进一步改进,所述S6步骤中,在“下载所述视频播放地址上的在线视频的全部或部分原文件”同时,所述在线视频嗅探下载模块可播放所述视频播放地址上的所述在线视频。
作为本发明的进一步改进,在所述S6步骤后,还包括步骤:存储所述在线视频的全部或部分原文件。
作为本发明的进一步改进,在所述S1步骤和所述S2步骤间,还包括步骤:
判断所述网络页面是否包含在线视频资源;
若包括在线视频资源则进入步骤S2。
作为本发明的进一步改进,所述S6步骤后,还包括步骤:
判断是否为分段下载的在线视频的全部或部分原文件;
若是,则合并所述在线视频的全部或部分原文件。
相应地,作为实现上述另一目的,本发明的一种在线视频嗅探下载装置包括:
一种在线视频嗅探下载装置,其特征在于,所述在线视频嗅探下载装置包括:
浏览器,用于自动提取URL地址并打开网络页面;接收在线视频资源请求,并将所述在线视频资源请求转发至服务器;接收所述服务器返回的视频播放地址,并将所述视频播放地址转发;
在线视频资源请求模块,用于发出所述在线视频资源请求;
在线视频嗅探下载模块,用于接收所述在线视频资源请求模块发出的在线视频资源请求,并将该在线视频资源请求转发至浏览器;接收所述浏览器转发的所述视频播放地址,并下载所述视频播放地址上的在线视频的原文件。
作为本发明的进一步改进,所述在线视频嗅探下载模块还用于:将所述视频播放地址返回至所述在线视频资源请求模块。
作为本发明的进一步改进,所述在线资源请求模块为一可加载于所述浏览器中的播放器插件,用于播放所述视频播放地址上的在线视频。
作为本发明的进一步改进,所述在线视频嗅探下载装置还包括:
网络地址数据:用于存储URL地址,以便所述浏览器提取。
作为本发明的进一步改进,所述浏览器为开源浏览器。
作为本发明的进一步改进,所述浏览器、所述在线视频资源请求模块、在线视频嗅探下载模块所述通过开源接口连接。
作为本发明的进一步改进,所述视频嗅探下载模块是嵌入所述浏览器中的,所述在线视频嗅探下载模块与所述浏览器打开页面数量为1∶1。
作为本发明的进一步改进,所述视频嗅探下载模块包括:
动态链接库,用于监听所述浏览器的所有的网络请求,以及下载并存储在线视频的全部或部分原文件;
合并单元,用于合并分段下载的视频。
作为本发明的进一步改进,所述动态链接库在监听到所述网络请求时,自动加载所述在线视频嗅探模块至所述浏览器。
作为本发明的进一步改进,所述动态链接库还能监控所述在线视频资源请求模块调用所述浏览器渲染的所述网络页面元素、所述在线视频资源请求模块调用所述网络页面中的java script方法情况。
作为本发明的进一步改进,所述动态链接库还用于过滤网络页面中的图片。
与现有技术相比,本发明的有益效果是:
1、本发明采用动态嗅探视频链接的方法,通用性和扩展性都较好;
2、本发明在视频播放过程中将视频下载完毕,不存在视频失效的问题,召回率较高;
3、本发明自动用浏览器播放指定页面,运行过程完全自动化,不需要人工参与;
4、本发明能够同时打开多个页面,并可让页面和视频链接能很好的对应,便于大规模应用。
附图说明
图1是视频播放页面示意图;
图2是视频播放系统示意图;
图3是本发明在线视频嗅探下载系统第一实施方式的模块图;
图4是本发明在线视频嗅探下载系统第二实施方式的模块图;
图5是本发明在线视频嗅探下载模块包括的单元图;
图6是本发明在线视频嗅探下载方法第一实施方式的流程图;
图7是本发明在线视频嗅探下载方法第二实施方式的流程图。
具体实施方式
以下将结合附图所示的各实施方式对本发明进行详细描述。但这些实施方式并不限制本发明,本领域的普通技术人员根据这些实施方式所轻易做出的结构、方法、或功能上的变换均包含在本发明的保护范围内。
本发明的核心思想是通过该在线视频嗅探下载方法和装置模拟用户打开浏览器并播放视频的过程,从中嗅探出视频的真实地址,并进行下载。
如图1所示,一般地,浏览器10均包括一地址栏11,当在所述浏览器地址栏11中输入一URL打开一视频播放页面时,多数浏览器10均会自动加载一播放器插件12,如Flash Player等视频播放器插件,以播放所述视频播放页面中的在线视频。
如图2所示,一般地,当在浏览器10地址栏11中输入一URL打开一视频播放页面时,所述播放器插件12可通过与浏览器10的接口,向浏览器10请求在线视频资源,从而由浏览器10向服务器20请求所述在线视频资源,比如,以Http的形式请求一在线电影,这时,服务器20即会向浏览器10返回与所述请求相对应的视频播放地址,而浏览器10即会调用所述播放器插件12的接口向所述播放器插件12写入与所述请求相对应的视频播放地址,比如上述在线电影的播放地址,从而可通过该播放器插件12播放该在线视频。一般的,该视频播放地址即为该视频的真实地址,即是通过该地址,可下载到该在线视频的原文件。
如图3所示,在本发明的第一实施方式中,在线视频嗅探下载系统包括在线视频嗅探下载装置和服务器300,所述在线视频嗅探下载装置包括:浏览器101、在线视频资源请求模块103、在线视频嗅探下载模块105。
其中,所述浏览器101用于自动提取URL地址并打开视频播放页面,同时,接收所述在线视频资源请求模块103发出的在线视频资源请求,比如,以Http的形式请求一在线电影,并将该在线视频资源请求转发至服务器300;另外,所述浏览器还用于接收所述服务器300返回的视频播放地址,比如上述在线电影的播放地址,并将该视频播放地址转发至所述在线视频资源请求模块103。优选地,在所述浏览器101和在线视频资源请求模块103的中间插有在线视频嗅探下载模块105,即是将所述在线视频嗅探下载模块105插入到所述在线视频资源请求模块103与浏览器101的接口中,使得在线视频资源请求模块103的接口与在线视频嗅探下载模块105的第一接口对接,该在线视频嗅探下载模块105的第二接口与浏览器101的接口对接。
所述在线视频资源请求模块103用于发出在线视频资源请求至所述在线视频嗅探下载模块105,并通过该在线视频嗅探下载模块105将该在线视频资源请求转发至所述浏览器101;另外,所述在线视频资源请求模块103还用于接收由浏览器返回的视频播放地址,优选地,所述浏览器将该视频播放地址返回至在线视频嗅探下载模块105,并由该在线视频嗅探下载模块105返回至所述在线视频资源请求模块103。值得一提的是:在本发明最佳实施方式中,所述在线视频资源请求模块103为一可加载于所述浏览器101中的播放器插件,如Flash Player等视频播放器插件,以播放所述视频播放地址上的在线视频。
所述在线视频嗅探下载模块105用于接收所述在线视频资源请求模块103发出的在线视频资源请求,并将该在线视频资源请求转发至浏览器101;另外,所述在线视频嗅探下载模块105还用于接收所述浏览器101返回的视频播放地址,并将所述视频播放地址返回至所述在线视频资源请求模块103。值得一提的是:在本发明中,所述在线视频嗅探下载模块105还用于在得到所述在线视频播放地址后,下载该在线视频的全部或部分原文件。
优选地,在本发明的最佳实施方式中,所述浏览器101为开源浏览器。浏览器101、在线视频资源请求模块103、在线视频嗅探下载模块105接口均是开源接口,通用性和扩展性都较好。
因上述的在线视频嗅探装置是在视频播放过程中将视频下载完毕,故不存在视频失效的问题(提前拿到视频播放地址,但在下载时视频播放地址过期),召回率较高。
值得一提的是:在本发明中,所述在线视频嗅探下载模块105是嵌入所述浏览器101中的,且对应所述浏览器101的页面设置,即是当所述浏览器101可同时打开多个页面时,每一个页面都对应到一个单独的在线视频嗅探下载模块105,因该打开页面与所述在线视频嗅探下载模块105是1∶1的关系,故可让页面和视频链接能很好的对应,便于大规模应用。
如图4所示,为本发明第二实施方式中,在线视频嗅探下载系统包括在线视频嗅探下载装置和服务器300,所述在线视频嗅探下载装置包括:网络地址数据200、浏览器201、在线视频资源请求模块203、在线视频嗅探下载模块205。
其中,所述网络地址数据200用于存储URL地址,优选地,该URL地址为各个视频播放页面的URL地址。值得一提的是:该网络地址数据200可通过数据库的形式存在,也可通过数据文本的形式存在,在本发明中,只要是能够让浏览器201读取得到其中的URL地址,无论用怎样的方式存在均可。在此不再赘述。
所述浏览器201用于自动提取URL地址并打开视频播放页面,值得一提的是:在本实施方式中,所述接收URL地址,即是主动的从网络地址数据200中读取所存储的URL地址,即可实现自动用浏览器播放指定页面,运行过程完全自动化,不需要人工参与;同时,所述浏览器用于接收所述在线视频资源请求模块203发出的在线视频资源请求,比如,以Http的形式请求一在线电影,并将该在线视频资源请求转发至服务器300;另外,所述浏览器还用于接收所述服务器300返回的视频播放地址,比如上述在线电影的播放地址,并将该视频播放地址转发至所述在线视频资源请求模块203。优选地,在所述浏览器201和在线视频资源请求模块203的中间插有在线视频嗅探下载模块205,即是将所述在线视频嗅探下载模块205插入到所述在线视频资源请求模块203与浏览器201的接口中,使得在线视频资源请求模块203的接口与在线视频嗅探下载模块205的第一接口对接,该在线视频嗅探下载模块205的第二接口与浏览器201的接口对接。
所述在线视频资源请求模块203用于发出在线视频资源请求至所述在线视频嗅探下载模块205,并通过该在线视频嗅探下载模块205将该在线视频资源请求转发至所述浏览器201;另外,所述在线视频资源请求模块203还用于接收由浏览器返回的视频播放地址,优选地,所述浏览器将该视频播放地址返回至在线视频嗅探下载模块105,并由该在线视频嗅探下载模块205返回至所述在线视频资源请求模块203。值得一提的是:在本发明最佳实施方式中,所述在线视频资源请求模块203为一可加载于所述浏览器201中的播放器插件,如Flash Player等视频播放器插件,以播放所述视频播放地址上的在线视频。
所述在线视频嗅探下载模块205用于接收所述在线视频资源请求模块203发出的在线视频资源请求,并将该在线视频资源请求转发至浏览器201;另外,所述在线视频嗅探下载模块205还用于接收所述浏览器201返回的视频播放地址,并将所述视频播放地址返回至所述在线视频资源请求模块203。值得一提的是:在本发明中,所述在线视频嗅探下载模块205还用于在得到所述在线视频播放地址后,下载该在线视频的全部或部分原文件。
优选地,在本发明的最佳实施方式中,所述浏览器201为开源浏览器。浏览器201、在线视频资源请求模块203、在线视频嗅探下载模块205接口均是开源接口,通用性和扩展性都较好。
因上述的在线视频嗅探装置是在视频播放过程中将视频下载完毕,故不存在视频失效的问题(提前拿到视频播放地址,但在下载时视频播放地址过期),召回率较高。
值得一提的是:在本发明中,所述在线视频嗅探下载模块205是嵌入所述浏览器201中的,且对应所述浏览器201的页面设置,所述浏览器201可同时打开多个页面,且每一个页面都对应到一个单独的在线视频嗅探下载模块205,因该页面与所述在线视频嗅探下载模块205是1∶1的关系,故可让页面和视频链接能很好的对应,便于大规模应用。
如图5所示,上述本发明的第一实施方式和第二实施方式的在线视频嗅探下载模块包括:动态链接库1051、合并单元1053。
其中,动态链接库1051用于监听所有的网络请求,以及下载并存储在线视频的全部或部分原文件,另外所述动态链接库1051还用于过滤视频播放网页中的图片。其可监听浏览器的所有网络请求,并在监听到网络请求时,自动加载所述在线视频嗅探下载模块至所述浏览器。值得一提的是:所述动态链接库1051除了能监控浏览器在HTTP上的请求之外,还能监控在线视频资源请求模块调用浏览器渲染的页面元素,在线视频资源请求模块调用页面中的java script方法情况等。一般地,浏览器都会包括一网络请求模块,该网络请求模块是用于处理浏览器所有的网络请求的。通过在所述网络请求模块中植入回调函数,从而使得所述网络请求模块可回调所述动态链接库。该回调包括了请求回调和响应回调,一次请求回调和对应至少一次响应回调,例如,让视频是一段下载的,则一次请求回调对应一次响应回调;当视频时分段下载的,则一次请求回调对应多次响应回调。
合并单元1053用于合并分段下载的视频。如果视频是分段进行下载的,即是一次请求回调对应多次响应回调时,可通过此单元对分段下载的视频进行合并,一般地,分段下载的视频是通过URL来进行合并的。
如图6所示,在本发明的第一实施方式中,本发明的在线视频嗅探下载方法,包括以下步骤:
S1、浏览器自动提取URL地址并打开视频播放页面;
S3、在线视频资源请求模块通过在线视频嗅探下载模块向浏览器动态地请求所述URL地址的在线视频资源;
S5、浏览器向服务器请求所述URL地址的在线视频资源;
S7、服务器返回与所述URL地址的在线视频资源相应的视频播放地址至浏览器;
S9、浏览器将所述视频播放地址返回至所述在线视频嗅探下载模块;
优选地,在此步骤之后,可由所述在线视频嗅探下载模块将所述视频播放地址返回至在线视频资源请求模块;
S11、在线视频嗅探下载模块下载所述视频播放地址上的在线视频的全部或部分原文件,优选地,在下载所述视频播放地址上的在线视频的全部或部分原文件同时,所述在线视频嗅探下载模块可播放所述视频播放地址上的所述在线视频;
S13、存储所述在线视频的全部或部分原文件。
如图7所示,在本发明的第二实施方式中,本发明的在线视频嗅探下载方法,包括以下步骤:
S100、浏览器自动提取URL地址,发出网络请求打开网络页面;
S101、判断所述网络页面是否包含在线视频资源;
若包括在线视频资源则进入步骤S102、若不包括在线视频资源则忽略本次网络请求;
S102、在浏览器中加载所述在线视频嗅探下载模块;
S103、在线视频资源请求模块通过在线视频嗅探下载模块向浏览器动态地请求所述URL地址的在线视频资源;
S104、浏览器向服务器请求所述URL地址的在线视频资源;
S105、服务器返回与所述URL地址的在线视频资源相应的视频播放地址至浏览器;
S106、浏览器将所述视频播放地址返回至所述在线视频嗅探下载模块;
优选地,在此步骤之后,可由所述在线视频嗅探下载模块将所述视频播放地址返回至在线视频资源请求模块;
S107、在线视频嗅探下载模块下载所述视频播放地址上的在线视频的全部或部分原文件,优选地,在下载所述视频播放地址上的在线视频的全部或部分原文件同时,所述在线视频嗅探下载模块可播放所述视频播放地址上的所述在线视频;
S108、判断是否为分段下载在线视频的全部或部分原文件;
若是,则进入步骤S109,若否,则进入步骤S110;
S109、合并所述在线视频的全部或部分原文件,并进行存储;
S110、直接存储所述在线视频的全部或部分原文件。
应当理解,虽然本说明书按照实施方式加以描述,但并非每个实施方式仅包含一个独立的技术方案,说明书的这种叙述方式仅仅是为清楚起见,本领域技术人员应当将说明书作为一个整体,各实施例中的技术方案也可以经适当组合,形成本领域技术人员可以理解的其他实施方式。
上文所列出的一系列的详细说明仅仅是针对本发明的可行性实施方式的具体说明,它们并非用以限制本发明的保护范围,凡未脱离本发明技艺精神所作的等效实施方式或变更均应包含在本发明的保护范围之内。

Claims (17)

1.一种在线视频嗅探下载方法,其特征在于,所述在线视频嗅探下载方法包括以下步骤:
S1、浏览器自动提取URL地址并发出网络请求打开网络页面;
S2、在线视频资源请求模块通过在线视频嗅探下载模块向所述浏览器动态地请求所述URL地址的在线视频资源;
S3、所述浏览器向服务器请求所述URL地址的在线视频资源;
S4、所述服务器返回与所述URL地址的在线视频资源相应的视频播放地址至所述浏览器;
S5、所述浏览器将所述视频播放地址返回至所述在线视频嗅探下载模块;
S6、所述在线视频嗅探下载模块下载所述视频播放地址上的在线视频的全部或部分原文件。
2.根据权利要求1所述的在线视频嗅探下载方法,其特征在于,在所述S5步骤和所述S6步骤间,还包括步骤:由所述在线视频嗅探下载模块将所述视频播放地址返回至在线视频资源请求模块。
3.根据权利要求2所述的在线视频嗅探下载方法,其特征在于,所述S6步骤中,在“下载所述视频播放地址上的在线视频的全部或部分原文件”同时,所述在线视频嗅探下载模块可播放所述视频播放地址上的所述在线视频。
4.根据权利要求1所述的在线视频嗅探下载方法,其特征在于,在所述S6步骤后,还包括步骤:存储所述在线视频的全部或部分原文件。
5.根据权利要求1至4中任意一项所述的在线视频嗅探下载方法,其特征在于,在所述S1步骤和所述S2步骤间,还包括步骤:
判断所述网络页面是否包含在线视频资源;
若包括在线视频资源则进入步骤S2。
6.根据权利要求1至4中任意一项所述的在线视频嗅探下载方法,其特征在于,所述S6步骤后,还包括步骤:
判断是否为分段下载的在线视频的全部或部分原文件;
若是,则合并所述在线视频的全部或部分原文件。
7.一种在线视频嗅探下载装置,其特征在于,所述在线视频嗅探下载装置包括:
浏览器,用于自动提取URL地址并打开网络页面;接收在线视频资源请求,并将所述在线视频资源请求转发至服务器;接收所述服务器返回的视频播放地址,并将所述视频播放地址转发;
在线视频资源请求模块,用于发出所述在线视频资源请求;
在线视频嗅探下载模块,用于接收所述在线视频资源请求模块发出的在线视频资源请求,并将该在线视频资源请求转发至浏览器;接收所述浏览器转发的所述视频播放地址,并下载所述视频播放地址上的在线视频的原文件。
8.根据权利要求7所述的在线视频嗅探下载装置,其特征在于,所述在线视频嗅探下载模块还用于:将所述视频播放地址返回至所述在线视频资源请求模块。
9.根据权利要求8所述的在线视频嗅探下载装置,其特征在于,所述在线资源请求模块为一可加载于所述浏览器中的播放器插件,用于播放所述视频播放地址上的在线视频。
10.根据权利要求9所述的在线视频嗅探下载装置,其特征在于,所述在线视频嗅探下载装置还包括:
网络地址数据:用于存储URL地址,以便所述浏览器提取。
11.根据权利要求7至9中任意一项所述的在线视频嗅探下载装置,其特征在于,所述浏览器为开源浏览器。
12.根据权利要求11所述的在线视频嗅探下载装置,其特征在于,所述浏览器、所述在线视频资源请求模块、在线视频嗅探下载模块所述通过开源接口连接。
13.根据权利要求7所述的在线视频嗅探下载装置,其特征在于,所述视频嗅探下载模块是嵌入所述浏览器中的,所述在线视频嗅探下载模块与所述浏览器打开页面数量为1∶1。
14.根据权利要求7或14所述的在线视频嗅探下载装置,其特征在于,所述视频嗅探下载模块包括:
动态链接库,用于监听所述浏览器的所有的网络请求,以及下载并存储在线视频的全部或部分原文件;
合并单元,用于合并分段下载的视频。
15.根据权利要求14所述的在线视频嗅探下载装置,其特征在于,所述动态链接库在监听到所述网络请求时,自动加载所述在线视频嗅探模块至所述浏览器。
16.根据权利要求15所述的在线视频嗅探下载装置,其特征在于,所述动态链接库还能监控所述在线视频资源请求模块调用所述浏览器渲染的所述网络页面元素、所述在线视频资源请求模块调用所述网络页面中的java script方法情况。
17.根据权利要求14所述的在线视频嗅探下载装置,其特征在于,所述动态链接库还用于过滤网络页面中的图片。
CN2010105892632A 2010-12-15 2010-12-15 在线视频嗅探下载方法及装置 Pending CN102098327A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN2010105892632A CN102098327A (zh) 2010-12-15 2010-12-15 在线视频嗅探下载方法及装置
CN201410098851.4A CN103905915B (zh) 2010-12-15 2010-12-15 在线视频嗅探下载方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2010105892632A CN102098327A (zh) 2010-12-15 2010-12-15 在线视频嗅探下载方法及装置

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201410098851.4A Division CN103905915B (zh) 2010-12-15 2010-12-15 在线视频嗅探下载方法及装置

Publications (1)

Publication Number Publication Date
CN102098327A true CN102098327A (zh) 2011-06-15

Family

ID=44131186

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2010105892632A Pending CN102098327A (zh) 2010-12-15 2010-12-15 在线视频嗅探下载方法及装置

Country Status (1)

Country Link
CN (1) CN102098327A (zh)

Cited By (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102306077A (zh) * 2011-08-04 2012-01-04 深圳市万兴软件有限公司 一种在mac平台浏览器中实现视频下载的方法及浏览器
CN102523248A (zh) * 2011-11-24 2012-06-27 深圳市万兴软件有限公司 播放网页flash视频的方法、客户端和服务器
CN102857794A (zh) * 2011-06-28 2013-01-02 上海聚力传媒技术有限公司 一种用于合并视频分段的方法与设备
WO2013010369A1 (zh) * 2011-07-21 2013-01-24 深圳市万兴软件有限公司 一种获取网页中音/视频链接地址的方法及装置
CN102929971A (zh) * 2012-10-15 2013-02-13 长春指南针科技有限公司 一种多媒体信息播放方法和系统
CN103257882A (zh) * 2013-06-03 2013-08-21 贝壳网际(北京)安全技术有限公司 基于浏览器的插件加载方法、浏览器装置及移动终端
CN103686454A (zh) * 2012-09-24 2014-03-26 腾讯科技(深圳)有限公司 一种信息获取方法和装置
CN103680257A (zh) * 2013-11-29 2014-03-26 广州华多网络科技有限公司 通信软件自动录制课程的方法及其系统
CN103823833A (zh) * 2013-11-29 2014-05-28 奇智软件(北京)有限公司 网页中多媒体数据的收藏方法和浏览器装置
CN103873580A (zh) * 2014-03-21 2014-06-18 北京金山网络科技有限公司 一种用于解析视频网页的方法及装置
CN103986974A (zh) * 2014-06-05 2014-08-13 安一恒通(北京)科技有限公司 视频加载判定方法和装置
CN104079990A (zh) * 2014-06-27 2014-10-01 北京奇虎科技有限公司 视频播放方法、浏览器及下载工具
CN104135692A (zh) * 2014-07-18 2014-11-05 北京奇虎科技有限公司 视频信息的加载显示方法和加载显示装置
CN104243394A (zh) * 2013-06-06 2014-12-24 腾讯科技(深圳)有限公司 多媒体文件的播放方法及装置
CN104469467A (zh) * 2014-12-10 2015-03-25 北京奇虎科技有限公司 一种浏览器客户端中进行视频播放的方法、装置和系统
CN104581384A (zh) * 2014-12-19 2015-04-29 阳珍秀 一种网络视频下载的方法及系统
CN104796784A (zh) * 2015-03-31 2015-07-22 北京奇虎科技有限公司 应用程序内的视频播放方法及装置
CN105141638A (zh) * 2015-09-29 2015-12-09 北京奇艺世纪科技有限公司 一种视频资源的下载方法及装置
CN105447197A (zh) * 2015-12-29 2016-03-30 腾讯科技(深圳)有限公司 一种对视频的下载处理方法、装置及智能终端
CN105763893A (zh) * 2016-01-15 2016-07-13 北京傲游天下科技有限公司 一种下载页面播放器中播放的视频方法
CN103646054B (zh) * 2013-11-29 2017-02-01 北京奇虎科技有限公司 播放多媒体数据的方法和浏览器装置
CN103856827B (zh) * 2012-11-30 2017-02-08 中国科学院声学研究所 一种基于服务模拟交互的视频内容获取方法及系统
CN106991162A (zh) * 2017-03-22 2017-07-28 未来电视有限公司 一种网页上的节省网络资源的动画效果的实现方法
CN111368135A (zh) * 2020-02-24 2020-07-03 郑州阿帕斯数云信息科技有限公司 视频嗅探方法和装置
CN110290405B (zh) * 2018-03-19 2020-10-16 北大方正集团有限公司 视频地址的解析方法、装置、设备及可读存储介质
CN113485607A (zh) * 2021-07-07 2021-10-08 中国搜索信息科技股份有限公司 一种可公开的通用视频抓取方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101594241A (zh) * 2009-06-26 2009-12-02 北京大学 一种网络视频的下载方法及系统
CN101635826A (zh) * 2008-07-21 2010-01-27 中国科学院计算技术研究所 一种获取网络音视频节目地址的方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101635826A (zh) * 2008-07-21 2010-01-27 中国科学院计算技术研究所 一种获取网络音视频节目地址的方法
CN101594241A (zh) * 2009-06-26 2009-12-02 北京大学 一种网络视频的下载方法及系统

Cited By (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102857794B (zh) * 2011-06-28 2018-03-06 上海聚力传媒技术有限公司 一种用于合并视频分段的方法与设备
CN102857794A (zh) * 2011-06-28 2013-01-02 上海聚力传媒技术有限公司 一种用于合并视频分段的方法与设备
WO2013010369A1 (zh) * 2011-07-21 2013-01-24 深圳市万兴软件有限公司 一种获取网页中音/视频链接地址的方法及装置
WO2013016927A1 (zh) * 2011-08-04 2013-02-07 深圳市万兴软件有限公司 一种在mac平台浏览器中实现视频下载的方法及浏览器
CN102306077A (zh) * 2011-08-04 2012-01-04 深圳市万兴软件有限公司 一种在mac平台浏览器中实现视频下载的方法及浏览器
CN102523248A (zh) * 2011-11-24 2012-06-27 深圳市万兴软件有限公司 播放网页flash视频的方法、客户端和服务器
CN103686454A (zh) * 2012-09-24 2014-03-26 腾讯科技(深圳)有限公司 一种信息获取方法和装置
CN102929971A (zh) * 2012-10-15 2013-02-13 长春指南针科技有限公司 一种多媒体信息播放方法和系统
CN103856827B (zh) * 2012-11-30 2017-02-08 中国科学院声学研究所 一种基于服务模拟交互的视频内容获取方法及系统
CN103257882A (zh) * 2013-06-03 2013-08-21 贝壳网际(北京)安全技术有限公司 基于浏览器的插件加载方法、浏览器装置及移动终端
CN104243394A (zh) * 2013-06-06 2014-12-24 腾讯科技(深圳)有限公司 多媒体文件的播放方法及装置
CN103823833B (zh) * 2013-11-29 2019-03-08 奇智软件(北京)有限公司 网页中多媒体数据的收藏方法和浏览器装置
CN103823833A (zh) * 2013-11-29 2014-05-28 奇智软件(北京)有限公司 网页中多媒体数据的收藏方法和浏览器装置
CN103680257A (zh) * 2013-11-29 2014-03-26 广州华多网络科技有限公司 通信软件自动录制课程的方法及其系统
CN103646054B (zh) * 2013-11-29 2017-02-01 北京奇虎科技有限公司 播放多媒体数据的方法和浏览器装置
WO2015139540A1 (zh) * 2014-03-21 2015-09-24 北京金山网络科技有限公司 一种用于解析视频网页的方法及装置
CN103873580A (zh) * 2014-03-21 2014-06-18 北京金山网络科技有限公司 一种用于解析视频网页的方法及装置
CN103986974A (zh) * 2014-06-05 2014-08-13 安一恒通(北京)科技有限公司 视频加载判定方法和装置
CN103986974B (zh) * 2014-06-05 2018-01-19 安一恒通(北京)科技有限公司 视频加载判定方法和装置
CN104079990B (zh) * 2014-06-27 2017-10-31 北京奇虎科技有限公司 视频播放方法、浏览器及下载工具
CN104079990A (zh) * 2014-06-27 2014-10-01 北京奇虎科技有限公司 视频播放方法、浏览器及下载工具
CN104135692A (zh) * 2014-07-18 2014-11-05 北京奇虎科技有限公司 视频信息的加载显示方法和加载显示装置
CN104135692B (zh) * 2014-07-18 2017-11-10 北京奇虎科技有限公司 视频信息的加载显示方法和加载显示装置
CN104469467A (zh) * 2014-12-10 2015-03-25 北京奇虎科技有限公司 一种浏览器客户端中进行视频播放的方法、装置和系统
CN104581384A (zh) * 2014-12-19 2015-04-29 阳珍秀 一种网络视频下载的方法及系统
CN104796784A (zh) * 2015-03-31 2015-07-22 北京奇虎科技有限公司 应用程序内的视频播放方法及装置
CN105141638A (zh) * 2015-09-29 2015-12-09 北京奇艺世纪科技有限公司 一种视频资源的下载方法及装置
CN105141638B (zh) * 2015-09-29 2018-08-03 北京奇艺世纪科技有限公司 一种视频资源的下载方法及装置
CN105447197A (zh) * 2015-12-29 2016-03-30 腾讯科技(深圳)有限公司 一种对视频的下载处理方法、装置及智能终端
CN105447197B (zh) * 2015-12-29 2021-09-28 腾讯科技(深圳)有限公司 一种对视频的下载处理方法、装置及智能终端
CN105763893A (zh) * 2016-01-15 2016-07-13 北京傲游天下科技有限公司 一种下载页面播放器中播放的视频方法
CN106991162A (zh) * 2017-03-22 2017-07-28 未来电视有限公司 一种网页上的节省网络资源的动画效果的实现方法
CN110290405B (zh) * 2018-03-19 2020-10-16 北大方正集团有限公司 视频地址的解析方法、装置、设备及可读存储介质
CN111368135A (zh) * 2020-02-24 2020-07-03 郑州阿帕斯数云信息科技有限公司 视频嗅探方法和装置
CN111368135B (zh) * 2020-02-24 2023-09-05 郑州阿帕斯数云信息科技有限公司 视频嗅探方法和装置
CN113485607A (zh) * 2021-07-07 2021-10-08 中国搜索信息科技股份有限公司 一种可公开的通用视频抓取方法
CN113485607B (zh) * 2021-07-07 2022-02-15 中国搜索信息科技股份有限公司 一种可公开的通用视频抓取方法

Similar Documents

Publication Publication Date Title
CN102098327A (zh) 在线视频嗅探下载方法及装置
CN106528432B (zh) 测试场景数据的构建方法及装置、埋点测试方法
CN109101425B (zh) 一种动态化的页面ab测试的指标埋点方法和装置
CN104063460B (zh) 一种在浏览器中加载网页的方法和装置
CN110020278A (zh) 页面数据的展示、提供方法、客户端及服务器
CN104426925B (zh) 网页资源获取方法及装置
CN111177519B (zh) 网页内容获取方法、装置、存储介质及设备
CN110096660A (zh) 用于加载页面图片的方法、装置和电子设备
CN101635895B (zh) 一种网站内容订阅系统、方法、移动通信终端和服务器
CN109829121B (zh) 一种点击行为数据上报的方法和装置
CN103577526B (zh) 一种验证页面是否被修改的方法、系统及浏览器
CN104541262A (zh) 用于富因特网应用的透明网络内适配的系统和方法
CN103116645A (zh) 移动设备浏览网页的方法及装置
US20150058452A1 (en) Video loading method, device and system of mobile terminal
CN109614766A (zh) 一种通过文件获取对网页进行区块链存证的方法及装置
CN102298599A (zh) 离线浏览网页方法及其系统
CN109684571A (zh) 一种数据采集方法及装置、存储介质
CN110929183A (zh) 一种数据处理方法、装置和机器可读介质
CN105808587A (zh) 在网页中嵌入信息的方法、网关设备及系统
CN111447170A (zh) 数据处理方法及其系统、计算机系统及计算机可读介质
CN103905915B (zh) 在线视频嗅探下载方法及装置
CN104283865A (zh) 一种下载处理方法、装置、服务器及客户端设备
CN103856827B (zh) 一种基于服务模拟交互的视频内容获取方法及系统
CN106557584A (zh) 一种网址收藏方法及装置
CN109327530B (zh) 一种信息处理方法、装置、电子设备和存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20110615