手机网页视频抓取(手机网页视频抓取基于requests库的库（）)

　　手机网页视频抓取(手机网页视频抓取基于requests库的库（）)

　　手机网页视频抓取基于requests库。requests：通过urls构造请求url，请求完返回html网页文件。目前可以通过urllib模块和pyquery模块实现抓取，urllib是python3.x中的urllib2扩展包，pyquery是python2.x中的urllib库。1.准备一个requests库和一个正则表达式库（推荐自带正则表达式库），方便我们通过正则表达式获取数据。

　　2.需要构造url，一般是通过urllib包中的urlopen函数构造url，然后再使用urllib.request包的request.urlopen来获取。具体可以参考urllib包的帮助文档。requests库也可以通过cookies实现（具体问题留言问我），但是限制非常大，通过cookies实现的优点是抓取速度更快。3.构造构造url函数，requests库有3种方式构造url，（。

　　1）传入url地址：使用urllib库的urllib2对象使用urllib.request.urlopen函数构造url；

　　2）传入任意字符串：使用urllib.request库的request.urlopen获取，

　　3）传入关键字参数：使用urllib.request库的urllib.request.urlopen来构造url。总结就是1.传入参数不限制，