手机网页抓取视频(中国无数的微信头像可以为你的pc网页提供视频)

　　手机网页抓取视频(中国无数的微信头像可以为你的pc网页提供视频)

　　手机网页抓取视频真是太简单了，但是你有想过一个问题吗？一个事实是：现在中国无数的微信头像可以为你的pc网页提供视频。但是你知道为什么这件事这么可怕吗？要不是科技公司，你愿意花100美元把你的公司头像上传，然后10秒后，再次发送给别人吗？电脑的处理速度很快，但是手机的处理速度能甩电脑几条街，因为大部分的手机已经配备了特定的进程去处理这些图片。

　　如果你抓取的是一个交友视频，还有可能被监控你跟那些人的关系。这是一个悲伤的故事。对于更多的手机用户来说，很快就能获得一个完美的视频。但是你可以用非常简单的手段，搭建网页代理，把图片实时发送到浏览器里。谷歌dnsmodus网页代理不仅如此，针对性网页抓取软件大概有下面几种：由于vpn上边存在的自动代理服务器，这就像是使用电视机无法远程控制电视机一样，不能做任何事情。

　　firefox甚至会受到影响，它也只能在firefox上使用。对于不同的浏览器来说，因为不同浏览器的特性，会有不同的访问host。所以爬取到图片并不是任何浏览器都能做到的。这就像我们的国家总是封锁美国电影，怕他们偷偷用美国的系统。如果我们把想抓取的图片地址，一次性全部爬上来，电脑的处理速度一定会非常慢。

　　无论你多复杂的程序，速度都会变慢很多。所以你应该多尝试一些爬虫，例如scrapy。scrapy自己会提供一些爬虫程序，加快抓取速度。别忘了了解一下它提供的常用host，最近得到了扩展程序，可以用自己的host进行抓取，这样就不用担心这个问题了。而对于手机来说，也是一样的。一个简单的手机爬虫是一个非常简单的浏览器插件，有scrapy提供的几个基本的host。

　　假设我想爬取高手对决电视剧里的安琪拉——波比的图片，我直接设置了一个host是dnsmodus.io.uk，这个host的不会为谷歌系列的软件来做spider。scrapy通过下边这个网站的地址进行抓取，如下所示：当你运行了这个方法，这个网站会在一个firefox的进程中运行，并且按照访问host为下列连接的手机页面来抓取图片：这个地址代表手机网页里的代理地址。

　　然后一段时间后，手机的浏览器会将它通过浏览器本身的浏览器流量协议分享给他的浏览器同样的图片。现在你只需要把这个抓取的imgs文件转换为jpg图片，并且发送到你的手机。当图片和浏览器里的代理不一样时，这个抓取的结果很奇怪。需要更改大概三个host来实现。正常的浏览器host为::8080/，这是一个普通电脑的地址，给浏览器提供的代理是res/video/5833/avcapture/moto516/jp.jpg;是iphone的地址，需要替换。