文章在线采集器：科fidelity文章爬取和浏览器兼容性

　　文章在线采集器：科fidelity文章爬取和浏览器兼容性

　　文章在线采集器：科fidelity文章爬取和浏览器兼容性，需要搜集全网网站来源网址，按照上述流程，得到爬取网站：其中windows和linux都需要安装浏览器扩展，搜集全网网站资源链接，需要的是urlexporter.exe，其他浏览器对应安装chromeextension即可。

　　urlexporter：百度里找

　　使用fiddler抓包在科学上网的地方就是https网址，

　　看人都是有好处的，

　　下个extension插件，推荐outlooksimshots的一个extension，outlooksimshotswelcome当然也可以用weico，

　　比起浏览器，貌似谷歌浏览器也可以吧，翻墙就行，

　　还是老老实实搭梯子。

　　有好多啊，微信搜搜科学上网，

　　楼上一些用的都是shandongliang的方法，我用的是weico，我是用rodeo爬到油管上的视频。顺便是推荐一个微信公众号：科学上网汇，

　　有urlexporter.exe,貌似只有ie下才有

　　专门有人测试过windows和linux也可以使用的。

　　搜狗搜索“科学上网”

　　其实这个百度就可以

　　windows环境：使用chrome浏览器下载并安装chrome插件weicolinux环境：安装以下：谷歌浏览器（googlechrome）里有“科学上网”功能浏览器右上角的“加号”——“科学上网”查看科学上网过程——选择科学上网