文章采集器（web）——全爬虫页面找漏洞

　　文章采集器（web）——全爬虫页面找漏洞

　　文章采集器（web）——scrapy爬虫框架（手机端的产品对应一个产品页面url对应一个页面url下载爬虫——scrapy构建程序执行保存发布——wap12

　　3）wap123+，

　　看看我用的爬虫吧，都是些老爬虫了，在一线互联网公司工作过的，他们有自己的爬虫开发平台，可以试试weexpress，我们用它开发出来很多爬虫。

　　这个我稍微有些了解。最近正好在研究cms（管理后台），涉及到一些，不知是否合适。

　　1、全爬虫页面找漏洞，实现全爬虫网站，

　　2、把某个网站中某个页面过滤出来，

　　3、聚合成多个页面，统计访问人数以及搜索量。

　　在一些数据处理平台上搜索一下，很多有的，现在有开放api，

　　有爬虫，

　　用scrapy爬教育部等部门的大数据公开课一般学校的图书馆电子资源就有资源要爬那些课时一般最少是20个公开课要想更详细的知识量是很大的，我以前在单位也做过类似的，有很多种方法，有学校的有图书馆自己的，

　　我最近准备用scrapy来爬校图书馆，