丰富的采集神器(丰富的采集神器小仙(图)男常以公众号的推送)

　　丰富的采集神器(丰富的采集神器小仙(图)男常以公众号的推送)

　　丰富的采集神器小仙男常以公众号的推送、微博的转发、博客的转载、视频的播放、网站各种的网页上传、网络爬虫为例总结采集关键词对于爬虫或者网络有经验的童鞋知道，网络主要是以文本为主，如果需要爬取word数据那么网络将会是一个黑洞。下面介绍一款采集关键词的神器feedlinks：网站：feedlinks;local=client&name=websitealt=urlopenyouqi网站最基本的功能就是分析页面加载是否有广告没有，或者只是试图爬取url连接不是很容易就爬取到好的目标页面，我也可以通过很简单的方法爬取到一个比较不错的网站。

　　feedlinks即可以分析页面，抓取网站的关键词以及搜索关键词等等。有的时候一个页面的某些关键词或者话题需要通过时间去搜索的时候可以使用它。总之，操作非常简单，感兴趣的童鞋可以操作一下哈！另外，人们可以在主页搜索自己想要的关键词，可以查看其它用户搜索到了哪些内容。

　　做网站，选择一个主题，文本（文字）采集+图片采集+视频采集+单文件采集有的时候，这些资源，不是很好收集，其他网站上的，但是感觉会有所重复，

　　你当然可以用scrapy框架，但是既然问了这样的问题，肯定是有自己的需求。用别人的框架，不是问题，关键是看怎么用。要学会使用浏览器的webdriver模块，用图灵webdriver这款框架。相信会让你满意的。其次，得会用python抓包工具抓包。