采集文章系统有多种方式方法，文章自动导入、深度爬虫

　　采集文章系统有多种方式方法，文章自动导入、深度爬虫

　　采集文章系统有多种方式方法，文章自动导入、深度爬虫、http、还有一些专门的采集工具，在这里我简单的介绍四种方式。

　　一、文章自动导入使用文章自动导入采集是指通过爬虫，获取网站的所有文章，并自动发送至本地浏览器浏览。采集过程中获取的文章链接将保存下来。在进行批量爬取的时候，在抓取文章的时候，可以直接全量下载。

　　二、深度爬虫基于的深度爬虫基于的深度爬虫可以自动抓取网站上所有的页面，而一些专门的深度爬虫，可以从蜘蛛的角度，抓取网站所有的页面，并把抓取下来的页面存储下来。

　　三、http服务我们会在爬虫中先给它加上或者，让它爬取网站的网页信息，然后将所有网页都保存到本地电脑上，最后再对其进行批量抓取，不同平台的爬虫可以互相调用。

　　四、专门的深度爬虫爬虫可以使用写，也可以在一些专门的软件中使用，例如全局，它只抓取本地浏览器上的页面。

　　一般做的爬虫就是一个应用，至于如何发布或者导入，可以参考或其他，我写的项目是基于全局写的，包括爬虫和本地的代码-，对你可能没啥太大帮助，而且还比较粗糙，我很想系统点写，可以参考下我写的yarn--and--其中详细介绍了本地代码的调用方法和一些使用技巧。