智能采集系统(智能采集系统大体上有以下以下几种采集策略)

　　智能采集系统(智能采集系统大体上有以下以下几种采集策略)

　　智能采集系统大体上有以下几种采集策略:1.java采集2.python采集3.各种ip/域名采集4.站群采集5.链接采集6.cache采集7.sitemap采集我们主要了解第五种网站sitemap采集，其中cache采集分为服务器中cache和本地cache,本地cache就是web服务器启动之后,要在web服务器上添加和更新所有的web页面,才算是生效,但是对于很多公司来说,都不是自己做服务器,就只能等待项目启动才能更新.如何做?就是python负责写sql。

　　---web第一步，准备采集的页面第二步，建立数据库（mysql）第三步，分析数据库第四步，分析python第一步，python初始化数据库---python的初始化步骤：打开python代码编辑器>>>第二步，根据项目实际需求，选择合适的语言，选择好语言之后，就可以开始写爬虫代码了第三步，根据项目实际需求，选择合适的爬虫语言：推荐python或者php。

　　第四步，根据项目实际需求，选择合适的爬虫框架，推荐：推荐：requests（网络请求库）---web---第一步，准备url文件，在web服务器上创建一个directory(没有directory，可以把web服务器理解为一个web文件夹)>>>第二步，准备文件>>>第三步，编写代码第四步，重启web服务器，启动爬虫之后就可以爬取页面或者网页了。