无规则采集器列表算法(无规则采集器列表算法设置有没有问题，肯定不止两个)

　　无规则采集器列表算法(无规则采集器列表算法设置有没有问题，肯定不止两个)

　　无规则采集器列表算法设置有没有问题，那肯定不止两个，至少三个，而且数量不会只有你这么多，反正对于我这种勤劳的搬砖者来说是这样的。

　　看到你这个问题的时候我就知道，必然有人因为没有及时刷出下载链接、没有将被爬取的资源发送到你账号里而无法安全下载资源。所以不要怪爬虫多，

　　哈哈哈哈那多了去了，看你工作是做什么工作的，比如我，我工作找得多，分享下我的个人经验。但是，别的，啥子比如有特价神马的，你只要它正规，它也有规律，说白了，就是网上的数据想下载很简单，数据需要什么样的数据，然后你去找什么数据，然后就行了。

　　爬虫工作三年的白菜渣回答你，我算是工作一年，最多也就碰过十几个爬虫，我所知道的每个爬虫的通用的几点要求，基本：1.你的爬虫是什么类型的，对于一些比较常用的数据你需要去研究他内部的每一块是怎么传输，有几层，传输的数据格式是什么，如果是http协议的你还要研究http协议规则什么的，另外模拟浏览器对应的什么协议，这些都是爬虫需要去研究和学习的2.你要怎么去设置，你需要设置哪些方面，例如抓包抓到什么数据，得出什么结论，这个过程你需要学习得到，现在有很多工具3.你的爬虫要下载多少文件，这个爬虫的数量级你要清楚，不然做爬虫也是很费力的，你要根据你需要的下载的数量，还有文件的格式进行分析。

　　4.你的抓取请求的方式你需要学习，你要分析你爬虫请求的内容，找到想下载的文件结构5.你的爬虫主程序要清楚，如果太乱了你得重写。