事实:想采些文章，结果对方网站有反采集的该如何破啊？

　　事实:想采些文章，结果对方网站有反采集的该如何破啊？

　　[quote=引用14楼safjudsoi45的回复：]

　　引用 11 楼 changjay 的回复：

　　还有一种方法，cron作业设置所有你想采集的url，定时打开firefox浏览器，正常浏览网页（不是curl模拟，但是内存大），然后（firefox控制台设置）把网站源代码保存到本地文件夹。然后慢慢分析。

　　我不相信有 网站 会愚蠢到拒绝真正的 Firefox 浏览器。如果是这样的话，那种 网站 永远不会变大（alexa 不会超过 1W 名称），没有任何 采集 值，......

　　[/引用]

　　呵呵，那么，你大概已经猜到你要采集是什么类型的网站了……

　　OK，回到技术角度，如20楼所说，如果浏览器可以，而程序不行，那一定是你程序的问题。

　　如果你还在苦苦挣扎，必要时放弃WIN平台，使用LINUX。LINUX 控制台比WIN 的CMD 更强大。

　　前面说过，cron作业设置所有你想采集的url，定时打开真实浏览器访问网站，然后在控制台设置浏览器，把源码保存到本地磁盘，所有源代码下载完成后，编写一个PHP脚本批量分析你之前下载的采集文件。

　　意外:网站关键词排名急剧下降，是什么原因导致的呢？

　　网站优化是站长每天必须做的工作，今年百度算法一直在做调整，很多网站突然出现了大量的关键词下降，但也有一些网站 关键词排名突飞猛进，可以说是有人高兴，有的很伤心，那么为什么网站 关键词排名会允许在短时间内大幅下滑呢？奥晶科技为您解答。

　　1. 服务器有问题

　　服务器突然的不稳定导致网站打开速度受到影响，甚至直接无法打开，或者服务器受到攻击，站长可以在下一网站检查是否有这些情况，并及时联系网站建设公司的服务器供应商或售后技术服务人员解决问题。

　　2. 网站修订

　　由于业务需要或其他原因重新修改网站，如果前一期没有准备好进行修订，关键词排名的概率非常大，因此不容易修改版本少于最后的手段。

　　3. 随意修改传统知识

　　TKD是网站优化的核心，一般来说，不建议在修复后再进行第二次更改，但是有些站长认为或者认为第一套TKD不符合行业定位，想要再次更改，一旦网站收录然后更改TKD很容易影响网站关键词的排名。

　　4. 网站内容采集

　　长期使用采集器采集文章直接会议被百度判断为作弊，此时不仅关键词网站排名会下降，而且更严重的还会被降级。

　　5. 网站挂在马背上

　　站长应养成检查快照和收录是否挂在马背上的习惯，一旦发现行为，技术人员应立即将其删除并采取保护措施。

　　6. 网站过度优化

　　关键词堆砌、短时间内友链数量飙升、垃圾链过多等都是过度优化的表现，这些行为都会间接导致关键词排名下降。