不用采集规则就可以采集(如果不从竞品分析报告的苦逼角度来探讨优采云好在哪里)

　　不用采集规则就可以采集(如果不从竞品分析报告的苦逼角度来探讨优采云好在哪里)

　　感谢您邀请回答。我用优采云很久了，知乎写了各种答案。包括其他软件的使用，你甚至可以写采集界的国内行业竞争分析报告（别问我为什么不写，因为我懒，因为我是PPT狗）领导，所以我没时间..._(:з」∠)_).

　　如果不从竞争对手分析报告的角度来讨论优采云，好与不一样，我们从用户的体验来谈。

　　（比如产地、预嗅数据等），会用Python写基本的爬虫（包括Scrapy框架和简单的分布式，我是产品狗，编码能力很强一般的）。综上所述，大部分主流数据采集工具都已经尝试过了，也有不同程度的体验。所以在我看来，它不像一个新手用户，也不像一个技术专家。这是一种妥协的产品视角。

　　以下优采云优点：

　　1、小白用户的福音（好用、好找规则、可视化界面、易学易模仿）

　　如果我是新手用户，对Html和Http协议不是很了解，那么看完上面提到的所有工具后，我可能会做出这样的选择：

　　什么是小白用户：

　　总结一下，我没钱，我不懂技术，我还是要数据。最简单、最便宜的省钱方法是使用优采云，其他选择很少。为什么？

　　优采云采集器（499元起） 必须用老版本才能免费导出csv，excel没有关系，新版本连导出都不能。 优采云Browser 一定要买（2180元起），不然不行，学习成本有点高。其他几个采集工具很难或者没有办法导入规则，也没有办法在线销售规则。虽然优采云采集可以免费采集一些数据，但是导出也是收费的，而且数据比较多。您必须单独下载数据导出工具。

　　优采云如何省钱？完善信息1000积分，每天签到30积分。下一条规则或在线购买一条规则，剩余积分足以获得初始采集。有些积分不用充值的话，可以按需使用，导出excel，数据库就好了。

　　2.无论是测试还是采集

　　直观的看到网页变化，很容易避免坑

　　很多人说优采云采集器采集快，优采云那么慢，很弱。不可否认，优采云采集器可以是采集数据而不完全显示页面。这样做的好处是介于爬虫和优采云之间，速度确实更快。但缺点是它必须自己拼写 URL！拼写网站！拼写网站！本来优采云可以一键搞定，因为优采云看不到，所以只能到浏览器里看页面代码。当采集我看不到网页变化时，我只能看到说采集的xxx条数据。说实话，每次测试优采云我都头疼，谁知道采集一大堆，是不是都是正确的数据，但是页面没有具体的变化...

　　你说第一次写优采云规则的时候，在测试中可以看到，嗯，是的，可以看到，但是网站都是白痴，让你只是采集网站已经越来越多了，如果越来越少，我动不动就给你403或者加验证。条件呢？ 优采云这玩意在哪...优采云虽然慢，但是测试的时候可以看到页面的变化，除了问题可以跟踪调整，不然慢慢哭。

　　另一个好处是，我不会告诉你看采集拿出数据很酷...

　　3、写规则快

　　不管小白用户，像我们这样有一定经验的用户，写优采云规则，比如采集汽车之家某车型所有文章all评论规则，第一次写需要40分钟你可能会问，这东西还这么长，你弱了……我的解释是汽车之家加载了ajax，有的页面需要分析“下一页”跳转链接定位，避免死循环还有翻页时丢页的问题。第一次写规则，需要一一检查xpath位置，在单机上测试。所以其实大部分时间都花在了分析页面上，写规则的时间其实十几分钟就够了。如果用优采云或者其他工具就很头疼了...10分钟怎么匹配URL，ajax加载的问题，老的免费版优采云根本解决不了，新版本要买进高级的json解析 很简单，即便如此，你还是要抓包，搞清楚怎么合并url...除非你是老手，谁敢说你能把这个规则弄进去你第一次写三十分钟还是四十分钟？ 优采云 不说了，写之前去学js，然后看开发文档...

　　其他优点不说了，大家自己摸索。如果你说太多了，软文suspects。

　　接下来进入大家爱听的批评链接：

　　1.莫名其妙的错误，简单粗暴的解决方法

　　如果我只是从0开始写一个规则，通常问题不大，但是当我修改或复制规则的某些部分并将其添加到另一个规则中时，有时会出现一些莫名其妙的问题。比如规则的逻辑结构显示混乱，规则执行错误等等，尤其是在逻辑判断中加入更多的规则，很容易混乱。

　　解决方法很简单。全部删除，按照新的思路制定新的规则...

　　2、云采集不是所谓的快10倍IP多吗？为什么这么慢？

　　这是很多人的误解。云采集运行在10个节点上，但任何时候都不应该达到10个节点，10个节点或10个IP也不可能。所以速度不一定快10倍，但真心希望有10个节点，10个IP，最好选择多久换一次IP，这样就解决了很多烦人的采集问题，这些功能多收钱也正常。

　　3、云采集数据丢失问题

　　因为看不到云采集的具体操作过程，也没有办法追溯，不知道有哪些数据缺失，哪些页面不是采集。最好有cloud采集每个节点的详细操作日志，方便用户导出查看。

　　4、什么时候可以使用自动IP代理

　　目前除了云端采集（不知道IP切换要多久），本机的单机采集只能写代理服务器IP和端口进入，所以我可以只能在线购买自动切换的代理 IP。不方便再填。 优采云官网说这些功能都快要加入了，我们拭目以待吧，反正切换IP也不容易。

　　这里有一个邪恶的方法...买一台可以在互联网上快速切换IP的VPS主机，然后让优采云在其上运行单机，就可以实现自动IP切换。记得买IP自动切换类型的，PPPOE拨号切换不行，因为优采云没有这个自动拨号功能。

　　5、最后的批评，就是在某些情况下，没有优采云采集器省事

　　下面优采云采集器的功能，优采云的产品经理需要考虑优采云现在是否可用，如何简化操作。

　　所谓人不完美，机器不完美，采集器不理想。如果让我选，我先用优采云，优采云补，剩下的交给Python代码。 优采云？我用Py写代码不花钱，优采云之类的东西有什么用...

　　最后宣传我的博客：