不用采集规则就可以采集(两个geo代码，想整理一个选择留学院校的数据库，方法是)

　　不用采集规则就可以采集(两个geo代码，想整理一个选择留学院校的数据库，方法是)

　　我不知道如何编码。我想组织一个数据库，用于选择出国留学的大学。方法是爬取各种形式的择校网页（需要多套爬虫规则）。没用过的同学说说自己的看法？

　　之前用过优采云采集器，然后学python，感觉原理其实是一样的。

　　使用软件采集数据，优点是不用写代码，不用考虑怎么写多线程，不用...灵活性没有你自己写代码那么高。数据采集下来后，如果需要处理也不好。. . 嗯，采集我用的软件不多，不知道利弊。

　　但是我还是喜欢用Python写爬虫

　　哦()对了，采集软件收费收费

　　这不是更换的问题。Python是一种语言，爬虫是技术，不仅仅是python，很多语言都可以实现爬虫技术。

　　但是你要知道，当你要采集爬取大量数据的时候，一个单机的采集是很慢的。

　　而优采云采集器还提供云采集服务，在很短的时间内就可以完成你可能需要好几天才能采集的工作量。

　　你现在读什么专业？

　　================================================== ====================

　　添加：

　　而且，你要知道有很多人没有编程经验！优采云采集器可以自定义采集的规则，让不懂编程的人也可以使用可视化的UI来采集获取自己想要的数据，非常容易使用！

　　提供两篇关于2020年十二星座链接的geo谈，供发帖人参考：

　　长在这里优采云

　　如何解题——写在神兽优采云年少时

　　作为一个同时使用优采云采集器和写爬虫的非技术人员，我莫名的喜欢联想到互联网运营喵的技术。. . 说说我的感受吧。

　　优采云具有学习成本低、流程可视化、快速构建采集系统等优势。可以直接导出excel文件并导出到数据库。为了降低采集的成本，云采集提供了10个节点，可以省去很多麻烦。

　　缺点是虽然看起来很简单，而且还有更傻的智能模型，但其中的陷阱只有经常使用的人才知道。我在我的博客中简单地写过这个，但说实话，我的经验太多了，我还没有整理出来。

　　首先，里面的循环都是xpath元素定位。如果使用简单的傻瓜式点击定位，非常死板，在大量采集页面时很容易出错。另外，使用这个工具的人因为方便，新手太多，成天问常见问题，不知道页面结构，不懂xpath，所以很容易出现采集不完整，无限星座2017年10月星座翻页等问题。

　　但是优采云采集器的ajax加载、模拟手机页面、过滤广告、滚动到页面底部等功能都被称为神器，一个检查就可以搞定。写代码很麻烦，实现这些功能很费力。

　　优采云 毕竟只是一个工具。五四自由运动肯定会打败编程。优点是方便、快捷、成本低。

　　优采云判断引用弱，无法做出复杂的判断，也无法执行复杂的逻辑。另外，优采云只有企业版可以解决验证码问题，普通版无法访问编码平台。

　　还有一点就是没有ocr功能。58同城和赶集网采集的电话号码均为图片格式。Python可以用开源的图像识别库解决，可以通过对接进行识别。

　　在这里更新：

　　之前写的感觉是片面的，毕竟是怀着那个时代的心情写的。经过一段时间的思考，对数据的需求采集决定了最终要使用的工具。如果我需要大量的数据采集，爬虫肯定是不可避免的，因为代码有更高的自由度。我认为优采云的目标不是取代python，而是实现采集器人人都能上手的目标。

　　还有一点是python易学易部署，开源免费。就算只学scrapy，也能解决一些问题，但麻烦的是，在一些工具中简单的选择就能实现的功能，必须通过编写或复制别人的代码来实现。如果你不是全职写一个爬虫，它会非常快。我只想从入门到放弃……

　　对比和坑我写了，放在知乎的专栏里。如果你有兴趣，你可以看看：

　　说说优采云采集器最近使用中遇到的坑（和其他采集软件和爬虫对比）-知乎专栏

　　优采云 是工具，python 是代码。优采云 的目标是让任何需要采集 网页的人都可以使用该工具轻松实现目标。为此，优采云是为了替代很多公司自​​己的爬虫工程师团队开发的python爬虫程序。我认为完全取代它有点困难。总有一些人必须自己开发它。这个没办法，但是在成本、效率、应对需求变化的能力、通用性、易用性、IP资源、抗阻塞能力、智能化程度、对7月生肖用户的要求2018年2月22日等，考虑到爬虫的性能，优采云目前实现的技术和产品能力，一般技术团队用python是无法实现的。

　　够小白优采云