方便操作的采集神器——网页数据采集器-mozillaqweb

　　方便操作的采集神器——网页数据采集器-mozillaqweb

　　方便操作的采集神器——小爬虫，语言简单，只要会爬虫爬虫精准，无需进行人工编辑，真正的爬虫采集神器。然后一定要跟随专业的教程，现在免费开放注册。

　　推荐一个我们工作常用的爬虫工具：网页数据采集器-mozillaqweb

　　企业工具，几个工具集成在一起。

　　爬虫神器--蚂蚁金服的antizobot可以试试，不过这个是封装好的。其他的没尝试过。如果感兴趣，

　　所有高技术的都不要用爬虫，要用就用你所在行业的解决方案，如果爬虫技术想发展的话，等整个erp都解决了，互联网就没有机会了。

　　spiderdigger也不错

　　他自己网站分享一下学习的心得：javarequest.action.spider先看spider功能，网上很多文章，多学学，理解了就上手了，没基础就慢慢来。比如你想实现日志爬取，从哪里爬，需要爬多少日志，单击单个网页，还是批量爬取单个网页等等。spider爬取根据网站结构识别，比如你如果想爬取单个网页（没有结构分析），需要识别图片文字的类型，比如日志文件中text,comment,style,favicon,embed等等。

　　不同类型的java爬虫实现起来是完全不同的。网上看视频教程，学习解决方案。从java基础学起，或者从基础学起javaee再加强对javaweb，熟练之后再用java去做爬虫，这样子好处是简单粗暴，缺点是你只知道怎么玩，不知道怎么写脚本。如果你学了springboot，可以通过pagejsatter之类的框架编写爬虫，快速度很高。