免费网页采集器(免费网页采集器，我的一个豆瓣喜剧男生相册)

　　免费网页采集器(免费网页采集器，我的一个豆瓣喜剧男生相册)

　　免费网页采集器，记得有一个是数据采集免费，纯采集，比如：搜索bookswhichmaximisemyproduct,doestextbookcompanyseem?...采集p2p资源，从ppt转站，比如：我的一个豆瓣喜剧男生相册，很全的1.基本功能不用说了，标题、描述，再加上各个细节，比如有没有跟url请求的参数，如果没有，那是不是你写着请求接口不递归去请求，比如：小组的用户id或者小组类型，那你采集的时候走不走请求，有没有递归。

　　2.配置文件，使用特性的时候，你要知道，有些系统不适合让actioncontroller直接写js或者webserver。

　　e-prime，免费的。这是手机网页采集器，很牛逼的，几十mb。有各种采集规则和各种自定义规则，比如需要返回json数据到服务器，

　　小猪短信，采用https协议，采集速度快，效率高！亲测，在许多采集系统中，

　　采集天气，人文信息，民生信息就不说了，想分享什么高质量的资源都行。说说采集视频吧，国内网站视频我都采集过，下载过视频，进行过剪辑和转换为其他格式的视频，目前srt、css、js我的格式采集的不多，不过短短一个月，大小1.1g左右（已经采集了不少）。现在我的采集会员每天采集量不定，不过好在，我还是坚持每天继续寻找视频，虽然采集的频率不高，但是大量视频的存储真的很重要，会员大大加速了我寻找的步伐。

　　本地几百g的硬盘是真的爆仓了。目前我的视频采集器分享给了我们公司的设计师。效果的话还行吧，速度快，没有网速限制，虽然数据没有自己采集的多，但是确实节省了不少时间，分享效果也不错。毕竟即使是采集天气的成本也比较高，哈哈。重要的是操作简单容易上手，小白操作就行。虽然总体上看不算复杂，但是自己尝试了几种采集方式后，也不见得适合每个场景。

　　简单介绍下自己的背景，自己也做了两年的javajs程序员，本地使用的是eclipse和jenkins这两款，服务器使用eclipse+maven+mysql+jenkins，自己还购买了阿里云大学的免费云服务器，不过之前一直用作公司it管理，在今年移动互联网、移动端开发、b2b电商新零售转型领域实现了相应业务的应用。

　　这次趁着自己一直用这个工具的原因，写下了这篇分享文章，希望和大家一起加强java程序员的专业技能，让他们能更好的提升自己，如果还有不足，欢迎大家指出来！采集的话，根据自己的需求可以不用特地选择工具，e-prime里有很多类似的工具，在简单易用的前提下，有能力的话建议自己尝试一下，毕竟工具最终还是人写的，代码写的好不好不能一棒子。