无规则采集器列表算法(辣鸡采集世界上所有辣鸡数据欢迎大家来采集基于fesiong优采云采集器底层开发)
优采云 发布时间: 2021-09-04 15:08无规则采集器列表算法(辣鸡采集世界上所有辣鸡数据欢迎大家来采集基于fesiong优采云采集器底层开发)
香辣鸡介绍采集laji-collect
麻辣鸡采集,采集全世界麻辣鸡数据欢迎大家采集
基于fesiong优采云采集器底层开发
优采云采集器
开发语言
golang
官网案例
香辣鸡采集
为什么有这个辣鸡文章采集器辣鸡文章采集器能采集什么内容
这个采集器can采集的内容是:文章title、文章关键词、文章description、文章detailed content、文章author、文章release time、 文章views。
我什么时候需要用辣鸡文章采集器
当我们需要给网站采集文章时,这个采集器就可以派上用场了。这个采集器 不需要有人值班。它每天 24 小时运行,每 10 分钟运行一次。会自动遍历采集列表,抓取收录文章的链接,随时抓取回文,设置自动发布自动发布到指定的文章列表。
辣鸡文章采集器能跑到哪里去?
这个采集器可以运行在Windows系统、Mac系统、Linux系统(Centos、Ubuntu等)上,可以下载编译好的程序直接执行,也可以下载源码自己编译。
香辣鸡文章采集器Available 伪原创?
这个采集器暂时不支持伪原创功能,后续会添加合适的伪原创选项。
如何安装和使用
go env -w GOPROXY=https://goproxy.cn,direct
最后执行如下命令
编译结束后,运行编译好的文件,然后双击运行可执行文件。在打开的浏览器的可视化界面中,填写数据库信息,完成初始配置,添加采集source,开始采集之旅。
发展计划官网微信交流群
帮助改进
欢迎有能力和有贡献精神的个人或团体参与本采集器的开发和完善,共同完善采集功能。请fork一个分支,然后修改,修改后提交pull request合并请求。