汇总:自动采集生成内容系统-无需任何打理，轻松操作

　　汇总:自动采集生成内容系统-无需任何打理，轻松操作

　　关键词自动采集生成内容系统-无需任何打理，轻松操作定向抓取目标文章自动采集+定向过滤系统内容分析自动发现并自动标记与排序目标页面的相关页面自动发现目标页面的相关页面结语采集包括爬虫采集、网页自动采集。而定向过滤系统有：网页定向过滤系统、网页质量控制系统、网页源码审查系统。

　　前端利用css/sass、框架后端用java、nodejs。

　　我最近研究出一种代码*敏*感*词*/

　　springboot+springmvc，用spring直接把接口暴露出来，定时注册和发送请求，所有请求都放到spring的action模块里，只要能*敏*感*词*就能控制，各组件之间用简单的数据交互机制相互通信。

　　网络爬虫：redis+mongodb+nginx，然后直接将爬取的数据存储进redis中，然后再用postgres+rabbitmq+hibernate进行数据的存储，xml进行数据的解析处理，把网页重定向到django模板引擎，完成数据的发送，django处理完数据之后把处理后的返回给爬虫，spring把抓取的信息交给redis。

　　http请求：web请求会从http2.0支持，然后就是json，get等，然后可以进行xml等或者csv文件的解析，然后进行简单的数据存储和处理。项目库，这里我准备做个lbs的爬虫，希望能建立一个小的项目库，然后相关的组件和接口都放在这个项目库里。另外个人相关会准备个整合层，整合其他人的东西，提供一个接口转发或者地址转发的功能，感觉会很有意思！。