采集相关文章(ok点击排行榜排行榜统计代码ok定时采集:ok数据库)

　　采集相关文章(ok点击排行榜排行榜统计代码ok定时采集:ok数据库)

　　#ebookapp 概述：新颖的采集系统基于bootstrap前端技术，手机浏览效果更佳。演示网站:

　　我是小说迷。在看小说的过程中，遇到了n多个弹窗广告，喜欢手机浏览。被无数弹窗广告激怒后，我决定自己写小说系统。

　　由于一个人的开发精力有限，非常欢迎对开源软件开发有兴趣、有分享精神的软件开发者和我一起开发。

　　*敏*感*词*请加QQ群：55614858 验证信息：开源爱好者

　　开发清单：

　　1.new category2.new seed3.采集文章4.采集directory5.generated directory6.采集基本思路就是*敏*感*词*在cronjob定时采集，文章只有有阅读动作才会生成文章，文章只有有阅读动作才会生成章节列表，只有章节列表有阅读动作才会生成章节内容。

　　第一期：2013/08/24-2013/08/27搜索==ok分页==ok关键词oktitleok点击排行榜ok统计代码oktiming采集:ok（今天没人）更新*敏*感*词*更新定期执行 admin/pick_seed.php) 采集 每 10 分钟一次，一天 24 小时，采集144 次。

　　阶段2：定时删除：删除生成文件数最少的N个文章。可以设置文章存活的最大数量。 ok修改页面301跳转机制，301不够好，搜索引擎收录添加*敏*感*词*批量添加机制就ok了。好的

　　第三期：

　　文章在序列化中，加入缓存需要1小时。加入作者采集ok 加入文章图片ok

　　数据库常用包支持，打包为Model类，简化操作。好的

　　采集文章*敏*感*词*和图片、作者​​等放在一起时采集不再使用补码机制 ok 显示用户点击列表，显示最新更新，定期生成siteMap.xml。 () ok 对于小站，PHP的并发进程数是有限制的，比如进程数限制为3个。这时候如果访问的用户比较多，经常会出现508错误。为了解决这个问题，可以使用完全静态的方法。

　　用户中心，支持微博登录，显示最近阅读文章，显示采集文章

　　文章采集将文章的内容写入txt文件时，不再支持生成现成的html文件，动态生成html文件。为什么ajax不能动态生成广告页面？去除cpm广告，增加对cps和cpc广告的支持，手机加载手机广告，这是广告生成模块的职责。对于cpc广告，javascript可以模拟点击添加*敏*感*词*采集路由机制，根据不同的配置使用不同的采集规则 ok划分页面公共页眉和公共页脚页面（目前只有首页，其他不可以暂时完成）

　　自动生成表的增删改查等操作。加入文章*敏*感*词*页，显示最新章节

　　定期生成站点地图：

　　自动发微博：

　　自动抓取文章列表为空的文章列表（原理：文章列表每天自动更新，点击抓取章节，点击抓取内容）

　　cron job:wget -q -O /dev/null ""