网站采集工具(Soukey采摘正式更名为网络矿工开源版网络开源版自)

　　网站采集工具(Soukey采摘正式更名为网络矿工开源版网络开源版自)

　　Soukeypick网站数据采集software是一款基于.Net平台的开源软件，也是网站数据采集软件类别中唯一的开源软件。 Soukey虽然选择开源，但不影响软件功能的提供，甚至比一些商业软件还要丰富。 Soukey Picking目前提供的主要功能如下：

　　1.多任务和多线程数据采集，支持POST方式；

　　2.可采集Ajax 页面；

　　3.支持cookies，支持手动登录采集data;

　　4.支持采集事务；

　　5.支持自动和手动数据导出，导出格式为：文本、Excel、Access、MSSql、Mysql等；

　　6.支持在线发布数据；

　　7.采集支持导航URL，无限导航深度；

　　8.支持自动翻页；

　　9.支持文件下载，可以采集图片、Flash等文件；

　　10.支持采集结果数据的处理，包括替换、前缀后缀、截取等操作，支持正则化；

　　11.采集 URL定义不仅支持基本参数的定义，还可以为数据采集添加字典数据作为URL参数；

　　12.支持一个任务的多实例运行；

　　13.提供定时任务，定时任务支持Soukey采集任务、外部可执行文件任务、数据库存储过程任务；

　　14. 定时任务的执行周期支持每天、每周和自定义运行间隔；最小单位为：半小时；

　　15.支持任务触发器，可以在采集任务完成后自动触发其他任务（包括可执行文件或存储过程）的执行。

　　16.完善的日志功能：系统日志、任务执行日志、错误日志等；

　　17. 系统提供MINI浏览器，可用于抓取cookie或POST数据；

　　Soukey采摘不限制你是否可以将这个软件商业化，源代码完全开放，

　　==================== 以下为更新内容====================== ==============

　　Soukey Picking正式更名为Network Miner采集器开源版

　　网络矿机的开源版本从2010年开始就没有开发了，所以重新启动了开发计划，仍然是开源的。最新代码还在sourceforge，有兴趣的朋友可以参与。