采集工具免责说明(数据去重工具的最大亮点在于扫描的速度非常之快)
优采云 发布时间: 2021-10-31 20:10采集工具免责说明(数据去重工具的最大亮点在于扫描的速度非常之快)
分享小哲原创工具，支持小哲，支持Test404。
域名实时保存在{Domain results}文件夹中
二、重复数据删除1E1000W数据只需要30S左右，内存占用极小
文本重复数据删除就是去除重复数据。因为数据太多，不可能一一找到。因此，文本重复数据删除工具极其重要。它不仅可以去除重复数据，还可以去除空白行，而且非常准确，速度极快。
下载链接：
三、Test404 轻量级后台扫描器（可以通过waf）
通用扫描工具-如果可以自定义修改HTTP请求头-安全狗和云锁其实很好用！
但是大部分工具都把HTTP请求头写死了。如果服务器安装了安全狗或云锁等软件——扫描效果不好。所以这个工具只是简单的修改。设置 http 头不仅限于 User-Agent。之前的HttpDdos也是一样的原理
简要描述;简介
30线程CPU核心*4最好，get方式只显示长度，导出结果支持html格式
.\DirScan（字典目录）
.\User-Agent.txt（UA 文件）
相信大家都能明白其中的意思，这里就不多解释了。
您可以自行修改、删除或添加新词典。总体来说是一款非常方便的网站扫描仪
个人觉得这个工具最大的亮点就是扫描速度非常快（内存&CPU占用非常低），相信你会喜欢的。
遇到自定义404页面时，所有状态码都返回200。我的方法是选择get方法扫描判断长度。一般页面大小是一样的
（也可以自定义关键字判断我没有这个要求，所以没加。）
下载链接：
四、轻量级WEB指纹识别（800个指纹）
WEB指纹识别程序是一款cms指纹识别小工具，配置灵活，支持添加词典，使用简单，体验好。指纹命中性能好，识别速度快
指纹识别扫描采用并发扫描方式，指纹不断增加对程序扫描性能的影响可以忽略不计
哦，是的，有（超过 800 个指纹）
格式：标识文件|cmsname|标识文件md5（32位）
PS：你需要.NET4.0 及以上才能运行
扫描cms.exe（主程序）
cms.txt（字典文件）
SkinH_Net.dll（皮肤库）
skinh.she（皮肤资源，不喜欢直接删除）
下载链接：
