最新信息:web信息收集-子域名信息收集工具
优采云 发布时间: 2022-10-12 04:20最新信息:web信息收集-子域名信息收集工具
最近有个想法,想写一个采集信息的小工具,于是这篇文章文章就诞生了
目前自己写了一个子域采集工具,后续还在完善中,就不多说了,开始介绍。
GTL(获取目标链接)它能做什么?
它可以在指定的文本中获取域名的子域(例如:targets.txt),并将可访问的链接放在result.txt中,而subdomain.txt中的子域如何使用呢?
编辑一个targets.txt,写入要检测的域名,使用参数-f指定文件
用法:
python3 GTL.py -f targets.txt
呵呵,目前只能获取子域名的链接,检测是否可以访问。当然,好工具还不止这些,最近比较忙。后续当然要开发一个端口信息采集脚本+web服务容器指纹识别脚本,哈哈,这只是一个想法,离实现还差得很远。
看到这里,大佬们肯定有想法了。使用 crawlergo+xray 不只是扫描吗?呵呵,我也有这个想法。github上已经有大佬了。当然,你也可以直接用那个大家伙。脚本配合我很方便。
这是运行的屏幕截图
既然都结束了,那就说说我的设计思路吧。
程序结构:
├── 核心
│ ├── GetSubdomain.py
│ └── __init__.py
├── GTL.py
├── 脚本
│ ├── CheckDomain.py
│ ├── UseGetSubdomain.py
│ └── __init__.py
一共有四个py文件,所以先介绍GTL.py
GTL.py 是程序的主要执行程序。它用于调用各种模块。目前,似乎没有什么可介绍的。
GetSubdomain.py 中调用了六个接口来获取子域名。大部分内容是对获取的子域名进行处理,然后调用时返回。
注:这里的六个接口是从国光老大的文章知道的
# 爱站
https://baidurank.aizhan.com/baidu/{domain}/
# 百度云观测
http://ce.baidu.com/index/getRelatedSites?site_address={domain}
# hackertarget
https://api.hackertarget.com/hostsearch/?q={domain}
# IP138
<p>
https://site.ip138.com/{domain}/domain.htm
# crt.sh SSL 证书反查
https://crt.sh/?q=%25.{domain}
# 千寻
url = 'https://www.dnsscan.cn/dns.html'
datas = {"ecmsfrom": '8.8.8.8', "show": 'none', "keywords": domain}</p>
UseSubdomain.py用于调用GetSubdomain模块,对获取的子域进行去重,最后放到subdomain.txt中
checkdomain.py打开subdomain.py,使用多线程访问链接,将访问成功的链接放入result.txt
程序的主要流程大概是这样的
缺点
目前的工具还是有很多不足的,比如效率比较低,调用UseGetSubdomain.py中的程序时使用循环来获取子域名,如果使用多线程或者多进程效率肯定会提高很多,工具的功能还是比较简单的,当然以后肯定会升级。
说了这么多?还没有链接?
兄弟,放手吧
/ro4lsc/GTL
希望大佬们能给我一颗小星星,这也会成为我最大的动力
如果写错了,希望大佬轻喷。
技术文章:seo网站优化工具
站长在做网站优化的时候,都需要借用各种seo网站优化工具。这些工具不仅有助于提高生产力并减少工作量,还有助于提供对 网站 的整体 SEO 进度和结果的更全面的了解。
一、百度推广背景
出价和 SEO 的方向有很大的不同,但是 Google Ads 后台的 Keyword Planner 会帮助您在分析您的关键字选择时进行参考。
2.百度站长平台
当我们的网站上线时,我们要实时对百度进行排名并确认SEO关键词优化。这时候我们可以在百度站长的平台上查看一些我们想知道的东西,提交百度网站网站站点站点地图,提交死链接,查看爬虫抓取频率。
3.日志分析工具
站点日志分析工具可以快速分析站点的日志文件,并提供蜘蛛(如百度、谷歌等)爬取历史的完整视图。
4. 词库
是专门分析网站关键词、长尾关键词、热门关键词和行业关键词库的大型词库。它是许多SEO优化专家的SEO关键字优化工具之一。
5. SEO综合查询工具
SEO关键词优化工具首先是站长和冰工具,它们的功能类似,SEO优化可以帮你查看网站收录、排名、域名年龄、友好链接、权重等目的。当然也有关键词分析、长尾关键词探索等功能,比以前更全面。
6. 网站 流量统计工具
典型的统计工具有站长统计、百度统计和51la统计。作为SEO关键词优化工具之一,网站流量统计工具,SEO优化有助于调整我们网站的不足。
7. 5118大数据SEO关键词查询工具
5118相信很多人都不熟悉。总分和seio优化数据分析做的不错,可以通过进入百度前100的网站关键词来计算。
域名频道专业提供域名注册、虚拟主机、网站制作、自助建站系统、网站优化、网站推广等服务。
域名频道云网站有很多漂亮的建站模板,适合各行各业,不用设计也能做出漂亮的网站。
网站使用哪种开发语言,常用的开发语言有ASP、.NET或者PHP,需要选择对应的Windows虚拟主机或者linux虚拟主机。
使用小丑云在域名频道自动建站,网站制作时间短,价格便宜,服务有保障。域通道链接