最新信息:web信息收集-子域名信息收集工具

优采云 发布时间: 2022-10-12 04:20

  最新信息:web信息收集-子域名信息收集工具

  最近有个想法,想写一个采集信息的小工具,于是这篇文章文章就诞生了

  目前自己写了一个子域采集工具,后续还在完善中,就不多说了,开始介绍。

  GTL(获取目标链接)它能做什么?

  它可以在指定的文本中获取域名的子域(例如:targets.txt),并将可访问的链接放在result.txt中,而subdomain.txt中的子域如何使用呢?

  编辑一个targets.txt,写入要检测的域名,使用参数-f指定文件

  用法:

  python3 GTL.py -f targets.txt

  呵呵,目前只能获取子域名的链接,检测是否可以访问。当然,好工具还不止这些,最近比较忙。后续当然要开发一个端口信息采集脚本+web服务容器指纹识别脚本,哈哈,这只是一个想法,离实现还差得很远。

  看到这里,大佬们肯定有想法了。使用 crawlergo+xray 不只是扫描吗?呵呵,我也有这个想法。github上已经有大佬了。当然,你也可以直接用那个大家伙。脚本配合我很方便。

  这是运行的屏幕截图

  既然都结束了,那就说说我的设计思路吧。

  程序结构:

  ├── 核心

  │ ├── GetSubdomain.py

  │ └── __init__.py

  ├── GTL.py

  

  ├── 脚本

  │ ├── CheckDomain.py

  │ ├── UseGetSubdomain.py

  │ └── __init__.py

  一共有四个py文件,所以先介绍GTL.py

  GTL.py 是程序的主要执行程序。它用于调用各种模块。目前,似乎没有什么可介绍的。

  GetSubdomain.py 中调用了六个接口来获取子域名。大部分内容是对获取的子域名进行处理,然后调用时返回。

  注:这里的六个接口是从国光老大的文章知道的

  # 爱站

https://baidurank.aizhan.com/baidu/{domain}/

# 百度云观测

http://ce.baidu.com/index/getRelatedSites?site_address={domain}

# hackertarget

https://api.hackertarget.com/hostsearch/?q={domain}

# IP138

<p>

https://site.ip138.com/{domain}/domain.htm

# crt.sh SSL 证书反查

https://crt.sh/?q=%25.{domain}

# 千寻

url = &#39;https://www.dnsscan.cn/dns.html&#39;

datas = {"ecmsfrom": &#39;8.8.8.8&#39;, "show": &#39;none&#39;, "keywords": domain}</p>

  UseSubdomain.py用于调用GetSubdomain模块,对获取的子域进行去重,最后放到subdomain.txt中

  checkdomain.py打开subdomain.py,使用多线程访问链接,将访问成功的链接放入result.txt

  程序的主要流程大概是这样的

  缺点

  目前的工具还是有很多不足的,比如效率比较低,调用UseGetSubdomain.py中的程序时使用循环来获取子域名,如果使用多线程或者多进程效率肯定会提高很多,工具的功能还是比较简单的,当然以后肯定会升级。

  说了这么多?还没有链接?

  兄弟,放手吧

  /ro4lsc/GTL

  希望大佬们能给我一颗小星星,这也会成为我最大的动力

  如果写错了,希望大佬轻喷。

  技术文章:seo网站优化工具

  站长在做网站优化的时候,都需要借用各种seo网站优化工具。这些工具不仅有助于提高生产力并减少工作量,还有助于提供对 网站 的整体 SEO 进度和结果的更全面的了解。

  一、百度推广背景

  出价和 SEO 的方向有很大的不同,但是 Google Ads 后台的 Keyword Planner 会帮助您在分析您的关键字选择时进行参考。

  2.百度站长平台

  当我们的网站上线时,我们要实时对百度进行排名并确认SEO关键词优化。这时候我们可以在百度站长的平台上查看一些我们想知道的东西,提交百度网站网站站点站点地图,提交死链接,查看爬虫抓取频率。

  3.日志分析工具

  

  站点日志分析工具可以快速分析站点的日志文件,并提供蜘蛛(如百度、谷歌等)爬取历史的完整视图。

  4. 词库

  是专门分析网站关键词、长尾关键词、热门关键词和行业关键词库的大型词库。它是许多SEO优化专家的SEO关键字优化工具之一。

  5. SEO综合查询工具

  SEO关键词优化工具首先是站长和冰工具,它们的功能类似,SEO优化可以帮你查看网站收录、排名、域名年龄、友好链接、权重等目的。当然也有关键词分析、长尾关键词探索等功能,比以前更全面。

  6. 网站 流量统计工具

  典型的统计工具有站长统计、百度统计和51la统计。作为SEO关键词优化工具之一,网站流量统计工具,SEO优化有助于调整我们网站的不足。

  

  7. 5118大数据SEO关键词查询工具

  5118相信很多人都不熟悉。总分和seio优化数据分析做的不错,可以通过进入百度前100的网站关键词来计算。

  域名频道专业提供域名注册、虚拟主机、网站制作、自助建站系统、网站优化、网站推广等服务。

  域名频道云网站有很多漂亮的建站模板,适合各行各业,不用设计也能做出漂亮的网站。

  网站使用哪种开发语言,常用的开发语言有ASP、.NET或者PHP,需要选择对应的Windows虚拟主机或者linux虚拟主机。

  使用小丑云在域名频道自动建站,网站制作时间短,价格便宜,服务有保障。域通道链接

0 个评论

要回复文章请先登录注册


官方客服QQ群

微信人工客服

QQ人工客服


线