操作方法:快速收集子域名工具

优采云 发布时间: 2022-12-08 23:43

  操作方法:快速收集子域名工具

  基于网页查询的快速子域名采集工具

  主要是为了快速采集平台的学校子域名等目标而编写的工具合集。

  使用命令下载taoman:

  python taoman.py -f 数据/edusrc_school_domains.txt

  淘满操作效果图:

  

  数据目录:

  根据网络查询采集了平台上约10万个学校域名、过滤后的域名元数据和简单统计数据。

  可以根据自己的需要使用pydictor的-tool counter功能过滤data目录下元数据中的高频域名词,作为教育行业子域名爆破的爆破词典。

  edusrc_SLD_name_raw_list 普通二级域名元数据

  edusrc_SLD_top_1000 1000个最常用的二级域名词

  edusrc_SLD_top_3000 3000个最常用的二级域名词

  edusrc_SLD_unique_name 去重后的所有二级域名词

  

  edusrc_MLD_name_raw_list 通用多级域名元数据

  edusrc_MLD_top_300 300 个最常用的 MLD 词

  edusrc_MLD_top_600 600 个最常用的 MLD 词

  edusrc_school_domains 使用collectfromsrc 采集学校主页地址

  使用 collectfromsrc 采集的 edusrc_school_name 学校名称

  其他目录:

  domain_to_ip.py是一个批量解析域名到ip地址的小脚本。它使用 socket.gethostbyname 方法自动纠正非法域名和去重结果。

  collectfromsrc.py 一个小脚本,自动采集src平台上的学校名称,并使用百度查找名称对应的首页地址

  教程:阿里巴巴详情页图片批量下载采集工具V1.1 最新版

  阿里巴巴详情页图片批量下载工具采集(图片批量下载助手)是一款优秀易用的阿里巴巴商品图片下载辅助工具。如果你需要一款好用的图片下载软件,不妨试试小编带来的阿里巴巴详情页上的这款采集图片批量下载工具。图片。可以全方面下载商品的主图、sku图、其他属性等,并直接保存为TXT文本。有需要的朋友不要错过,快来下载吧!

  开发介绍:

  

  因为需要大量的采集产品,所以我写了这个软件并优化了分享。我采集一天买了5000多件宝物。本来打算把宝贝属性信息保存成csv的,后来想了想,txt应该更方便。

  软件介绍:

  

  阿里巴巴详情页图片批量下载采集工具,可批量采集主图、sku图片(以SKU命名)、详情页图片、宝贝标题、链接、ID、商品编号阿里巴巴的宝贝商品、价格等属性都存储在txt中。

0 个评论

要回复文章请先登录注册


官方客服QQ群

微信人工客服

QQ人工客服


线