该软件的工作原理是从初始URL查找外部网站. 例如，如果初始页面中有30个外部网站，则继续抓取这30个外部网站，
数据库中收录可以正常访问的网站，并在这30个网站中再次搜索外部网站. 如果每个站点中有30个外部网站，即30 * 30 = 900
<p>然后访问这900个网站以删除无法访问的网站，找到正常的访问权限并将其删除并将它们再次添加到数据库中，然后在它们的页面中查找外部网站（如果需要来回访问）
要回复文章请先登录或注册
云端的采集更轻松
