一下加密的网页是80端口,加密怎么办呢?
优采云 发布时间: 2021-08-10 04:04一下加密的网页是80端口,加密怎么办呢?
前言
前不久写了一篇关于爬虫的帖子网站,主要介绍一些。工具方面,一个是优采云,一个是webcopy。还有一些其他的常用工具,比如国外的IDM,IDM也很流行,操作建议很方便,但是近几年爬虫大都兴起,导致IDM软件使用需求减少。还添加了优采云 和 Webcopy 等软件。
如何使用
有网友推荐我用Webcopy之类的软件。他的主要方法主要分为几点,一是深度爬取一些网页,二是浏览网页。
在此处插入图片说明
第一个功能是扫描一个网页,哪些结构可以扫描出来,直接通过优采云的图形一目了然。
点击扫描按钮,稍等片刻即可看到网站的所有内容。可以通过弹出框的左上角找到。如果未加密的网页为80端口,则加密后的网址显示为443。
在此处插入图片说明
一个非常有名的网站,不多说,上图吧。可以设置网易的最大深度和扫描设置的最大网页数。 左边绿色的是*敏*感*词*,右边的是深度,右下角是选择是否下载js、css、图片、视频等静态文件。
在此处插入图片说明
总结
可以学习网站的*敏*感*词*,以及css和js的使用和学习。工具只是辅助,最重要的是掌握自己需要的东西。
最后在安利下,在微信公众号“Chasays”回复“webcopy”即可获得中英文2个版本。