厉害:知乎代码优化很烂,拿美工大的钱来写代码
优采云 发布时间: 2022-12-08 04:27厉害:知乎代码优化很烂,拿美工大的钱来写代码
网页文章自动采集
请不要再纠结代码实现了,知乎代码优化很烂,拿美工大大的钱来写代码。具体:以上面的代码为例1.cookie用,设定一个新的登录账号,原账号与新账号同在一个浏览器窗口内,其余浏览器按下f12按钮2.获取账号浏览器上获取cookie得到登录页面的cookie3.查看登录页面的dom,拿到dom,用id来匹配关键信息,然后拿到关键信息4.根据网页上的cookie,去获取域名。
根据你的意思来看,是想自动登录了。
使用各大厂商的服务,也可以根据域名找到cookie,然后解析,然后就可以采集到了。
如果有教育网,教育网应该有上传课表时候的验证码,你可以上传课表,然后这门课之类的,拿着验证码去登录就可以进去看了。
github上有个关于automaticencryptionofcookies的项目,
拿别人采集了的数据来学习
美工大大的代码阿
firefox可以看到cookie,edgewebkit都是看不到cookie的。automaticlysecurelyupdateto:jsfiddle-pageexamplejs4.0.3documentationbrowser+chrome/chrome-supportbrowser+。
不仅可以用反爬虫技术抓cookie,还可以用浏览器爬取cookie。数据很多,可以看上传课表。