从网页抓取视频只能截取整个网页的其中一个页面

优采云 发布时间: 2022-08-04 00:02

  从网页抓取视频只能截取整个网页的其中一个页面

  从网页抓取视频只能截取整个网页的其中一个页面。如果你只是知道网页有哪些,还不知道你要从哪个页面抓取的话,你只能拿着那个页面链接去新建页面,比如,用下图的这个方法,这个方法目前不支持下载所有网页,不过,我能解决你的问题,通过这个方法你就可以直接从网页从另一个角度抓取了。如果你从另一个角度也抓取不到的话,那就只能到百度抓取,想不抓取就到淘宝或者天猫抓取,反正不能在百度里面直接抓取吧,不是正宗的抓取。

  

  这要根据你要抓取的目标网站来,也要看你采用的是什么策略(传统的db数据库抓取也是要区分技术的)。目前市面上看,基本都能完成对网页内容的抓取工作,但是针对每个网站都不一样,如果只是抓取,webwebweb、数据库抓取等都可以满足你,关键还是要根据你的需求。如果要实现能抓取某一个网站里的内容,就要转到html语言了,如果你有这个需求。

  你是说从网页访问抓取还是内容本身抓取?

  

  抓取知乎所有答案

  我个人经验,只要你看得懂中文,就能获取,否则就难。要抓取知乎的所有答案,可以用抓包工具,比如其它答案里的抓包工具。如果需要抓取微博、网页等的话,要进行一些数据抓取,这方面我一点经验都没有。如果需要抓取bbc纪录片全集,应该还有能够获取的技术,或者挖掘某些电影历史遗留的技术(比如使用vbs来批量挖掘影片完整包。具体请参考如何从英文电影中挖掘到巨大的价值?-李万国同学的回答)。

0 个评论

要回复文章请先登录注册


官方客服QQ群

微信人工客服

QQ人工客服


线