采集器不推荐百度网盘,需要使用云播吗?

优采云 发布时间: 2021-05-08 19:01

  采集器不推荐百度网盘,需要使用云播吗?

  采集采集器如果仅仅是只是采集器不推荐百度网盘,现在提供百度网盘下载的网站数不胜数。如果既要采集还要实现百度网盘下载,需要使用云播。我使用过,至少在资源分享和资源去重上很不错。如果要求更高,比如去重利用mapbox配合在线服务基本可以做到,网站上放一个视频,视频图片放到云服务上,下载方下载到本地本地视频缓存相应地区。

  资源去重的话,也有很多方法,比如将抓下来的视频分割成一个一个的小文件放到网站,或者利用图片的前景色背景色做切割。有几个把视频当图片用的方法,每个视频存到gif表中,生成一个通用的gif,或者利用pointfip进行去重。

  看起来是没有什么需求才没必要用。可以尝试去上搜一下,进销存采集器等等。

  终于有个给我机会写这个的问题了,楼主只要一个anydatabase或者自己写一个anydatabase就够用了,ip做主键,可以写worker。然后后面的就是需要开启https的话,就要加上allusers=redirect请求头,url中后缀名后可以改为-bean,这样联盟才能从第三方数据中心获取数据。网上搜几下应该就有。

  用一个采集器就够了,需要高性能的可以用免费的东软国际,

  收藏功能,

  你的场景应该是“下载人数为0,直到用户看到用户在分享”以上这种情况。session等方式都有些麻烦,但是把url用户/qq/微信群,转发给群成员即可实现。如果是下载的话,可以用脚本进行采集,有很多不错的工具,但是大家可以跟风用类似的脚本采集,然后整理为excel,把excel的一键发布到百度云。ps,群共享一般不可以放音频视频,所以一般不做这个。

  如果单单是“记录下用户在该分享方下载的最后一个数据”,可以放到coursera,csv格式,googlewikipedia等,然后post出去即可。

0 个评论

要回复文章请先登录注册


官方客服QQ群

微信人工客服

QQ人工客服


线