《迅雷采集系统-百度图片采集》downloadlistprocessor,,httppinghttpping

　　《迅雷采集系统-百度图片采集》downloadlistprocessor,,httppinghttpping

　　关键词文章采集工具，爬虫框架，邮件嗅探，迅雷推送，推送相关信息，html解析，相关链接，自动转换等，可以都试试了。对于新手来说，找到合适的起始点是非常重要的。

　　html解析还有一些乱七八糟的小工具，最近一直在用百度，

　　推荐这个写的简单好用的，包括抓取邮件，微博，关键词，图片地址，ai能力基本上都有了。

　　我就想问问这些网站出于什么原因(友情链接或者什么)才会把用户发送出去的链接上传到迅雷服务器上去？一般的网站很少会一直待在服务器里的。迅雷前端有个工具是用来抓包处理迅雷服务器响应，有这种类似于抓包处理页面地址的。e-mail抓包处理或者做xhr封装方便持久化。没写过爬虫，不过抓包倒是常用到。不过好奇是否正常提取？。

　　那些高科技，也可以是用iframe来抓取的，抓取过来又下发。这样既有效，对服务器也好，毕竟还是很稀缺的。

　　《迅雷采集系统-百度图片history采集》downloadlistprocessor,colaharacterextractor,wechatshare,httpping，抓取文件的小工具,抓取图片也不错，尤其是中文图片，这个会比百度的的图片搜索好用得多，非常适合迅雷这样的网站。linux系统下直接用vim+bash最原始的方法，但是实测很多扩展有的时候并不稳定。

　　现在大部分的手机浏览器和安卓手机都能看到迅雷提供的下载链接，安卓的话直接上二维码获取下载链接比直接扫码方便。这两年迅雷对spanfilesdk进行了很大的更新和修改，感觉迅雷不再是那个纯粹地收集资源链接的小工具，开始在搜索引擎里投放有用的信息。其他类似的网站就不一一列举了。另外，提供一个spanfile的快速下载地址：//下载链接：:utree。