算法 自动采集列表(算法自动采集列表页视频，p2p压缩后利用本地服务器爬取)

　　算法 自动采集列表(算法自动采集列表页视频，p2p压缩后利用本地服务器爬取)

　　算法自动采集列表页视频。根据user_id即可抓取任意视频。当然站内高清内容要用自己的服务器下载，不过传到线上点击率会降低。

　　可以自己使用mediasourcelibrary或者提供接口的开源组件比如codecslibrary、libq、musicstream、codec也可以自己开发单独抓取，

　　可以自己写爬虫，开源的有轮子哥写的轮子。其实单独抓取的效率远远不如无损，直接搜就行了，可以抓取的场景有播放列表、视频列表、列表封面、播放列表相关视频等等。

　　很多，抓取youtube列表的工具。

　　自己写爬虫吧，每天新增的视频都可以抓，但可能会有其他风险，得好好加点权限，自己写写代码，或者可以代购抓，

　　最新的主题是英文主题，除了视频列表，还可以抓取link连接，然后拼接自己的url，前提得需要extractor软件，不过extractor这个应该自己网上找找也有。英文内容自己还是做google翻译吧，国内视频真心少。

　　还是有些简单的工具的，比如通过userid的方式抓取，但这种工具并不适合国内用户的使用习惯。我认为原因：①国内大部分用户对于爬虫实现方式的陌生，很难在软件上构建高质量的自动化处理流程；②国内用户访问英文视频列表的习惯都是直接在视频列表页面双击，导致视频列表呈现在页面上的内容看不全，需要自己创建index，并要自己标注后台视频，并自己直接调用视频。

　　做这个的工具有fisherholder这款，有兴趣的话可以自己试试。当然我也不看好p2p的网络视频，p2p压缩后利用本地服务器爬取，然后发布，这种思路没有必要存在视频库中，但这种思路存在问题，类似于国内文化输出，然后一段时间后倒回重发，在这个过程中可能会导致一些社会问题，比如地域保护的问题。然后个人认为，国内直接封闭视频库肯定更好，这样的话用户自己做爬虫，在开始时候可以放弃封闭，而直接在社区群里发布各种想看的视频等待用户爬取。

　　然后用户自己自建视频库也能获得最大的流量池，但同时这也要求用户在开始时对视频有一定量的主观判断，就比如只有优秀的教育片、体育赛事的视频能满足用户的胃口，超过一定量等比例的网络视频就没人看了，导致用户直接流失。而且通过视频列表抓取进入视频库，查找并抓取优秀的视频，进行二次利用，成本小。