网页flash抓取视频教程网页视频抓取基本上不是什么新技术了

　　网页flash抓取视频教程网页视频抓取基本上不是什么新技术了

　　网页flash抓取视频教程网页视频抓取基本上不是什么新技术了，随着最近几年视频网站的竞争越来越激烈，各个网站的变动也比较频繁，像这样以往要一个网站一个一个请求来从视频资源下载的网站效率已经不高了，每一秒钟可能就可以抓取5-6个视频，这在以往是很不容易的。今天我要做的就是将网页最新的视频资源抓取下来。我使用的是千锋的网页视频抓取框架。

　　这个框架其实挺老的了，就2011年到2015年之间的事，15年以后就换代了很多款了，但是本质上还是一样的。项目截图这个项目的页面就是一个非常好的网页视频站，那么这个对于我来说是毫无压力的。但是问题来了，这个网站我只抓取了2015年到2016年的视频，那么2017年的还没有抓取下来，这样就是一个无底洞。

　　即使我现在手上有xcode，但是对我来说xcode的运行时间太长了，太不方便了。我需要一个速度快，而且好管理的工具。于是，我就想到，可不可以把这两年的每一天的视频都抓取下来，利用youzoom这个工具来拖拽下载呢？？问题。

　　一、抓取的视频没有发布到相应的电台上。解决方案解决方案1：利用编辑器来强制把每天的视频都发布到别的电台上我相信对于网页抓取工程师来说应该不难吧，要做到这一点，我只需要一个ruby环境，或者说我需要有专门的人处理发布就够了。但是我这里找不到这样的人，所以只能自己撸代码。解决方案2：再制作一个mongodb的表单，用来记录所有发布的视频数据这样就可以记录了。问题。

　　二、无法统计视频的播放数量，尤其是2015年之后的解决方案除了使用xcode让xcode帮我把整个网站进行抓取和更新的之外，还可以用一些第三方的视频抓取工具。在这里推荐一个网页视频抓取工具，是日语的，名字是hanagilo.exe。不得不说，日语视频抓取的速度确实要比中文的高很多。支持iphone和ipad，并且可以做上传视频的基本操作，比如上传视频到云端，上传视频到flickr，duolingo等。

　　相信都有些提升。最重要的是支持xcode代码生成，写上面的简单的代码只需要两行简单的代码。例如上传视频到flickr，代码为vartime=newdate().tolocalestring().encode('gbk').stringify();这样对于我来说就可以把整个网站进行抓取和更新了。问题。

　　三、视频页面要求动态？？解决方案要解决的

　　问题可能还有几个，我都会把它们都补充在这里。

　　问题

　　1、网站的视频已经在2016年之前的了，那么播放列表就没有也没有了，为什么我要抓取呢？解决方案：我们可以设置一个参数来过滤，比如2015年之前的只抓取这一段时间的。

　　2、2016年开始，