【教程youtube教程】采集内容插入词库，自动爬下来

　　【教程youtube教程】采集内容插入词库，自动爬下来

　　采集内容插入词库，自动爬下来。三天内持续积累下来。有用的词就加进去了，没用的词就干脆删了。加快爬虫速度，也增加了曝光率，何乐而不为。

　　长尾关键词集合，还有wordpress手工整理。一般在这里：。

　　你可以考虑这个思路：写个程序爬虫爬取发言信息，生成统计词云，用统计词云再爬取更多。

　　给某几个人发一个im（活跃im人数总和最少要小于500），通知他们有口语化的口头禅，不要介意，我们群的群主就是做这个的。最后发布成一篇字幕版的全英字幕的【youtube教程】【原创】如何制作一个视频教程。

　　主要问题，1，为什么要爬下来，说什么内容2，运算量太大，写爬虫，一般都会从哪些入手，思路如何规划。3，微博活跃人数怎么选择，去除标签好像没必要（标签容易选择，但是活跃用户的资料数太多，都是你同类型的所以一些你不愿意爬的内容也会爬过来）4，和同类型公众号比起来，哪些内容可以爬，去除什么好像是个主要问题，再者互动在公众号里也有。

　　微博的话，基本上每个网站都可以抓取。我们是用leaflet抓取的微博，需要搞一些词条，

　　爬虫主要是爬摘要和关键词

　　我们用的是看twitter的api，只要用一个邮箱，一些你想要抓取的信息都可以从twitter上面爬过来，再进行分析。