搜网站内容(微小宝金服：搜网站内容是你需要爬网站内容)

　　搜网站内容(微小宝金服：搜网站内容是你需要爬网站内容)

　　搜网站内容一是你需要爬网站内容，这个难度相对大一些，比如北京网站1000万条信息，你没爬过很正常，你需要学习爬网站的功能。二是你需要爬公众号内容，有个漏洞，如果你拿他们的公众号，登录上去，可以帮你爬下来。

　　公众号目前是每天会爬取的，

　　不可能的，都2015年了，两年了。

　　不可能的，要么你每天爬取就行，要么公众号自带全部内容，我没用过公众号，

　　肯定不可能。今天可以两天内爬网址，明天你就看不到全文了。要么你的网站足够牛逼，有资源提供每天全文。

　　不可能，2015年了爬虫网站应该已经普及了，

　　公众号不到一年的时间爬取都已经停止了

　　不太可能，公众号的运行是有最低要求的，一些高权重的关键词才有可能爬取到全文。

　　2015年9月份，我开始做公众号，当时没有太多互联网基础，只是个无聊的小白。准备了很多，有程序语言，爬虫，美工（从无到有）。回复到一个关键点，后台有权限认证，在几天之内填写完毕以后，会被邀请审核，审核通过之后就会提交，最后所以内容都被抓取了，但是由于暂时没有相关需求，所以没有任何反应。一个公众号10万左右，要想获取全文，确实是太难了。

　　现在互联网机器扒人已经很泛滥了，单个关键词几乎可以实现人肉分析，对于关键词搜索量和关键词的搜索排名有着现成的算法。我想说的是，除非你的关键词就是有用的，否则就是很痛苦。需要构建一个真正可用的关键词库，这也是微小宝、红包号后台目前努力的方向。