querylist采集微信公众号文章(rjava采集微信公众号文章的有效性)

　　querylist采集微信公众号文章(rjava采集微信公众号文章的有效性)

　　querylist采集微信公众号文章，大文本、小文本都可以，按词抓取，点击率高，方便。

　　楼上的没有提及全面！有人提到wordtab:

　　目前几个平台中，微博爬虫你可以用scrapy，

　　既然你那么肯定有效，不妨把数据转接一下，非对称加密，或者使用hashify、密码管理。

　　推荐你看看rjava博客提到的nodejs微信爬虫

　　wordtab，爬取微信公众号的文章，不限文本类型，

　　可以使用公众号热文爬虫的spider.py，请看博文，自己改动注释和模板功能，

　　没有人说wordtab吗？-python

　　lxml+xpath

　　大部分都是需要导入数据库查询的，

　　最适合中文的爬虫网站lxml+xpath

　　wordtab不错

　　有人说wordtab？

　　最大的还是lxml+xpath，htmlfield，关键词，tag，openpyxl如果后端功能都有比较全了，可以考虑beautifulsoup。

　　wordtab可以抓取javascript各种网页

　　wordtab最合适了，beautifulsoup框架，然后直接转word，

　　数据库操作必须有book_field_tag_meta字段，否则爬到的基本都是有机体。