《网页抓取加密html后（各种js和css）》

　　《网页抓取加密html后（各种js和css）》

　　网页抓取加密html后（各种js和css），然后抓网页上的内容（简单的可以用chrome浏览器的翻译插件将解析出来的内容翻译成你想要的方言）抓取的内容压缩成html后，再解析后拼接成网页的标题和正文；复杂一点的可以将多个网页通过爬虫抓取过来后，做用js拼接起来（有的web服务器上已经提供了js解析器）。

　　js解析的方式也不是固定的，有的在你解析正文后，以js语言编写js代码，然后在定制的网页浏览器中编写；有的是在浏览器端直接调用js代码编写；有的是通过函数生成一个代码片段。html解析的方式有很多，我一般采用sass或者less、stylus等开源的js解析工具。

　　如果有反爬或者逆爬机制的话，可以抓包分析请求，再对请求里的相关信息进行一一匹配，有可能是单个网页抓，有可能抓几百几千个网页。

　　xpath或者selenium

　　可以通过现有的web解析库，例如，web.chrome，ngx_webkit，或者经典的sass或less。

　　关键要看你设置了爬虫cookie不然程序反爬虫失败。如果你是抓取企业内部的内容，或者是一些敏感词汇的话，建议用boostrap之类的javascript爬虫库。

　　browser，以后出去的爬虫都在这里。