ajax抓取网页内容(ajax抓取网页内容的流程，学习django先要抓你)

　　ajax抓取网页内容(ajax抓取网页内容的流程，学习django先要抓你)

　　ajax抓取网页内容的流程，详细流程文章中有讲到。然后我们来设计并实现这个模块化框架，提供给后面复杂的结构我们需要用到的编程语言。

　　要先下载一个jdk环境包，一些包需要自己准备。

　　flask-django-mysql-json模块

　　要实现用户登录和你设定的条件。你就要考虑很多问题，比如：如何提供动态界面啊？这个也是最难的一个问题。

　　要懂点前端

　　把页面抓下来传给django,然后需要做的就是拼接json然后post数据给后端

　　学了django我也没抓住

　　1.搞定前端，抓取网页数据。2.搞定后端，接收前端数据，封装成接口。

　　需要什么技术，如果没有库的话，就学习它。

　　现在有些网站不限制web项目，可以用后端框架axios，前端打开相应的页面，然后根据后端渲染的页面提交给服务器，不过一般都有限制。然后做了前端，再做后端，不过一般ajax都是靠前端来抓取的，有的甚至直接拿取页面内容，抓取结束后，返回给前端或后端，不过实际场景总是做二次加工，有时候前端的页面里可能还会有一些算法，数据挖掘的内容，这些直接返回给前端也方便用户查看。

　　是不是真的用django

　　首先要学习django，django是一个建站框架，可以看官方文档即可。学习django先要抓你想抓取的页面。拿比较普遍的社交网站百度来举例，搜索“爱情，单身，*敏*感*词*”等关键词的时候，页面上的html代码。拿到这个代码以后，自己看能不能弄出restfulapi接口。有api的话就可以配置django的connector来对接django后端。

　　没有api或者自己写接口的话就只能重新学习django的http协议，然后学习你需要的nginx等防反爬库。再学习学习http语法，学会tcp2。再试试写后端的话就可以直接用flask或者webpy啥的，现在做web不涉及商业就用django就可以了，其他的不必深究。要实现抓取可以参考百度指数、豆瓣影评等项目。