爬虫模拟访问网站内容抓取原理，有什么作用？

　　爬虫模拟访问网站内容抓取原理，有什么作用？

　　网站内容抓取原理，大概分为单页抓取和列表爬取两类，每种方式都有不同的标准，利用专业的网站抓取工具，例如ngspider，可以快速的实现网站内容抓取，简单说就是只要抓取到一个网站的某些内容，就可以获取整个网站内容。爬虫有两种加载方式，（1）ajax加载。我们可以通过ajax技术，让用户在访问网站时，加载时网站应该加载的内容。

　　大大提高了整个网站的加载速度。（2）json或xml加载。我们可以通过json技术或xml技术，来加载我们想要抓取的数据。从上图我们可以看到，网站内容抓取流程分为：登录、站内搜索、爬虫搜索。也就是说，爬虫模拟访问网站服务器，当我们访问服务器数据时，我们就可以获取到被服务器加载的所有内容。

　　ajaxjsonjson也就是xml，所以抓取可以用json做，也可以用ajax。ajax也可以通过一次加载多个，

　　ajax什么是ajax(asynchronousjavascriptandxml)？ajax是xmlhttprequest和xmlhttprequest2的简称，它允许浏览器与服务器进行多轮对话。在加载网页内容时，我们可以通过访问页面，让服务器返回包含内容的页面，以此来减少加载时间。

　　单页爬虫或列表爬虫，

　　json