文章采集调用(文章采集调用服务的xml格式的接口，无需restfulapi)

　　文章采集调用(文章采集调用服务的xml格式的接口，无需restfulapi)

　　文章采集调用服务的xml格式的接口，无需restfulapi，一切交给c++，或者用epoll、select等异步网络调用即可.现有文章内容抓取及商品xml接口通过开发一个简单的爬虫，能够最大限度的节省url请求和返回的访问成本。本小节以杭州某地的某线索网站为例讲解如何开发一个简单的爬虫。由于杭州市的所有信息全部都在这一小块地图上，爬虫必须读取这些数据，可以很快速的进行数据采集。

　　爬虫的实现要先针对这个网站的数据进行分析，得到每个url对应的vi信息即当前页内容，以及当前页内容对应的url之前的所有历史价格数据。得到每个url对应的vi信息即当前页内容对应的url之前的所有历史价格数据爬虫的代码是通过两个c++的源文件完成。以杭州市某的某线索网站为例（杭州市的网址则在此网址后面存放），可以理解爬虫只需要通过url完成第一步所有的任务，然后解析所有url的内容返回给服务端即可。

<p>有了数据，接下来就是网站的代码实现，以及如何抓取数据了。爬虫的代码：#include#include#includeusingnamespacestd;constintmaxpage=10;//一页的长度#includeintmain(){void*path;stringfilename;charcontent[]="/";charcontent[]="\n";string[]arrays;present_content(path);filename=0;file_tindex;charlines[]=path.size();char[]next;for(index=0;index