网页数据抓取或是cookie抓取都不是很推荐的

　　网页数据抓取或是cookie抓取都不是很推荐的

　　网页数据抓取或是cookie抓取都不是很推荐，因为是1对1的，按效率来讲，代价相对会比较大。web抓取最推荐的，应该是爬虫的爬虫。比如你要查询员工电话，可以采用爬虫程序来爬，你的目的只是想要知道大概是哪个员工，用爬虫程序去从这份电话清单中，或许能找到能联系上对方的办法。

　　最开始我以为还是抓包啊，

　　现在的爬虫有很多种，如果是对所有网站都进行爬取，首先要学会的可能是把网页整理出一个大致的结构。而每一份结构，都会有一份代码。如果这份代码之中的存储数据并没有比较完整的结构的话，那么爬下来的数据，有可能无法通过索引节点来进行分析。这些代码都需要在编程课中学习并掌握。而如果你想通过对某一个网站进行爬取，那么你想要进行的操作，可能是希望对这个网站进行规划。

　　目前针对爬虫大多存在两种方法：1.processingscript或是processingwebscript2.其他一些更高效的方法。这两种方法来说，processingscript的性能，可能会更快一些。目前的processingscript是一种极其简单的方法，更多的人采用webscript。webscript通过对网页的层次化，相对于processingscript可以更加便捷的对网页内的数据进行爬取。

　　当然它需要对所有的网页都去爬取，这就有些麻烦了。比较重要的是，script通过htmltag对这些数据进行遍历，会发现大多数的processingscript的数据都只有部分在一个点上，而这些数据大部分会被放到一个大的整体中去，在这个整体中，有很多的tag对数据进行分割。而这样的话，这个整体的部分会占到网页数据的一大部分。

　　虽然，这个整体是没有本质差别的，但是其中的其他一些点还是会具有局限性。至于在网页中搜索，这个方法我还是见过不少人做过，比如说scifinder这个网站，是全球最大的期刊相关信息网站，如果想去爬一下它的信息的话，有些不多见，但是值得一试。当然如果你只是想抓取某一个网站的，我认为直接找到这个网站，通过http协议，加上爬虫程序的方法，应该是更快的方法。