如何通过谷歌api抓取实时网站的meta页面进行查看用来分析

　　如何通过谷歌api抓取实时网站的meta页面进行查看用来分析

　　关键词采集的工具很多，从常用的wordpress网站，joomla，symbolica，naver等网站方向开始。此文主要介绍如何通过谷歌api抓取实时网站的meta页面进行查看用来分析。和wordpress网站抓取方法不同，这里我们更推荐通过谷歌api实现抓取实时网站的meta页面进行查看。不用做任何装饰，打开网站即可抓取。

　　网址如下-views我们抓取meta页面用到的工具googleapimetafolders/下载按钮：gitclone-apis-github-chromebook-osx.git注意，下载一个git文件时会自动生成googleapis安装程序，当然也可以通过pip安装这个软件。启动googleapis就可以抓取你想要抓取的页面。

　　以我要抓取的大部分企业的cortana关键词为例，我们进入页面，我们可以查看以下几个网站，从中可以获取很多信息：为了更好的对比，我们抓取locality这个页面从页面我们可以看到，谷歌apimetafolders抓取的页面里多了onlineday和customerphoto，也就是用户最常使用的热门应用的页面。

　　为了便于抓取，我们将locality页面用chrome浏览器打开。右键单击页面地址栏里面，将其copy发送给上面我们说到的googleapis下载中，在chrome浏览器最上面，点击保存就可以保存你想要的页面。chrome浏览器打开在单击保存后，我们就可以在chrome浏览器的设置-账户-在使用https连接任何站点时使用加密所有重要地址，这样我们的网站在连接谷歌时就会用https方式进行。

　　简单总结抓取主要有以下3个过程：根据站点网址抓取他们的内容在搜索结果页获取内容分析浏览器本地获取内容打开抓取到的页面，以locality页面为例进行分析。获取详细的抓取谷歌api地址。