php抓取网页表格信息(小O地图抓取完成后程序会自动导出数据包括图片)

优采云 发布时间: 2021-09-13 15:05

  php抓取网页表格信息(小O地图抓取完成后程序会自动导出数据包括图片)

  小O图提供58网站二手房数据抓取功能。捕获的数据可以导出为CSV文件,导出的数据包括图片。

  目标页面:

  

  [1] 新任务

  新建任务选择【网络爬虫/房地产/58二手房】,输入任务名称、保存路径等信息,点击【确定】新建任务。

  

  [2] 选择目标页面

  在右侧主界面工具栏选择【打开页面】,选择目标页面,如下图,

  

  选择后会自动跳转到目标页面,请稍等,程序会自动解析页面分页数据,如下图:

  

  [3] 开启抓取功能

  选择【页码下拉框】选择要采集的页码,默认程序会自动进入数据采集模式。

  如果还没有进入自动抓拍模式,可以点击【开始】按钮启动抓拍功能。

  

  【4】自动翻页

  程序会自动判断当前页面数据,如果抓取完成,会自动翻页到下一页。如果没有自动抓取,请执行步骤[3]手动选择下一页。

  

  [5] 反爬虫功能

  58个网页都会有反爬虫机制,如下图。当出现验证页面时,需要用户手动进行身份验证,通过后程序会自动继续爬取。如果没有自动抓取,请执行步骤[3]手动选择下一页。 .

  

  [6] 导出 CSV

  捕获完成后,您可以将数据导出为 CSV 并在 Excel 表格中打开。同时,导出的数据包括房屋图片。

  

  图片

  

  [7] 切换城市

  小O图默认加载的页面是沉阳二手房信息。如需切换城市,请按照下图,选择指定城市,然后重新执行以上爬取步骤。

  

  [结束]

  小O系列软件:

  【小O地图】:提供地图数据下载和处理功能。

  【小O图】:提供地图图表和EChart图表展示功能。运行需要Excel软件。

0 个评论

要回复文章请先登录注册


官方客服QQ群

微信人工客服

QQ人工客服


线