免费爬虫工具:优采云采集器怎么免费采集*敏*感*词*见闻实时新闻数据并发布
优采云 发布时间: 2020-08-27 15:27免费爬虫工具:优采云采集器怎么免费采集*敏*感*词*见闻实时新闻数据并发布
2、设置提取数据字段
在智能模式下,我们输入网址后软件即可手动辨识出页面上的数据并生成采集结果,每一类数据对应一个采集字段,我们可以右击数组进行相关设置,包括更改数组名称、增减数组、处理数据等。
点此了解怎样对采集字段进行配置。
3、使用深入采集功能提取详情页数据
在搜索结果页上*敏*感*词*见闻只展示出部份新闻信息,包括:新闻标题、缩略图、新闻简介、作者及发布时间,如果须要采集新闻内容,我们须要点击新闻标题步入详情页面,然后使用“深入采集”功能进行采集。
在详情页面我们可以看见新闻的内容、评论数等信息,这些信息都可以采集。
我们点击“添加数组”按钮,然后在页面中点击须要采集的数据。
点此深入了解怎样采集列表+详情页类型网页。
步骤四:设置并启动采集任务
1、设置采集任务
完成了采集数据添加,我们可以开始启动采集任务了。在启动之前我们须要对采集任务进行一些设置,从而提升采集的稳定性和成功率。
点击“设置”按钮,在弹出的运行设置页面中我们可以进行运行设置和防屏蔽设置,这里我们勾选“跳过继续采集”,设置“2”秒恳求等待时间,勾选“不加载网页图片”,防屏蔽设置就根据系统默认设置,然后点击保存。
点此深入了解怎样对采集任务进行配置。
2、启动采集任务
点击“保存并启动”按钮,可在弹出的页面中进行一些中级设置,包括定时启动、自动入库和下载图片,设置完毕后点击“启动”。
点此深入了解哪些是定时采集。
点此深入了解哪些是手动入库。
点此深入了解怎样下载图片。
【温馨提示】免费版本可以使用非周期性定时采集功能,下载图片功能是免费的。个人专业版及以上版本可以使用中级定时功能和手动入库功能。
3、运行任务提取数据
任务启动以后便开始手动采集数据,我们从界面上可以直观的看见程序运行过程和采集结果,采集结束以后会有提醒。
步骤五:导出并查看数据
数据采集完成后,可以导入数据,选择导入的文件类型,点击“确认导入”。
注意:优采云采集器免费提供导入到本地的多种导入方法,如excel、csv、html、txt或数据库等方法,个人专业版及以上用户也可直接发布到wordpress、dede和typecho等CMS网站。