网页采集器的自动识别算法(优采云采集器谷歌技术团队倾力打造，一键采集网页数据，全平台 )

　　网页采集器的自动识别算法(优采云采集器谷歌技术团队倾力打造，一键采集网页数据，全平台

)

　　优采云采集器由前谷歌技术团队打造，基于人工智能技术，只需输入网址即可自动识别采集内容，直观点击，点击采集网页数据，所有平台，Win/Mac/Linux均可，优采云采集器无限安全使用，可后台运行，实时速度显示，采集@ >和出口都是免费的！

　　优采云采集器软件特色

　　1、智能识别数据，小白神器

　　智能模式：基于人工智能算法，只需输入URL即可智能识别列表数据、表格数据和分页按钮。您无需配置任何采集 规则，只需单击采集。

　　自动识别：列表、表格、链接、图片、价格等

　　2、可视化点击，简单易用

　　流程图模式：只需要根据软件提示点击页面，完全符合浏览网页的思维方式。复杂的 采集 规则可以通过几个简单的步骤生成。结合智能识别算法，任何网页的数据都可以轻松采集。

　　可以模拟操作：输入文本、点击、移动鼠标​​、下拉框、滚动页面、等待加载、循环操作和判断条件等。

　　3、支持多种数据导出方式

　　采集结果可以导出到本地，支持TXT、EXCEL、CSV和HTML文件格式，也可以直接发布到数据库（MySQL、MongoDB、SQL Server、PostgreSQL）供您使用。

　　4、功能强大，提供企业级服务

　　优采云采集器提供丰富的采集功能，无论是采集稳定性还是采集效率，都能满足个人、团队和企业层面采集 @>需求。

　　功能丰富：定时采集、自动导出、文件下载、加速引擎、分组启动导出、Webhook、RESTful API、智能识别SKU和大图等。

　　5、云账号，方便快捷

　　创建一个优采云采集器账号并登录，你所有的采集任务设置都会自动加密保存到优采云的云服务器，不用担心丢失采集的任务，任务运行的数据和采集对你来说是本地的，非常安全，只有本地登录客户端才能查看。优采云采集器账号没有终端绑定限制，切换终端时采集任务也会同步更新，任务管理方便快捷。

　　6、全平台支持，无缝切换

　　同时支持Windows、Mac、Linux操作系统的采集软件。各平台版本完全相同，无缝切换。

　　使用教程

　　如何自定义采集百度搜索结果数据

　　一、创建采集任务

　　1、开始优采云采集器，进入主界面，选择Custom采集点击Create Task按钮，创建“Custom采集Task”；

　　2、输入百度搜索的网址，包括三种方式。

　　手动输入：直接在输入框中输入网址。多个 URL 需要用换行符分隔。

　　单击以从文件中读取：用户选择存储 URL 的文件。文件中可以有多个 URL 地址，地址之间需要用换行符分隔。

　　批量添加方式：通过添加和调整地址参数生成多个常规地址。

　　二、自定义采集流程

　　1、点击创建，自动打开第一个网址，进入自定义设置页面。默认情况下，已经创建了启动、打开网页和结束的进程块。底部模板区域用于拖拽到画布上，生成新的流程块；点击打开网页中的属性按钮，修改打开网址；

　　2、添加输入文本流块：将底部模板区域的输入文本块拖放到打开的网页块的后面，当出现阴影区域时，可以松开鼠标，它会自动连接至此，添加完成；

　　3、生成一个完整的流程图：按照上面添加输入文本流块的拖放过程添加一个新的块；

　　关键步骤块设置介绍

　　定时等待用于等待之前打开的网页完成。

　　点击输入框Xpath属性按钮，点击属性菜单中的图标点击网页中的输入框，点击输入文本属性按钮，在菜单中输入要搜索的文本。

　　用于设置点击开始搜索按钮，点击元素的xpath属性按钮，点击菜单中的点击图标，然后点击网页中的百度按钮。

　　用于设置循环加载下一个列表页面。在循环块内的循环条件块中设置详细条件，点击此处的操作按钮，选择单个元素，然后在属性菜单中点击该元素的xpath属性按钮，在网页中点击下一页按钮为多于。循环次数属性按钮可以默认为0，即不限制下一页的点击次数。

　　用于设置循环提取列表页中的数据。在循环块内的循环条件块中设置详细条件，点击这里的操作按钮，选择不固定元素列表，然后点击属性菜单中元素的xpath属性按钮，然后连续点击两次提取网页中的第一个块和第二个块元素。循环计数属性按钮可以默认为0，即不限制列表中计费的字段数。

　　用于执行点击下一页按钮的操作，点击元素xpath属性按钮，选择使用当前循环中元素的xpath的选项。

　　同样用于设置网页加载的等待时间。

　　要设置在列表页面上提取的字段规则，请单击属性按钮中的循环使用元素按钮，然后选择循环使用元素选项。单击元素模板属性按钮，在字段表中单击加号或减号可添加或删除字段。添加字段，使用单击操作，即单击加号并将鼠标移动到网页元素并单击选择。

　　4、单击开始采集 以启动采集。

　　三、数据采集 并导出

　　1、采集任务正在运行；

　　2、采集完成后选择“导出数据”，将所有数据导出到本地文件；

　　3、选择“导出方式”导出采集好的数据，这里可以选择excel作为导出格式；

　　4、采集数据导出如下图。