采集器采集(经典电脑软件《优采云采集器电脑版》优采云软件的采集程序)

　　采集器采集(经典电脑软件《优采云采集器电脑版》优采云软件的采集程序)

　　为您推荐：经典电脑软件

　　"优采云采集器电脑版" 这个优采云software 采集程序支持远程下载图片文件，支持网站post-login信息采集，支持检测文件真实地址，支持Agent，支持采集反盗链，支持采集直接数据存储和仿人手动发布等多项功能。

　　软件功能

　　优采云采集器（）是一款功能强大且易于使用的专业采集软件，强大的内容采集和数据导入功能可以将您采集发布的任何网页转数据到远程服务器，自定义用户cmssystem模块，不管你的网站是什么系统，都可以使用优采云采集器。

　　系统自带的模块文件支持：Fengxun文章、dongyi文章、东网论坛、PHPWIND论坛、Discuz论坛、phpcms文章、phparticle文章、LeadBBS论坛、魔术论坛, Dedecms文章, Xydw文章, Jingyun文章等模块文件。

　　更多cms模块请参考自行制作修改，或到官方网站与您交流。同时也可以利用系统的数据导出功能，利用系统内置的标签，将采集收到的数据对应表的字段导出到本地任意Access、MySql、MS SqlServer。

　　采用Visual C#编写，可在Windows2008下独立运行（windows2003自带.net1.1框架。

　　优采云采集器最新版本是2008版，需要升级到.net2.0框架才能使用）。如果在Windows2000、Xp等环境下使用，请从微软官方先下载一个.net framework2.0或更高环境组件。 优采云采集器V2009 SP2 4 月 29 日。

　　数据采集原理：

　　优采云采集器 如何获取数据取决于您的规则。如果要获取某个栏目网页中的所有内容，需要先选择该网页的网址。这是网址。程序根据你的规则抓取列表页面，从中分析出网址，然后抓取获取到网址的网页内容。

　　根据你的采集规则，对下载的网页进行分析，将标题内容和其他信息分开保存。如果选择下载图片等网络资源，程序会分析采集收到的数据，找出图片、资源等的下载地址并下载到本地。

　　数据发布原则：

　　我们下载数据采集后，数据默认保存在本地。我们可以使用以下方法来处理数据。

　　1、 不会做任何事情。因为数据本身是存放在数据库中的（access、db3、mysql、sqlserver），如果只是查看数据，直接用相关软件打开即可。

　　2、Web 发布到 网站。程序会模仿浏览器向你的网站发送数据，可以达到你手动发布的效果。

　　3、 直接进入数据库。你只需要写几条SQL语句，程序就会根据你的SQL语句把数据导入到数据库中。

　　4、 保存为本地文件。程序会读取数据库中的数据，并按一定格式保存为本地sql或文本文件。

　　工作流程：

　　优采云采集器采集数据分为两步：一是采集数据，二是发布数据。这两个过程可以分开。

　　1、采集 数据，包括采集 URL、采集 内容。这个过程就是获取数据的过程。我们制定规则，在采集的过程中可视为对内容的处理。

　　2、发布内容是将数据发布到自己的论坛。 cms的过程也是将数据实现为存在的过程。可以通过WEB在线发布、存储在数据库中或保存为本地文件。

　　具体使用其实很灵活，可以根据实际情况确定。比如我可以采集时先采集不发布，有空再发布，或者同时采集发布，或者先做发布配置，也可以在@之后添加发布配置采集 完成。总之，具体流程由你决定，优采云采集器的强大功能之一体现在灵活性上。

　　软件术语

　　采集规则：

　　采集规则分为站点规则和任务规则，通常是指任务规则。所谓采集规则就是需要采集a网站时在软件中的设置。此设置可以从软件中导出，保存为文件，然后导入到软件中。站点规则文件的后缀是.lsite；任务规则文件的后缀是.ljob。

　　采集Task:

　　采集Task 也简称为任务。它是采集规则和发布规则的总和。也是采集规则和发布规则的载体。 采集 规则和发布规则在任务编辑框中设置。从采集器（带有.ljob 后缀）导出的采集 规则文件也可以称为任务规则。导入导出任务规则是指导导入导出.ljob文件。

　　发布模块：

　　发布模块也叫发布规则，通常是指数据库发布模块或者WEB发布模块。所谓发布模块，就是当已经采集的数据需要发布到目的地（例如：指定数据库，网站）时，软件中的设置。这个设置可以保存为文件，可以导入采集器使用。数据库发布模块文件后缀为.jhc； WEB在线发布模块文件后缀为.cwr。

　　（采集规则和发布模块可以从采集器导出或导入采集器使用。采集规则负责下载网页采集上的数据，发布模块负责采集 的数据发布到网站。

　　可以看出采集规则的编写和修改与网站为采集有关，发布模块的编写和修改与想要发布数据的网站有关。如果将不同网站column采集的数据发布到同一个网站的某个版块（频道），则需要多个采集规则和一个发布模块。

　　要将数据从网站列采集发布到不同的网站系统，需要一个采集规则和多个发布模块。注意这里提到的采集规则是指采集网站的设置和抓包的内容。 )

　　发布界面：

　　发布界面是一个小页面程序，通常与WEB发布模块配合使用。 WEB在线发布（使用WEB发布模块）是将采集的数据通过POST发送给网站页面程序，数据由网站程序处理。发布界面是为满足特定需求而编写的网站页面程序（如：PHP页面、ASP页面等）。

　　然后采集器通过WEB在线发布将数据发送到这个接口文件，接口文件对数据进行处理。接口文件通常放在服务器网站的某个目录下。简单的说，采集器将采集的数据发送到接口文件中，接口文件拿到数据后进行处理。使用发布接口，用户可以更加灵活、自由地处理采集器发送的数据。

　　插件：

　　优采云采集器 插件有两种：PHP插件和.NET插件。标准版支持PHP插件，企业版支持PHP插件和.NET插件。该插件允许用户通过编写自己的PHP程序或.NET程序并将其放入采集器中来处理采集的数据。

　　采集Data 数据可以在四个地方使用插件，分别是：采集网址时、采集内容时、采集多页时、保存时。

　　发布数据：

　　发布数据是指将采集收到的数据发布到指定的目的地。 优采云采集器 支持四种发布方式。

　　方法一：网络在线发布到网站

　　这种发布方式类似于在网站background中手动添加数据。 采集器将数据发送给网站后台程序，网站后台程序处理数据。通常，后台程序将数据存储在网站数据库中。

　　方法二：另存为本地文件

　　这样就可以将采集数据发布到本地文件中。 采集器支持保存为Txt格式、Csv格式和Html格式。

　　方法三：导入自定义数据库

　　这样就可以通过采集器连接其他数据库，将采集的数据从软件内置数据库导入其他数据库。 采集器支持连接Mysql、Access、Oracle、MSsql数据库。

　　方法四：另存为本地Sql文件（插入语句）

　　该方法是将采集数据导出保存为Insert语句，可用于在数据库管理工具中插入数据。

　　本地编辑数据：

　　采集器不仅可以发布数据采集，也可以发布采集编辑后的数据。支持批量替换、SQL语句批量处理、文本编辑框编辑。

　　软件更新

　　2012-05-16 更新：