解决方案:文章在线采集功能的建站系统都会有内置的“爬虫”功能

　　解决方案:文章在线采集功能的建站系统都会有内置的“爬虫”功能

　　文章在线采集功能的建站系统都会有内置的“爬虫”功能。也就是：系统内置各种spider，作为网站爬虫，你可以设置应用的场景，保证你给定的网页的数据，爬取正确而不被误伤。想要采集的网页，我们都会采用“保存为sqlite数据库”的方式。1.sqlite/mysql数据库搜索一个你喜欢的爬虫系统，导入我们这个爬虫系统中进行了解。

" />

　　保存目录中的xxx_crawler.xml文件代表爬虫的保存路径，我们常用的是mysql。我们可以选择性的保存相应xml文件的地址。default_crawler.xml中有4个元素，分别是：image/icon：即我们爬虫所采用的图片路径，如“/image/maoxiduulyd/2014110112”。

　　当然，系统已经包含了图片的下载地址，这是标准方法之一。mysql：数据库名称。如mysql-bin.mysqlite：数据库的自定义名称，如default_crawler.xml中保存了default_crawler.xml文件的路径。xx_crawler.xml：爬虫所采用的“采用”mysql数据库名称。

" />

　　这4个元素是分别保存在sqlite数据库中的。为什么要sqlite数据库呢？请见我之前的回答：。2.xml数据库写入xml数据库并设置保存位置（保存地址）最简单的方法：打开sqlite，查看xxx_crawler.xml文件。在sqlite安装目录下，xxx_crawler.xml文件的sqlitedatabase中设置保存路径即可。

　　代码如下：com.sunflower.browsegui.launcherbrowsegui.launcher=includexxx_crawler.xmlcom.sunflower.browsegui.launcher=includexxx_crawler.xmloptions:xxx_crawler.xml=truecom.sunflower.browsegui.launcher=includexxx_crawler.xmldefault_crawler.xml=c:\mysqldriver\system\conf\mysql.socketbrowsegui.launcher=includexxx_crawler.xmloptions:browsegui.launcher=defaultoptions:default_crawler.xml=c:\mysqldriver\system\conf\default_crawler.xmldefault_crawler.xml=c:\mysqldriver\system\conf\default_crawler.xmlnet.hostname=xxx\xxx_crawler\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\xxx\。