>>[目录] 数据远程采集 Step by Step
　　系统主要由5部份组成：
　　
　　设备
　　被窃听的设备，这个设备通过UART来广播自身的运行状态
　　采集装置
　　树莓派ZeroW，接收设备广播包，存到数据库（定期打包），并上传云端
　　云端存储
　　阿里云对象储存OSS
　　本地下载
　　每天手动下载云端的数据，并删除过期的数据。在局域网共享数据文件夹
　　上位机
　　通过局域网共享的方法获取所需的数据文件，通过上位机进行数据剖析
　　1 设备
　　本项目里使用的广播包约0.5~2s发一帧，每帧数据约50~400字节，大概是这个量级。
　　2 采集装置
　　树莓派ZeroW，这款自带WIFI模块，联网很方便，尺寸也太小，对安装环境的要求较低。
　　为了防止影响被窃听的设备，独立供电，只用GND+RX两根线与设备进行通信。
　　默认无通信合同，只用数据帧的厚度来过滤有效广播包，然后直接储存原始数据帧，这样可以提升通用性，后续在本地上位机上进行合同解析。
　　采用SQLite进行数据储存。数据库中每一条记录代表一帧广播数据（长度不够就补0），一般不仅原始通信数据以外就会把时间信息等其他的一些附送数据同时打包进记录中，便于后续剖析。为了提升效率，可以每收到50-100帧数据后再统一插入到数据库中。数据库文件是后续上传等操作的最小单位，每隔一段时间生成一个新的数据库文件，这样三天的数据就可以被打包成若干的数据库文件。
　　已经储存完成的数据库文件会被放在的文件夹中，如果采集装置不联网云端内容采集，那么这种数据库文件就在这个文件夹下仍然存着了，如果联网的话，有个数据上传的程序会来扫描这个文件夹，如果找到数据库文件，就会把这种文件上传到云端，然后把数据库文件移到的文件夹下。
　　采集装置上的程序都是用Python开发的。
　　3 云端存储
　　选用的是阿里云对象储存OSS，租了40个G的空间（费用5年45元）。用上去很方便，只要通过API函数（Python SDK--oss2）去访问就好了，阿里云的网站和APP上都可以直观地看见上传的数据文件。
　　4 本地下载
　　每天早上7点（0点-8点之间下载费用五折，0.25元/G）自动下载云端的数据，并删除过期的数据。办公室的台式机仍然开着，相当于一个服务器了，然后把数据文件夹共享给局域网中的用户，其他人就可以随时访问了。
　　如果着急要看最新的数据，可以台式机上自动运行下载数据的脚本。
　　下载脚本也是用Python写的。
　　5 上位机
　　上位机主要是做两个事，1、解析数据库中的原始记录，2、数据的统计剖析等等。
　　这个上位机是之前另外一个项目中开发的（C#），它本身可以与设备通信云端内容采集，进行合同解析，存储解析后的数据，显示数据，对数据统计剖析。所以这个上位机天然具有处理原始数据的能力，只须要把原始数据库文件导出到上位机中，然后逐字处理记录就可以了。
　　局域网中的其他用户把原始数据库下载到本地后，用上位机进行处理。
　　不过采集到的数据如何用是灵活的，可以自己写软件进行处理；或者用SQLite Expert直接查看原始数据，这个软件可以把数据导入到Excel中（Excel2007之前最大行数为65,535，之后的版本是最大1,048,576行，用SQLite Expert导入的时侯要注意一下）。
　　后续不会讨论上位机相关的东西，主要是早已超过了数据远程采集的范围，然后涉及的内容也好多。 查看全部

　　商品属性
　　安装环境
　　商品介绍
　　全新开发自适应手机版！自适应手机版+触屏手机版+极速手机版
　　【1】总共3个手机版，旧版或盗卖的源码只有1个或2个手机版！
　　【2】倒卖的旧版源码，是肯定没有“自适应手机版”的！
　　【3】3个手机版都可绑定二级域名，与PC版同步登录、同步更新！
　　【4】手机版20个广告位，都在后台管理，可放全部类型广告！
　　【旧版源码的缺点，以swolf418、peihengying13、商务布丁为例】
　　1、旧版源码数据库占用很大，30G的小说，旧版本占用数据库30G，新版本只占用大约1G；2、旧版源码不适宜虚拟空间，虚拟空间数据库最多也就100M，只能放几十部小说；
　　3、旧版源码TXT文件太占用空间，旧版必须生成txt才可下载，新版无需生成也可下载；
　　4、旧版源码只有网页版采集，不稳定、漏章节，新版有网页+两套采集功能；
　　5、旧版源码没有会员系统、没有QQ微博快捷登入，不能添加书签的源码是垃圾；
　　6、倒卖的源码没有wap手机站，本店最-新开发触屏wap手机站，免费附送！
　　7、旧版源码，PC版和WAP版不能同步登录，新版源码PC和WAP同步登录同步更新！
　　8、旧版源码，只有TXT下载，新版源码支持TXT下载、ZIP下载、RAR下载！（全新升级）
　　9、旧版源码，不能手动生成二维码，新版源码全新开发全手动生成二维码扫描下载TXT！
　　10、旧版源码，不能一键转存数据库到硬碟，新版源码独-家开发mysql转存到硬碟功能！
　　11、会员系统重大升级，全新开发会员系统，收藏记录、浏览记录、点赞记录、鄙视记录！12、全新开发自适应手机版，自适应手机版+触屏手机版+极速手机版，3个wap版！
　　13、倒卖的源码没有自适应手机版，比如swolf418这家盗卖的没有这个手机版！
　　14、最-新版本源码有3套原创模板可以选择！倒卖的盗版源码只有一套模板。重大升级！应广大站长同学的要求，独-家开发“数据库转存硬碟”功能，一键将mysql数据库中的章节内容转存到硬碟中，避免数据库过大造成网站崩溃！【注：这是独-家开发的功能，全天猫只有我这一家有！老版本或则盗卖的版本没有这功能！】旧版源码最严重的问题就是“数据库爆满”，采集三五天数据库就满了！这是网页版采集最初的设计缺陷。新版源码，独zi开发采集功能，并且，开发了“数据库转存硬碟”功能，修复网页版采集的问题！
　　非常强大的下载功能
　　（一）同时支持3种格式下载：TXT、ZIP、RAR（二）支持扫描二维码下载（全网独zi开发）
　　（三）智能下载，如：首次下载时手动生成TXT采集器采集源，再次下载时直接调用早已生成的TXT（四）下载文件只须要生成一次，1.预先自动生成，2.下载时手动生成十分强大的广告功能，TXT文件中的广告
　　（一）下载的TXT文件名带后缀，如：长生界-[].txt（二）下载的TXT文件上面，头部和尾部可添加文字广告
　　（三）下载的ZIP文件上面，可把预先做好的广告文件也打包进去
　　织梦DEDE版全新开发会员系统，新增收藏记录、浏览记录、点赞记录、鄙视记录！原创开发“网页版采集+采集”两套采集功能~~~~~采集，自动采集、自动归类、自动入库、自动过滤重复小说！采集，自动采集、自动归类、自动入库、自动过滤重复小说！自动采集
　　演示网站：
　　建议用原版源码根据教程建好小说站后，再将小说数据导出
　　只提供源码+数据+教程，不提供免费安装服务采集器采集源，若需协助安装需100元
　　图片：
　　
　　
　　
　　
　　
　　
　　
　　 查看全部

　　
　　8.排行榜，站内聊天体系和签到送积分
　　9.优采云采集，自动采集其他站，伪原创，也可以做盗版小说站
　　10.txt 下载功能帝国cms自动采集发布，自动生成章节下载，自动判定更新，自动添加文本广告
　　11.程序有伪静态规则，可以不用静态页面，下载手动生成 txt 和看书弹幕疗效
　　12.本程序含安卓app开源包，开源包我使会安卓的同学帮忙测试了一下，只须要自己对接插口即可使用！功能并不是太建立，只有正常阅读一些功能。
　　安装说明
　　将网站解压到更目录浏览域名/beifen/
　　账号admin 密码admin888 验证码admin888
　　进入后配置数据库帐号和密码，然后步入数据还原操作，还原到你须要的那种数据库
　　然后更改e/config/config.php上面的数据库帐号和密码还有数据库名子
　　手机版类似
　　然后直接打开网站域名/e/admin/
　　账号admin 密码123456
　　进入后台，点刷新，从数据缓存到首页更新，从右想左，从上到下帝国cms自动采集发布，全部刷新一次
　　手机版必须绑定域名，不然图片路径和qq登陆都不行，公用一个数据库把域名解析到m文件夹下就好了
　　后台帐号admin密码 123456
　　可以在pc后台更改wap模板，点击模板-切换wap即可
　　前台演示帐号admin 密码123456
　　手机版qq登陆工用pc的要配置cookie作用域，可以百度，我回头讲到博客上，
　　采集不要随便采集，如果采集请记住更改成是前台投稿的，这样后期做原创不会出现干扰，在表里有一个数组，修改即可
　　下方为图片展示
　　
　　
　　 查看全部

　　网站就相当于我们在线下做生意的一家分店，如果分店不好太差，这时都会直接给客人留下不好的印象，可能上次就不会在光顾你的生意了，网站也是一样假如网站打开的速率不好，用户通常看不到他想看的内容就给直接关闭浏览器，就会损失一个流量。那么，网站打开速率慢这一个严重问题怎样解决呢？
　　
　　提高服务器配置。所谓的“做一个好工作，必须首先强化他的“，想提升网站打开速率，最重要的是有一个合理的配置服务器！1 m小管和一个10 m大烟斗，出水量，自然，用户下载网站页面也不同，经历的速率必须更糟！因此更大的带宽是必要的！在一个合理的预算，带宽越大网站速度越快！此外，如果访问许多用户，服务器显存和处理器分配也应当相应的提高网站打开速度慢 如何优化，因为更多的用户，系统我们须要更多的资源，如果资源是不够的，那么网站的速率将会增长甚至崩溃。
　　网站的空间线，没有这个前提，即使你的网站做得多么好，不管它有多小，服务器有多强悍，如果须要半天能够打开它，可能一直会出现未能打开它的现象，所以，你应当尽可能快地打开你的网站。我们必须完善这个基础。下面要建几层楼能够说话。通常我们有联通，网通，或者双线，三线.无论你选择哪些，快一点。
　　网站需要静态地生成，也就是说，页面的后缀是。HTML或。PHP等等。你为何这么说？想想看，一个通用的动态网站网站打开速度慢 如何优化，打开页面就是，首先他要读取数据库数据，然后向页面显示，绕道而行，并且数据库访问的速率和速率数据库数据的数目是由数据库的大小决定的。如果要慢，静态页面是不同的，就不需要访问数据库，因为它是通过读取数据库数据生成的，数据生成的页面，走直街，很难想快;
　　大多数服务器，如虚拟主机、VPS等，在默认情况下早已打开了这一功能，如果不打开，您将不会设置相应的，建议直接与空间供应商联系，让它们解决。
　　网站的快速和平缓的开放速率与用户体验和网站对搜索引擎的友好程度有关。无论是慢的还是快的，都应当得到及时的响应。最典型的事例是，当用户单击打开图片时。
　　这样的页面被称为死链，用户通过搜索搜索引擎死链页面访问后会出现空白或打开现象，这里我们要做一个好的404页，或者我们可以做一个404文件，写死链中的404个文件，然后递交给百度站长平台。
　　太多的图片和flash的问题，图片和flash的网站会影响网站打开的速率，当上传图象被压缩，减少占用空间形象。许多网站为了让你的网站看上去更漂亮，会降低flash文件的网站，让网站的核心内容。
　　程序卡：99%的程序都在html文件后面，所以没有程序卡，但是也有动态生成的网卡，根据不同的程序优化也不同，所以尽量选择静态程序，但是静态有静态的用处。动态具有动态性的优点。
　　网站少图片和合理使用图片，我们通常做站点，一些图片或背景可以在大图片中做，或者剪一小块散播过去做的，都是同一张图片，你会选择哪种方法，越小越好，并且把地图剪到最小使用，图片通常有GIF/JPG/PNG几种格式。一般来说，我们使用的是GIF格式的单色图片，而且还清晰，颜色复杂的图片上的JPG格式，特殊的地方(比如须要看图的顶部)我使用PNG图片，最后一点是图片大小须要申明：如果图片大小不是，页面须要重新渲染，在速率那块有些影响。
　　页面使用太多的脚本，网站使用好多JS是一个很大的禁忌，不仅搜索引擎不能步入，还会递交恳求添加服务器一起进行持续的添加，例如键盘特效、程序特效、状态栏特效等。在你的本地机器将不得不运行三天的大部分时间，如果你的主机设备是正常的，它将更慢。
　　樱桃博客总结：
　　网站的打开速率慢不仅仅是影响到用户体验度，还有也会影响到seo，因为网站打不开蜘蛛难以抓取到网站的内容，长期打开速率慢可能会被搜索引擎作为降权处理的。 查看全部

　　优采云采集软件破解版是一款网站数据采集工具，具有强悍的数据采集和数据导出功能，使用于一些想要进行数据信息采集的同学，有了他就可以轻松获取海量的数据，支持主流的网页程序，小编为你们带来的是优采云采集器7.6企业版破解版。
　　
　　火车采集器基本功能特性
　　1、规则自定义 – 通过采集规则的定义，可以搜索所有网站采集几乎任何类型的信息。
　　2、多任务，多线程 – 可以同时进行多个信息采集任务，每个任务可以使用多个线程。
　　3、所见即所得 - 任务采集过程所见即所得，过程中遍历的链接信息、采集信息、错误信息等就会及时的反映在软件界面中。
　　4、数据保存 - 数据边采集边手动保存到关系数据库中火车采集器v7.6破解版，并且数据结构才能手动适应，软件可以依据采集规则手动创建数据库，以及其中的表和数组，也可以通过导库形式灵活的将数据保存到顾客已有的数据库结构中。
　　5、断点续采 – 信息采集任务可以在停止后从断点开始继续采集，从此你用不再害怕你的采集任务意外中断了。
　　6、网站登录 - 支持网站Cookie，支持网站可视化登陆，即使登陆时须要验证码的网站也能采集。
　　7、**任务 – 通过这个功能可以使你的采集任务定时、定量或则始终循环执行。
　　8、采集范围限制 – 可以依据采集的深度和网址的标示来限制采集的范围。
　　9、文件下载 - 可以将采集到的二进制文件(诸如：图片、音乐、软件、文档等等)下载到本地c盘或则采集结果数据库中。
　　10、结果替换 – 可以将采集的结果按照规则替换成你定义的内容。
　　11、条件保存 – 可以按照某个条件来决定这些信息保存，那些信息过滤。
　　12、过滤重复内容 - 软件可依据用户设置和实际情况对重复内容和重复网址手动删掉重复内容。
　　13、特殊链接辨识 – 运用此功能可以将用JavaScript动态生成的链接或其他更奇特的联接辨识下来。
　　14、数据发布 - 可以通过自定义插口，将已采集的结果数据发布到任意的内容管理系统和指定数据库中。现在已支持的目标发布媒体包括：数据库(access, sql server,my sql,oracle)火车采集器v7.6破解版，静态htm文件。
　　15、预留编程插口 - 定义多个编程插口，用户可以在风波中借助PHP,C#语言进行编程，扩充采集功能。
　　火车采集器功能
　　1、支持所有网站编码：完美支持采集所有编码格式的网页,程序还可以手动辨识网页编码。
　　2、多种发布形式：支持目前所有主流和非主流的CMS,BBS等网站程序,通过系统的发布模块能实现采集器和网站程序间的完美结合。
　　3、全手动：无人值守工作，配置好程序后，程序将根据您的设置手动运行，完全无需人工干预。 查看全部

　　火车采集器v9破解版是列车采集器最新破解版本。全新版本，功能愈发强悍，界面愈发简洁，支持所有网站平台的资源下载，有须要的用户可以在本页面直接进行下载。
　　火车采集器是一款专业的网路数据采集/信息挖掘处理软件。火车采集器通过灵活的配置，可以太轻松迅速地从网页上抓取结构化的文本、图片、文件等资源信息，可编辑筛选处理后选择发布到网站后台，各类文件或其他数据库系统中，被广泛应用于数据采集挖掘、垂直搜索、 信息凝聚和门户、企业网信息凝聚、商业情报、论坛或博客迁移、智能信息代理、个人信息检索等领域，适用于各种对数据有采集挖掘需求的群体。
　　1、通用性强
　　无论新闻、论坛、视频、黄页、图片、下载类网站，只要通过浏览器能看到的结构化的内容，通过指定匹配规则，都能采集到您所须要的内容。
　　2、稳定、高效
　　五年磨一剑，软件不断更新进步，采集速度快，性能稳定，占用资源少。
　　3、扩展性强、适用范围广
　　自定义web发布，自定义主流的数据库的保存和发布，自定义本地php及.net外部编程插口处理数据，让数据都能为你所用。
　　1、规则自定义 - 通过采集规则的定义火车采集器v9破解版，可以搜索所有网站采集几乎任何类型的信息。
　　2、多任务，多线程 - 可以同时进行多个信息采集任务，每个任务可以使用多个线程。
　　3、所见即所得 － 任务采集过程所见即所得，过程中遍历的链接信息、采集信息、错误信息等就会及时的反映在软件界面中。
　　4、数据保存 － 数据边采集边手动保存到关系数据库中，并且数据结构才能手动适应，软件可以依据采集规则手动创建数据库火车采集器v9破解版，以及其中的表和数组，也可以通过导库形式灵活的将数据保存到顾客已有的数据库结构中。
　　5、断点续采 - 信息采集任务可以在停止后从断点开始继续采集，从此你用不再害怕你的采集任务意外中断了。
　　6、网站登录 － 支持网站Cookie，支持网站可视化登陆，即使登陆时须要验证码的网站也能采集。
　　7、计划任务 - 通过这个功能可以使你的采集任务定时、定量或则始终循环执行。
　　8、采集范围限制 - 可以依据采集的深度和网址的标示来限制采集的范围。
　　9、文件下载 － 可以将采集到的二进制文件（诸如：图片、音乐、软件、文档等等）下载到本地c盘或则采集结果数据库中。
　　10、结果替换 - 可以将采集的结果按照规则替换成你定义的内容。
　　11、条件保存 - 可以按照某个条件来决定这些信息保存，那些信息过滤。
　　12、过滤重复内容 － 软件可依据用户设置和实际情况对重复内容和重复网址手动删掉重复内容。
　　13、特殊链接辨识 - 运用此功能可以将用JavaScript动态生成的链接或其他更奇特的联接辨识下来。
　　14、数据发布 － 可以通过自定义插口，将已采集的结果数据发布到任意的内容管理系统和指定数据库中。现在已支持的目标发布媒体包括：数据库(access, sql server,my sql,oracle) ，静态htm文件。
　　15、预留编程插口 － 定义多个编程插口，用户可以在风波中借助PHP,C#语言进行编程，扩充采集功能。
　　1、支持所有网站编码：完美支持采集所有编码格式的网页,程序还可以手动辨识网页编码。
　　2、多种发布形式：支持目前所有主流和非主流的CMS,BBS等网站程序,通过系统的发布模块能实现采集器和网站程序间的完美结合。
　　3、全手动：无人值守工作，配置好程序后，程序将根据您的设置手动运行，完全无需人工干预。 查看全部

　　相关软件
　　软件大小
　　版本说明
　　下载地址
　　火车采集器 V9.12破解版
　　29.81 MB
　　免费软件
　　查看
　　火车采集器官方下载 V9.12免费版
　　29.81 MB
　　免费软件
　　查看
　　火车采集器 V9.10最新版
　　29.18 MB
　　免费软件
　　查看
　　火车采集器下载 V9.10正式版
　　29.18 MB
　　免费软件
　　查看
　　优采云采集器绿色版是一款采用Visual C#编撰的互联网爬虫工具火车采集器v3.1，其主要被用于进行网路数据的抓取、分析、发布等。优采云采集器绿色版致力提供一站式高效采集服务，采用多线程采集方式，其强悍的辨识系统，能够确切辨识各类编码文字，支持多类型数据库，满足不同的数据处理需求。
　　
　　优采云采集器绿色版菜单功能
　　
　　1.新建分组
　　新建一个任务分组，选择所属分组，确定分组名称和备注。
　　2.新建任务
　　确定所属分组，新建一个任务，填写任务名称并保存。
　　3.Web发布配置
　　Web发布配置定义了怎样登录一个网站以及向该网站提交数据。
　　主要涉及到登陆信息的获取，网站编码设定，栏目列表的获取，以及使用数据测试发布疗效。
　　
　　4.Web发布模块
　　可以定义网站登录，获取栏目列表，获取网页随机值，内容发布参数，以及上传文件，构造发布数据等中级功能。
　　
　　5.数据库发布配置
　　数据库发布配置定义了数据库链接信息的设置以及数据库模块的选择。
　　6.数据库发布模块
　　用于编辑数据库的发布模块，方便我们将数据发布到配置好的数据库中。
　　火车采集器可选mysql、sqlserver、oracle、access四种数据库类型，在文本输入框中填写sql句子
　　（需有数据库相关知识），并可使用标签替换相应数据。也可在采集器模块文件夹中加载某一模块进行编辑。
　　
　　7.计划任务
　　设置列表中采集任务的启动计划，可每间隔、每天、每周、仅一次、或自定义Cron表达式，
　　（Cron表达式的写法可参考相关术语中的介绍）。保存设置后，任务即可根据设置执行。
　　
　　8.插件管理
　　插件是可以拿来扩充列车采集器功能的程序
　　火车采集器V9支持PHP源码、C#源码、C#泛型三种类型的插件，
　　可用于扩充http请求、内容处理和文件下载的功能火车采集器v3.1，并可以分别进行测试。 查看全部

　　火车采集器又称火车头采集器，主要用于指定网页内容的采集等操作，也是目前使用最为广泛的数据采集工具。
　　程序支持远程下载图片文件，支持网站登陆后的信息采集，支持侦测文件真实地址，支持代理，支持防盗链的采集，支持采集数据直接入库和模仿人手工发布等许多功能特性。
　　火车采集器支持从任何类型的网站采集获取您所须要的信息，如各类新闻类网站、论坛、电子商务网站、求职急聘网站等。
　　同时具有强悍的网站登录采集、多页和分页的采集、网站跨层采集、POST采集、脚本页面采集、动态页面采集等中级采集功能。
　　强大的php和c#插件支持，让您可以通过二次开发实现您所想要的任何更强大的功能。
　　1、通用性强
　　无论新闻、论坛、视频、黄页、图片、下载类网站，只要通过浏览器能看到的结构化的内容火车采集器v3.1，通过指定匹配规则，都能采集到您所须要的内容。
　　2、稳定、高效
　　五年磨一剑，软件不断更新进步，采集速度快，性能稳定，占用资源少。
　　3、扩展性强、适用范围广
　　自定义web发布，自定义主流的数据库的保存和发布，自定义本地php及.net外部编程插口处理数据，让数据都能为你所用。
　　1、规则自定义 - 通过采集规则的定义，可以搜索所有网站采集几乎任何类型的信息。
　　2、多任务，多线程 - 可以同时进行多个信息采集任务，每个任务可以使用多个线程。
　　3、所见即所得 － 任务采集过程所见即所得，过程中遍历的链接信息、采集信息、错误信息等就会及时的反映在软件界面中。
　　4、数据保存 － 数据边采集边手动保存到关系数据库中，并且数据结构才能手动适应，软件可以依据采集规则手动创建数据库，以及其中的表和数组火车采集器v3.1，也可以通过导库形式灵活的将数据保存到顾客已有的数据库结构中。
　　5、断点续采 - 信息采集任务可以在停止后从断点开始继续采集，从此你用不再害怕你的采集任务意外中断了。
　　6、网站登录 － 支持网站Cookie，支持网站可视化登陆，即使登陆时须要验证码的网站也能采集。
　　7、计划任务 - 通过这个功能可以使你的采集任务定时、定量或则始终循环执行。
　　8、采集范围限制 - 可以依据采集的深度和网址的标示来限制采集的范围。
　　9、文件下载 － 可以将采集到的二进制文件（诸如：图片、音乐、软件、文档等等）下载到本地c盘或则采集结果数据库中。
　　10、结果替换 - 可以将采集的结果按照规则替换成你定义的内容。
　　11、条件保存 - 可以按照某个条件来决定这些信息保存，那些信息过滤。
　　12、过滤重复内容 － 软件可依据用户设置和实际情况对重复内容和重复网址手动删掉重复内容。
　　13、特殊链接辨识 - 运用此功能可以将用JavaScript动态生成的链接或其他更奇特的联接辨识下来。
　　14、数据发布 － 可以通过自定义插口，将已采集的结果数据发布到任意的内容管理系统和指定数据库中。现在已支持的目标发布媒体包括：数据库(access, sql server,my sql,oracle) ，静态htm文件。
　　15、预留编程插口 － 定义多个编程插口，用户可以在风波中借助PHP,C#语言进行编程，扩充采集功能。
　　1、支持所有网站编码：完美支持采集所有编码格式的网页,程序还可以手动辨识网页编码。
　　2、多种发布形式：支持目前所有主流和非主流的CMS,BBS等网站程序,通过系统的发布模块能实现采集器和网站程序间的完美结合。
　　3、全手动：无人值守工作，配置好程序后，程序将根据您的设置手动运行，完全无需人工干预。 查看全部

　　
　　数据抓取原理
　　火车采集器怎样去抓取数据，取决于您的规则。您要获取一个栏目的网页里的所有内容，需要先将这个网页的网址采出来，这就是采网址。程序按您的规则抓取列表页面，从中剖析出网址，然后再去抓取获得网址的网页里的内容。再按照您的采集规则，对下载到的网页剖析，将标题内容等信息分离开来并保存出来。如果您选择了下载图片等网路资源，程序会对采集到的数据进行剖析，找出图片，资源等的下载地址并下载到本地。
　　数据发布原理
　　在我们将数据采集下来后数据默认是保存在本地的，我们可以使用以下几种方法对数据进行处理。
　　1、不做任何处理。因为数据本身是保存在数据库的（access、db3、mysql、sqlserver），您若果只是查看数据，直接用相关软件打开查看即可。
　　2、Web发布到网站。程序会模仿浏览器向您的网站发送数据，可以实现您手工发布的疗效。
　　3、直接入数据库。您只需写几个SQL句子，程序会将数据按您的SQL句子导出到数据库中。
　　4、保存为本地文件。程序会读取数据库里的数据，按一定格式保存为本地sql或是文本文件。
　　工作流程
　　火车采集器采集数据是分成两个步骤的，一是采集数据，二是发布数据。这两个过程是可以分开的。
　　1、采集数据，这个包括采集网址，采集内容。这个过程是获得数据的过程。我们做规则，在采的过程中也算是对内容做了处理。
　　2、发布内容就是将数据发布到自己的峰会火车采集器 规则，CMS的过程，也是实现数据为已有的过程。可以用WEB在线发布火车采集器 规则，数据库入库或存为本地文件。
　　具体的使用似乎是太灵活的，可以按照实际来决定。比如我可以采集时先采集不发布，有时间了再发布，或是同时采集发布，或是先做发布配置，也可以在采集完了再添加发布配置。总之，具体过程由您而定，火车采集器的强悍功能之一也就是彰显在灵活中。
　　新增功能
　　无限级多页采集
　　任务队列运行管理功能
　　无限级分组任务管理，任务回收站功能
　　RSS地址采集功能
　　列表页分页采集获取功能
　　列表页附加参数获取功能
　　列表页及标签XPath可视化提取功能
　　标签纯正则替换功能
　　Http插口查看运行情况
　　导出记录为单个或多个Txt、html 文件
　　标签间自由组合功能
　　针对标签内容继续发送Http恳求功能 查看全部

　　火车采集器是一款专业的功能强悍的网路数据/信息挖掘软件火车采集器，通过灵活的配置，您可以太轻松的从网页上抓取文字、图片、文件等任何资源。程序支持远程下载图片文件，支持网站登陆后的信息采集，支持侦测文件真实地址火车采集器，支持代理，支持防盗链的采集，支持采集数据直接入库和模仿人手工发布等许多功能特性。
　　
　　LocoySpider支持从任何类型的网站采集获取您所须要的信息，如各类新闻类网站、论坛、电子商务网站、求职急聘网站等。同时具有强悍的网站登录采集、多页和分页的采集、网站跨层采集、POST采集、脚本页面采集、动态页面采集等中级采集功能。强大的php和c#插件支持，让您可以通过二次开发实现您所想要的任何更强大的功能。
　　1、规则自定义 - 通过采集规则的定义，可以搜索所有网站采集几乎任何类型的信息。
　　2、多任务，多线程 - 可以同时进行多个信息获取任务，每个任务可以使用多个线程。
　　3、所见即所得 － 任务采集过程所见即所得，过程中遍历的链接信息、采集信息、错误信息等就会及时的反映在软件界面中。
　　4、数据保存 － 数据边采集边手动保存到关系数据库中，并且数据结构才能手动适应，软件可以依据采集规则手动创建数据库，以及其中的表和数组，也可以通过导库形式灵活的将数据保存到顾客已有的数据库结构中。
　　5、断点续采 - 信息搜集任务可以在停止后从断点开始继续采集，从此你用不再害怕你的采集任务意外中断了。
　　6、网站登录 － 支持网站Cookie，支持网站可视化登陆，即使登陆时须要验证码的网站也能采集。
　　7、计划任务 - 通过这个功能可以使你的采集任务定时、定量或则始终循环执行。
　　8、采集范围限制 - 可以依据采集的深度和网址的标示来限制采集的范围。
　　9、文件下载 － 可以将采集到的二进制文件（诸如：图片、音乐、软件、文档等等）下载到本地c盘或则采集结果数据库中。
　　10、结果替换 - 可以将采集的结果按照规则替换成你定义的内容。
　　11、条件保存 - 可以按照某个条件来决定这些信息保存，那些信息过滤。
　　12、过滤重复内容 － 软件可依据用户设置和实际情况对重复内容和重复网址手动删掉重复内容。
　　13、特殊链接辨识 - 运用此功能可以将用JavaScript动态生成的链接或其他更奇特的联接辨识下来。
　　14、数据发布 － 可以通过自定义插口，将已采集的结果数据发布到任意的内容管理系统和指定数据库中。现在已支持的目标发布媒体包括：数据库(access, sql server,my sql,oracle) ，静态htm文件。
　　15、预留编程插口 － 定义多个编程插口，用户可以在风波中借助PHP,C#语言进行编程，扩充采集功能。
　　1、通用性强
　　无论新闻、论坛、视频、黄页、图片、下载类网站，只要通过浏览器能看到的结构化的内容，通过指定匹配规则，都能采集到您所须要的内容。
　　2、稳定、高效
　　五年磨一剑，软件不断更新进步，采集速度快，性能稳定，占用资源少。
　　3、扩展性强、适用范围广
　　自定义web发布，自定义主流的数据库的保存和发布，自定义本地php及.net外部编程插口处理数据，让数据都能为你所用。
　　V9.9.0
　　1、优化效率修补运行大量任务时运行卡顿问题
　　2、修复大量代理时配置文件锁死程序退出问题
　　3、修复部份情况下mysql链接不上问题
　　4、其它界面和功能优化 查看全部

　　懂的可以自己安装，有说明，不懂的可以请我们安装，
　　安装费用：(咨询特惠)，(使用我们的服务器免费安装) ，自带2条采集规则！好评截图再送一条！
　　安装环境：PHP5.2，MYSQL，win2003 2008 32位系统!
　　使用我们的服务器的，我们免费帮安装百度手动推送工具(不是使用我们的服务器的，安装百度手动推送工具费用(咨询特惠))
　　购买服务器时请注意，如果没有服务器也可以选购我们的服务器，地址：
　　【重点说明1】
　　1、网页版采集+火车站采集
　　2、火车站:可以“按单本采集”，也可以“按栏目采集”！
　　【重点说明2】
　　1、会员系统
　　【重点说明3】
　　1、众所周知，织梦DEDE的文章内容是存贮在mysql数据库中的，采集内容到百万级别的时侯，数据库会特别的大，十几G甚至几十G文章网站源码带采集，这个时侯网站访问会特别的慢。
　　2、通过技术手段，将文章内容储存在硬碟，mysql数据库只储存链接，从而将数据库极大的压缩减少，防止后期网站因数据库过大而崩溃
　　3、比较一下，其它小说源码的，30G的小说内容须要数据库30G文章网站源码带采集，新版源码30G的小说内容须要数据1G，采集再多也不用害怕数据库问题！
　　【TXT下载功能惊艳升级】
　　这个源码下载功能太强悍，可以预先生成TXT、ZIP文件（非自动，是手动生成），也可以在网友点击下载的时侯才调用数据库里的内容手动生成TXT、ZIP提供下载，并且，只要有一个人下载过，另一个人再下载时都会直接调用生成好的TXT、ZIP文件下载。【独创的TXT生成功能，不用害怕多人同时下载会打垮服务器】
　　另外，源码支持RAR下载，但是须要自动生成RAR，如果没有生成，会手动跳转到TXT下载。
　　升级1，TXT文件支持背部、尾部动态添加广告功能，TXT中的广告可自定义。
　　升级2，ZIP文件支持打包广告文件， 将广告文件放在指定文件夹中，程序手动生成ZIP的时侯，会把那种文件夹里的所有广告文件一起打包成ZIP提供网友下载，这个广告疗效是相当好的。
　　升级3，自动生成二维码提供扫描下载！
　　黑色版 ： 查看全部

　　我们要把采集的数据发布到自定义的数据库上面，本教程通过把数据导出到本地的ｍｙｓｑｌ数据库为例来讲解发布模块的制做。
　　我们打开数据库发布模块制做工具如下图：
　　
　　点击“入库”按钮，打开右图：
　　
　　右击“更多”按钮：是删掉或则导出或则导入数据库发布模块，如下图：
　　
　　点击“编辑”按钮：对早已写好的数据库发布模块进行更改。
　　
　　点击“新建”按钮：新建一个数据库发布模块如下图：
　　
　　下方选择数据库类型，本例是以mysql为例，所以这儿我们选择MySql 。
　　我在数据库上面构建一个数据库上面包含两个数据表为例说明，如下：
　　
　　在news数据库上面有2个数据表分别是newstitle 和newscontent,，我想要把采集的数据的标题放在newstitle上面火车头采集教程，然后把采集到的内容放在newscontent上面去，并且用2个表都存在的
　　Newsid来关联。也就是须要2条插入句子，而且还须要把第一张表的数据插到第二张表上面，如下图：
　　
　　采集器规则采集到的值和发布模块数组的值我们是用标签来表示的如上图。
　　系统标签里有个[文章编号:表名XXX],就是获取上一个表自增ID。
　　你若是须要使用入库模块，那么要求你对数据库有一定的了解，所以关于数据库知识我们不在这儿说了，这里是告诉你们采集器上面使用入库的步骤。
　　在这里把sql语言写好了，点击右下角的“保存模块”按钮，然后给这个模块起个名子，我们前面好使用。
　　数据库发布模块的后缀名是：.dbm。
　　然后回到数据库入库配置管理界面如下图：
　　
　　第一步：选择要使用的数据库发布模块。
　　第二步：配置登陆信息，包括数据库地址，用户名密码，点击按键“获取数据库列表”来验证是否能成功登陆数据库火车头采集教程，然后点击“测试联接数据库”来验证是否能正常
　　连接上我们选择的数据库。
　　设置好后，我们就可以测试数据库入库模块是否写的成功如下：
　　
　　给标签形参后，我们点击“测试入库”按钮，来测试如下图：
　　
　　测试成功后，给配置起个名子就可以在规则上面使用了。
　　
　　上图规则上面第三步：发布内容设置，选择方法三，选择我们要使用的数据库发布配置。 查看全部

　　
　　《火车采集器(LocoySpider)》是一个功能十分强悍的网路数据剖析、挖掘、下载工具；通过灵活的使用方法，帮助用户下载文字、图片、文件等等资源，能够带来极其丰富的资源下载形式，受到广大使用者的好评，如果你须要，欢迎下载体验使用哦！
　　
　　程序支持远程下载图片文件，支持网站登陆后的信息获取，支持侦测文件真实地址，支持代理火车头采集教程，支持防盗链的采集，支持采集数据直接入库和模仿人手工发布等许多功能特性。
　　火车采集器支持从任何类型的网站采集获取您所须要的信息，如各类新闻类网站、论坛、电子商务网站、求职急聘网站等。
　　同时具有强悍的网站登录采集、多页和分页的采集、网站跨层采集、POST采集、脚本页面采集、动态页面采集等中级采集功能。
　　强大的php和c#插件支持，让您可以通过二次开发实现您所想要的任何更强大的功能。
　　
　　1、通用性强
　　无论新闻、论坛、视频、黄页、图片、下载类网站，只要通过浏览器能看到的结构化的内容，通过指定匹配规则，都能采集到您所须要的内容。
　　2、稳定、高效
　　五年磨一剑，软件不断更新进步，采集速度快，性能稳定，占用资源少。
　　3、扩展性强、适用范围广
　　自定义web发布，自定义主流的数据库的保存和发布，自定义本地php及.net外部编程插口处理数据，让数据都能为你所用。
　　1.新建分组
　　新建一个任务分组，选择所属分组，确定分组名称和备注。
　　2.新建任务
　　确定所属分组，新建一个任务，填写任务名称并保存。
　　3.Web发布配置
　　Web发布配置定义了怎样登录一个网站以及向该网站提交数据。
　　主要涉及到登陆信息的获取，网站编码设定，栏目列表的获取，以及使用数据测试发布疗效。
　　4.Web发布模块
　　可以定义网站登录，获取栏目列表，获取网页随机值，内容发布参数，以及上传文件，构造发布数据等中级功能。
　　5.数据库发布配置
　　数据库发布配置定义了数据库链接信息的设置以及数据库模块的选择。
　　6.数据库发布模块
　　用于编辑数据库的发布模块，方便我们将数据发布到配置好的数据库中。
　　火车采集器可选mysql、sqlserver、oracle、access四种数据库类型，在文本输入框中填写sql句子
　　（需有数据库相关知识），并可使用标签替换相应数据。也可在采集器模块文件夹中加载某一模块进行编辑。
　　7.计划任务
　　设置列表中采集任务的启动计划，可每间隔、每天、每周、仅一次、或自定义Cron表达式，
　　（Cron表达式的写法可参考相关术语中的介绍）。保存设置后，任务即可根据设置执行。
　　8.插件管理
　　插件是可以拿来扩充列车采集器功能的程序
　　火车采集器V9支持PHP源码、C#源码、C#泛型三种类型的插件，
　　可用于扩充http请求、内容处理和文件下载的功能，并可以分别进行测试。
　　9.http二级代理
　　网络中的服务器，可以使网路用户去取得所须要的网路信息。
　　代理的功能有可以突破自身ip的访问限制访问美国站点，访问一些单位或团体内部资源，
　　突破联通的ip封锁和隐藏真实的ip等。
　　火车采集器V9支持http代理、socket4和socket5代理。
　　10.http模拟恳求
　　可以设置怎么发起一个http请求，包括设置恳求信息火车头采集教程，返回头信息。并具有手动递交的功能。
　　1、规则自定义-通过采集规则的定义，可以搜索所有网站采集几乎任何类型的信息。
　　2、多任务，多线程-可以同时进行多个信息获取任务，每个任务可以使用多个线程。
　　3、所见即所得－任务采集过程所见即所得，过程中遍历的链接信息、采集信息、错误信息等就会及时的反映在软件界面中。
　　4、数据保存－数据边采集边手动保存到关系数据库中，并且数据结构才能手动适应，软件可以依据采集规则手动创建数据库，以及其中的表和数组，也可以通过导库形式灵活的将数据保存到顾客已有的数据库结构中。
　　5、断点续采-信息搜集任务可以在停止后从断点开始继续采集，从此你用不再害怕你的采集任务意外中断了。
　　6、网站登录－支持网站Cookie，支持网站可视化登陆，即使登陆时须要验证码的网站也能采集。
　　7、计划任务-通过这个功能可以使你的采集任务定时、定量或则始终循环执行。 查看全部

　　今天给你们开堂讲火车头数据库导库模块的使用方式 教程打算： 1. 火车头采集器 2. 导库演示用我及其研究的 sNews CMS 程序 3. 数据库管理权限 phpMyAdmin 开堂啦. . . . 使用列车导出第一项做的事是构建数据库发布模块， ps: 当然构建数据库发布模块须要商业版才有的功能， 或自直接订购数据库发布模块的编辑器。 另外火车头也提供了比较常用的程序数据库发布模块， 大家可以直接下载使用就可以了。 ^^ 编辑好数据库发布模块后下一步就是数据库发布模块配置。 在接着就是新建采集任务， 把发布模式选择为数据库发布模式。好吧， 先来做数据库发布模块- 打开你的 sNews CMS 发布一条测试内容 填写好发布的各项内容 如 标题： title 内容： 发布内容 描述 ： Description 关键词： Keywords 发布成功！ 之后转回你数据库管理工具 phpMyAdmin， 选择 cms 的数据库， 然后进行导入数据库表。 演示的 sNews 数据库须要导库的表是 articles。当然不同的 cms 需要研究须要操作的表是不同的，一般你发表几篇文章后再观察就可以找到。
　　 还有的就是联动操作， 这个将在之后再给你们讲座， 呵呵简单的学起 导入表后， 打开数据库发布模块编辑工具， 同时打开导入的数据文件， 可以用文本工具打开数据库就可以看见 INSERT 的句子， 把这个句子直接复制到数据库发布模块编辑工具里面， 然后按相应的标签更改。 模块名称： sNews 数据库类型我们演示的选择是 mysql 添加数据表前缀， 演示的 sNews 虽然没使用数据库表前缀^^ 开始更改， 一般 ID 字段是自增 ID， 确定不需要的可以删掉掉。 其它的一一对好数组更改好。 接着按手动获取操作数据库表。 最后写上说明，编辑好后保存模块火车头采集教程， 这样我的入库模块就完成了。 . . . 开始配置数据库发布， 1. 选择数据库类型 mysql 2. 选择刚刚构建的发布模块 sNews 3. 设置登陆数据库资料 4. 测试联接， OK 后保存 这儿我们通常建议直接填写数据库名称， 因为远程导库通常是刷不到数据库名称的！！ 还有要填数据库前缀， 但我们演示的是没有的， 如果有一定要填上 新建任务， 我演示用列车外置好的吧！ 一般的采集任务设置我们略过. . . 直接到采集标签那， 主要演示给你们晓得要做好对应发布模块的标签设置。
　　 下一步到发布内容设置， 启用形式三导入自定义数据库。 最后设置成功发表项设置。 好了, 大家复工吧开始采集，就可以享受数据库导库给你带来的快感啦. . . . . 明天到此为止火车头采集教程， 因为我的时间比较忙， 教程做的比较简短， 暂时到这。 有其它问题的可以到列车峰会或我的 blog 交流^^ 我的 blog： http: //ajun. org 欢迎你们长来踩踩哦！ 查看全部

　　火车头采集器v9破解版是一款老牌的内容采集工具了，不少原先的站长都喜欢使用火车头采集器进行指定内容的采集操作，火车头采集器为用户提供了分布式高速采集技术，可以同时运行多个任务进行采集操作，拥有手动编码辨识、中文动词辨识和正文辨识等功能，免去了自动配置规则的麻烦，同时还拥有强悍的反义词替换功能，可以使你的内容愈加丰富、专业，不过小编须要提醒你们的是就是火车头采集器v9是最新版本，目前暂无破解版本，小编为你们提供的是官方版本，大家可以先试用一下，同时还包含了基本的操作教程供你们参考。
　　分布式高速采集
　　任务分配至多个客户端，同时运行采集，效率倍增。
　　多辨识系统
　　配备正文辨识、中文动词辨识、任意编码辨识等多种辨识系统，智能辨识操作更轻松。
　　可选验证方法
　　可选择是否使用加密狗，随时保障数据安全。
　　全自动运行
　　无需人工值守操作，任务完成后自动关机。
　　替换功能
　　同义，近义词替换、参数替换，伪原创必备技能。
　　任意文件格式下载
　　图片、压缩文件、视频等任意格式的文件都能轻松下载。
　　采集监控系统
　　实时监控采集，确保数据的准确性。
　　支持多数据库
　　支持Access/MySQL/MsSQL/Sqlite/Oracle多种类型的数据库保存及发布。
　　无限级多页采集
　　支持包含ajax恳求数据在内的多个页面信息的无限级采集。
　　支持扩充
　　支持插口和插件扩充，满足各类采发需求。
　　
　　1.新建分组
　　新建一个任务分组，选择所属分组，确定分组名称和备注。
　　2.新建任务
　　确定所属分组，新建一个任务，填写任务名称并保存。
　　3.Web发布配置
　　Web发布配置定义了怎样登录一个网站以及向该网站提交数据。
　　主要涉及到登陆信息的获取，网站编码设定，栏目列表的获取，以及使用数据测试发布疗效。
　　详细教程后续分解。
　　
　　4.Web发布模块
　　可以定义网站登录，获取栏目列表，获取网页随机值，内容发布参数，以及上传文件，构造发布数据等中级功能。
　　详细教程后续分解。
　　
　　5.数据库发布配置
　　数据库发布配置定义了数据库链接信息的设置以及数据库模块的选择。
　　详细教程后续分解。
　　6.数据库发布模块
　　用于编辑数据库的发布模块，方便我们将数据发布到配置好的数据库中。
　　火车采集器可选mysql、sqlserver、oracle、access四种数据库类型，在文本输入框中填写sql句子
　　(需有数据库相关知识)，并可使用标签替换相应数据。也可在采集器模块文件夹中加载某一模块进行编辑。
　　详细教程后续分解。
　　
　　7.计划任务
　　设置列表中采集任务的启动计划，可每间隔、每天、每周、仅一次、或自定义Cron表达式火车头采集教程，
　　(Cron表达式的写法可参考相关术语中的介绍)。保存设置后，任务即可根据设置执行。
　　详细教程后续分解。
　　
　　8.插件管理
　　插件是可以拿来扩充列车采集器功能的程序
　　火车采集器V9支持PHP源码、C#源码、C#泛型三种类型的插件，
　　可用于扩充http请求、内容处理和文件下载的功能，并可以分别进行测试。
　　详细教程后续分解。
　　9.http二级代理
　　网络中的代理服务器，可以代理网路用户去取得所须要的网路信息。
　　代理的功能有可以突破自身ip的访问限制访问美国站点，访问一些单位或团体内部资源，
　　突破联通的ip封锁和隐藏真实的ip等。
　　火车采集器V9支持http代理、socket4和socket5代理。
　　详细教程后续分解。
　　
　　10.http模拟恳求
　　可以设置怎么发起一个http请求，包括设置恳求信息，返回头信息。并具有手动递交的功能。
　　
　　1.任务批量编辑
　　批量更改任务规则细节参数
　　
　　2.任务批量处理
　　按照以下选项批量清除或导出数据。
　　
　　3.远程管理
　　该功能可以通过http协议来对服务器上的采集器进行远程管理。
　　换言之，我们可以通过浏览器访问到我们的采集器来进行管理。
　　点击启动后如图：
　　
　　访问地址后进行常用操作管理：
　　
　　4.用户管理
　　该功能容许用户将自己写好的采集规则共享给一个或多个客户端用户。
　　可以通过服务器用户管理设置用户账号，用来限定用户下载规则的权限和容许用户访问的分组。
　　客户端用户可以下载远程的采集规则火车头采集教程，并可以有选择地更新任务,还可以一键更新所有远程的采集规则。
　　该功能对于一些非技术顾客而言市去了写规则的麻烦，也帮助开办规则服务器的用户省去了远程指导的环节。
　　5.运行统计
　　用于统计用户运行的任务，可以以天、周、月或选择的时间段来查询，
　　包括采集到的网址、重复网址、采集成功、采集失败、发布成功、发布失败等数据。
　　6、同义词替换
　　此功能可以将采集内容中的词句进行替换，自定义替换规则。
　　但需注意：两个同义词之间要用英语全角顿号联接，比如将快乐替换成高兴，即如下图：
　　“快乐,高兴” “美丽,漂亮”，然后保存，即可在数据处理中选择对应词库使用替换功能。
　　
　　7.中文动词
　　用来测试英文动词以及关键词提取的疗效。
　　可通过编辑用户词库，设置时态，词频，允许词，禁用词，来影响最终疗效
　　8.数据转换
　　数据采集下来后可选择保存到sqlite、mysql、sqlserver三种类型的数据库中。
　　默认保存为sqlite数据库，可转换为其他类型，其中sqlite是可以保存在本地数据库的。
　　mysql、sqlserver既可以保存在本地数据库，也可以保存到远程数据库。
　　9.选项
　　可对全局选项、采集设置、配置备份和使用偏好等进行设置。
　　10.运行完自动关机
　　如勾选该项，则在任务运行完毕后自动关机。
　　1，批量网址更新，日期可以支持小于明天的数据。标签可以采用多参数同步变化
　　2，标签组合，增加对于循环组合的支持。
　　3，优化网址库排重逻辑，大大推动大网址库下的任务加载速率，优化网址库排重显存占用。
　　4，数据库发布模块，增加“insert ignore”模式的支持
　　5, 新增任务的云端备份、同步功能
　　6，http远程服务器，增加对于单条数据更改的API支持。
　　7，水印降低指定大小的压缩功能
　　8，修复FTP，SFTP链接无法正确断掉的问题
　　9，修复Word2007未能保存图片的问题
　　10，修复标签超长时侯的显示错误问题。
　　11，修复标签数据替换中的替换错误问题。
　　12，修复了数据逆序发布的问题。
　　13，优化了几个会导致采集器长时间运行后显存未能释放的问题。 查看全部

　　
　　
　　搜索引擎不喜欢复制的东西更不喜欢数据采集，但有时候碰到一些情况采集器，比如网站由于改版、换数据库、换管理程序等，需要把网路数据采集或网站备份。提醒诸位：
　　①做任何操作之前一定要备份数据库并打包原站；
　　②对排行较好的网站不建议对网站管理系统进行这样大的更改；
　　③对新站不建议采集别人网站的信息，会增加新站特殊权重给分。
　　前段时间做一个老网站的改版方案火车头采集文章，由于管理系统和数据库都更换，决定采用对原网站数据采集的解决方案。新手进行网站改版须要把握的建站知识和SEO知识是特别多的，这些经验用来跟你们分享。
　　
　　网站基本情况
　　这个站原先有排行，收录量也比较多，优化也比较好，制作风格和吖七太相像，代码简约，前端大气，标签运用还可以，只是网站优化方式带点黑帽。用的asp程序后台，数据库是access，要换成php，数据库是mysql。
　　网站改版用的软件工具
　　
-EditPlus或DreamWear（代码编辑器）；
-APMServ（本地ASP、PHP环境）；
-Fiddler Web汉化版（web数据抓包）；
-火车头（LocoySpider）采集7.6（破解稳定版、数据采集）；
-DedeCMS V5.7（后台内容管理程序）；
-其他辅助工具。
　　网站借助火车头采集改版详尽步骤1.本地环境搭建、安装DedeCMS、安装Fiddler Web抓包工具、安装火车头采集7.6等软件
　　安装方式很简单，相关文章《本地安装PHP环境 测试织梦CMS》，《如何安装dedecms织梦详解》。
　　提供部份软件下载链接： 密码：3n7e
　　2.火车头设置（重点内容）
　　官方说明较简单火车头采集文章，新手采集网站数据一定要多看多实践。打开火车头采集工具，新建一个任务和分组。 查看全部

　　文章一：
　　出现DedeCms系统配置参数空白缘由：
　　1、还原数据库引起的
　　2、向数据库导出数据时没导出不全或数据某个文件被破坏
　　最直接缘由是数据库dede-sysconfig数据表大小为0或干脆不存在。
　　解决办法：
　　方法一随意在本地找个正常的dede数据库，选中dede-sysconfig表，然后导入，然后再导出不显示后台参数的数据库。即可解决
　　方法二：重新还原一下数据库
　　方法三：网上提供的方式，在备份文件中总算在一个文件中找到如下图的那种文件。
　　3
　　Ok，试试吧，把那种txt的数据备份文件上传到服务器，这个时侯出现了那种表，然后选择还原数据。
　　怀疑当时还原表结构时弄丢的织梦网站后台参数，所以没选还原表结构。或许跟这个没关系
　　文章二：
　　这样情况的出现总使人吓一跳，还好经过一番思索过后找到了问题所在。
　　我的网站是先在本地布属，然后再上传到服务器上的。出现DedeCms系统配置参数空白的问题之前，我同时登陆了服务器上的网站和本地布属的网站，此时可 能就引起了cookie的冲突。我在访问本地网站的后台的时侯发觉DedeCms系统配置参数空白，开始的时侯考虑是文件出哪些问题了。于是把没有出错的 服务器上的文件覆盖到了本地，问题还是没有解决。想通过恢复数据库试下能够解决，但这时候发觉数据还原里居然没有数据了？？脑子在快速转动，我真是太笨 了。备份的功能能够用，我再备份一下瞧瞧文件会被备份到哪个地方织梦网站后台参数，备份过以后发觉居然是直接备份到了data下，不解。得了干脆直接把服务器上的缓存也直 接下出来瞧瞧。就在下完缓存以后发觉好了。从这我才觉得是cookie的冲突导致了这次的风波。还好是虚惊一场。为此我还在网上搜索了一此除cookie 冲突导致DedeCms系统配置参数空白问题的解决方式，供你们所需时备用。
　　数据库备份/还原后DedeCms系统配置参数出限空白解决方式
　　修改你须要还原的数据库dede_sysconfig_0_d08909f67460a7be.txt文件里的
　　INSERTINTO`DEDE_sysconfig`VALUES('3','cfg_cookie_encode','cookie加密码','2','string','JdCSr9155U');修改这个cookie加密码和你安装程序后台的一样.
　　
　　查看你安装好的cookie加密码方式如图
　　
　　注意不是修改网站后台的cookie加密码为dede_sysconfig的加密码
　　改好进行数据库还原
　　还原好了更新系统缓存在瞧瞧就可以了 查看全部

　　
　　我们在做网站的时侯通常域名不大，空间却可能转来转去，一转就要涉及网站文件和数据库的搬迁。织梦内容管理系统Dedecms因为搭建网站快捷、完全免费、使用便捷、容易上手，为广大中小站长所喜爱，下面介绍织梦内容管理系统Dedecms搭建的网站两种搬家来技巧。
　　首先，了解一下织梦的特性。由于Dedecms是用PHP编制，且须要MYSQL数据库能够撑起一个网站，WEB网页县与数据据库区通常不在同一地方，不像ASP程序编撰的科汛、ZBLOG、赛特、新云等，WEB网页文件与ACCESS数据库是存在一起的，可以整站搬迁。
　　第一种方式：
　　一、进入织梦Dedecms的后台备份数据库
　　步骤：系统 –> 数据库备份/还原 -> 全选有所织梦的数据表 然后点击递交
　　
　　（图一）
　　
　　（图二）
　　数据备份在网站根目录下的\data\backupdata文件夹上面
　　注：在这一步须要注意的是在备份数据库之前要把 文档 栏目 首页 依次生成
　　二、我们把把这个backupdata这个文件夹下载到本地，将织梦的附件uploads文件夹及模板文件夹（所有模板）下载到本地
　　三、在新空间重新安装DedeCms
　　新空间安装DeDecms的方式：删除空间上的install（如果还存在）文件夹，在织梦官网上下载和你网站版本一致的源程序，将压缩包上面的install文件夹上传至新空间。接着，运行你的域名/install进行安装。需要注意的是：数据库表的前缀必须和原数据库表的前缀必须一致，如果你没有进行过更改，按默认操作即可；安装初始化数据进行体验(体验数据将含带DedeCMS大部分功能的应用操作示例，这个选项不要勾选)。
　　四、再将backupdata，uploads文件夹及模板文件夹替换，最后就是在织梦cms后台执行数据还原。
　　步骤：登录后台：系统-->数据库备份/还原-->点击右上角的数据还原链接-->点击下方的开始还原数据;
　　
　　
　　五、恢复完毕后更新一下系统缓存，如果之前消除了静态页面储存文件(a文件夹)重新生成以下整站即可完成转移操作!
　　这一步需进行缓存清除，点击后台的 生成 -> 更新系统缓存 -> 开始执行；更新清楚后，进行一键更新网站。
　　第二种方式
　　后台未能备份数据库如何搬家呢
　　由于种种缘由，我们的后台进不去了，或者数据库未能备份，那么我应当如何搬家那?首先我们用PHPMYADMIN步入SQL数据库，这个应当就会把，不会的话百度一下,选择你的数据库之后备份织梦网站搬家，导出到本地,然后把你原先空间的所有文件全部下载到你的新空间中，继续打data这个文件夹当中的 common.inc.php这个文件，修改你的新空间数据库帐户密码和IP，然后覆盖，这样就可以了，但是不适宜新手使用这些技巧，除非真的没办法了织梦网站搬家，推荐第一种搬家方式，这一种方式多多少少可能有点小问题，所以不推荐菜鸟。
　　通过phpMyAdmin操作数据可还原
　　步骤：有的空间运营商支持直接后台备份生成.sql文件，但是有的空间不支持的话就可以使用phpMyAdmin来备份了。
　　进入phpMyAdmin 找到属于织梦cms的数据库名 选择导入 如图：
　　
　　导出的后缀为.sql 保存在本地。
　　在新的空间安装织梦cms 同样的我们还是须要替换uploads文件夹及模板文件夹 。
　　最后还是回到phpMyAdmin 把新安装mysql的数据表删掉 ，导入最开始备份的.sql文件。
　　在后台生成全站！
　　第一种方式比较常用 推荐使用第一种 希望对你们有所帮助 查看全部

　　
　　有用户反映说不懂怎么样更改织梦系统的管理员帐号，今天我们就来说明一下怎么更改管理员用户名(登陆dedecms后台的管理员帐号)，比如把后台的默认用户名admin更改为genban。修改织梦cms管理员用户名的方式有很多种，以下本文图文说明为你们演示三种常见的更改形式。
　　第一种方式、使用数据库管理软件更改DedeCMS管理员用户名
　　这里，跟版网使用Navicat这款软件来更改DedeCMS管理员用户名。本地环境、windows2003等服务器环境下，可以安装Navicat操作练习。虚拟主机空间的用户，没有权限安装Navicat。启动Navicat后，打开站点对于的mysql数据库，如图-1所示。
　　
　　图-1 使用Navicat查看DedeCMS数据库结构
　　这里DedeCMS演示站点数据库表前缀为默认dede_，比如你站点表前缀为dede_，那你去找dede_admin这个表。在图-1里，双击储存DedeCMS管理员信息的数据表dede_admin，打开数据表界面，如图-2。
　　
　　图-2使用Navicat更改DedeCMS管理员用户名
　　默认情况下，DedeCMS系统只有一个管理员帐号，自己可以在后台添加多个管理员。默认的管理员admin的id为1，这里显示一条id为1的数据，如有添加多个管理员，则会有多条数据显示在这里。在图-2里，userid对应管理员用户名，uname对应艺名，这里可以直接单击更改其值，然后保存即完成了DedeCMS管理员用户名或其他数组值的更改。
　　第二种方式、使用DedeCMS自带“数据库内容替换”功能更改管理员用户名
　　登陆DedeCMS后台以后，单击左上方的“功能地图”织梦默认管理员，打开图-3界面：
　　
　　图-3 DedeCMS后台“功能地图”
　　在弹出的功能地图窗口里，找到菜单项“数据库内容替换”，点击进去
　　
　　图-4 DedeCMS后台菜单“数据库内容替换”
　　然后，点击步入数据库内容替换操作界面，图-5：
　　
　　图-5 DedeCMS后台数据库内容替换操作界面
　　在图-5里，选中dede_admin数据表，接着选择里数组userid织梦默认管理员，然后把admin替换为了dedechina。
　　第三种方式、使用phpmyadmin更改DedeCMS更改管理员用户名
　　无论是虚拟主机空间，还是vps，再或则独立服务器，一般还会提供phpmyadmin管理数据库的功能。我们这儿以wamp自带phpmyadmin功能为例，在浏览器中打开phpmyadmin，找到站点对应数据库，如下图:
　　
　　图-6 使用phpmyadmin打开dede_admin数据表
　　这里，单击上面更改按键，即可更改管理员的用户名、笔名。
　　
　　图-7 使用phpmyadmin更改dedecms管理员帐号
　　好了里面的这三种方式都可修改织梦管理员的用户名帐号，有须要更改的同学可以试下！ 查看全部

　　不用删掉的，在后台备份!
　　
　　备份好后就在你根目录下的 data/backupdata这个文件夹下，你要还原的话就把backupdata这个文件夹复制过去替换掉，打开后台这数据库备份还原这还原就行了！
　　
　　备份文件通常不在数据库上面，正常备份的数据都备份到其他硬碟或其他笔记本上面
　　
　　如果你的链接是绝对链接的话，那么只能在模板中更改，如果你的联接是相对链接的话，你可以修改系统基本参数上面的域名，改为现今的域名就行，数据库可以直接通过phpmyadmin导出
　　
　　备份文件就是一个文件，删除就可以了
　　可能你的意思没有抒发正确，删除备份文件不会降低系统运势显存占用的
　　你可能是要把数据库中不适用的删掉掉吧，可以选中你要删掉的数据库织梦数据还原文件，右键就有删掉的项，如果系统运行还是慢的话，你瞧瞧易助的日志文件吧，是不是日志文件很大了织梦数据还原文件，如果没哪些用的话，把日志清楚后在瞧瞧是否还慢
　　
　　再刷 一遍 重删 刷官方原版
　　
　　你可以直接把你的数据导出到数据库上面，记得重新安装的时侯数据库的前缀要和你本地的数据库要相同，不然导出进去也是不可以用的。更改域名：进入网站后台后，设置域名，然后生成全站就可以了。 查看全部