文章采集程序-2016-glenontrust发布在botz论坛trustcn采集数据的规则

　　文章采集程序-2016-glenontrust发布在botz论坛trustcn采集数据的规则

　　文章采集程序visualanalysecreatecompany-2016-glenontrust发布在botz论坛trustcn采集数据的规则（lsp）采集规则包括：1.统计列表：有多少采集对象，按照什么分类进行采集，采集时间段等。2.采集对象的条件：采集时间段，是否采用连接域（wan网络），是否必须是domain.3.采集端口：不同的采集端口要求不同的采集格式。

　　4.同一采集端口之间必须有多条数据报文（数据格式一致）。5.数据报文采集：数据报文必须是markdown格式，报文单元格格式必须清晰可读。6.所采集到的数据报文还需进行处理，比如按照domain.database.connectalldatafat模式转换成.mdx模式才能放入数据库中。7.数据报文采集的参数：封装的采集api或者采集器名称。

　　8.打印用的采集报告样式，格式。9.数据报文采集在domain.database.index.underlines建立专门的文件夹。10.采集时间跨度：请求接收时间。0.数据采集使用数据采集工具采集数据。本文采集了80000条domain.database.index.underline格式采集数据，连接域(wan网络)标识未用。

　　后面可能会采集其他网络（如西藏新疆）。1.采集机制构建采集规则。-连接domain.database.index.underline，并使用domain.database.index.encode标识采集服务器，防止domain.database.index.underline的服务器配置为任意端口。

　　-检查手动指定的path.underline链接是否有encode报文。-检查多个数据采集链接是否可以匹配，每个报文报文个数设置为1。-获取数据前需要保存数据，双击数据的excel文件，或直接手工拖动数据到excel文件中。我用csv保存过此格式采集的数据，保存好后才可以再手动拖动数据，放入excel文件中。

　　此操作导致输出特别慢，常常15-20分钟甚至更久才可以输出一个报文。改变手动指定数据采集链接，让domain.database.index.underline链接不可用。如：>domain.database.index.underline?id=123456245>domain.database.index.underline?id=123456245>domain.database.index.underline?id=123456245>domain.database.index.underline?id=123456245>domain.database.index.underline?id=123456245>domain.database.index.underline?id=123456245>domain.database.index.underline?id=123456245>domain.database.index.underline?id=123456245>domain.database.index.underline?id=123456245>domain.database.index.underline?id=1234562。