自动采集发布系统( 本发明公开一种WEB数据自动采集系统的专利说明(图))

　　自动采集发布系统(

本发明公开一种WEB数据自动采集系统的专利说明(图))

　　一种使web数据自动化采集系统的方法

　　【摘要】本发明公开了一种WEB数据自动采集系统，包括WEB客户端、WEB服务器和应用服务器。WEB客户端收录一个索引图，索引图保存了图形与数据的关系和链接。WEB客户端将客户端点击的图形或数据对应的链接发送给WEB服务器，WEB服务器从应用服务器采集链接相应的图形或数据，链接采集接收到的图形或数据转换成SVG文件返回给WEB客户端。本发明可以将半结构化和非结构化数据转化为结构化元数据，实现对飞行数据的动态跟踪和监控。

　　【专利说明】一种WEB数据自动采集系统

　　【技术领域】

　　[0001] 本发明涉及一种数据采集系统，更准确地说是一种WEB数据自动采集系统。

　　【背景技术】

　　[0002] Web服务系统主要实现信息发布功能，这是配电网自动化系统的基本功能之一。客户使用浏览器通过Web服务系统了解和分析配电网的运行状况。目前在线运行的配网自动化系统基本都是运行在EMS（Energy Manage System，能源管理系统）系统的I控制区，然后通过隔离装置将数据同步到非控制III区，并通过非控制III区提供外部。网络每月服务。配电自动化系统提供的Web服务大多基于ActiveX控制技术或Java控制技术。无论是基于哪种控制技术，用户需要下载相应的控件。将所有数据下载到客户端，从而快速响应用户的查看请求，但用户看到的并不是配网自动化系统当前的运行状态。此外，为了系统安全，网络配电自动化系统需要在保护模式下运行控件。如果运行权限设置不正确，这些控件的功能将失效，导致客户端用户体验不佳。网络配电自动化系统需要在保护模式下运行控制。如果运行权限设置不正确，这些控件的功能将失效，导致客户端用户体验不佳。网络配电自动化系统需要在保护模式下运行控制。如果运行权限设置不正确，这些控件的功能将失效，导致客户端用户体验不佳。

　　【发明内容】

　　[0003] 本发明的目的在于提供一种WEB数据自动采集系统，能够解决上述现有技术的不足。

　　本发明采用以下技术方案：

　　一种WEB数据自动采集系统，包括WEB客户端、WEB服务器和应用服务器，所述WEB客户端包括索引图，所述索引图保存图与数据的对应关系和链接，WEB客户端发送客户端点击的图或数据对应的链接到WEB服务器，WEB服务器从应用服务器采集链接对应的图或数据，将图传到采集的图或者将数据转换成SVG文件返回给WEB客户端；还包括Web无线数据采集控制系统，Web无线数据采集控制系统由数据采集发送模块和数据接收模块组成。数据采集发射模块包括信号调理模块，A/D转换模块、微控制器和无线模块。信号采集通过信号调理模块传送到A/D转换模块。A/ D转换模块与单片机相连；数据接收模块包括无线模块和微控制器，无线模块的输入端与数据发送模块中的微控制器相连，无线模块的输出端与数据发送模块中的微控制器相连。数据接收模块 微处理器与 PC 相连。

　　所述WEB服务器包括：

　　[0007] 链接分析模块，用于分析WEB客户端发送的链接，得到链接的内容，将SVG文件导出程序转换后的SVG文件返回给WEB客户端；

　　[0008] 图形数据采集模块，用于从应用服务器采集链接解析模块解析出的内容对应的图形或数据；

　　[0009] SVG文件导出程序用于将图形或图形数据采集模块采集的数据转换成SVG文件并转发给链接分析模块。

　　[0010] WEB服务器还包括SVG文件拓扑着色程序，用于对转换成SVG文件的厂区图进行拓扑着色，输出给链接分析模块，链接分析模块进行拓扑着色SVG 文件。返回WEB客户端。

　　[0011] 信号处理模块包括信号放大电路和滤波电路，信号放大电路输出端连接滤波电路；微控制器是STM32芯片。

　　[0012] 本发明的优点是：可以将半结构化和非结构化数据转化为结构化元数据，实现对飞行数据的动态跟踪和监控。

　　【详细说明】

　　[0013] 下面进一步阐述本发明【具体实施例】：

　　本发明公开了一种WEB数据自动采集系统，包括WEB客户端、WEB服务器和应用服务器，其特征在于，所述WEB客户端包括索引图，所述索引图保存图和数据对应与链接的关系，WEB客户端将客户端点击的图或数据对应的链接发送给WEB服务器，WEB服务器链接来自应用服务器的对应图或数据采集，采集@采集接收到的图形或数据转换成SVG文件返回给WEB客户端；它还包括一个Web无线数据采集控制系统，Web无线数据采集控制系统由数据采集发送模块和数据接收模块组成。资料< @采集发送模块包括信号调理模块、A/D转换模块、微控制器和无线模块。采集 接收到的信号通过信号调理模块传输给A。/D转换模块，A/D转换模块与单片机相连；数据接收模块包括无线模块和微控制器，无线模块的输入端与数据采集发送模块中的微控制器相连，无线模块的输出端与数据发送模块中的微控制器相连。数据接收模块与PC机连接。通过信号调理模块传输到A。/D转换模块，A/D转换模块与单片机相连；数据接收模块包括无线模块和微控制器，无线模块的输入端与数据采集发送模块中的微控制器相连，无线模块的输出端与数据发送模块中的微控制器相连。数据接收模块与PC机连接。通过信号调理模块传输到A。/D转换模块，A/D转换模块与单片机相连；数据接收模块包括无线模块和微控制器，无线模块的输入端与数据采集发送模块中的微控制器相连，无线模块的输出端与数据发送模块中的微控制器相连。数据接收模块与PC机连接。

　　所述WEB服务器包括：链接分析模块，用于分析WEB客户端发送的链接并获取链接的内容，并将SVG文件导出器转换后的SVG文件返回给WEB客户端；图形数据采集模块，用于从应用服务器解析出的内容对应的图形或数据采集链接解析模块；SVG文件导出器，用于图形数据采集模块采集或者数据转换成SVG文件转发给链接解析模块。

　　[0016] WEB服务器还包括SVG文件拓扑着色程序，用于对转换成SVG文件的厂区图进行拓扑着色，输出给链接分析模块，链接分析模块将拓扑着色SVG 文件。返回WEB客户端。

　　[0017] 信号处理模块包括信号放大电路和滤波电路，信号放大电路输出与滤波电路连接；微控制器是STM32芯片。

　　[0018] Web数据自动采集技术涉及Web数据挖掘、Web信息检索、信息抽取、搜索引擎等技术。所谓Web数据自动化采集是指从大量非结构化、异构的Web信息中发现有效的、新颖的、潜在可用的信息（包括概念、模式、规则、规律、约束和可视化）资源。) 是一个重要的过程。包括Web内容挖掘、Web结构挖掘和Web使用挖掘。

　　[0019] 本发明的WEB数据自动采集技术的性能是对指定航空公司、OTA、GDS的海量航班数据进行信息检索、信息提取和分析网站根据飞行数据组成规则。对数据进行处理、校验和去噪，整合数据，将半结构化和非结构化数据转化为结构化元数据，实现对飞行数据的动态跟踪和监控。

　　[0020] 本发明可以将半结构化和非结构化数据转化为结构化元数据，从而实现对飞行数据的动态跟踪和监控。

　　以上所述仅为本发明的较佳实施例而已，并不用于限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应收录在本发明之内。发明。在本发明的保护范围内。

　　【权利要求】

<p>1.一种WEB数据自动化采集系统，包括WEB客户端、WEB服务器和应用服务器，其特征在于WEB客户端包括索引图，索引图保存图形、数据和链接之间的对应关系，WEB客户端将客户点击的图形或数据对应的链接发送给WEB服务器，WEB服务器链接来自应用服务器的相应图形或数据采集，