搜索引擎优化论文(本文研究基于垂直搜索技术从网上获取软件安全缺陷信息)

　　搜索引擎优化论文(本文研究基于垂直搜索技术从网上获取软件安全缺陷信息)

　　[摘要] 随着万维网的快速发展，越来越多的组织、公司等发布了有关万维网上发现的软件安全缺陷的信息。本文研究基于垂直搜索技术从互联网获取软件安全缺陷信息，并进一步基于语义标注提取信息，构建软件安全缺陷知识库。借助垂直搜索和语义标注技术，实现了一种从万维网获取软件安全缺陷信息的工具。该工具首先设计了一个关键字训练器来获取软件安全缺陷领域的关键词；然后通过获取的字段关键词设计一个web过滤器；最后基于这个网页过滤器设计了一个垂直搜索爬虫，并从 World Wide Web Crawl 软件安全缺陷信息中搜索。实现了基于网页拓扑结构和关键字权重过滤算法的网页过滤器，以及将最优搜索策略与广度优先搜索策略相结合的垂直搜索爬虫工具。爬虫结合网页过滤器可以过滤非软件安全域中的网页，可以自动多线程下载软件安全域网页；设计并实现了一种利用百度搜索引擎获取软件安全缺陷信息的工具；实现了基于网络内容分析算法的域关键字训练器工具，提供关键字及其权重；基于GATE工具设计并实现下载网页的语义标注，并使用基于JAXP的语义标注结果分析。分析提取网页中的安全缺陷信息。该工具可以在万维网上对软件安全领域的相关信息进行实时有效的搜索爬取，并进行信息结构化，为构建软件安全缺陷知识库和分析软件安全漏洞提供数据奠定基础。支持。