php抓取开奖网页内容( 怎么修改网页结构 )

　　php抓取开奖网页内容(

怎么修改网页结构

)

现在很多web应用，做过web项目的童鞋都知道，web结果由html+js+css组成，html结构都有一定的规范，数据动态交互可以通过js实现。

有些时候，需要抓取某一个你感兴趣的网站信息，一个网站信息肯定是通过某一个url，发送http请求，根据地址定位的，当知道这个地址，可以获取到很多的网络响应，需要认真分析，找到你那一个合适的地址，最后通过这个地址返回一个html给你，我们可以得到这个html，分析结构，解析这个结构获取你要的数据。

Html的结构解析往往是复杂繁琐的，我们可以使用java的支持包：jsoup，可以完成发送请求，解析html等功能，得到你感兴趣的数据。

下面就以一个彩票网站为例来简单说明整体操作流程，分为以下几大步骤：

1：根据官网，定位到自己感兴趣的模块：双色球

2：分析页面，找到它的入口地址

3：获取地址，使用jsoup发送请求，获取返回的Document对象

4：分析Document对象，获取感兴趣的数据

　　1：根据官网，找到您感兴趣的模块：双色球：

　　我选的500彩票网站：请按照以下步骤找到双色球版块。

　　2：分析页面，找到它的入口地址

　　发现右边有个下拉选择框，这是历史双色球开奖日期。改变这个值，浏览器会重新请求这个时期的彩票信息，并确定地址为：

　　选择问题编号.shtml

　　3：获取地址，使用jsoup发送请求，获取返回的Document对象

　　创建一个maven项目并导入jsoup的依赖：在你的java类中，向2个地址发送请求：获取返回的页面数据：

　　返回的html页面内容较多，这里就不贴了。下面我就直接分析这个页面（特别是每个html的结构不是一成不变的。有可能读者看到这个文章，网站修改了网页结构，那你就需要重新-分析一下。当然，估计网站修改网页结构的可能性比较小...）

　　4：分析Document对象，获取感兴趣的数据

　　双色球由6个红球和1个篮球组成。通过分析网页，它是用类来表示的。网页源代码如下：

　　通过以下代码，得到6个红球：

　　同理，可以获得1个蓝球。

　　根据这个原则，你可以得到你想要的数据：以下是我得到的数据

以上是个人对java中简单抓取网页数据的分享，感兴趣的童鞋可以自己的实践一下，实践出真知。