python网页数据抓取(奔腾不息的自信是真正的成功之母())

　　python网页数据抓取(奔腾不息的自信是真正的成功之母())

　　Python抓取网页数据。txt51 自信是取之不尽的源泉，自信是无尽的波浪，自信是快速进步的通道，自信是成功之母。使用python抓取页面并进行处理 2009-02-19 15:09:50| 类别：Python 标签：无|字体大小订阅 主要目的：抓取一个网页的源代码，处理其中需要的数据，并保存到数据库中。它已实现抓取页面并读取数据。Step 一、 抓取页面，这一步很简单，引入urllib，使用urlopen打开URL，使用read()方法读取数据。为了方便测试，使用本地文本文件代替抓取网页步骤二、处理数据。如果页面代码比较标准，可以使用HTMLParser进行简单处理，但具体情况需要具体分析。使用常规规则感觉更好。顺便练习一下刚学的正则表达式。其实正则规则也是一种比较简单的语言，里面有很多符号，有点晦涩难懂。你只能练习越来越多的练习。步骤三、 将处理后的数据保存到数据库中，可以用pymssql进行处理，这里只是简单的保存到文本文件中。扩展后，该功能还可以用于抓取网站的整张图片，自动认领站点地图文件等功能。接下来的任务是研究python importurllib import re #pager=urllib.urlopen() #data=pager.read() #pager.close() f=open(r"D:\2. txt" ) 数据=f.read() f.