Python基于urllib包的网页内容获取,分析html操作技巧汇总

优采云 发布时间: 2021-05-27 22:03

  Python基于urllib包的网页内容获取,分析html操作技巧汇总

  Python获得资金网站网页内容,使用BeautifulSoup库分析html操作示例

  更新时间:2019年6月4日09:20:19作者:Study Notes 666

  本文文章主要以示例形式介绍使用Python获取资金网站网页内容,使用BeautifulSoup库分析html操作,基于urllib包分析Python的Web内容获取,并使用BeautifulSoup分析html相关的操作技巧。有需要的朋友可以参考

  本文介绍了示例Python获取资金网站网页内容并使用BeautifulSoup库分析html操作的示例。与您分享以供参考,如下所示:

  使用urllib程序包获取Web内容

  

#引入包

from urllib.request import urlopen

response = urlopen("http://fund.eastmoney.com/fund.html")

html = response.read();

#这个网页编码是gb2312

#print(html.decode("gb2312"))

#把html内容保存到一个文件

with open("1.txt","wb") as f:

f.write(html.decode("gb2312").encode("utf8"))

f.close()

  使用BeautifulSoup分析html

  

from bs4 import BeautifulSoup

# 读取文件内容

with open("1.txt", "rb") as f:

html = f.read().decode("utf8")

f.close()

# 分析html内容

soup = BeautifulSoup(html,"html.parser")

# 取出网页title

print(soup.title) #每日开放式基金净值表 _ 天天基金网

# 基金编码

codes = soup.find("table",id="oTable").tbody.find_all("td","bzdm")

result = () # 初始化一个元组

for code in codes:

result += ({

"code":code.get_text(),

"name":code.next_sibling.find("a").get_text(),

"NAV":code.next_sibling.next_sibling.get_text(),

"ACCNAV":code.next_sibling.next_sibling.next_sibling.get_text()

},)

# 打印结果

print(result[0]["name"])

  对于对Python相关内容有更多兴趣的读者,请查看此站点的主题:“ Python进程和线程操作技能摘要”,“ Python数据结构和算法教程”,“ Python函数使用技能摘要”, “ Python字符串”操作技巧摘要”,“ Python简介和高级经典教程”,“ Python + MySQL数据库编程简介”和“ Python通用数据库操作技巧摘要”

  我希望本文能对您的Python编程有所帮助。

0 个评论

要回复文章请先登录注册


官方客服QQ群

微信人工客服

QQ人工客服


线