Python获取基金网站网页内容、使用BeautifulSoup库分析html操作示例

更新时间：2019年06月04日 09:20:19 作者：学习笔记666

这篇文章主要介绍了Python获取基金网站网页内容、使用BeautifulSoup库分析html操作,结合实例形式分析了Python基于urllib包的网页内容获取,以及使用BeautifulSoup分析html相关操作技巧,需要的朋友可以参考下

本文实例讲述了Python获取基金网站网页内容、使用BeautifulSoup库分析html操作。分享给大家供大家参考，具体如下：

利用 urllib包获取网页内容

#引入包
from urllib.request import urlopen
response = urlopen("http://fund.eastmoney.com/fund.html")
html = response.read();
#这个网页编码是gb2312
#print(html.decode("gb2312"))
#把html内容保存到一个文件
with open("1.txt","wb") as f:
  f.write(html.decode("gb2312").encode("utf8"))
  f.close()

使用BeautifulSoup分析html

from bs4 import BeautifulSoup
# 读取文件内容
with open("1.txt", "rb") as f:
  html = f.read().decode("utf8")
  f.close()
# 分析html内容
soup = BeautifulSoup(html,"html.parser")
# 取出网页title
print(soup.title) #<title>每日开放式基金净值表 _ 天天基金网</title>
# 基金编码
codes = soup.find("table",id="oTable").tbody.find_all("td","bzdm")
result = () # 初始化一个元组
for code in codes:
  result += ({
    "code":code.get_text(),
    "name":code.next_sibling.find("a").get_text(),
    "NAV":code.next_sibling.next_sibling.get_text(),
    "ACCNAV":code.next_sibling.next_sibling.next_sibling.get_text()
   },)
# 打印结果
print(result[0]["name"])

更多关于Python相关内容感兴趣的读者可查看本站专题：《Python进程与线程操作技巧总结》、《Python数据结构与算法教程》、《Python函数使用技巧总结》、《Python字符串操作技巧汇总》、《Python入门与进阶经典教程》、《Python+MySQL数据库程序设计入门教程》及《Python常见数据库操作技巧汇总》

希望本文所述对大家Python程序设计有所帮助。

您可能感兴趣的文章:

详解PyCharm使用pyQT5进行GUI开发的基本流程
本文主要介绍了PyCharm使用pyQT5进行GUI开发的基本流程，文中通过示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下
2021-10-10
python中arrow库用法大全
这篇文章主要介绍了python中arrow库用法详解,本文通过实例代码给大家介绍的非常详细，对大家的学习或工作具有一定的参考借鉴价值，需要的朋友可以参考下
2022-08-08
使用Python的OpenCV模块识别滑动验证码的缺口（推荐）
这篇文章主要介绍了使用Python的OpenCV模块识别滑动验证码的缺口,本文给大家介绍的非常详细，具有一定的参考借鉴价值，需要的朋友可以参考下
2019-05-05
NumPy排序的实现
这篇文章主要介绍了NumPy排序的实现，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
2020-01-01
Scrapy之爬取结果导出为Excel的实现过程
这篇文章主要介绍了Scrapy之爬取结果导出为Excel的实现过程，具有很好的参考价值，希望对大家有所帮助。如有错误或未考虑完全的地方，望不吝赐教
2022-12-12
python numpy矩阵信息说明,shape,size,dtype
这篇文章主要介绍了python numpy矩阵信息说明,shape,size,dtype，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
2020-05-05
详解python安装matplotlib库三种失败情况
这篇文章主要介绍了详解python安装matplotlib库三种失败情况，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
2020-07-07
详解用Pytest+Allure生成漂亮的HTML图形化测试报告
这篇文章主要介绍了详解用Pytest+Allure生成漂亮的HTML图形化测试报告，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
2020-03-03
Python编程中Python与GIL互斥锁关系作用分析
GIL互斥锁用来保护Python世界里的对象，防止同一时刻多个线程执行Python字节码，确保线程安全，但也导致Python线程无法利用多核CPU优势，本文来探讨Python将来是否有可能去除GIL
2021-09-09
Python探索之静态方法和类方法的区别详解
这篇文章主要介绍了Python探索之静态方法和类方法的区别详解，小编觉得还是挺不错的，这里分享给大家，供需要的朋友参考。
2017-10-10