python抓取京东小米8手机配置信息
更新时间：2018年11月13日 15:39:34 作者：谢公子
这篇文章主要为大家详细介绍了python抓取京东手机配置信息，具有一定的参考价值，感兴趣的小伙伴们可以参考一下
本文代码是使用python抓取京东小米8手机的配置信息
首先找到小米8商品的链接：https://item.jd.com/7437788.html
然后找到其配置信息的标签，我们找到其配置信息的标签为 <div class="Ptable">
然后再分析其配置信息的页面的规律，我们发现都是dl中包含了dt和dd，而一个dt对应的一个dd，dt对应的是参数，dd对应的是参数具体的值
下面是源代码
import requests
from bs4 import BeautifulSoup
from pandas import Series
from pandas import DataFrame
response=requests.get("https://item.jd.com/7437788.html")
html=response.text
soup=BeautifulSoup(html,"html.parser")
divSoup=soup.find("div",attrs={"class","Ptable"}) ##找到其配置信息的标签
data=DataFrame(columns=["参数","值"]) #定义一个二元的DataFrame
dls=divSoup.find_all("dl")
for dl in dls:
dts=dl.find_all("dt")
dds=dl.find_all("dd")
if len(dts)==len(dds):
for i in range(len(dts)):
f=dts[i].getText();
p=dds[i].getText();
data=data.append(Series([f,p],index=["参数","值"]),ignore_index=True);
print(data)
这是最终抓取到的配置信息，一共有64行，这里我就不一一列举出来了
以上就是本文的全部内容，希望对大家的学习有所帮助，也希望大家多多支持脚本之家。
相关文章
配置文件管理已经成为了一个不可或缺的环节。它们包含了程序运行所需的各种参数，本文主要介绍了Python中使用YAML文件进行配置文件管理，感兴趣的可以了解一下2023-12-12
这篇文章主要介绍了Python中集合类型（set）学习小结,本文讲解了set的初始化、运算操作、基本方法等内容,需要的朋友可以参考下2015-01-01
这篇文章主要给大家介绍了关于使用Python写一个创意五子棋游戏的相关资料,Python作为一种简单易上手的编程语言,能够轻松实现五子棋游戏,需要的朋友可以参考下2023-08-08
最近在带孩子学习数独，职业使然，就上网搜了下相关程序的解法，这里分享给大家，希望对大家学习python有所帮助2017-04-04
本文主要介绍了opencv canny边缘检测算法详解，文中通过示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2022-03-03
这篇文章主要介绍了带你用Python做车牌自动识别系统的详细过程，本文给大家介绍的非常详细，对大家的学习或工作具有一定的参考借鉴价值，需要的朋友可以参考下2021-08-08
python playwright 库上传和下载操作(自动化测试 playwright)
这篇文章主要介绍了python playwright 库上传和下载操作(自动化测试 playwright ),playwright中的上传和下载比selenium的上传和下载要简便些,本文结合实例代码给大家介绍的非常详细，需要的朋友可以参考下2023-05-05
在Python中列表是一种可变序列,可以存储任意类型的元素,而元组是一种不可变序列,也可以存储各种类型的元素,下面这篇文章主要给大家介绍了关于Python修改列表元素有哪些方法的相关资料,需要的朋友可以参考下2023-05-05
这篇文章主要介绍了Python中的OpenCV图像阈值处理和平滑处理详解,OpenCV是一个跨平台的计算机视觉库,可用于开发实时的图像处理、计算机视觉以及模式识别程序,需要的朋友可以参考下2023-08-08
我的Mysql中已经有了项目需要使用的相关数据库,现在需要通过django来获取Mysql里的数据并使用,下面这篇文章主要给大家介绍了关于非常详细的Django连接mysql数据库步骤,需要的朋友可以参考下2022-10-10
最新评论