python抓取京东小米8手机配置信息
更新时间：2018年11月13日 15:39:34 作者：谢公子
这篇文章主要为大家详细介绍了python抓取京东手机配置信息，具有一定的参考价值，感兴趣的小伙伴们可以参考一下
本文代码是使用python抓取京东小米8手机的配置信息
首先找到小米8商品的链接：https://item.jd.com/7437788.html
然后找到其配置信息的标签，我们找到其配置信息的标签为 <div class="Ptable">
然后再分析其配置信息的页面的规律，我们发现都是dl中包含了dt和dd，而一个dt对应的一个dd，dt对应的是参数，dd对应的是参数具体的值
下面是源代码
import requests
from bs4 import BeautifulSoup
from pandas import Series
from pandas import DataFrame
response=requests.get("https://item.jd.com/7437788.html")
html=response.text
soup=BeautifulSoup(html,"html.parser")
divSoup=soup.find("div",attrs={"class","Ptable"}) ##找到其配置信息的标签
data=DataFrame(columns=["参数","值"]) #定义一个二元的DataFrame
dls=divSoup.find_all("dl")
for dl in dls:
dts=dl.find_all("dt")
dds=dl.find_all("dd")
if len(dts)==len(dds):
for i in range(len(dts)):
f=dts[i].getText();
p=dds[i].getText();
data=data.append(Series([f,p],index=["参数","值"]),ignore_index=True);
print(data)
这是最终抓取到的配置信息，一共有64行，这里我就不一一列举出来了
以上就是本文的全部内容，希望对大家的学习有所帮助，也希望大家多多支持脚本之家。
相关文章
python抓取京东商城手机列表url实例分享，大家参考使用吧2013-12-12
本文是Python机器学习NLP自然语言处理系列文章，开始我们自然语言处理 (NLP) 的学习旅程. 本文主要学习NLP自然语言处理基本操作新闻分类2021-09-09
今天小编就为大家分享一篇Python分割指定页数的pdf文件方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2018-10-10
今天小编就为大家分享一篇对python while循环和双重循环的实例详解，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2019-08-08
这篇文章主要介绍了基于python实现微信收红包自动化测试脚本，本文通过实例代码给大家介绍的非常详细，对大家的学习或工作具有一定的参考借鉴价值，需要的朋友参考下吧2021-07-07
这篇文章主要为大家介绍了python装饰器类方法classmethod的使用场景，有需要的朋友可以借鉴参考下，希望能够有所帮助，祝大家多多进步，早日升职加薪2023-06-06
这篇文章主要为大家详细介绍了python实现超市扫码仪计费，文中示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2018-05-05
循环是有着周而复始的运动或变化的规律；在 Python 中，循环的操作也叫做 遍历。与现实中一样，Python 中也同样存在着无限循环的方法与有限循环的方法。本文将通过示例详细讲解Python中的循环方法，需要的可以参考一下2022-03-03
这篇文章主要介绍了shelve 用来持久化任意的Python对象实例代码的相关资料,需要的朋友可以参考下2016-10-10
Python实现将MySQL中所有表的数据都导出为CSV文件并压缩
这篇文章主要为大家详细介绍了如何使用Python将MySQL数据库中所有表的数据都导出为CSV文件到一个目录,并压缩为zip文件到另一个目录下,需要的可以了解下2025-03-03
最新评论