脚本之家 服务器常用软件
快捷导航
您的位置：首页 → 脚本专栏 → python → Python采集王者战力信息

Python采集王者最低战力信息实战示例

 更新时间：2023年04月18日 09:56:03   作者：极客飞虎  
这篇文章主要为大家介绍了Python采集王者最低战力信息实战示例解析，有需要的朋友可以借鉴参考下，希望能够有所帮助，祝大家多多进步，早日升职加薪

🥩数据采集

🍖确定网址

王者新赛季马上就要开始了，大家都开始冲榜了，准备拿一个小省标，那么，本文，就来练习获取各地最低战力的爬虫采集实战。

确定好我们的目标网址之后，我们要找到我们需要的数据源，通过开发者工具分析，我们不难发现其数据地址。

请求URL：

https://www.sapi.run/hero/select.php

请求方式：

  • GET

参数：

参数名必选类型说明
hero是string英雄名
type是string选aqq、awx、iqq、iwx

请求示例

https://www.sapi.run/hero/select.php?hero=孙悟空&type=aqq

返回示例

{
  "code": 200,
  "data": {
    "uid": "167",
    "name": "孙悟空",
    "alias": "齐天大圣-孙悟空",
    "platform": "安卓-扣扣区",
    "photo": "https://game.gtimg.cn/images/yxzj/img201606/heroimg/167/167.jpg",
    "area": "武强县",
    "areaPower": "3693",
    "city": "潮州市",
    "cityPower": "5501",
    "province": "天津市",
    "provincePower": "7274",
    "guobiao": "11404",
    "stamp": "1654640093",
    "updatetime": "2022/06/08 06:14:53",
    "clientIP": "119.0.0.126"
  },
  "msg": " "
}

下面，我们开始写代码。

🍖获取数据

第一步，发送请求，获得数据。

import requests
headers = {
    'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/92.0.4515.159 Safari/537.36'
}
hero_url = 'https://pvp.qq.com/web201605/herolist.shtml'
response = requests.get(url=hero_url, headers=headers)

这段代码中，我们使用 Python 的 requests 模块发送了一个 GET 请求，请求的 URL 为 https://pvp.qq.com/web201605/herolist.shtml，并且使用了 headers 参数来设置请求头信息。请求头信息包括了 user-agent 字段，用于指定浏览器的 User-Agent 信息。

请求返回的结果是一个 Response 对象，我们可以使用 response.text 属性来获取请求的响应内容。在这个例子中，我们使用了 response.json() 方法来将响应内容转换为 JSON 格式，并将其存储在 response.text 属性中。

response.encoding='gbk'
heros = re.findall('alt=".*?">(.*?)</a>',response.text)[0:93]

这段代码中，我们使用 Python 的 re 模块中的 findall() 函数来查找 JSONP 回调函数的参数。findall() 函数可以返回一个列表，其中包含了所有匹配的子字符串。

在这个例子中，我们使用 findall() 函数来查找 JSONP 回调函数的参数，并将其存储在 response.text 变量中。然后，我们使用 [0:93] 来获取第一个匹配的子字符串，并将其存储在 heros 变量中。

需要注意的是，findall() 函数返回的子字符串列表中可能包含多个匹配的子字符串，因此我们需要使用 [0:93] 来获取第一个匹配的子字符串。

🍖解析数据

我们发现，我们得到了这样英雄名字的数据，下面，我们就可以构建url，获取战力信息。

for hero in heros:
    print(hero)
    url = f'https://www.sapi.run/hero/select.php?hero={hero}&amp;type=qq'
    res = requests.get(url)
    data = res.json()['data']
    name = data['name']
    area = data['area']
    areaPower= data['areaPower']
    city = data['city']
    cityPower = data['cityPower']
    province= data['province']
    provincePower = data['provincePower']
    platform= data['platform']
    updatetime = data['updatetime']

这段代码中，我们使用 Python 的 requests 模块发送了一个 GET 请求，请求的 URL 为 https://www.sapi.run/hero/select.php?hero={hero}&type=qq，并且使用了 json() 方法将响应内容转换为 JSON 格式，并将其存储在 res.json() 变量中。

请求返回的结果是一个 Response 对象，我们可以使用 response.json() 方法将响应内容转换为 JSON 格式，并将其存储在 res.json() 变量中。

在这个例子中，我们使用了 res.json() 变量来获取响应内容，并将其存储在 data 变量中。然后，我们使用 name 变量获取了英雄名称，使用 area 变量获取了区域名字，使用 areaPower 变量获取了区域战力，使用 city 变量获取了市，使用 cityPower 变量获取了市战力，使用 province 变量获取了省份，使用 provincePower 变量获取了省份战力，使用 platform 变量获取了平台，使用 updatetime 变量获取了更新时间。

保存数据

dit = {
    '英雄名称':name,
    '服务区':platform,
    '更新时间': updatetime,
    '铜牌区域':area,
    '铜牌分数': areaPower,
    '银牌区域':city,
    '银牌分数': cityPower,
    '金牌区域':province,
    '金牌分数':provincePower ,
}

这段代码是一个 Python 代码片段，它定义了一个字典，其中包含了一些英雄的信息，包括英雄名称、服务区、更新时间、铜牌区域、铜牌分数、银牌区域、银牌分数、金牌区域、金牌分数等。

下面就是数据的写入了。其实，把字典数值写入到csv文件里面，特别简单，只需呀四行代码就可以实现。

f = open('最低战力.csv', mode='a', encoding='utf-8_sig', newline='')
csv_writer = csv.DictWriter(f, fieldnames=['英雄名称', '服务区', '更新时间', '铜牌区域', '铜牌分数',
                                           '银牌区域', '银牌分数', '金牌区域','金牌分数'])
csv_writer.writeheader()

这段代码打开了一个名为 '最低战力.csv' 的文件，并将其以追加模式打开。它还指定了文件的编码为 UTF-8 和行结束符为空字符串（newline=''）。

然后，代码创建了一个 csv.DictWriter 对象，并将其与文件对象关联起来。fieldnames 参数指定了字典中的键和值的名称。

接下来，代码调用 writeheader() 方法来写入表头。这个方法将字典中的键值对写入文件中，并将其作为表头。

写入字典数值。

csv_writer.writerow(dit)

这时候，我们就会在文件夹里面找到最低战力的csv文件，我们打开看看效果。

以上就是Python采集王者最低战力信息实战示例的详细内容，更多关于Python采集王者战力信息的资料请关注脚本之家其它相关文章！

您可能感兴趣的文章:

相关文章

  • Python3.9新特性详解

    Python3.9新特性详解

    这篇文章主要介绍了Python3.9新特性详解，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
    2020-10-10
  • Python selenium如何设置等待时间

    Python selenium如何设置等待时间

    这篇文章主要为大家详细介绍了Python selenium如何设置等待时间，文中示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下
    2016-09-09
  • Python爬虫实例爬取网站搞笑段子

    Python爬虫实例爬取网站搞笑段子

    这篇文章主要介绍了Python爬虫实例爬取网站搞笑段子，具有一定参考价值，看完了代码不妨看看段子，希望大家每天开心。
    2017-11-11
  • pandas groupby分组对象的组内排序解决方案

    pandas groupby分组对象的组内排序解决方案

    这篇文章主要介绍了pandas groupby分组对象的组内排序解决方案，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
    2021-03-03
  • python利用后缀表达式实现计算器功能

    python利用后缀表达式实现计算器功能

    这篇文章主要为大家详细介绍了python利用后缀表达式实现计算器功能，文中示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下
    2021-02-02
  • pytorch dataloader 取batch_size时候出现bug的解决方式

    pytorch dataloader 取batch_size时候出现bug的解决方式

    今天小编就为大家分享一篇pytorch dataloader 取batch_size时候出现bug的解决方式，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
    2020-02-02
  • Python+OpenCv制作证件图片生成器的操作方法

    Python+OpenCv制作证件图片生成器的操作方法

    这篇文章主要介绍了Python+OpenCv制作证件图片生成器的操作方法，本文通过实例代码给大家介绍的非常详细，具有一定的参考借鉴价值,需要的朋友可以参考下
    2019-08-08
  • Python协程asyncio异步编程笔记分享

    Python协程asyncio异步编程笔记分享

    这篇文章主要介绍了Python协程asyncio异步编程笔记分享，基于async & await关键字的协程可以实现异步编程，这也是目前python异步相关的主流技术
    2021-09-09
  • Python制作爬虫抓取美女图

    Python制作爬虫抓取美女图

    作为一个屌丝程序猿，平时没事就逛逛美女图，过过眼瘾，当然作为一个技术男，就直接打开页面看的话，多low啊，所以就有了这篇文章，哼，抓取下来到本地慢慢看！
    2016-01-01
  • python matplotlib实现将图例放在图外

    python matplotlib实现将图例放在图外

    这篇文章主要介绍了python matplotlib实现将图例放在图外，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
    2020-04-04

最新评论