利用Pyhton中的requests包进行网页访问测试的方法
更新时间：2018年12月26日 09:54:09 作者：StevenYang_SJTU
今天小编就为大家分享一篇利用Pyhton中的requests包进行网页访问测试的方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
为了测试一组网页是否能够访问，采取python中的requests包进行批量的访问测试，并输出访问结果。
一、requests包的安装
打开命令行(win+r输入cmd启动）;
打开pythion安装目录下的Python\Python36-32\Scripts，将其中的pip文件拖动到命令行中;
在之后输入install requests命令;
二、访问方法
import requests
fin = open('urls.txt', 'r')
fout = open('result.txt', 'w')
urllist = fin.readlines()
for url in urllist:
try:
url='http://'+url.strip()
r=requests.post(url)
fout.write(url+' ： OK with status_code: '+str(r.status_code))
print(url+' ： OK with status_code: '+str(r.status_code))
except:
fout.write(url+' : error\n')
print(url+' : error\n')
fin.close()
fout.close()
通过读取文件中的url进行访问;
由于文件中url缺少一些信息，因此统一加上http://;
.strip()方法是为了去掉末尾的\n，否则会访问错误;
之所以采用try/except是因为经过测试发现，有些网站打不开会直接导致程序中断，而有些网站则是能够进去，但是网站本身没有内容或再报一些其他错，所以对于能访问的网站还会进一步检查状态码进行鉴别。
以上这篇利用Pyhton中的requests包进行网页访问测试的方法就是小编分享给大家的全部内容了，希望能给大家一个参考，也希望大家多多支持脚本之家。
相关文章
这篇文章主要介绍了python中split方法用法,实例分析了split方法的功能及相关使用技巧,非常具有实用价值,需要的朋友可以参考下2015-04-04
在 Python 中,with open() 提供了一个简洁而安全的方式来处理文件操作,它不仅能确保文件在操作完成后自动关闭,还能处理文件操作中的异常,避免资源泄漏,本文给大家介绍Python 中的 with open文件操作的最佳实践,感兴趣的朋友一起看看吧2025-04-04
glob 是 Python 中用于文件模式匹配的一个模块,本文主要介绍了python之glob的用法详解,具有一定的参考价值,感兴趣的可以来了解一下2023-12-12
简单了解python的break、continue、pass
这篇文章主要介绍了简单了解python的break、continue、pass,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下2019-07-07
这篇文章主要为大家详细介绍了python编写一个GUI倒计时器，文中示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2022-08-08
Conda 是一个开源的包管理系统和环境管理系统,广泛应用于数据科学和机器学习领域,本文将详细介绍如何在 CentOS 系统上安装 Conda吧2025-03-03
本文基于channels + websocket结合Celery和Python爬虫技术打造了一个会算术懂诗文的聊天机器人，是非常难得的一个Django综合应用项目哦，感兴趣的朋友可以参考下2021-05-05
本篇文章将介绍在 Python 中将 hex 转换为 base64 的方法，本文结合实例代码给大家介绍的非常详细,需要的朋友可以参考下2023-06-06
这篇文章主要介绍了Python实现的将文件每一列写入列表功能,涉及Python文件读取、遍历、序列追加、赋值等相关操作技巧,需要的朋友可以参考下2018-03-03
开发应用程序时，若只有一个窗口则只需关心这个窗口里面的各控件之间如何传递数据。如果程序有多个窗口，就要关心不同的窗口之间是如何传递数据。本文介绍了PyQt5中三种窗口数据传递，需要的可以了解一下2022-12-12
最新评论