Python urlopen 使用小示例

更新时间：2008年09月06日 14:31:49 作者：

打开一个网页获取所有的内容、获取Http头、使用代理等小结

一、打开一个网页获取所有的内容

from urllib import urlopen
doc = urlopen("http://www.baidu.com").read()
print doc

二、获取Http头

from urllib import urlopen
doc = urlopen("http://www.baidu.com")
print doc.info()
print doc.info().getheader('Content-Type')

三、使用代理

1. 查看环境变量

print ""n".join(["%s=%s" % (k, v) for k, v in os.environ.items()])
print os.getenv("http_proxy")

2. 设置环境变量

import os
os.putenv("http_proxy", "http://proxyaddr:<port>")

3. 使用代理

# Use http://www.someproxy.com:3128 for http proxying
proxies = {'http': 'http://www.someproxy.com:3128'}
filehandle = urllib.urlopen(some_url, proxies=proxies)
# Don't use any proxies
filehandle = urllib.urlopen(some_url, proxies={})
# Use proxies from environment - both versions are equivalent
filehandle = urllib.urlopen(some_url, proxies=None)
filehandle = urllib.urlopen(some_url)

您可能感兴趣的文章:

利用keras加载训练好的.H5文件,并实现预测图片
今天小编就为大家分享一篇利用keras加载训练好的.H5文件,并实现预测图片，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
2020-01-01
使用Python向DataFrame中指定位置添加一列或多列的方法
今天小编就为大家分享一篇使用Python向DataFrame中指定位置添加一列或多列的方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
2019-01-01
python调用百度API实现人脸识别
这篇文章主要介绍了python调用百度API实现人脸识别，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
2020-11-11
解决windows上安装tensorflow时报错,“DLL load failed: 找不到指定的模块”的问题
这篇文章主要介绍了解决windows上安装tensorflow时报错,“DLL load failed: 找不到指定的模块”的问题,本文给大家介绍的非常详细，对大家的学习或工作具有一定的参考借鉴价值，需要的朋友可以参考下
2020-05-05
python使用tkinter实现自定义多参数对话框
Tkinter模块是Python标准库中的一部分,用于创建图形用户界面（GUI）应用程序,它提供了一组工具和组件,用于创建窗口、按钮、文本框等用户界面元素,并且可以响应用户的输入,本文将给大家讲讲python如何使用tkinter实现自定义多参数对话框
2023-08-08
linux系统下pip升级报错的解决方法
这篇文章主要给大家介绍了关于linux系统下pip升级报错的解决方法，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
2021-01-01
使用TensorFlow创建生成式对抗网络GAN案例
这篇文章主要为大家介绍了使用TensorFlow创建生成式对抗网络GAN案例，有需要的朋友可以借鉴参考下，希望能够有所帮助，祝大家多多进步，早日升职加薪
2023-03-03
在Python 的线程中运行协程的方法
这篇文章主要介绍了在Python 的线程中运行协程的方法,本文通过实例代码给大家介绍的非常详细，具有一定的参考借鉴价值，需要的朋友可以参考下
2020-02-02
从请求到响应过程中django都做了哪些处理
这篇文章主要给大家介绍了关于从请求到响应过程中django都做了哪些处理的相关资料，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
2018-08-08
Python函数的返回值、匿名函数lambda、filter函数、map函数、reduce函数用法实例分析
这篇文章主要介绍了Python函数的返回值、匿名函数lambda、filter函数、map函数、reduce函数用法,结合实例形式分析了Python函数的返回值、匿名函数lambda、filter函数、map函数、reduce函数相关功能、原理与使用技巧,需要的朋友可以参考下
2019-12-12