python爬虫获取百度首页内容教学
更新时间：2018年12月23日 09:19:37 作者：1002002100a
在本篇内容里小编给大家分享了关于python爬虫获取百度首页内容教学，需要的朋友们可以跟着学习下。
由传智播客教程整理，我们这里使用的是python2.7.x版本，就是2.7之后的版本，因为python3的改动略大，我们这里不用它。现在我们尝试一下url和网络爬虫配合的关系，爬浏览器首页信息。
1、首先我们创建一个urllib2_test01.py，然后输入以下代码：
2、最简单的获取一个url的信息代码居然只需要4行，执行写的python代码：
3、之后我们会看到一下的结果
4、实际上，如果我们在浏览器上打开网页主页的话，右键选择“查看源代码”，你会发现，跟我们刚打印出来的是一模一样的。也就是说，上面的4行代码就已经帮我们把百度的首页和全部代码爬了下来了 。
5、下面我们介绍一下这四行代码，第一行如下图，这个就是将urllib2组件进入进来，供给我们使用。
6、图片下面这步骤是调用urllib2库中的urlopen方法，该方法接受一个url地址，然后将请求后的得到的回应封装到一个叫respones对象当中。
7、最后这里，是调用response对象的read（）方法，将请求的回应内容以字符串的形式给html变量。最后的print html就是将字符串打出来，所以说一个基本的url请求是对应的python代码是很简单的。
总结：以上就是关于利用python爬虫获取百度信息的步骤内容，感谢大家的学习和对脚本之家的支持。
相关文章
Python学习笔记基本数据结构之序列类型list tuple range用法分析
这篇文章主要介绍了Python学习笔记基本数据结构之序列类型list tuple range用法,结合具体实例形式分析了Python序列类型list tuple range基本概念、定义与使用技巧,需要的朋友可以参考下2019-06-06
本篇文章主要介绍了用TensorFlow实现lasso回归和岭回归算法的示例，小编觉得挺不错的，现在分享给大家，也给大家做个参考。一起跟随小编过来看看吧2018-05-05
解决安装tensorflow遇到无法卸载numpy 1.8.0rc1的问题
今天小编就为大家分享一篇解决安装tensorflow遇到无法卸载numpy 1.8.0rc1的问题，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2018-06-06
这篇文章主要介绍了python 数据类型强制转换的使用总结，帮助大家更好的理解和使用python，感兴趣的朋友可以了解下2021-01-01
这篇文章主要介绍了Python学习笔记嵌套循环详解，文章围绕主题展开详细的内容介绍，具有一定的参考价值，需要的小伙伴可以参考一下2022-07-07
这篇文章主要介绍了Django框架HttpRequest对象用法,结合实例形式分析了Django框架HttpRequest对象发送请求数据的相关使用技巧,需要的朋友可以参考下2019-11-11
Python的logging模块提供了记录程序运行情况的日志功能,类似于Apache的log4j,很好很强大,这里我们就来看一下Python中内置的日志模块logging用法详解2016-07-07
这篇文章主要介绍了Python数据分析之 Matplotlib 折线图绘制，在数据分析中，数据可视化也非常重要，下文通过数据分析展开对折线图的绘制，需要的小伙伴可以参考一下2022-05-05
详解Pandas中stack()和unstack()的使用技巧
当你在处理包含某种序列（例如时间序列数据）的变量的数据集时，数据通常需要进行重塑。Pandas 提供了各种用于重塑 DataFrame 的内置方法。其中，stack() 和 unstack() 是最流行的，本文总结了这两个方法的7种使用技巧，需要的可以参考一下2022-03-03
这篇文章主要介绍了Python 下载手机小视频,主要为大家介绍使用 mitmproxy 这个抓包工具如何监控手机上网，并且通过抓包，把我们想要的数据下载下来，需要的朋友可以参考下2022-04-04
最新评论