python基于BeautifulSoup实现抓取网页指定内容的方法

更新时间：2015年07月09日 10:12:50 作者：光索与诺

这篇文章主要介绍了python基于BeautifulSoup实现抓取网页指定内容的方法,涉及Python使用BeautifulSoup模块解析html网页的相关技巧,具有一定参考借鉴价值,需要的朋友可以参考下

本文实例讲述了python基于BeautifulSoup实现抓取网页指定内容的方法。分享给大家供大家参考。具体实现方法如下：

# _*_ coding:utf-8 _*_
#xiaohei.python.seo.call.me:)
#win+python2.7.x
import urllib2
from bs4 import BeautifulSoup
def jd(url):
  page = urllib2.urlopen(url)
  html_doc = page.read()
  soup = BeautifulSoup(html_doc.decode('gb2312','ignore'))
  for i in soup.find_all('div', id="sortlist"):
    one = i.find_all('a')
    two = i.find_all('li')
    print ("%s %s" % (one,two))
jd("http://channel.jd.com/computer.html")

希望本文所述对大家的Python程序设计有所帮助。

您可能感兴趣的文章:

教你用Python下载抖音无水印视频
这篇文章主要介绍了教你用Python下载抖音无水印视频,文中有非常详细的代码示例,对正在学习python的小伙伴们有很好地帮助,需要的朋友可以参考下
2021-05-05
Python探索之实现一个简单的HTTP服务器
这篇文章主要介绍了Python探索之实现一个简单的HTTP服务器，具有一定参考价值，需要的朋友可以了解下。
2017-10-10
基于virtualenv创建python虚拟环境过程图解
这篇文章主要介绍了基于virtualenv创建python虚拟环境过程图解,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
2020-03-03
python 反编译exe文件为py文件的实例代码
这篇文章主要介绍了python 反编译exe文件为py文件的实例代码，非常不错，具有一定的参考借鉴价值,需要的朋友可以参考下
2019-06-06
python3简单实现微信爬虫
我们可以通过python 来实现这样一个简单的爬虫功能，把我们想要的代码爬取到本地。下面就看看如何使用python来实现这样一个功能。
2015-04-04
Python socket处理client连接过程解析
这篇文章主要介绍了Python socket处理client连接过程解析,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
2020-03-03
Python查看多台服务器进程的脚本分享
这篇文章主要介绍了Python查看多台服务器进程的脚本分享,需要的朋友可以参考下
2014-06-06
Python 3.10 中 6 个兴奋的新特性
Python 是当今最流行的编程语言之一其流行的原因有很多种，Python 3.10 有几个新的很酷的功能，使得使用 Python 成为一种更好的体验。在本文中，我将与您分享 6 个让我最兴奋的新特性，感兴趣的朋友一起看看吧
2021-10-10
Python推导式简单示例【列表推导式、字典推导式与集合推导式】
这篇文章主要介绍了Python推导式,结合简单实例形式分析了Python列表推导式、字典推导式与集合推导式基本使用方法,需要的朋友可以参考下
2018-12-12
Python Pandas高级教程之时间处理
我们发现关于时间日期的简单计算很多功能都是datetime库提供的，那么pandas有没有提供跟日期时间有关的函数,通过下面文章来了解下,这篇文章主要给大家介绍了关于Python Pandas高级教程之时间处理的相关资料,需要的朋友可以参考下
2021-10-10