python基于BeautifulSoup实现抓取网页指定内容的方法
更新时间：2015年07月09日 10:12:50 作者：光索与诺
这篇文章主要介绍了python基于BeautifulSoup实现抓取网页指定内容的方法,涉及Python使用BeautifulSoup模块解析html网页的相关技巧,具有一定参考借鉴价值,需要的朋友可以参考下
本文实例讲述了python基于BeautifulSoup实现抓取网页指定内容的方法。分享给大家供大家参考。具体实现方法如下：
# _*_ coding:utf-8 _*_
#xiaohei.python.seo.call.me:)
#win+python2.7.x
import urllib2
from bs4 import BeautifulSoup
def jd(url):
page = urllib2.urlopen(url)
html_doc = page.read()
soup = BeautifulSoup(html_doc.decode('gb2312','ignore'))
for i in soup.find_all('div', id="sortlist"):
one = i.find_all('a')
two = i.find_all('li')
print ("%s %s" % (one,two))
jd("http://channel.jd.com/computer.html")
希望本文所述对大家的Python程序设计有所帮助。
相关文章
模板匹配是指在当前图像A内寻找与图像B最相似的部分，本文详细的介绍了OpenCV-Python模板匹配人眼的实例，感兴趣的可以了解一下2021-06-06
python email smtplib模块发送邮件代码实例
本篇文章给大家分享了python email smtplib模块发送邮件的相关代码分享，有需要的朋友参考学习下。2018-04-04
这篇文章主要介绍了python如何实现读取并显示图片，文中示例代码非常详细，帮助大家更好的理解和学习，感兴趣的朋友可以了解下2020-07-07
这篇文章主要介绍了python学习必备知识汇总的相关资料,需要的朋友可以参考下2017-09-09
今天小编就为大家分享一篇python logging添加filter教程，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2019-12-12
直方图均衡化是以累计分布函数为核心，将原始图像灰度直方图从比较集中的某个灰度区间，非线性地映射为在全部灰度范围内的较均匀分布，从而增强对比度。本文将为大家详细讲解直方图均衡化的原理，需要的可以参考一下2022-03-03
Python进阶学习之pandas中read_csv()用法详解
python中数据处理是比较方便的,经常用的就是读写文件,提取数据等,本文主要介绍其中的一些用法,这篇文章主要给大家介绍了关于Python进阶学习之pandas中read_csv()用法的相关资料,需要的朋友可以参考下2024-03-03
react中useLayoutEffect 和useEffect区别
本文主要介绍了react中useLayoutEffect 和useEffect区别，文中通过示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2021-12-12
这篇文章主要介绍了Django组件cookie与session的具体使用，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2019-06-06
在本篇文章里小编给大家整理是一篇关于python对网页文本的格式化实例方法，有兴趣的朋友们可以跟着学习参考下。2021-10-10
最新评论