Python检测网站链接是否已存在
Python是一种解释型、面向对象、动态数据类型的高级程序设计语言。
Python由Guido van Rossum于1989年底发明，第一个公开发行版发行于1991年。
像Perl语言一样, Python 源代码同样遵循 GPL(GNU General Public License)协议。
早就听说Python语言操作简单，果然名不虚传，短短几句，就实现了基本的功能。
要检测目标网站上是否存在指定的URL，其实过程很简单：
1、获得指定网站网页的HTML代码
2、在HTML代码中查找指定的URL
3、如果存在，OK；否则，Error
整个程序引用了两个lib库，urllib2和sgmllib。
urllib2库主要定义了一些访问URL（基本通过HTTP）的函数与类。
sgmllib库主要负责解析HTML代码。
import urllib
from sgmllib import SGMLParser
class URLLister(SGMLParser):
def reset(self):
SGMLParser.reset(self)
self.urls = []
def start_a(self,attrs):
href=[v for k,v in attrs if k=='href']
if href:
if (href[].count('http://网站URL')==):
self.urls.extend(href)
links = ['http://www.google.com/',
'http://www.baidu.com',
'http://www.sohu.net',
'http://www..com',
'http://www.cnblogs.com',
'http://www.qq.com',
'http://www.yahoo.com/',
'http://www.bing.com/',
'http://www..com',]
for eachlink in links:
f = urllib.urlopen(eachlink)
if f.code ==:
parser = URLLister()
parser.feed(f.read())
f.close()
if (len(parser.urls)>=):
print 'The link from '+eachlink+' is OK!'
else:
print 'The link from '+eachlink+' is ERROR!'
这其中几个主要函数：
1、urllib2.urlopen(url[, data][, timeout])//打开一个URL
2、SGMLParser.feed(data) //获得需要解析的HTML数据
3、SGMLParser.start_tag(attributes) //指定需要解析的HTML标签，在本程序中，我们调用了start_a,说明我们需要解析HTML代码中<a>标签。通过查找<a>标签中href属性的value，可以获得该网页上所有链接的信息，只要我们指定的URL存在，就OK了。
这其实是一个很小的脚本，但也让我激动不已。一来，我已经跨进了Python的世界，并用它解决了实际工作中的问题，二来，它的简单语法、缩进格式着实让我眼前一亮。今后，希望能够多多使用Python,解决实际工作中的种种问题，做到学以致用.
以上内容是针对Python检测网站链接是否已存在的相关介绍，希望对大家有所帮助！
相关文章
这篇文章主要介绍了Python数据可视化如何使用Pyecharts库来实现桑葚图效果图，文中给出实现的示例代码，有需要的朋友可以借鉴参考想，希望能够有所帮助2021-09-09
Python是数据处理常用工具，可以处理数量级从几K至几T不等的数据，具有较高的开发效率和可维护性，还具有较强的通用性和跨平台性，这里就为大家分享几个不错的数据分析工具,需要的朋友可以参考下2018-04-04
今天小编就为大家分享一篇使用python3 实现插入数据到mysql，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2020-03-03
这篇文章主要介绍了基于Pycharm加载多个项目过程图解,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下2020-01-01
计算机二级python学习教程（2） python语言基本语法元素
这篇文章主要为大家详细介绍了计算机二级python学习教程的第2篇，Python语言基本语法元素，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2019-05-05
这篇文章主要介绍了使用Python实现一个SSH隧道界面功能，界面使用tkinter实现，左边是输入隧道的信息，右边为历史列表,本文通过示例代码给大家介绍的非常详细，对大家的学习或工作具有一定的参考借鉴价值，需要的朋友参考下吧2022-02-02
在本片文章里小编给大家分享了关于用Python中的turtle模块画图两只小羊的实例操作方法，需要的朋友们学习下。2019-04-04
Python是一种高级程序语言，其核心设计哲学是代码可读性和语法，能够让程序员用很少的代码来表达自己的想法。这篇文章主要介绍了不知道这5种下划线的含义，你就不算真的会Python!对此标题感兴趣的朋友一起阅读本文吧2018-10-10
Python dateutil库简化日期时间处理利器使用场景实践
在Python中,处理日期和时间是常见的任务之一,dateutil库是Python标准库中datetime模块的扩展,提供了许多方便的工具和函数,简化了日期和时间的操作2023-12-12
这篇文章主要为大家介绍了如何使用OpenCV和像素处理图像灰度化的方法示例详解，有需要的朋友可以借鉴参考下，希望能够有所帮助，祝大家多多进步，早日升职加薪2023-04-04
最新评论