Apache使用.htaccess 屏蔽恶意 User Agent(防蜘蛛)
一、登记在册的恶意 User Agent
1、”Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1; EmbeddedWB 14.52 from: http://www.bsalsa.com/ EmbeddedWB 14.52; .NET CLR 2.0.50727)”
下面是网站日志中的两条记录，这个 User Agent 会重复访问注册页面，并获取验证码，这是垃圾留言和恶意注册的开始。
116.242.22.10 199.27.128.204 – – [30/Oct/2011:04:02:15 +0800] “GET /checkcode.php HTTP/1.1” 302 286 “http://www.***.com/register.php” “Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1; EmbeddedWB 14.52 from: http://www.bsalsa.com/ EmbeddedWB 14.52; .NET CLR 2.0.50727)”
116.242.22.10 199.27.128.204 – – [30/Oct/2011:04:02:19 +0800] “POST /register.php HTTP/1.1” 302 286 “http://www.***.com/register.php” “Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1; EmbeddedWB 14.52 from: http://www.bsalsa.com/ EmbeddedWB 14.52; .NET CLR 2.0.50727)”
2、”Mozilla/5.0 QunarBot/1.0″
这是一个无视 robots.txt 的蜘蛛，怀疑与“去哪儿”有关。
3、”Mozilla/4.0 (compatible; MSIE 5.00; Windows 98)”
61.147.91.201 173.245.48.60 – – [30/Oct/2011:06:00:28 +0800] “GET /mp3/%A5%D6%A5%EB%A9%60%A5%D0%A9%60%A5%C9.mp3 HTTP/1.1” 302 286 “-” “Mozilla/4.0 (compatible; MSIE 5.00; Windows 98)”
看到没？Windows 98！总是抓取网站目录下的mp3文件，都是原来上传过mp3文件到网站的错。
4、”Mozilla/4.0″
58.255.120.95 199.27.128.216 – – [30/Oct/2011:06:01:26 +0800] “GET /ikmedata/cache/fuck.php HTTP/1.1” 404 1479 “-” “Mozilla/4.0”
58.255.120.95 199.27.128.216 – – [30/Oct/2011:06:01:27 +0800] “GET /data/cache/fuck.php HTTP/1.1” 404 1479 “-” “Mozilla/4.0”
58.255.120.95 199.27.128.216 – – [30/Oct/2011:06:01:27 +0800] “GET /data/cache/fuck.php HTTP/1.1” 404 1479 “-” “Mozilla/4.0”
又一个坑爹的，无尽无穷的扫描，非常恶心。
二、屏蔽恶意 User Agent
使用 .htaccess 屏蔽 User Agent 的方法很多，这里使用 rewrite 规则把这些 User Agent 转移走，以达到屏蔽的效果。
RewriteCond %{HTTP_USER_AGENT} “.*EmbeddedWB.*” [OR]
RewriteCond %{HTTP_USER_AGENT} “.*QunarBot.*” [OR]
RewriteCond %{HTTP_USER_AGENT} “.*Windows 98.*” [OR]
RewriteCond %{HTTP_USER_AGENT} “^Mozilla/4.0$”
RewriteRule ^(.*)$ http://cao.ni.ma/
使用 .htaccess 需要了解一些正则表达式语法，以正确匹配字符串。
如果你觉得有用，屏蔽恶意 User Agent�0�2前，不妨先分析一下自己的网站日志，根据自己的需要定制。可以使用 Firefox+User Agent Switcher 测试效果，Chrome 也有类似的切换 User�0�2Agent 的扩展程序。
- 使用.htaccess设置图片防盗链的详细方法
- Apache使用 .htaccess 来实现强制https访问的方法
- 让Apache 2支持.htaccess并实现目录加密的方法
- APACHE支持.htaccess伪静重写出错 No input file specified的解决方案
- PHP中的.htaccess伪静态文件
- 禁止网站显示文件目录列表的2个方法(htaccess)
- .htaccess rewrite 规则详细说明
- Apache服务器中.htaccess文件的实用配置示例集锦
- 使Nginx服务器支持.htaccess的方法
- Apache服务器中.htaccess的基本配置总结
- Apache服务器中使用.htaccess实现伪静态URL的方法
- Ubuntu下开启Apache对.htaccess 的支持
- Apache2.4.x版wampserver本地php服务器如何让外网访问及启用.htaccess
- nginx支持.htaccess文件实现伪静态的方法分享
- apache使用.htaccess文件实现屏蔽wget下载网站内容
- 21个常用的apache .htaccess文件配置技巧分享
- 教你如何在CI框架中使用 .htaccess 隐藏url中index.php
- 利用.Htaccess阻止IP恶意攻击网站,禁止指定域名访问,禁止机器爬虫,禁止盗链
相关文章
这篇文章主要介绍了详述Linux中Firewalld高级配置的使用，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2019-10-10
在Linux中列出Systemd下所有正在运行的服务的方法指南
Systemd是Linux的系统和服务管理器； init进程的替代品，与SysV 和LSB init脚本兼容，systemctl命令是管理systemd的主要工具，在这篇文章中，我们将演示如何 Linux中列出systemd下所有正在运行的服务，感兴趣的同学可以借鉴阅读2023-06-06
服务器选择什么版本的linux，这个问题是个老生常谈的问题，每个月都有人讨论，根据我运维过1000台 server的经验，回答如下2014-03-03
Linux中openssl/opensslv.h找不到问题的解决方法
最近在安装scrapy过程中碰到了openssl某个文件找不到的问题，通过查找相关的资料进行了解决，下面这篇文章主要给大家分享了关于Linux中openssl/opensslv.h找不到问题的解决方法，需要的朋友可以参考借鉴，下面来一起看看吧。2017-07-07
这篇文章主要介绍了centos7 esxi6.7模板实际应用详解，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2020-01-01
apache documentroot指向htcdoc之外提示403错误的解决方法
在windows和RH都碰到过，只要把主目录指到其他地方后就出现权限不够的403提示，郁闷了好久。2010-04-04
Linux下还有一个与more命令非常类似的命令--less命令，相比于more命令，less命令更加灵活强大一些，今天就给大家介绍下Linux下的less命令。2016-10-10
这篇文章主要给大家介绍了关于如何在Linux系统下快速配置HugePages的完整步骤，文中通过图文介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2018-11-11
关于CentOs系统自带python和yum卸载后的解决办法
前几天因项目需要，在服务器上搭建python-mysql模块，结果没安装好，于是乎想卸载重装，遂在网上查询卸载python的方法，结果一不小心直接把系统的python删了个干净，怎么处理呢，看看小编给大家带来的本篇教程吧2018-11-11
大家好，本篇文章主要讲的是shell脚本设置防止暴力破解ssh，感兴趣的同学赶快来看一看吧，对你有帮助的话记得收藏一下，方便下次浏览2022-01-01
最新评论