apache使用.htaccess文件实现屏蔽wget下载网站内容

softyun3年前云服务器103

经发现,虽然wget遵循 robots.txt 规则,但是那个还是可以绕过去,现在把我自己使用的屏蔽方法分享给大家:

1. 屏蔽下载任何文件

.htaccess

?

1
2
3
4
5
6
SetEnvIfNoCase User-Agent "^wget" bad_bot
<Limit GET POST>
  Order Allow,Deny
  Allow from all
  Deny from env=bad_bot
</Limit>






2. 屏蔽下载部分文件

.htaccess

?

1
2
3
4
5
6
7
8
SetEnvIfNoCase User-Agent "^Wget" bad_bot
SetEnvIfNoCase User-Agent "^Wget/1.5.3" bad_bot
SetEnvIfNoCase User-Agent "^Wget/1.6" bad_bot
<Files ~ "\.(html|pdf|mp3|zip|rar|exe|gif|jpe?g|png|php|jsp) $">
Order Allow,Deny
Allow from all
Deny from env=bad_bot
</files>







免责声明:本文内容来自用户上传并发布,站点仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。请核实广告和内容真实性,谨慎使用。

相关文章

国内cdn加速类型有哪些

国内cdn加速类型有:1、站点元素加速,指页面上所包含的JPG、 Gif、CSS等静态内容元素,通过就近CDN的节点进行下载;2、全站加速,通过智能解析系统将内容进行优化分配到各CDN网络节点,并进行...

ChatGPT服务器搭建的方法是什么

ChatGPT是一个基于GPT的聊天机器人,其服务器搭建方法如下:1、环境准备安装Python环境和相关依赖库,如TensorFlow、Flask、gunicorn等。2、下载代码从GitHub上下载...

高防服务器和硬防服务器之间的区别有哪些

高防服务器中的高防和硬防的区别:1.高防服务器则是指服务器本身具备了防御能力,专为单个客户提供防御能力,主要工作是负责流量清洗及确保正常运营。2.硬防服务器指提供硬件防御的服务器,它的安全性能跟稳定性...

如何租用海外服务器?应该关注哪些?

随着国内用户对服务器的要求不断增加,而且国内服务器已经是满足不了站长们的需求。海外服务器也陆续进入国内市场,受到国内站长的喜爱,但是目前来看,海外服务器市场鱼龙混杂,所以对于企业来说,租赁哪家海外服务...

海外cdn服务器使用有哪些优势

海外cdn服务器使用的优势:1、提高速度海外cdn服务器加速支持网站动态、静态内容缓存全国各节点分发,解决因分布、带宽、服务器性能带来的访问延迟问题,适用于站点加速、点播、直播等场景。使用户可就近取得...

美国高防服务器如何选择

美国高防服务器选择的方法:1、了解美国高防服务器的配置,根据网站所需要的功能,选择合适的美国高防服务器;2、注意美国高防服务器的价格,选择性价比高的美国高防服务器;3、选择有良好售后服务的供应商,以保...