Htaccess - как заблокировать Scrapy

Материал из Wiki - Iphoster - the best ever hosting and support. 2005 - 2025
Перейти к:навигация, поиск

Htaccess - как заблокировать Scrapy

Добавить в .htaccess: 

RewriteEngine On
# Забанить Scrapy по User-Agent
RewriteCond %{HTTP_USER_AGENT} Scrapy [NC]
RewriteRule .* - [F,L]
Источник — https://wiki.iphoster.net/index.php?title=Htaccess_-_как_заблокировать_Scrapy&oldid=15748
Powered by MediaWiki