Apache 禁止指定user_agent（防止爬蟲扒取）

發(fā)布時間：2020-07-15 03:56:45 來源：網(wǎng)絡(luò) 閱讀：913 作者：lin790292154 欄目：網(wǎng)絡(luò)安全

該功能可以禁止部分我們不需要的訪問名單（），通過改寫rewrite模塊來實現(xiàn)。

tail /tmp/

tail /usr/local/apache2/logs/test.com-access_20150121_log

在rewrite模塊中添加如下信息:

RewriteCond %{HTTP_USER_AGENT} ^.*curl.* [NC,OR]

RewriteCond %{HTTP_USER_AGENT} ^.*chrome* [NC]

RewriteRule .* - [F]

保存退出

測試

apachectl -t

apachectl restart

curl -x127.0.0.1:80 www.test.com/data/forum.php（默認403錯誤）

curl -x192.168.11.160:80 www.test.com/data/forum.php（默認403錯誤）

vi /usr/local/apache2/conf/extra/httpd-vhosts.conf（注釋掉）

# RewriteCond %{HTTP_USER_AGENT} ^.*curl.* [NC,OR]

apachectl -t

apachectl restart

curl -x192.168.11.160:80 www.test.com/adsjkf（404）

curl -x192.168.11.160:80 www.test.com/forum.php -I（200）

瀏覽器 www.test.com

curl -A "sdfsadsdfa" -x192.168.11.160:80 www.test.com/forum.php -I

curl -A "sdfsadchrome sdfa" -x192.168.11.160:80 www.test.com/forum.php -I

向AI問一下細節(jié)

猜你喜歡