pbn屏蔽ahrefs等蜘蛛,用robots.txt不是辦法,好的辦法是在.htaccess上屏蔽。.htaccess上是這樣的6 g) L1 c3 p. s1 C7 P
* a/ G8 z/ l: N/ |# V/ t4 T2 S[mw_shl_code=applescript,true]SetEnvIfNoCase User-Agent .*rogerbot.* bad_bot
5 E) T% j% h/ H2 _3 HSetEnvIfNoCase User-Agent .*exabot.* bad_bot- W$ o( X) C& A3 \
SetEnvIfNoCase User-Agent .*mj12bot.* bad_bot
! q; U0 B, Y9 s2 Q# }SetEnvIfNoCase User-Agent .*dotbot.* bad_bot
" P: a/ i: ]+ g; y$ HSetEnvIfNoCase User-Agent .*gigabot.* bad_bot- I$ [0 ]1 [' E1 ^( p2 w
SetEnvIfNoCase User-Agent .*ahrefsbot.* bad_bot2 @" P) i& m# H- [
SetEnvIfNoCase User-Agent .*sitebot.* bad_bot
9 u- n3 m/ j, U, H0 Y6 p4 Z<Limit GET POST HEAD>6 N; j) T! [3 r: t" C6 B7 r0 c$ Y
Order Allow,Deny: ?% M: ~+ Q) i9 |$ Z* r5 u
Allow from all- ]; |* o* M+ c" I( b7 Z
Deny from env=bad_bot0 [: \5 b' I8 u% O$ |
</Limit>[/mw_shl_code]
6 x* e* X8 X; `( k5 c9 S$ a8 i( ?4 |+ U. k M( J/ [$ I# s
但問題來了,vps都是nginx的,小白不知道怎麼改。那位高人幫改下,謝謝!
+ R' ?9 K& c+ S
# }% x( B) y! T |