pbn屏蔽ahrefs等蜘蛛,用robots.txt不是辦法,好的辦法是在.htaccess上屏蔽。.htaccess上是這樣的1 p ]3 F" } |0 N
/ [; R/ g. l8 a- N7 h! C[mw_shl_code=applescript,true]SetEnvIfNoCase User-Agent .*rogerbot.* bad_bot
' S5 {$ q% k9 n4 h& [+ PSetEnvIfNoCase User-Agent .*exabot.* bad_bot
& `9 k: l7 P9 Z; \2 n4 f+ mSetEnvIfNoCase User-Agent .*mj12bot.* bad_bot
2 B# }' l2 P' o7 r: S. QSetEnvIfNoCase User-Agent .*dotbot.* bad_bot
% H) k% [3 v0 W. y% w! j8 ?( n4 qSetEnvIfNoCase User-Agent .*gigabot.* bad_bot& i0 d! U9 Z2 m% G9 Z( t
SetEnvIfNoCase User-Agent .*ahrefsbot.* bad_bot& T( A7 I U: ]& b: P4 R% p
SetEnvIfNoCase User-Agent .*sitebot.* bad_bot
0 G7 C: w! F6 z: g% h<Limit GET POST HEAD>
. R, r7 f" S; q) c) W3 h7 |/ d7 i" JOrder Allow,Deny
0 \) C" }% e, m( [) o0 [Allow from all3 ^- e2 \3 C9 K( c6 c9 V
Deny from env=bad_bot, v3 X4 W$ D: a
</Limit>[/mw_shl_code]1 u& b4 g$ y. ^& I- \4 K
) y5 n/ d' G# {% Z5 w0 m但問題來了,vps都是nginx的,小白不知道怎麼改。那位高人幫改下,謝謝!
4 b2 Q5 } ]5 ]) Y, o8 V j) o3 \4 S. B3 H7 P) \2 g
|