pbn屏蔽ahrefs等蜘蛛,用robots.txt不是辦法,好的辦法是在.htaccess上屏蔽。.htaccess上是這樣的
0 R# a% q+ P: r. V- G/ s
" G/ r; h7 a U# Z[mw_shl_code=applescript,true]SetEnvIfNoCase User-Agent .*rogerbot.* bad_bot
" G" b* ~" E) b* } C" D+ H3 N& X& ^ KSetEnvIfNoCase User-Agent .*exabot.* bad_bot
8 O: P8 g: `0 i! d8 C2 e* lSetEnvIfNoCase User-Agent .*mj12bot.* bad_bot8 a' Y+ h3 C, S$ K6 k
SetEnvIfNoCase User-Agent .*dotbot.* bad_bot
; v& W2 t2 {# f7 v3 b! JSetEnvIfNoCase User-Agent .*gigabot.* bad_bot2 A% Z( x$ n- W! d- `- Z
SetEnvIfNoCase User-Agent .*ahrefsbot.* bad_bot8 x& S* ~' B9 b' d
SetEnvIfNoCase User-Agent .*sitebot.* bad_bot
% }: s4 e Z9 Z0 c8 Z<Limit GET POST HEAD>
" }( E8 k. S1 K) d+ f# D: _Order Allow,Deny p9 d4 B' L& R `. h7 T3 R3 k$ Z
Allow from all- W4 M: e1 D2 x
Deny from env=bad_bot
* \6 f% T) m- y* }9 K4 r</Limit>[/mw_shl_code]
& h( J |# C" j$ W
0 [3 D y$ _: v4 t# D' r2 Z但問題來了,vps都是nginx的,小白不知道怎麼改。那位高人幫改下,謝謝!
% y& a& s7 o3 `( m' P5 [5 g, E W p J
|