pbn屏蔽ahrefs等蜘蛛,用robots.txt不是辦法,好的辦法是在.htaccess上屏蔽。.htaccess上是這樣的- J% C! |6 ^9 y- c+ z( ^+ X
; w- O+ }: `1 I0 i* D$ g[mw_shl_code=applescript,true]SetEnvIfNoCase User-Agent .*rogerbot.* bad_bot' z# G! y# x- M. E* y
SetEnvIfNoCase User-Agent .*exabot.* bad_bot
B; E( G& L) s9 `SetEnvIfNoCase User-Agent .*mj12bot.* bad_bot
7 ?" F. D6 \5 B) gSetEnvIfNoCase User-Agent .*dotbot.* bad_bot; O B5 u/ ?9 ]4 W& h( T
SetEnvIfNoCase User-Agent .*gigabot.* bad_bot
1 D; k0 t5 P2 e5 xSetEnvIfNoCase User-Agent .*ahrefsbot.* bad_bot2 o" x8 k3 V/ b) b( D
SetEnvIfNoCase User-Agent .*sitebot.* bad_bot$ D- G0 L8 G. H6 r7 k: A3 i+ r
<Limit GET POST HEAD>
7 N6 S- H& h, z/ ?Order Allow,Deny
) ~/ @% s, @. ^2 j1 k' ]# LAllow from all3 H$ Z' g6 A+ |5 d; B) j/ F
Deny from env=bad_bot
. n0 F! `! i* f/ ~</Limit>[/mw_shl_code]3 s0 m7 G: H3 p* p& v. K5 d' q5 ?
+ o4 `+ b) ^" C4 E$ g
但問題來了,vps都是nginx的,小白不知道怎麼改。那位高人幫改下,謝謝!
) k" G4 ]/ E; g( [6 J! S' o6 c# F% V8 ]' |
|