PBN的自我保護（1）

為了我們的月亮女神，我決定定期分享一些pbn的技巧和思路

今天說一下，如何讓pbn不被競爭對手察覺
& e  N) z8 {# E1 v8 d' d
8 J: N# d5 f' Z1 `# [2 `" C1 B1 v原理：
不被各種分析工具的蜘蛛給抓到
4 C: A) `+ O) ]1 ]
+ `0 E0 n' t  ?+ i7 Y0 S方式：
有很多種，，我只說一下robot的寫法

我們先認識一下幾個通用的robot

8 X& ^% ~1 ]% I6 p0 N( ^

rogerbot (SEOmoz)
. r$ M  A* Q& U% V3 Wexabot (3ds.com)
: X4 d8 |1 D& \MJ12bot (majesticseo.com)
dotbot (dotnetdotcom.org)
gigabot (gigablast.com)
5 ]) B7 _$ B! K+ _' S% l# aAhrefsBot (ahrefs.com)

我們robot可以這麼寫：
: ]( i% ^) D0 w: z0 X

User-agent: rogerbot
Disallow: /
( g6 F+ B( l6 y
& X; Y( a& U9 I4 o  q8 mUser-agent: exabot
Disallow: /

User-agent: MJ12bot
Disallow: /
& O$ `( D4 _  ^) {- Y0 v. }
User-agent: dotbot
4 @: a3 m, t8 kDisallow: /

% e2 X( a( W; {4 m" OUser-agent: gigabot
& d7 B3 \& g0 A- [, yDisallow: /

3 k* t( w" l8 _# W: f, }  P  T3 rUser-agent: AhrefsBot
Disallow: /

當然，如果想隱藏的非常好，這些還是不夠的，還需要屏蔽大概幾百個蜘蛛。

5 z7 d# x) q, D3 t) U0 O1 R# W( }

只要你不屏蔽googlebot，總會露出點蛛絲馬跡的

支持小黑同學出PBN專輯。。可以好好學習下了。

這個基本上是沒有用的，而且如果每個站都加上這樣的robots本身就是明顯的足跡

還不如不加。。特意屏蔽掉這幾個。。別人一看就知道。

謝謝樓主的分享，等待後續
( F) k8 f* H/ a* ~) H1 u

謝謝樓主分享經驗      
: x2 @. f% S% J* A/ u+ A" f* k

隱性判斷，不使用robots.

禁用那麼多，還要去慢慢找，直接寫 僅支持 google等幾個常用的蜘蛛不就可以了？？
% p9 a4 O6 l5 H! M* |7 W
7 I% ]0 r, H' Q2 T' o5 s$ K

misca 發表於 2014-4-26 21:23
1 O& p3 W) }! ~, B5 ^禁用那麼多，還要去慢慢找，直接寫 僅支持 google等幾個常用的蜘蛛不就可以了？？
. T$ g1 [' `8 W6 u
...

可以的。。。只支持 google、bing等幾個。

User-Agent: Googlebot
8 p/ _5 \- c" c! X7 `% K6 WAllow: /
. h, g: X" C/ {: pUser-Agent: *
7 z4 E: q" b: y5 G) IDisallow: /

4 w: Y( Y0 W5 i" ^3 g5 d# B- U
% {* ]2 s1 ^( ~" a3 j