过期域名预定抢注

 找回密碼
 免费注册

stacounter, 這個是什麼狀況呢?

  [複製鏈接]
發表於 2014-2-20 17:09:49 | 顯示全部樓層
amnoob 發表於 2014-2-19 23:35 9 l: x8 x3 [! l  E4 f. h. ^
看了好幾遍才看懂了老兄的意思哇
% s. Z) y0 N1 J' \" t/ ]
6 p8 j5 \5 G4 T" G% H我查了一下statcounter的記錄,發現蜘蛛每天都要來呆上半小時 ...
2 b5 G! u  g% V3 A  G
其實我更傾向於這些ip段不是google bot, 這些ip段 66.249.8x.xxx, hostname是 google-proxy-66-249-8x-xxx.google.com, 而google bot 應該是 crawl-66-249-xx-xxx.googlebot.com這樣的, 像是人工查站一樣,反正它們來了我的採集站必K光, 直接清0。有興趣的歡迎討論一下。
( M3 h9 i8 x( |% @( h0 p+ k/ R6 @* V2 a0 h- A
有個有趣的現象是,我針對這些ip設置了一下,這些ip來的時候就顯示404,結果這些站都只是降權了,沒有清0,每天還有少量訪問; 而沒有設置的,都清0了。1 m, a( Q) r" n6 }6 g4 [
/ Z* G  e' R( P% G0 _5 @
搞採集很累的,樓主不搞是明智之舉。' a  a( e' ?6 E7 o$ C  A
6 h- {/ F& E8 y2 C
PS: 今天掛了一個amazon jp的號, 是amazon.com的來查崗了,我還以為會是日本那邊負責查的呢,損失20多W日元,不多也不少,採集的說掛就掛  L8 ~/ j3 O9 q
; c6 B0 `) ]' ?( Q5 @) |

% {6 A  {! y, W# R* d$ d# T1 q4 Q! a各位遠離採集遠離採集遠離採集。。。( _. l8 d2 W& f* _. H& u  _- m
' ^* X' N" E  n* h% A
回復 给力 爆菊

使用道具 舉報

發表於 2014-2-20 18:21:33 | 顯示全部樓層
amnoob 發表於 2014-2-19 23:35 & Y: B6 A6 {* D
看了好幾遍才看懂了老兄的意思哇
) r$ y; _/ y" l* t* M2 B* N. O4 W& M4 D( n3 @
我查了一下statcounter的記錄,發現蜘蛛每天都要來呆上半小時 ...
) u4 H; v, N: d# m! h2 S4 b$ G
你這也算是採集吧?你如何查詢到允許分享的站呢?8 q7 s3 M) E' ~6 C/ `1 Z+ S
9 k& I8 Q+ n6 @4 V4 `( S
回復 给力 爆菊

使用道具 舉報

發表於 2014-3-6 17:07:15 | 顯示全部樓層
chenyox 發表於 2014-2-20 17:09
$ l9 O( Y8 r: e' v) a9 R1 C其實我更傾向於這些ip段不是google bot, 這些ip段 66.249.8x.xxx, hostname是 google-proxy-66-249-8x-x ...
" n' h$ _5 o" ~7 \
你那500+採集站都降權和清零了麼?有沒一些長時間正常存在的?
1 Z+ T$ ]* Z3 x, C$ c: K$ z) U. X) z# t7 z2 ?6 A0 |* D% j
回復 给力 爆菊

使用道具 舉報

發表於 2014-3-6 17:53:34 | 顯示全部樓層
學習了,原來是這樣。。。
4 D+ w% z0 {* z2 o: s4 w
回復 给力 爆菊

使用道具 舉報

發表於 2014-3-6 22:48:22 | 顯示全部樓層
forwhatah 發表於 2014-3-6 17:07
8 D' O, ?* D# J+ B% g你那500+採集站都降權和清零了麼?有沒一些長時間正常存在的?
, t, O% N2 Y* P  ^7 {' ?/ s
沒有。。。基本很快就掛了,這段時間更狠了,有些還沒流量就K光了,可能我功力還不夠吧6 i0 s) X) F0 g  x

1 S% w% V, l, G/ H

評分

參與人數 1點點 +2 收起 理由
forwhatah + 2

查看全部評分

回復 给力 爆菊

使用道具 舉報

發表於 2014-3-7 02:43:21 | 顯示全部樓層
chenyox 發表於 2014-3-6 22:48
/ J' @; V0 r  d+ ~  B5 K沒有。。。基本很快就掛了,這段時間更狠了,有些還沒流量就K光了,可能我功力還不夠吧
9 l2 p) ?9 y5 u& I) n2 s( }
9 \# i0 p; h0 x+ R6 V4 S ...

# r, T5 W1 ~% w- L; F$ f3 o  f採集也不容易,無論是採集過程,還是採集後!3 Q5 c: z: s# d; t
) K) R. e( c7 }9 Z" Q1 ?
回復 给力 爆菊

使用道具 舉報

發表於 2014-3-7 13:19:42 | 顯示全部樓層
學習一下                              7 l0 o' f, C2 l  a# I  M
回復 给力 爆菊

使用道具 舉報

您需要登錄後才可以回帖 登錄 | 免费注册

本版積分規則

點基

GMT+8, 2026-2-4 05:20

By DZ X3.5

小黑屋

快速回復 返回頂部 返回列表