过期域名预定抢注

用戶名  找回密碼
 免费注册

Google 爬蟲真牛逼啊

  [複製鏈接]
發表於 2014-3-17 15:08:23 | 顯示全部樓層 |閱讀模式
本帖最後由 HONG 於 2014-3-17 15:19 編輯
) F' i0 a% M7 Z7 n. V# @
; ^. u% l8 t) x, h* J7 F我發現有的網頁上面被人搞了好幾萬評論,我自己打開個網頁都要好幾分鐘。。。。。過了10分鐘後頁面還在不斷加載垃圾評論。。。。(這裡要讚揚下服務器先)1 X+ p  W% Z/ H% v, {$ [* S
我在想爬蟲請求網頁的時候是否也有個時間限制,如果時間太長了,google爬蟲也就放棄這個頁面。
- Z! ~  b, z9 v! V2 {3 G2 r" l6 r( a% B' I

0 q- {2 H  \+ \換句話講,我接著再弄軟件spam無論多少條評論都是沒有效果的吧? 因為爬蟲沒有能力抓取到頁面的內容了。; i3 R  D  [, h5 j
: U$ X- s8 ~7 g9 v/ t7 v8 ?) m8 B

; c; A! i& C, \* e不知道我的猜測對否?
4 ~( K! V! ]+ ]
/ W9 C) S: r0 d. W) l8 V) o" t! o" k9 Q  ~: ~9 u5 ^# S
: f* r, c4 }5 Q* ?

  h, ?8 L/ P9 n: \4 X8 |. ?1 u9 m8 C( b9 r/ u9 L5 C4 o- @
回復

使用道具 舉報

發表於 2014-3-17 15:44:14 | 顯示全部樓層
這樣搞,不是搞死自己的網站?!& e; m# n' ]& r# S" u
回復 给力 爆菊

舉報

發表於 2014-3-17 15:53:13 | 顯示全部樓層
蜘蛛爬取網頁有超時限制,你的理解是正確的6 t+ \/ G' @# H1 X
回復 给力 爆菊

舉報

發表於 2014-3-17 15:54:42 | 顯示全部樓層
會的. 蜘蛛會有一個限定的抓取時間, 如果超時的話, 會自動放棄抓取.
3 Q' z, D3 t" R/ G3 F
回復 给力 爆菊

舉報

發表於 2014-3-17 16:13:11 | 顯示全部樓層
沒明白你這麼搞的目的是什麼?googlebot是可以識別spam的,就算回復裡面有spam也可以識別
4 L) N: H: O- \
回復 给力 爆菊

舉報

發表於 2014-3-17 16:25:07 | 顯示全部樓層
有幾個判斷:第一,估計服務器帶寬不行,或者你網絡不好;第二,再多評論,也會分頁啊,只能說程序沒設計好?第三,服務器太慢,爬蟲是會超時的,經常這樣,爬蟲就不喜歡了,估計權重會降低
8 K, C" ^' d$ Y# M0 B. c
回復 给力 爆菊

舉報

發表於 2014-3-18 00:16:54 | 顯示全部樓層
這是要搞死搞殘的節奏啊
# I5 ~% I& L7 k* \* M- b; x
回復 给力 爆菊

舉報

您需要登錄後才可以回帖 登錄 | 免费注册

本版積分規則

过期高净值品牌域名预定抢注

點基跨境 數位編輯創業論壇

GMT+8, 2025-7-15 12:41

By DZ X3.5

小黑屋

快速回復 返回頂部 返回列表