一個正確的robots.txt文件，能讓搜索引擎不抓取網站的某個不想讓蜘蛛抓取的文件，也可以避免大量的複製網頁對網站搜索引擎權重的影響。Robots.txt 協議標準介紹以前也已提到過，也可以訪問robotstxt.org官方網站參考正確的設置方法，但對了一個新手來講，正確設置一個robots.txt文件是一件比較頭痛的事情。不必煩惱，google教你正確設置robots.txt文件。8 e. w' _+ b) O
6 x5 c: F) s& {8 Q- c對於一個網站管理者，擁有一個google帳號是非常有用的，google網站管理玩具，全方位的為你診斷網頁，google通過此玩具，為你反饋網站存在的一些問題。至於google網站管理玩具榜大的功能我就不一一介紹，這裡來講一下怎麼利用google網站管理玩具設置一個正確的robots.txt文件。
) M8 R! r0 D4 u* ^ F4 y( K: g5 O4 d! t8 t" y0 @% y8 P4 g
網站管理玩具中玩具下有一個分析robots.txt文件，此欄下google檢查你網站是否有設置robots.txt文件，如果沒有你也可以通過提供的測試robots.txt文件並試用更改功能來設置一個正確的robots.txt文件，把你想要禁止的文件或目錄通過robots.txt格式製作好後，複製到google提供的robots區，然後你可以在robots.txt文件測網址區測試下你剛才寫的robots.txt文件是否正確。此處還提供了移動索引抓取、圖片索引抓取、抓取網以確定AdSense內容、抓取網頁測量AdWords到達網頁的品質等強大的功能。
3 s% D9 T( Z; t' T' l2 a
5 J* V) j8 h% [" y- @6 K3 a q3 Q( O g) o2 w) `8 \9 c
; H0 `2 [4 b: M; e* {: ~* c
有了googel網站管理玩具，讓你不必煩心robots.txt文件怎麼去寫，寫得正不正確，也避免了寫錯robots而給網站帶來不必要的創傷直接為網站管理者帶來的經濟損失！
) L5 d" g; k% f9 b- G J3 V- v
! e7 Y/ {& C& b4 ^$ _, |原載：SEO服務網) {2 X Q R, [) U& Z
作者：搜索引擎優化@Dance的網絡天下3 N2 L- A2 L- @% S- S. Y/ g0 o; E' F
版權所有。轉載時必須以鏈接形式註明作者和原始出處及本聲明* D3 n7 g! y' Z& Q& W2 L
! W0 ?2 K: J& {9 T0 L4 {
轉：http://www.hnfree.cn/changsha/post/google-set-up-robots.html |
|
發表於 2007-12-19 07:17:09
提升卡
沉默卡
变色卡