「robots.txt 內容 - 修改以測試更改」% H& X9 |+ h$ O
這個框填寫你的robots規則7 \( S/ N' j% A- w+ t( V6 @- @- n
6 `5 }+ y$ P; _! w' o/ N, S7 p, S
「網址 指定網址和 User-agent 以進行測試。」( O. p/ Y. U! H5 ~: @
這個框填寫你要測試的某個具體的特徵頁面網址" ^4 D! `" j: P0 k' y( _
0 L* `2 {8 Q; }$ q/ ]: K5 w/ E5 n下面是測試結果/ Q5 q* e/ Q! g! `
就是看你填寫的那些特徵頁面有沒有被robots禁用0 ~, o% z) ^, Q6 v9 Q9 a8 X
7 i2 m/ e5 g" N7 f2 O( _
其實真的不必糾結robots寫法 隨便找個他人的wp博客的robots填寫下，一般都是通用的。- e9 ]9 r8 D! [$ S4 g; L t
& ?& v( h3 ~; V其他一些具體情況就是看你的模板或者網站日誌的蜘蛛爬行情況來定了+ Y6 j; U0 k7 D9 v( _3 o5 p
|
發表於 2013-4-14 10:28:08
