現在很多人使用的Blog程序都是WordPress，那麼在做WordPress優化時，有一項比較重要的是robots.txt文件，那麼該如何寫WordPressBlog的robots.txt文件呢？請繼續往下看：
9 h6 r0 M1 @4 X% W0 T8 G! j* E# m; P$ u9 v
一、最嚴格的寫法，我們採取以下方法：
0 I3 W( u l6 I6 B# s+ T$ |* l User-agent: *0 H+ z# S: V, m6 I
Disallow: /wp-*
) h2 j2 p; ~3 p- I7 `8 O/ z #Allow: /wp-content/uploads// N- x- w: F/ g9 M) x! h& X
Disallow: /*.php$
) v1 ?, h1 R0 J7 j/ ?1 } Disallow: /*.inc$/ J& ^% u, ~& n7 |3 Q) y+ S
Disallow: /*.js$
' t* p2 S& z* K3 n: J) O Disallow: /*.css$
# `" H) i6 T7 c2 U, g! n) r" o Disallow: /?s=" ^6 T# o/ S" R8 E7 E
允許所有蜘蛛訪問，限制訪問以「wp-」開頭的目錄及文件，限制抓取.php文、.inc、.js、.css文件，限制抓取搜索結果。這是許多朋友公認的寫法，下面介紹一下一個另類的寫法：
~$ C. O8 B( A) E- _" H) j5 ]) @! E7 Q; I
" a! K% Z* y( c: k* \4 H User-agent: *
; H/ \% a w' l5 \ Disallow: /wp-admin
% b- [) ` O* N% ]: o( | Disallow: /wp-content/plugins* n! F& Z8 w( x3 [+ m! t
Disallow: /wp-content/themes
# |$ f! q$ l. Y* \( o) I Disallow: /wp-includes
: ?* }( J: R/ l# g: F+ I: s Disallow: /?s=
' T, W$ b3 F8 O Sitemap: http://www.xxx.com/sitemap.xml，這只是個例子，這裡的地址要換成你的sitemap.xml地址,大家看得出這兩種寫法有什麼不同之處嗎？$ }8 U5 s9 G) `! b5 @& k
+ J, t3 ^6 T, L. h. [$ [ 3 i% T9 Q1 p% q- Q, r W: D
附sitemap.xml:
; f- \+ a6 b5 {% P3 Q<?xml version="1.0" encoding="UTF-8" ?>
; p4 ^- a C* c& m5 H- <sitemapindex xmlns="http://www.google.com/schemas/sitemap/0.84">
9 K/ ~: I4 ]' O+ g- <sitemap>% K, U/ Z7 G- l# T! m+ l
<loc>http://www.xxx.com/lanmu.xml</loc>
( J7 P' I2 E: U1 o <lastmod>2009-09-15</lastmod> 9 @* J# j% E) @/ h/ z/ T5 x
</sitemap>6 b5 |* b W8 }' U$ C
- <sitemap>
/ h) |# c, h6 w/ x l3 r+ u" l/ l, E <loc>http://www.xxx.com/wenzhang.xml</loc> % w) y! H$ I6 l" \ W* p
<lastmod>2009-09-10</lastmod> 7 G- @4 p( Y4 z9 j; I8 o
</sitemap>; k& b7 x% e! h5 N0 u P
</sitemapindex> |
評分
-
查看全部評分
|
發表於 2009-10-15 08:24:57
提升卡
沉默卡
变色卡