現在很多人使用的Blog程序都是WordPress,那麼在做WordPress優化時,有一項比較重要的是robots.txt文件,那麼該如何寫WordPressBlog的robots.txt文件呢?請繼續往下看:7 C1 v1 b: d% ^. [: o+ s& j' ^
- V! S' F3 Z: J8 Y) e: T7 [2 ~) @) r& f
一、最嚴格的寫法,我們採取以下方法:+ ^7 O* Q$ T/ a6 Y
User-agent: *' }5 Q& ]$ D5 h1 J( ~; T# u+ r) i! c
Disallow: /wp-*
; H8 _5 W2 T. _ #Allow: /wp-content/uploads/0 D) o7 n9 i/ ]; f
Disallow: /*.php$
+ z2 X- F( q0 c7 i% ]$ [ Disallow: /*.inc$3 g! n( l3 ?6 ?2 i9 N
Disallow: /*.js$ [+ U7 n, o% T, k" H f
Disallow: /*.css$& p: L! Q' W8 N* L8 e
Disallow: /?s=
! U# J; D) o/ ~ 允許所有蜘蛛訪問,限制訪問以「wp-」開頭的目錄及文件,限制抓取.php文、.inc、.js、.css文件,限制抓取搜索結果。這是許多朋友公認的寫法,下面介紹一下一個另類的寫法:! {8 O# u" {8 p2 r1 m1 N) Q" r
, M. P s- R7 V' k
User-agent: *8 h; T. w! M9 _" n4 _! W) q; O
Disallow: /wp-admin# q. q- X- s V, i. {2 s7 l
Disallow: /wp-content/plugins
2 `: H _- p Q. Z* q- U( u Disallow: /wp-content/themes6 m. M8 G5 `, i' L; P0 w; X0 E
Disallow: /wp-includes: @6 f3 I' R8 k7 J" A! Q/ A, I* B) N
Disallow: /?s=
. e3 ~ u( k# m: H5 H( x/ V Sitemap: http://www.xxx.com/sitemap.xml,這只是個例子,這裡的地址要換成你的sitemap.xml地址,大家看得出這兩種寫法有什麼不同之處嗎?
4 f! w, ^+ e( w# C+ n# l
; P6 v* s5 n- D- c! \, f 5 V+ Y v9 W" Y. `( `
附sitemap.xml: A) C" z' L6 v, j
<?xml version="1.0" encoding="UTF-8" ?> . x4 R+ {/ {' K7 ?: u4 V
- <sitemapindex xmlns="http://www.google.com/schemas/sitemap/0.84">7 F7 G% m, J$ A2 A
- <sitemap>5 H, v4 C: E, f4 r3 u( r4 Q
<loc>http://www.xxx.com/lanmu.xml</loc> * |3 L; E' F" e9 a) x; q
<lastmod>2009-09-15</lastmod> 2 |; d% S. ~7 B" @( K
</sitemap>) K6 Y# o* @6 \! w4 M h
- <sitemap>$ m* p8 x `' H% M' ~9 _
<loc>http://www.xxx.com/wenzhang.xml</loc>
( d' J" J5 o V2 S& ?$ b <lastmod>2009-09-10</lastmod>
+ _5 z7 N! @6 c </sitemap>
& T# i0 M" I9 A D' e s/ ?' d* g; y </sitemapindex> |
評分
-
查看全部評分
|