現在很多人使用的Blog程序都是WordPress,那麼在做WordPress優化時,有一項比較重要的是robots.txt文件,那麼該如何寫WordPressBlog的robots.txt文件呢?請繼續往下看:2 u& W! r! | H) p6 g- M
! q: a8 _4 b2 L a C 一、最嚴格的寫法,我們採取以下方法:
: {9 c$ h/ |5 J: L$ B b User-agent: *5 C, i( g! a7 W! L2 x# [$ I" A
Disallow: /wp-* F$ o- d) `1 r+ C
#Allow: /wp-content/uploads/
; V) \, L/ e" l9 \0 B. a# } Disallow: /*.php$
0 s% A" v. V: R2 D. v Disallow: /*.inc$
- J7 o0 o; C& m, b Disallow: /*.js$' E: l' u; I; ~+ @7 H. }8 \
Disallow: /*.css$' r$ R' d. Q3 B# D8 j; I6 O' e
Disallow: /?s=8 B7 c% f, L# S Q
允許所有蜘蛛訪問,限制訪問以「wp-」開頭的目錄及文件,限制抓取.php文、.inc、.js、.css文件,限制抓取搜索結果。這是許多朋友公認的寫法,下面介紹一下一個另類的寫法:7 N" B) n- U" Y: b
1 Z6 ?( `9 w/ Y7 `
User-agent: *
' e5 \$ M: o% F Disallow: /wp-admin
/ r' I+ h' Z! e1 e# w* ` Disallow: /wp-content/plugins
( x( M9 \5 z! {5 v4 O Disallow: /wp-content/themes9 A g" ~7 S% l6 K: d' }7 V# U2 i
Disallow: /wp-includes2 i0 }# @7 I6 J. r
Disallow: /?s=* Y7 m$ R# o3 y7 ]
Sitemap: http://www.xxx.com/sitemap.xml,這只是個例子,這裡的地址要換成你的sitemap.xml地址,大家看得出這兩種寫法有什麼不同之處嗎?* f* e: O% F4 e; Y3 P' w9 e
7 P5 i8 b% ?4 N8 z; [& Z. y4 m 4 m5 v! K: [( |9 d1 o5 {
附sitemap.xml:( ~; z( D( m# S& ?( y; s
<?xml version="1.0" encoding="UTF-8" ?> {# y; L }5 V3 ^* @' D: v
- <sitemapindex xmlns="http://www.google.com/schemas/sitemap/0.84">" G7 C- r! A7 l" H! R y
- <sitemap>
4 \* ^5 E! L3 m4 u3 H! D <loc>http://www.xxx.com/lanmu.xml</loc> & `! m7 t" t7 i% v ~; T3 G
<lastmod>2009-09-15</lastmod> + A8 @2 i1 L( G
</sitemap>
) T9 U- U; }- L7 Q$ S, v- <sitemap>6 n, d$ v$ }. x) I0 W% m7 a# M# W
<loc>http://www.xxx.com/wenzhang.xml</loc>
0 f: p# e% O# w8 L, G <lastmod>2009-09-10</lastmod>
" O0 M! f$ |0 y0 W </sitemap>4 B8 A. h4 `+ {( ?; U
</sitemapindex> |
評分
-
查看全部評分
|