現在很多人使用的Blog程序都是WordPress，那麼在做WordPress優化時，有一項比較重要的是robots.txt文件，那麼該如何寫WordPressBlog的robots.txt文件呢？請繼續往下看：
6 \! r2 U; N7 w6 ~+ Q9 N7 D2 y% |1 H5 R- U h
一、最嚴格的寫法，我們採取以下方法：1 V5 H8 x" m6 U! u% G1 ^3 c: U+ T+ Z
User-agent: *" F. k$ n: c& y# p( \ a! G
Disallow: /wp-*
7 M# A4 z9 X: y/ H& K2 s) d2 P6 ~ #Allow: /wp-content/uploads/
7 a5 {( D$ Y% l Disallow: /*.php$
2 k0 A4 P4 K) S0 b Disallow: /*.inc$, `3 u9 n6 F8 e: B& p! B
Disallow: /*.js$
1 x5 |" m$ M. Q& L: H8 R# `" c' b Disallow: /*.css$/ \. b- O. E8 [/ Z* T1 L- d& [
Disallow: /?s=
& Q$ a6 W8 Z8 |* x3 N! l* w 允許所有蜘蛛訪問，限制訪問以「wp-」開頭的目錄及文件，限制抓取.php文、.inc、.js、.css文件，限制抓取搜索結果。這是許多朋友公認的寫法，下面介紹一下一個另類的寫法：
6 i& f# Q% T" P# r3 O7 P' X/ ^, ]3 N1 o6 h# t
User-agent: *
1 [& u" e0 X5 h$ V7 W Disallow: /wp-admin
! i$ L1 L7 a6 y6 O+ a2 H) x3 I* B Disallow: /wp-content/plugins3 S3 L3 g, x/ N! U H |
Disallow: /wp-content/themes
; f9 g+ a k3 [! }6 V& E1 G Disallow: /wp-includes" ^* v# X- W. m' p, g- O+ u4 g
Disallow: /?s=1 O1 j6 y( X1 D$ Z6 |: F3 C
Sitemap: http://www.xxx.com/sitemap.xml，這只是個例子，這裡的地址要換成你的sitemap.xml地址,大家看得出這兩種寫法有什麼不同之處嗎？
, ?* M" w0 V; O5 ? ?* m( [) E6 B. c& c
9 M+ }8 L; n3 F$ b9 l附sitemap.xml:
. Q' ~1 Y0 w3 ?0 E<?xml version="1.0" encoding="UTF-8" ?>
' e w0 `. F& O# N3 s- <sitemapindex xmlns="http://www.google.com/schemas/sitemap/0.84">2 s0 B8 V1 v. y' @ t
- <sitemap>
) Z4 Y4 A, s, t <loc>http://www.xxx.com/lanmu.xml</loc> z5 o1 Q; O* j" }
<lastmod>2009-09-15</lastmod> ' y$ F8 p8 |% l3 }) ~& D
</sitemap>
6 p) C9 j$ m0 x% s- <sitemap>
! x7 w4 |+ m9 h* G8 G9 O <loc>http://www.xxx.com/wenzhang.xml</loc> + `1 U, j% u& f* }% @7 N3 a! Y
<lastmod>2009-09-10</lastmod>
1 F) X) \( j5 Z8 ^0 ^' p </sitemap>8 A# z4 J: a- x# s8 ]9 h
</sitemapindex> |
評分
-
查看全部評分
|
發表於 2009-10-15 08:24:57
提升卡
沉默卡
变色卡