冰古blog

SitePoint里的一个贴子针对wordpress的SEO优化做了讨论。讨论中cyrillsneer7关于robots.txt的优化给出了一个实例，感觉不错，贴出来跟大家分享下：

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /comments
Disallow: /category/*/*
Disallow: */trackback
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Allow: /wp-content/uploads

# Google Image
User-agent: Googlebot-Image
Disallow:
Allow: /*

# Google AdSense
User-agent: Mediapartners-Google*
Disallow:
Allow: /*

# Internet Archiver Wayback Machine
User-agent: ia_archiver
Disallow: /

# digg mirror
User-agent: duggmirror
Disallow: /

# Does anyone care I love Google Apache htaccess
Sitemap: http://bingu.net/blog/sitemap.xml #改为你的sitemap地址

BTW：SitePoint里有很多关于网站方面的文章，他的论坛也很热闹。（3-5-8比例运用在网页设计中就是在SitePoint的邮件列表中看到的）推荐喜欢网站建设的xdjm去看看。

标签: robots.txt, SEO
发布于wordpress, 站长相关