肖建彬的博客

作者: 肖建彬 | 可以转载, 转载时务必以超链接形式标明文章原始出处和作者信息及版权声明
网址：http://www.xiaojb.com/archives/it/robotstxt-sitemaps.shtml

google,yahoo,ms都支持sitemap协议了，ask也支持了。所有的搜索引擎蜘蛛将在robots.txt文件中寻找Sitemap文件的位置。
robots.txt的写法如下：
User-agent: *
Disallow: /wp-admin/
Disallow: /upload/
Disallow: /uploads/
Disallow: /wp-content/uploads/
SITEMAP: http://www.xiaojb.com/sitemap.xml

这两天关注一下sitemap.xml的抓取情况，看看效果如何。

Tags: google, SEO, sitemap