<?xml version="1.0" encoding="UTF-8"?>
<rss version="2.0"
	xmlns:content="http://purl.org/rss/1.0/modules/content/"
	xmlns:wfw="http://wellformedweb.org/CommentAPI/"
	xmlns:dc="http://purl.org/dc/elements/1.1/"
	xmlns:atom="http://www.w3.org/2005/Atom"
	xmlns:sy="http://purl.org/rss/1.0/modules/syndication/"
	xmlns:slash="http://purl.org/rss/1.0/modules/slash/"
	>

<channel>
	<title>达闻SEO博客 &#187; Robots规范</title>
	<atom:link href="http:///blogcn/tag/robots%e8%a7%84%e8%8c%83/feed/" rel="self" type="application/rss+xml" />
	<link>/blogcn</link>
	<description>为客户提供专业的搜索引擎优化（又名自然搜索优化）服务</description>
	<lastBuildDate>Fri, 10 Sep 2010 03:00:03 +0000</lastBuildDate>
	<generator>http://wordpress.org/?v=2.8.4</generator>
	<language>en</language>
	<sy:updatePeriod>hourly</sy:updatePeriod>
	<sy:updateFrequency>1</sy:updateFrequency>
			<item>
		<title>网站Robots文件的写法规范</title>
		<link>/blogcn/%e7%bd%91%e7%ab%99robots%e6%96%87%e4%bb%b6%e7%9a%84%e5%86%99%e6%b3%95%e8%a7%84%e8%8c%83-320/</link>
		<comments>/blogcn/%e7%bd%91%e7%ab%99robots%e6%96%87%e4%bb%b6%e7%9a%84%e5%86%99%e6%b3%95%e8%a7%84%e8%8c%83-320/#comments</comments>
		<pubDate>Mon, 14 Sep 2009 17:29:37 +0000</pubDate>
		<dc:creator>达闻SEO团队</dc:creator>
				<category><![CDATA[SEO技术研究]]></category>
		<category><![CDATA[robots]]></category>
		<category><![CDATA[Robots规范]]></category>
		<category><![CDATA[SEO]]></category>

		<guid isPermaLink="false">http://www.darwinmarketing.com/blogcn/320.html</guid>
		<description><![CDATA[谈到robots.txt 可能对SEO有基本了解的人都知道，但是对究竟如何规范化地使用和书写robots.txt估计没能有几个人能全面掌握。也是凑巧刚好有人遇到了关于网站 robots写法的问题来问我，在之前我也是知道简单的书写规则。于是索性去找了很多资料，发现原来有很多的书写规则，现在也贴出来共享给大家，希望以后不要在为robots.txt上犯难了，也希望能给大家学习SEO能带来帮助。

首先,文件名必须是robots.txt小写的,位于站点根目录例如web文件夹之类，访问路径为 http://www.某某站点.com/robots.txt
其次,文本为ASCII编码(国外的推荐是文本编辑器在UNIX模式下)，robots.txt内容如下，且:冒号后不能有空格:

【情况一】以#号开头的视为注释,
且注释写入时应当单独成行.且不能在行尾加注.
一般请不要添加注释.[例如]
# Robots.txt file from http://www.某某站点.com]]></description>
		<wfw:commentRss>/blogcn/%e7%bd%91%e7%ab%99robots%e6%96%87%e4%bb%b6%e7%9a%84%e5%86%99%e6%b3%95%e8%a7%84%e8%8c%83-320/feed/</wfw:commentRss>
		<slash:comments>0</slash:comments>
		</item>
	</channel>
</rss>
