2013-01-10 13:25:33 未知
Robots.txt 文件必须放在网站的根目录里。放在子目录的 Robots.txt 文件搜索引擎不能爬取到，所以不会起任何作用。可以通过FTP相关工具上传
例子：
http://www.0553zsw.com/robots.txt是有效的，如果放在其他文件夹或者目录下面都是无效的，检查的最简单方法就是在地址栏输入这个网站，如果能打开，那么就是有效的。
如果你不能控制根目录的 robots.txt，则你可以通过在子目录网页中使用标签阻止网页被收录。
相关资料供您参考：
