百度站长平台权威解答:robots.txt文件应该放置在网站根目录下。比如说,当spider访问一个网站(例如http://www.chinaz.com)时,首...
百度站长平台权威解答:不可以,必须是小写,即必须是robots.txt,而不是Robots.txt。相关SEO术语解释: robots:Robots协议(也称为...
百度站长平台权威解答:HTML格式不行,必须是txt格式。相关SEO术语解释: robots.txt:Robots协议(也称为爬虫协议、机器人协议等)的全称是“...
百度站长平台权威解答:tag列表页一般在同一个目录下,比如目录名叫ABC,那么robots就应该是:User-agent:* Disallow:/ABC/相关S...
觉得文章有用就打赏一下吧