本文由 发布,转载请注明出处,如有问题请联系我们! 发布时间: 2021-05-14Robots.txt 文件应放在网站的那个目录?
加载中Robots.txt文件务必放到网址的网站根目录。
放到根目录的 Robots.txt 文档百度搜索引擎不可以抓取到,因此不容易起一切功效。
例如:
http://网站域名/robots.txt 合理
http://网站域名/bbs/robots.txt 失效
假如你不可以操纵网站根目录的 robots.txt,则你能根据在根目录网页页面中应用标识阻拦网页页面被百度收录。