首页 robots文件

robots文件

  • robots文件一定要放在根目录吗?

    robots文件一定要放在根目录吗?

        可以明确地告诉robots文件只能放在网站根目录,关于这一点也是很好理解的,前文提过robots文件就是针对搜索引擎蜘蛛的一种协议(有些蜘蛛不一定会遵守),搜索引擎蜘蛛进入网站都是先从网站根目录,所以robots协议也只有在根目录的时候才有效,而且需要注意的是robots文件的命名必须是robots.txt,只能用小写字母。    robots协议的高级玩法    此玩法需要php+伪静态或者php+路由来实现。前面讲到robots里面除了禁止和运...

1