编程语言
首页 > 编程语言> > php – Robots.txt优先级问题

php – Robots.txt优先级问题

作者:互联网

如果我在robots.txt中有这些行:

Disallow /folder/
Allow /folder/filename.php

请问filename.php会被允许吗?

谷歌优先考虑哪些订单?

这里会发生什么?例如:

Allow /
Disallow /

我主要将Google称为搜索引擎.

谢谢

解决方法:

对于您的第一个示例,是的,将允许文件/folder/filename.php,因为Google将优先考虑最具体的规则.有关详细信息,请参阅herecheck Wikipedia’s article.

此外,Google还提供了有关如何在here使用robots.txt的详细文档.

编辑:对于第二个示例,根据维基百科引用Byron Whitlock在他的回答中发布的优先顺序将允许优先级.

标签:php,search,robots-txt,html
来源: https://codeday.me/bug/20190526/1157257.html