欢迎朋友加元创微信交流，个人微信号：yc127com。
网址受到 robots.txt 的限制 解决办法？
什么是"网址受到 robots.txt 的限制"错误？
Google 因受 robots.txt 限制而无法抓取此网址。这种情况可能是由多种原因造成的。例如，您的 robots.txt 文件可能完全禁止 Googlebot；可能禁止对此网址所在目录的访问，也可能特别禁止访问此网址。通常，这并不属于错误。您可能专门设置了一个 robots.txt 文件来阻止我们抓取此网址。如果是这种情况，则无需更正；我们将继续遵循此文件的 robots.txt。
什么是"网址受到 robots.txt 的限制"错误？
Google 因受 robots.txt 限制而无法抓取此网址。这种情况可能是由多种原因造成的。例如，您的 robots.txt 文件可能完全禁止 Googlebot；可能禁止对此网址所在目录的访问，也可能特别禁止访问此网址。通常，这并不属于错误。您可能专门设置了一个 robots.txt 文件来阻止我们抓取此网址。如果是这种情况，则无需更正；我们将继续遵循此文件的 robots.txt。
