如何检查搜索机器人是否可以访问站点

Question

我是否可以运行任何测试以查看搜索机器人是否可以访问我的网站？

Answer 1

1. 规范：http://www.robotstxt.org/

2. 语法检查：http://www.searchenginepromotionhelp.com/m/robots-text-tester/robots-checker.php

3. 辅助功能检查：http://phpweby.com/services/robots

_{所有这些都是谷歌的朋友，所以它似乎}