如何插入Robots.txt文件

Question

我创建了一个单页网站，但我想知道在哪里插入robots.txt文件以及在哪里插入google anaytics代码。

Answer 1

将robots.txt文件放在网站的根目录中。因此，如果您的网站位于www.example.com，则需要创建www.example.com/robots.txt。

整个网站都有一个 robots.txt文件。整个站点的所有爬虫指令都放在那个文件中。

有关详细信息，请参阅Google's Robots.txt page。