我在搜索引擎优化方面有点新意,我只是想编写一个robot.txt文件。我想禁止使用条款和条件文件夹中的页面,其中有空格。
我应该写:
Disallow: /Page TermsAndConditions/
或者:
Disallow: /Page%20TermsAndConditions/
或两者兼有,或者无所谓?
(我想不允许这个文件夹,因为这里充满了技术术语我认为搞乱了googlebot找到的内容关键字 - 或者我是否也错了?)。< / p>
编辑:
我从googe Robots.txt Specifications找到了这个页面。其中说:“路径中的非7位ASCII字符可以包含为UTF-8字符,也可以按RFC 3986包含在转义百分比的UTF-8编码字符中”。所以我想这个问题的答案是无所谓。
答案 0 :(得分:0)
重命名没有空格的文件夹,避免出现问题。
Disallow: /PageTermsAndConditions/