即使我在robot.txt文件中允许,我也无法读取我的css和js。 该网站是在Wordpress中构建的。 下面是我的robot.txt文件。
User-agent: *
Allow: /
Disallow: /wp-admin/
Disallow: /timeclock/
Disallow: /staging/
User-agent: Mediapartners-Google*
Allow: /
User-agent: Googlebot-Image
Allow: /wp-content/uploads/
Allow: /*.css$
User-agent: Adsbot-Google
Allow: /
Allow: /*.css$
User-agent: Googlebot-Mobile
Allow: /
Allow: /*.css$
User-agent: Googlebot
Allow: /
Allow: /* .js*
Allow: /* .css*
答案 0 :(得分:0)
就像我在评论中写的那样,你不需要unse / *这用于添加注释,并用/ *打开并用* /关闭。尝试以这种方式更改您的代码,看看是否有效:
User-agent: *
Allow: /
Disallow: /wp-admin/
Disallow: /timeclock/
Disallow: /staging/
User-agent: Mediapartners-Google*
Allow: /
User-agent: Googlebot-Image
Allow: /wp-content/uploads/
Allow: /.css$
User-agent: Adsbot-Google
Allow: /
Allow: /.css$
User-agent: Googlebot-Mobile
Allow: /
Allow: /.css$
User-agent: Googlebot
Allow: /
Allow: /.js
Allow: /.css