我希望我的robot.txt只允许在google中索引我的索引文件。这看起来怎么样?以下是否可以解决问题?
User-agent: Google
Disallow: /_/
Disallow: /library/
Disallow: /media/
Disallow: /www/
User-agent: *
Disallow: /
答案 0 :(得分:2)
试试这个
User-agent: Google
Disallow: /
Allow: /index.php
Allow: /$ #this will allow your homepage as well**
**但最好使用htaccess重定向,将example.com重定向到example.com/index.php。为避免重复网址。