我应该在robots.txt文件中添加什么内容，以便adsense机器人不会在我的网站上遇到任何问题？ 在Google支持（http://support.google.com/adsense/bin/answer.py?hl=en&answer=10532）中，建议添加以下行
User-agent: Mediapartners-Google
Disallow:
但是在许多在线资源中，甚至在维基百科中，建议的行是：
User-agent: Mediapartners-Google*
Disallow:
请有人清楚我，是否需要添加“*”以及添加此“*”符号的常见原因是什么？如果它很重要那么为什么Google没有提到它在其支持页面中添加*？
答案 0 :(得分：1)
我认为您的问题是您的文件名称错误。它应该是robots.txt。星号不是必须的，因为您知道User-Agent的确切名称。
答案 1 :(得分：0)
那个有趣的无处不在的明星*无处不在：D：D
但Google Webmastertools robots.txt checker不喜欢它。
例如，这不允许Adsense机器人，至少根据测试工具，2013 03：
User-agent: Mediapartners-Google*
Disallow:
这适用于检查器：
User-agent: Mediapartners-Google
Disallow: