谷歌抓取错误增加，它显示我在magento 1.9.0.1

Question

Magento 1.9.0.1

您好， 自从10天以来网站管理员工具上的404错误增加了，在抓取错误部分，我发现了150个没有意义的奇怪网址：
http://sitename.com/（cms page）/index.php/（另一个cms页面或产品）。

在我的记忆中，我没有改变任何东西，但这必须来自某个地方。我已经robot.txt检查了User-agent: Googlebot-Image Disallow:（我之前只删除了行local.xml），htaccess，system/config/web和友好网址。看起来都很好。

以下是截图：

在我的robot.txt中，我得到了：

Disallow: /index.php/ <br>
Disallow: /*.css$ <br>
Disallow: /*.php$ <br>
Disallow: /*?p=*& <br>
Disallow: /*?SID= <br>
Disallow: /?___from_store= <br>
Disallow: /*___from_store= <br>

提前感谢您的帮助。

此致 马克

Answer 1

我刚在access.log中发现我对我的/ downloader文件夹有攻击：
“GET /downloader/index.php?A= HTTP / 1.1”200 2518“ - ”“ - ”65.98.60.146 - - [07 / Mar / 2016：12：37：45 +0100]
“POST / downloader / HTTP / 1.1”302 - “ - ”“ - ”。

在每100次攻击后，我会收到出现的URL错误：
“GET /bache-tendue/index.php/tendeur-elastique/tendeur-caoutchouc/tendeur-caoutchouc-25cm HTTP / 1.1”404 111180“ - ”“Mozilla / 5.0（兼容; AhrefsBot / 5.0; + http://ahrefs.com/robot/ ）“

希望这会有所帮助。

此致 马克