我的网站上有不受欢迎的流量。 例如。
这种类型的流量不会给我任何好处,而是使用带宽。
我想知道如何在我的网站上检测此类流量并停止它们。
如果我知道ip地址或referer url然后我阻止来自htaccess的ip或referer url。 但在这种情况下,我每次都添加ip或referer url。我想要它自动化。 类似的东西检测或识别垃圾邮件命中并阻止它们。
答案 0 :(得分:5)
请将robots.txt添加到您的网站根目录,以防止大多数自动抓取工具访问您的网站。
如果设置了Referrer(客户端通过链接,搜索引擎等),您还可以提出一个重定向访问错误页面的规则。这只允许直接访问网站。
真正的答案:不要打扰