使用access.log识别机器人

Question

我可以使用Apache的access.log实时可靠地识别机器人吗？ 例如，我注意到所有机器人（或者至少大部分机器人）在页面访问方面都以相同的方式运行：它们既不需要CSS也不需要JS文件。这些信息无法用于检测它们吗？这种方法有多可靠，我该如何实现呢？ （我更喜欢PHP）

Answer 1

虽然不是实时的，this article可能会帮助您使用shell脚本自动识别机器人。