机器人真的设置了引用网址吗？

Question

从here和here开始，我的印象是机器人不会设置引用网址。

但我只是发现了，除非情况不同。我们有这个javascript电话：

<script>aCallToToWebApiEndAndUpdateDom(params)</script> 

从api端，我们创建一些用户会话来记录视图，同时我们还记录userAgent和urlReferrer。哦，男孩，我刚刚找到了以下记录：

url referer: the actual page visited
user agent : Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

我错过了一两分吗？这是正常行为吗？如果我只想记录人工访问，那就是detecting them bots manually instead of checking for empty referer.