不时浏览我的搜索日志，我注意到我的搜索引擎的最大用户是google-bot。是什么赋予了？它是否在寻找可能无法通过导航直接访问的内容？如果是这样，它如何知道要查找哪些单词和短语（它们具有惊人的相关性）。它会检查网站上最热门的关键字吗？我知道我似乎在这里回答了我自己的问题，但这实际上只是从第一原则开始。我想听听那些知道他们在谈论什么的人（即不是我）。
答案 0 :(得分：8)
如果您的搜索表单的方法是获取而不是发布，则每个搜索都有自己的网址，人们可能会在其他地方发布这些网址。或者，如果您有一个（可能是无意中）可公开访问的webstats页面列出了这些网址，那么这是搜索引擎偶然发现您的内部搜索网址的另一种常见方式。我看到的第三种方式是在其网页上列出最近搜索的网站，但这更有意思。 “MySQL性能博客”这是一个令人讨厌的程度，所以任何从谷歌搜索他们的网站都会产生数百页的类似搜索，即使他们都没有找到他们想要的内容。
编辑：看起来有时会这样，但只有GET表单： http://googlewebmastercentral.blogspot.com/2008/04/crawling-through-html-forms.html
答案 1 :(得分：1)
Google会在搜索框中使用您网站上出现的字词来尝试查找其他情况下无法使用的网页。
Google表示，在过去的几个月里，它一直在填写表格 在“少量”的“高质量”网站上回来 信息。它进入那些形式的是什么词？话 自动选择在网站上发生的复选框和 下拉菜单也被选中。 http://searchengineland.com/google-now-fills-out-forms-crawls-results-13760