我注意到很多Dropbox页面被Google,Bing等索引,并且想知道这些搜索引擎如何获得这样的链接:
https://dl.dropboxusercontent.com/s/85cdji4d5pl5qym/37-71.pdf
https://dl.dropboxusercontent.com/u/11421929/larin2014.pdf
鉴于dl.dropboxusercontent.com上没有链接,并且路径结构不容易猜测,搜索引擎如何获得这样的链接?
一个解决方案可能是它被发布在论坛上并被搜索引擎选中,但我查了很多链接并检查了反向链接但没有成功。我还注意到Bing和Yahoo显示的结果比谷歌要多得多,这意味着Bing在接收这些链接方面做得更好,这对我来说似乎不太可能。
答案 0 :(得分:0)
即使文档确实未链接(其网站上没有链接,其他人的网站上没有链接,也没有sitemap,没有Referer
从文档中链接的网站登录,等等。 ),搜索引擎仍然可以找到链接。
有两种方式:
搜索引擎可以获取特定用户在其浏览器中访问的所有网址。例如,当用户从该搜索引擎安装了工具栏时,就会发生这种情况。 Bing就是这种情况,请参阅我的related answer on Webmasters SE:
Microsoft已确认他们确实发现并索引了他们通过安装Bing工具栏上网的用户找到的网址。
当然,可能还有更多方法。