在将robots.txt放入其中后,Google何时停止显示网站的网页?

时间:2015-08-13 18:17:59

标签: indexing seo web-crawler robots.txt

Google正在显示www.example.com/myPage作为搜索结果。

我不希望谷歌将此/myPage编入索引,因此页面中放置了robots.txt

停止在谷歌展示需要多长时间?
我知道如果人们有网址,人们仍然可以访问它,但我的目的只是将其从谷歌的搜索结果中删除。

我对搜索引擎优化的了解很少,我觉得答案可能因网站流量和其他与搜索引擎优化相关的因素而有所不同,但就一般而言,这需要多长时间?

1 个答案:

答案 0 :(得分:0)

抓取是基于许多因素,例如PageRank,页面链接和抓取约束(例如URL中的参数数量)。任意数量的因素都会影响各个网站的抓取频率。

抓取过程是算法;计算机程序确定要爬网的站点,频率以及从每个站点获取的页数。他们不接受付款以更频繁地抓取网站。有关维护适合抓取的网站的提示,请访问网站站长指南。

我建议你使用谷歌网站管理员工具为你的搜索引擎优化这将帮助你看到谷歌上次抓取你的网站也有很多搜索引擎优化选项,将帮助您更好地索引您的网站。 网站管理员还可以选择让Google再次抓取您的网站,告知Google机器人在您网站上的内容发生变化时重新抓取您的网站。

This链接可能有助于您更好地了解。另外,要了解网站管理员设置和功能,请访问this链接