如何确定哪些页面未编入索引

Question

有没有办法确定哪些网站的网页没有被搜索引擎编入索引？

我知道Google网站管理员有一个站点地图区域，可以告诉您已提交的网址数量以及已提交的网址数量。但是，它并不一定表明哪些网址没有被编入索引。

即使我不确定要标记什么

Answer 1

Google只知道被编入索引/抓取的网址。

• 即使在一个网页中也没有链接/显示的URL也不会 抓取。
• 不会抓取被Robots.txt阻止的网址。
• 如果您删除了网站管理员工具中的任何网址，则不会抓取这些网址。

没有任何已知的方法可以确切地知道哪些网址未被Google编入索引，但我们可以使用上述规则来假设网址列表。

Answer 2

好消息！这很简单。或者更容易看出 索引的页面。请参阅Google的discussion of this。

这就像进入你的broswer并输入“site：www.yoursite.com”一样简单。而已。他们编入索引的所有内容都将被列出。