以下列表有何区别:
答案 0 :(得分:0)
这些标签之间的主要区别很简单:
无索引 该页面应该不会显示在google,yahoo等页面的结果列表中。 索引是相反的意思,并允许它。
nofollow 禁止抓取工具/漫游器调用(跟随)嵌入在元数据中带有此标志的页面上/中的链接。 关注是相反的意思,并允许它。
现在您可以弄清楚自己两种结果的每种组合。;)
答案 1 :(得分:0)
蜘蛛会为您的整个网站编制索引。 抓取工具不仅会检索您网站的第一个网页,而且还会检索您从该页面的链接进行抓取的所有其他网页。告诉搜索引擎它可能会跟随页面上的链接来发现其他页面。 (这都是默认行为)
<meta name="robots" content="index, follow">
<meta name="robots" content="follow">
蜘蛛现在将为您的整个网站建立索引。蜘蛛程序不会将网页编入索引,但它可能会跟随页面上的链接来发现其他页面。
<meta name="robots" content="noindex, follow">
蜘蛛程序将为此页面编制索引,但不会跟随该页面上的链接指向新页面。
<meta name="robots" content="index, nofollow">
蜘蛛程序根本不会将此页面编入索引,也不会跟踪此页面上指向任何其他页面的链接。
<meta name="robots" content="noindex, nofollow">
来源:
https://www.metatags.org/meta_name_robots
https://yoast.com/robots-meta-tags/
https://developer.mozilla.org/en-US/docs/Web/HTML/Element/meta#attr-name
答案 2 :(得分:0)
首先,您了解Meta Robots标签吗? Meta Robots标签是告诉蜘蛛或搜寻器要搜寻或不索引的页面。
关注方式:页面将被抓取。
没有关注:不会抓取页面。
索引的意思是:您的页面显示在搜索结果中。
没有索引的意思:您的页面未显示在搜索结果中。
<meta name="robots" content="follow">
此标签告诉网络爬虫所有页面都将被索引并进行爬网。
<meta name="robots" content="noindex, follow">
此标签用于告诉网络抓取工具所有页面都将被抓取并编制索引。
<meta name="robots" content="index, nofollow">
此标签用于告诉抓取工具跟踪数据库中的页面,但不为其编制索引。
<meta name="robots" content="noindex, nofollow">
告诉网络抓取工具页面不要抓取而是对其进行索引。
{{1}}
告诉Web爬网程序既不索引也不爬网。