tomcat urls和robots.txt

Question

如果我在Tomcat中有一个Web服务/应用程序，我是否必须担心像“robots.txt”这样的机制让搜索引擎不再使用tomcat？我只是想阻止谷歌和其他人在tomcat中索引任何东西......它目前是我正在研究的一个小项目，服务器可通过静态IP和域名访问，而且我目前还没有针对tomcat的身份验证虽然这很快就会完成。如果您只是输入服务器的域名或IP地址，您将在IIS中获得一个简单的“空白”页面...只有在您知道的情况下，并输入tomcat子目录名称（有线）进入IIS使用jakarta）tomcat应用程序变得可见并显示在浏览器中。

我还要担心这些吗？会认为既然谷歌无法达到最初的tomcat网址，除非它事先知道它，它没有什么可以“吃掉”的？

Answer 1

除非网络链接到您的Tomcat页面，否则我不会担心。

从谷歌的角度考虑一下 - 你将如何实现这样的事情？从任何给定的URL开始，强制所有可能的路径？如果谷歌 强大，我会非常惊讶。

此类内容甚至有一个名称Invisible Web。