如何索引我的网站

时间:2011-06-06 18:19:24

标签: indexing search-engine

我刚遇到弹性搜索,我已完成安装和样本索引和搜索。 现在我想将它用于我的网站。为什么如何为我的网站创建索引?我是否需要将整个网页内容存储为索引?

谢谢, Nehatha

1 个答案:

答案 0 :(得分:3)

ES没有内置的爬虫 - 您需要编写一个爬虫来索引网站。你可以使用大量的F / OSS爬虫/蜘蛛--Nutch就是其中之一。

这是一个可能感兴趣的主题: http://elasticsearch-users.115913.n3.nabble.com/Suggestions-for-places-to-start-for-a-crawler-td900225.html

如果您的需求是轻量级的,您可以在几个小时内轻松地用您最喜欢的语言破解爬虫。