Web搜索引擎组件的开源项目

Question

有人可以列出问题"Building a web search engine"中包含的每个组件的开源软件列表吗？

这将节省许多人寻找高质量开源组件的时间。

组件清单：

1. 履带
2. 分析器
3. 索引
4. 排名引擎
5. 前端

Answer 1

对于Java世界：

解析器

• JavaCC
• Antlr

索引

• Apache Lucene

排名引擎

• Apache Lucene

前端

• 任何轻量级MVC框架

Answer 2

Lucene也适用于.NET http://incubator.apache.org/lucene.net/

Answer 3

看起来nutch可以开箱即用。

Answer 4

Nutch + Lucene + Mapreduce / Apache是​​您的解决方案。