为什么Nutch不会将Elasticsearch索引到没有英语网站?

时间:2017-07-30 15:17:31

标签: mongodb elasticsearch indexing nutch persian

我正在尝试制作搜索引擎,为此,我正在使用Nutch 2.xElasticsearch 1.4.4MongoDB 3.5,当我尝试抓取网站时,一切正常(网址) 1)使用波斯语文本(不是英语)它完成所有操作(意味着抓取索引)但索引不起作用,Elasticsearch没有显示抓取的页面。我使用波斯语文本URL 2的另一个站点测试了它,它运行正常,索引也没问题。

1The First URL - Did not work!

2The Second URL - It worked

为什么第一个网址没有索引?这种情况发生的原因是什么?是来自网站(?),是否是由它引起的?

0 个答案:

没有答案