关注使用外部SQL服务器进行DIH

时间:2012-12-05 21:40:32

标签: sql search solr lucene

我希望使用DIH将条目导入我的SOLR服务器,使用JDBC驱动程序连接到外部postgre SQL服务器。我每次都会导入大约50,000个条目。

是否连接到外部SQL服务器以使我的数据不可靠或有风险,或者它是否完全合理?

我唯一的选择是在另一台服务器上导出SQL文件,将SQL文件下载到我的SOLR服务器,将其导入到我的Solr服务器的postgreSQL副本,然后在本地数据库上运行DIH。

如果有任何人对此有任何经验或者可以提供任何信息,我会非常感激。

2 个答案:

答案 0 :(得分:1)

这是一个标准用例,从远程数据库导入。保持充满信心!

答案 1 :(得分:1)

你使用它的方式就是DIH存在的原因。否则,您可以将/update处理程序与XML文档一起使用。我现在正在研究的核心每批定期索引11,000,000行。