关于HBase的GeoMesa导入速度更快

时间:2017-11-14 13:30:06

标签: hbase geomesa

我在HBase v1.2.6上使用GeoMesa v1.4.0。 目前,我正在 HBaseQuickStart 类的帮助下导入和索引我的数据。不幸的是,大文件的运行时间非常长。 有人知道使用GeoMesa的bulkLoad来加速我的进程吗? 提前致谢!

1 个答案:

答案 0 :(得分:2)

开箱即用,GeoMesa通过二进制分发命令行工具提供摄取。你必须定义一个转换器'具有从输入文件到简单要素类型的映射的文件。完成后,您可以使用多个线程在本地运行,或使用map / reduce远程运行。 Accumulo命令的文档是here,HBase命令的工作方式相同但参数略有不同。有关安装HBase工具的文档是here

如果你想保留你的Java摄取代码,那么你需要做一些自定义的事情。有一个编写map-reduce摄取here的例子。