标签: hadoop elasticsearch apache-pig
我有一个使用Flume将应用程序日志数据提取到Hadoop的系统。我使用Elasticsearch通过运行Pig脚本将数据从Hadoop加载到ES来索引此数据。现在,我需要自动执行此任务,以便每次添加新行时,都应触发脚本,或者无论何时触发脚本,它都只加载新写入的行。有谁能告诉我如何实现这个目标?