Pentaho-如何以流方式运行作业

时间:2018-07-02 09:06:04

标签: rabbitmq pentaho etl publish-subscribe producer-consumer

我是 Pentaho 的新手。我有一个要求,我需要创建一个ETL作业以从 rabbitMQ 中读取消息并将其转换并将其存储在db中。我已经使用IC AMQP插件创建了ETL。但是我找不到一种以流方式运行作业的方法。 Job Scheduler具有选项重复无间隔,但是启用此选项会导致性能问题。我正在寻找一种以流形式运行Job的解决方案,当消息排队时,消费者应该能够检索排队的消息并进行处理。谁可以帮我这个事?我正在使用PDI版本8.1.0.0-365。

谢谢

1 个答案:

答案 0 :(得分:0)

使用crontab!

Job Scheduler正在与Pentaho EE竞争,因此他们并没有对其投入太多。

并且社区更喜欢使用crontab,因此我们也没有对其进行太多投资。