我正在使用jdbc插件从postgresql db中获取数据，对于整个导出来说似乎工作正常，并且我能够拉出数据，但是根据保存的状态，每次查询和查询所有数据时都无法正常工作有很多重复项。
我检查了.logstash_jdbc_last_run。元数据状态会根据需要进行更新，但插件仍会在每次运行时从表中导入整个数据。如果配置有任何问题。
input
{
jdbc {
jdbc_connection_string => "jdbc:postgresql://x.x.x.x:5432/dodb"
jdbc_user => "myuser"
jdbc_password => "passsword"
jdbc_validate_connection => true
jdbc_driver_library => "/opt/postgresql-9.4.1207.jar"
jdbc_driver_class => "org.postgresql.Driver"
statement => "select id,timestamp,distributed_query_id,distributed_query_task_id, "columns"->>'uid' as uid, "columns"->>'name' as name from distributed_query_result;"
schedule => "* * * * *"
use_column_value => true
tracking_column => "id"
tracking_column_type => "numeric"
clean_run => true
}
}
output
{
kafka{
topic_id => "psql-logs"
bootstrap_servers => "x.x.x.x:9092"
codec => "json"
}
}
任何帮助！！在此先感谢您使用以下文档作为参考。 https://www.elastic.co/guide/en/logstash/current/plugins-inputs-jdbc.html