Sqlx WHERE IN查询长列表

时间:2017-02-17 06:43:24

标签: postgresql go amazon-redshift postgresql-performance

我使用sqlx在我的Go代码中执行查询。查询有一个很长的值列表(~10,000),我需要在WHERE IN(?)子句中进行筛选。这导致性能大幅下降。我该如何优化这样的查询?此外,此查询正在Redshift群集上执行,因此索引列不是提高查询性能的解决方案。

values := []int64{143, 123, 123, 542....} // ~10,000 elements
query, args, err := sqlx.In(query, values)
if err != nil {
    return nil, err
}

query = dbInterface.Rebind(query)   
err = dbInterface.Select(&list, query, args...)

查询:

SELECT * FROM table_name WHERE some_id IN (?) ORDER BY created_at;

2 个答案:

答案 0 :(得分:0)

您需要让sqlx生成以下内容之一:

  • values语法:

    where some_id in (values (143), (123))
    
  • 加入数组:

    select *
    from
        t
        inner join
        unnest(array[143, 123]) u (id) on u.id = t.id
    

答案 1 :(得分:0)

我最终为id创建了一个TEMP TABLE并执行了JOIN。这大大提高了查询性能。