CASE语句中对LIKE运算符的Redshift限制

Question

我遇到了一个问题：如果case语句中有超过15个LIKE运算符，则会出现错误java.lang.StackOverflowError。

以下是我对具有6000万行的表执行的示例：

SELECT 
  CASE WHEN field LIKE '%value%' THEN 'result'
       WHEN field LIKE '%value2%' THEN 'result2'
       .... 14 more of those
  END

我没有在任何地方看到此限制的记录。有什么想法可以解决这个问题吗？

Answer 1

这听起来像是内存不足错误。

我认为您有一些选择：

• 在进行like处理之前使用中间表（或使用中间表处理初始数据的子集）
• 增加用于该查询的队列插槽的数量以增加可用内存https://docs.aws.amazon.com/redshift/latest/dg/r_wlm_query_slot_count.html
• 看一看explain的输出，看看是否能为您提供出问题的线索

Answer 2

您可以Create a Scalar Python User-Defined Function代替LIKE比较。

然后，只需使用：

SELECT f_myfunc(field)

Answer 3

原来是驱动程序问题。我最初使用的是1.2.16.1027，后来又升级到了1.2.20.1043，并且不再收到错误。