检查Postgres数组中是否存在NULL

时间:2016-01-18 05:46:28

标签: sql arrays postgresql null postgresql-9.1

this question类似,如何查找数组中是否存在NULL值?

以下是一些尝试。

SELECT num, ar, expected,
  ar @> ARRAY[NULL]::int[] AS test1,
  NULL = ANY (ar) AS test2,
  array_to_string(ar, ', ') <> array_to_string(ar, ', ', '(null)') AS test3
FROM (
  SELECT 1 AS num, '{1,2,NULL}'::int[] AS ar, true AS expected
  UNION SELECT 2, '{1,2,3}'::int[], false
) td ORDER BY num;

 num |     ar     | expected | test1 | test2 | test3
-----+------------+----------+-------+-------+-------
   1 | {1,2,NULL} | t        | f     |       | t
   2 | {1,2,3}    | f        | f     |       | f
(2 rows)

只有array_to_string的技巧才会显示预期值。有没有更好的方法来测试这个?

4 个答案:

答案 0 :(得分:14)

Postgres 9.1

如果 知道 数组中永远不存在的单个元素,您可以在Postgres 9.1中使用此 fast 表达式(或任何版本的Postgres)。假设您有一组正数,因此-1不能包含在其中:

-1 = ANY(ar) IS NULL

相关答案详细解释:

如果无法完全确定,则 可以使用unnest()回退到昂贵但安全的方法之一。像:

(SELECT bool_or(x IS NULL) FROM unnest(ar) x)

或:

EXISTS (SELECT 1 FROM unnest(ar) x WHERE x IS NULL)

但您可以使用CASE表达式快速安全地 。使用不太可能的数字,如果它存在,则回退到安全方法。您可能希望单独处理案例ar IS NULL。见下面的演示。

Postgres 9.3

在Postgres 9.3 或更高版本中,您可以使用内置函数array_remove()array_replace()进行测试。

Postgres 9.5 +

或者在Postgres 9.5 中使用array_position()或稍后使用@Patrick added。我包括了改进的变体。

演示

SELECT num, ar, expect
     , -1 = ANY(ar) IS NULL                                   AS t_1   --  50 ms
     , (SELECT bool_or(x IS NULL) FROM unnest(ar) x)          AS t_2   -- 754 ms
     , EXISTS (SELECT 1 FROM unnest(ar) x WHERE x IS NULL)    AS t_3   -- 521 ms
     , CASE -1 = ANY(ar)
         WHEN FALSE THEN FALSE
         WHEN TRUE THEN EXISTS (SELECT 1 FROM unnest(ar) x WHERE x IS NULL)
         ELSE NULLIF(ar IS NOT NULL, FALSE)  -- catch ar IS NULL       --  55 ms
      -- ELSE TRUE  -- simpler for columns defined NOT NULL            --  51 ms
       END                                                    AS t_91
     , array_replace(ar, NULL, 0) <> ar                       AS t_93a --  99 ms
     , array_remove(ar, NULL) <> ar                           AS t_93b --  96 ms
     , cardinality(array_remove(ar, NULL)) <> cardinality(ar) AS t_94  --  81 ms
     , COALESCE(array_position(ar, NULL::int), 0) > 0         AS t_95a --  49 ms
     , array_position(ar, NULL) IS NOT NULL                   AS t_95b --  45 ms
     , CASE WHEN ar IS NOT NULL
            THEN array_position(ar, NULL) IS NOT NULL END     AS t_95c --  48 ms
FROM  (
   VALUES (1, '{1,2,NULL}'::int[], true)     -- extended test case
        , (2, '{-1,NULL,2}'      , true)
        , (3, '{NULL}'           , true)
        , (4, '{1,2,3}'          , false)
        , (5, '{-1,2,3}'         , false)
        , (6, NULL               , null)
   ) t(num, ar, expect);

结果:

 num |     ar      | expect | t_1    | t_2  | t_3 | t_91 | t_93a | t_93b | t_94 | t_95a | t_95b | t_95c
-----+-------------+--------+--------+------+-----+------+-------+-------+------+-------+-------+-------
   1 | {1,2,NULL}  | t      | t      | t    | t   | t    | t     | t     | t    | t     | t     | t
   2 | {-1,NULL,2} | t      | f --!! | t    | t   | t    | t     | t     | t    | t     | t     | t
   3 | {NULL}      | t      | t      | t    | t   | t    | t     | t     | t    | t     | t     | t
   4 | {1,2,3}     | f      | f      | f    | f   | f    | f     | f     | f    | f     | f     | f
   5 | {-1,2,3}    | f      | f      | f    | f   | f    | f     | f     | f    | f     | f     | f
   6 | NULL        | NULL   | t --!! | NULL | f   | NULL | NULL  | NULL  | NULL | f     | f     | NULL

请注意,多维数组不允许使用array_remove()array_position()t_93a右侧的所有表达式仅适用于1维数组。

db&lt;&gt;小提琴here (Postgres 11,有更多测试)。
Postgres 9.6的旧sqlfiddle

基准设置

增加的时间来自基准测试,在Postgres 9.5中有20万行。这是我的设置:

CREATE TEMP TABLE t AS
SELECT row_number() OVER() AS num
     , array_agg(elem) AS ar
     , bool_or(elem IS NULL) AS expected
FROM  (
   SELECT CASE WHEN random() > .95 THEN NULL ELSE g END AS elem  -- 5% NULL VALUES
        , count(*) FILTER (WHERE random() > .8)
                   OVER (ORDER BY g) AS grp  -- avg 5 element per array
   FROM   generate_series (1, 1000000) g  -- increase for big test case
   ) sub
GROUP  BY grp;

函数包装器

对于重复使用,我会在Postgres 9.5 中创建一个函数,如下所示:

CREATE OR REPLACE FUNCTION f_array_has_null (anyarray)
  RETURNS bool LANGUAGE sql IMMUTABLE AS
 'SELECT array_position($1, NULL) IS NOT NULL';

使用polymorphic输入类型,这适用于任何数组类型,而不仅仅是int[]

使其IMMUTABLE允许性能优化和索引表达式。

但是不要使它STRICT,这将禁用“函数内联”并削弱性能。

如果你需要抓住案例ar IS NULL,请使用:

而不是使用STRICT函数
CREATE OR REPLACE FUNCTION f_array_has_null (anyarray)
  RETURNS bool LANGUAGE sql IMMUTABLE AS
 'SELECT CASE WHEN $1 IS NOT NULL
              THEN array_position($1, NULL) IS NOT NULL END';

对于Postgres 9.1 ,请使用上面的t_91表达式。其余部分保持不变。

密切相关:

答案 1 :(得分:3)

PostgreSQL的UNNEST()函数是一个更好的选择。您可以编写一个简单的函数,如下所示,检查数组中的NULL值。

create or replace function NULL_EXISTS(val anyelement) returns boolean as
$$
select exists (
    select 1 from unnest(val) arr(el) where el is null
);
$$
language sql 

例如,

SELECT NULL_EXISTS(array [1,2,NULL])
      ,NULL_EXISTS(array [1,2,3]);

结果:

null_exists null_exists 
----------- -------------- 
t           f     

因此,您可以在查询中使用NULL_EXISTS()功能,如下所示。

SELECT num, ar, expected,NULL_EXISTS(ar)
FROM (
  SELECT 1 AS num, '{1,2,NULL}'::int[] AS ar, true AS expected
  UNION SELECT 2, '{1,2,3}'::int[], false
) td ORDER BY num;

答案 2 :(得分:3)

PostgreSQL 9.5(我知道你是spcified 9.1,但无论如何)有 HasMany(row => row.Categories) .WithOptional(row => row.Parent) .HasForeignKey(row => row.ParentId); 函数来做你想要的,而不必使用非常低效的array_position()来做一些像这样简单的事情(参见{ {1}}):

unnest()

答案 3 :(得分:-1)

我用这个

select 
    array_position(array[1,null], null) is not null
  

array_position-返回数组中第二个参数第一次出现的下标,从第三个参数指示的元素或第一个元素开始(数组必须是一维的)