SQL Server分组将null视为等于所有值

时间:2019-02-24 09:25:01

标签: sql-server null grouping

在SQL Server中,我试图按ID对匹配行进行分组。空值被认为是通配符。

说明:匹配的行是什么意思?

匹配行意味着–即使两行的所有列都匹配。

匹配列的平均值–相同的值('A'='A')或每个值都为空值('A'/'B'/'C'/ ... = NULL)。

在我的示例中:

第1行与第2行匹配–因为:

First column: 'A' = 'A'
Second column: 'B' = NULL
Third column: NULL = 'C'

第1行与第4行不匹配:

First column: 'A' = 'A'
Second column: 'B' != 'D'
Third column: NULL = NULL.

比较失败,因为第二列中的值不匹配。

有人可以帮助我使用SQL吗?

例如:

用于创建测试表:

create table test_table 
(
    id int,
    column1 varchar(20),
    column2 varchar(20),
    column3 varchar(20)
);

insert into test_table (id, column1, column2, column3) values 
(1, 'A', 'B', NULL),
(2, 'A',NULL, 'C'),
(3, 'A', 'B', 'D'),
(4, NULL, 'D', NULL),
(5, 'A', 'B', 'D');

例如表格

enter image description here

这是预期的结果:

group id 1: {1,2}
group id 2: {1,3,5}
group id 3: {2,4}

这些行不能合并为一组:{1,2,3}。

表中预期结果的示例:

enter image description here

我尝试了这个答案:

   SELECT
    T1.id as row_id,
    T2.id as row_id
FROM
    test_table AS T1
    INNER JOIN test_table AS T2 ON
        (T1.column1 = T2.column1 OR T1.column1 IS NULL OR T2.column1 IS NULL) AND
        (T1.column2 = T2.column2 OR T1.column2 IS NULL OR T2.column2 IS NULL) AND
        (T1.column3 = T2.column3 OR T1.column3 IS NULL OR T2.column3 IS NULL)
WHERE
    T1.id < T2.id

结果表: enter image description here

所以我可以看到第1行与第2、3、5行匹配-但我看不到第2和3/5行不能加入同一组。 我想要的结果是我可以看到行1,3,5可以在同一组中,因为它们都匹配,但是行1和2之间的匹配必须在其他组中,因为行2与行不匹配3和5。

2 个答案:

答案 0 :(得分:0)

您可以尝试以下方法:

  • column1column2column3查找所有不同的值。这些值是您列中NULL值的可能候选者。
  • 使用生成的不同值生成NULL值的所有可能组合
  • 仅选择重复的行
  • 使用DENSE_RANK()
  • 生成组号

声明:

;WITH ValuesCTE ([column]) AS (
   SELECT column1 FROM #test_table WHERE column1 IS NOT NULL
   UNION 
   SELECT column2 FROM #test_table WHERE column2 IS NOT NULL
   UNION 
   SELECT column3 FROM #test_table WHERE column3 IS NOT NULL
), ReplaceCTE AS (
   SELECT 
      t.id, 
      CASE WHEN t.column1 IS NULL THEN c1.[column] ELSE t.column1 END AS column1, 
      CASE WHEN t.column2 IS NULL THEN c2.[column] ELSE t.column2 END AS column2, 
      CASE WHEN t.column3 IS NULL THEN c3.[column] ELSE t.column3 END AS column3
   FROM #test_table t
   LEFT JOIN ValuesCTE c1 ON t.column1 IS NULL
   LEFT JOIN ValuesCTE c2 ON t.column2 IS NULL
   LEFT JOIN ValuesCTE c3 ON t.column3 IS NULL
), DuplicatesCTE AS (
   SELECT column1, column2, column3 
   FROM ReplaceCTE
   GROUP BY column1, column2, column3
   HAVING COUNT(*) > 1
)
SELECT
   r.id,
   DENSE_RANK() OVER (ORDER BY r.column1, r.column2, r.column3) AS grp
FROM ReplaceCTE r
RIGHT JOIN DuplicatesCTE d ON (r.column1 = d.column1) AND (r.column2 = d.column2) AND (r.column3 = d.column3)

输出:

id  grp
1   1
2   1
1   2
3   2
5   2
2   3
4   3

答案 1 :(得分:0)

这比实际看起来容易。

让我知道它是否不能与其他任何样本数据一起使用。

drop table if exists #test_table
create table #test_table 
(
    id int,
    column1 varchar(20),
    column2 varchar(20),
    column3 varchar(20)
);

insert into #test_table (id, column1, column2, column3) 
values 
(1, 'A', 'B', NULL),
(2, 'A',NULL, 'C'),
(3, 'A', 'B', 'D'),
(4, NULL, 'D', NULL),
(5, 'A', 'B', 'D');

WITH CTE
     AS (SELECT t.id, 
                ISNULL(t.column1, t1.column1) col1, 
                ISNULL(t.column2, t1.column2) col2, 
                ISNULL(t.column3, t1.column3) col3, 
                t1.id AS tid, 
                ISNULL(t1.column1, t.column1) col4, 
                ISNULL(t1.column2, t.column2) col5, 
                ISNULL(t1.column3, t.column3) col6
         FROM #test_table t
              INNER JOIN #test_table t1 ON ISNULL(t.column1, t1.column1) = ISNULL(t1.column1, t.column1)
                                           AND ISNULL(t.column2, t1.column2) = ISNULL(t1.column2, t.column2)
                                           AND ISNULL(t.column3, t1.column3) = ISNULL(t1.column3, t.column3)
         WHERE t1.id > t.id),
     CTE1
     AS (SELECT *, 
                DENSE_RANK() OVER(
                ORDER BY col4, 
                         col5, 
                         col6) rn
         FROM CTE)
     SELECT DISTINCT 
            t.id, 
            ca.rn
     FROM #test_table t
          CROSS APPLY
     (
         SELECT c.id, 
                c.tid, 
                rn
         FROM cte1 c
         WHERE t.id = c.id
               OR t.id = c.tid
     ) ca
     ORDER BY rn;

For optimize query:请抛出真实的表结构。记录总数以及结果集中需要多少行?

column1,column2,column3是否包含任何特定值?或者它们可以包含任何内容?