我正在使用Cassandra 1.2.7和使用CQL3的官方Java驱动程序。
假设由
创建的表CREATE TABLE foo (
row int,
column int,
txt text,
PRIMARY KEY (row, column)
);
然后我想预先形成SELECT DISTINCT row FROM foo
至于我的理解,应该可以在Cassandra的数据模型中有效地执行此查询(假设实现复合主键的方式),因为它只是查询'raw'表。
我搜索了CQL文档但我没有找到任何选项来执行此操作。
我的备份计划是创建一个单独的表 - 类似于
CREATE TABLE foo_rows (
row int,
PRIMARY KEY (row)
);
但是这需要让两者保持同步的麻烦 - 为foo中的任何写入写入foo_rows(也是性能损失)。
那么有没有办法查询不同的行(分区)键?
答案 0 :(得分:7)
我会先给你一个不好的方法。如果您插入这些行:
insert into foo (row,column,txt) values (1,1,'First Insert');
insert into foo (row,column,txt) values (1,2,'Second Insert');
insert into foo (row,column,txt) values (2,1,'First Insert');
insert into foo (row,column,txt) values (2,2,'Second Insert');
做一个
'select row from foo;'
将为您提供以下内容:
row
-----
1
1
2
2
不明显,因为它显示了行和列的所有可能组合。要查询以获取一行值,可以添加列值:
select row from foo where column = 1;
但是你会得到这个警告:
Bad Request: Cannot execute this query as it might involve data filtering and thus may have unpredictable performance. If you want to execute this query despite the performance unpredictability, use ALLOW FILTERING
确定。然后用这个:
select row from foo where column = 1 ALLOW FILTERING;
row
-----
1
2
大。我想要的。我们不要忽视那个警告。如果你只有少量的行,比如说10000,那么这将对性能没有太大影响。如果我有10亿呢?根据节点数量和复制因素,您的性能将受到严重影响。首先,查询必须扫描表中的每个可能的行(读取全表扫描),然后筛选结果集的唯一值。在某些情况下,此查询将超时。鉴于此,可能不是你想要的。
您提到您担心插入多个表时会遇到性能问题。多表插入是一种非常有效的数据建模技术。卡桑德拉可以做大量的写作。至于同步的痛苦,我不知道你的确切应用,但我可以给出一般的提示。
如果需要进行不同的扫描,则需要考虑分区列。这就是我们所说的索引或查询表。在任何Cassandra数据模型中要考虑的重要事项是应用程序查询。如果我使用IP地址作为行,我可能会创建这样的东西来扫描我依次拥有的所有IP地址。
CREATE TABLE ip_addresses (
first_quad int,
last_quads ascii,
PRIMARY KEY (first_quad, last_quads)
);
现在,在我的192.x.x.x地址空间中插入一些行:
insert into ip_addresses (first_quad,last_quads) VALUES (192,'000000001');
insert into ip_addresses (first_quad,last_quads) VALUES (192,'000000002');
insert into ip_addresses (first_quad,last_quads) VALUES (192,'000001001');
insert into ip_addresses (first_quad,last_quads) VALUES (192,'000001255');
要获取192空间中的不同行,我这样做:
SELECT * FROM ip_addresses WHERE first_quad = 192;
first_quad | last_quads
------------+------------
192 | 000000001
192 | 000000002
192 | 000001001
192 | 000001255
要获取每个地址,您只需要在0-255之间迭代每个可能的行键。在我的例子中,我希望应用程序要求特定的范围来保持高性能。您的应用程序可能有不同的需求,但希望您可以在此处查看模式。
答案 1 :(得分:4)
根据documentation,来自CQL 3.11版,cassandra了解DISTINCT修饰符。 所以你现在可以写
了SELECT DISTINCT row FROM foo
答案 2 :(得分:0)
@edofic
分区行键用作唯一索引来区分存储引擎中的不同行,因此本质上,行键始终是不同的。您不需要将DISTINCT放在SELECT子句
中实施例
INSERT INTO foo(row,column,txt) VALUES (1,1,'1-1');
INSERT INTO foo(row,column,txt) VALUES (2,1,'2-1');
INSERT INTO foo(row,column,txt) VALUES (1,2,'1-2');
然后
SELECT row FROM foo
将返回2个值:1和2
以下是Cassandra中持续存在的事情
+ ---------- + ------------------- + --------------- --- +
|行键| column1 / value | column2 / value |
+ ---------- + ------------------- + ------------------ +
| 1 | 1 / '1' | 2 / '2' |
| 2 | 1 / '1' | |
+ ---------- + ------------------- + ------------------ +