Cassandra:添加新节点后数据丢失

时间:2015-03-12 11:09:57

标签: cassandra cassandra-2.0

我们有两个节点cassandra集群,我们想要扩展到四个。 我们按照那里描述的程序:http://www.datastax.com/documentation/cassandra/1.2/cassandra/operations/ops_add_node_to_cluster_t.html

但是在添加了两个节点之后(同时,文档中建议的间隔为2分钟),我们遇到了一些数据丢失。在一些列族中,缺少元素。

以下是nodetool netstats

[centos@ip-10-11-11-187 ~]$ nodetool status
Datacenter: us-west-2
=====================
Status=Up/Down
|/ State=Normal/Leaving/Joining/Moving
--  Address       Load       Tokens  Owns    Host ID                               Rack
UN  10.11.11.187  5.63 MB    256     ?       0e596912-d649-4eed-82a4-df800c422634  2c
UN  10.11.1.104   748.79 MB  256     ?       d8b96739-0858-4926-9eb2-27c96ca0a1c4  2c
UN  10.11.11.24   7.11 MB    256     ?       e3e76dcf-2c39-42e5-a34e-9e986d4a9f7c  2c
UN  10.11.1.231   878.91 MB  256     ?       cc1b5cfd-c9d0-4ca9-bbb1-bce4b2deffc1  2c

Note: Non-system keyspaces don't have the same replication settings, effective ownership information is meaningless

我不太明白“注意”是否错误。

当我们添加节点时,我们将第一个服务器(已在群集中可用)放入第一个添加节点的配置种子中。对于第二个添加的节点,我们也将新添加的节点放在种子中。

我们正在使用EC2Snitch,而listen_address已设置为每台服务器上的上述地址。

我们还没有运行清理工作,但我们尝试进行修复,并且有人写道我们的键帽中没有任何东西需要修复。

以下是我们的群集创建方式:

CREATE KEYSPACE keyspace_name WITH replication = {'class': 'NetworkTopologyStrategy', 'us-west-2': '1'}  AND durable_writes = true;

我们所有表的选项:

CREATE TABLE keyspace_name."CFName" (
    // ...
) WITH bloom_filter_fp_chance = 0.01
    AND caching = '{"keys":"ALL", "rows_per_partition":"NONE"}'
    AND comment = ''
    AND compaction = {'min_threshold': '4', 'class': 'org.apache.cassandra.db.compaction.SizeTieredCompactionStrategy', 'max_threshold': '32'}
    AND compression = {'sstable_compression': 'org.apache.cassandra.io.compress.LZ4Compressor'}
    AND dclocal_read_repair_chance = 0.1
    AND default_time_to_live = 0
    AND gc_grace_seconds = 864000
    AND max_index_interval = 2048
    AND memtable_flush_period_in_ms = 0
    AND min_index_interval = 128
    AND read_repair_chance = 0.0
    AND speculative_retry = '99.0PERCENTILE';

如果我停用新节点,数据会重新出现。

编辑:阅读文档时实际上是一个错误......一位同事确实将auto_bootstrap设置为false而不是将其设置为true ...

2 个答案:

答案 0 :(得分:2)

使用auto_bootstrap添加后,应在新节点上执行nodetool rebuild:false

http://www.datastax.com/documentation/cassandra/2.0/cassandra/tools/toolsRebuild.html

HTH

答案 1 :(得分:0)

您可以指定键空间名称以删除节点,在本例中为

nodetool status keyspace_name