为什么我在启动时从删除的密钥空间得到Cassandra预准备语句重建错误？

Question

我正在运行一个2个节点（每个节点8个内核）的Cassandra 3.10集群，复制因子为1。随着时间的推移，我在我的cassandra集群上拥有并且已经拥有许多键空间。

我最近注意到，当我停下来/开始时，回来的时间非常慢。在我的两个系统中，我都看到了数以千计的“准备好的语句重建”堆栈跟踪，如下面的示例所示。log和debug.log。看起来Cassandra正在尝试为密钥空间准备语句，这些密钥空间已经不存在了，因为我之前已经删除了它们。

注意：当它启动时，我没有任何应用程序/客户端等连接到卡桑德拉。我还手动清理了提交日志，saved_caches以及先前删除键apces的数据文件，这在启动时没有任何区别。我看到我们的相同行为没有数据和提交日志。

有人知道Cassandra在启动时是从哪里得到这些信息的吗？或者知道如何在保留现有密钥空间的同时解决这个问题吗？

预准备语句重新创建警告：

WARN  [main] 2017-07-07 14:44:14,362 QueryProcessor.java:159 - prepared statement recreation error: update metric_resource set attributes = ? where t_uid ='TUID1' and metric_name =? and resource_name=?
org.apache.cassandra.db.KeyspaceNotDefinedException: Keyspace test_keyspace_1 does not exist
        at org.apache.cassandra.thrift.ThriftValidation.validateKeyspace(ThriftValidation.java:85) ~[apache-cassandra-3.10.jar:3.10]
        at org.apache.cassandra.thrift.ThriftValidation.validateColumnFamily(ThriftValidation.java:109) ~[apache-cassandra-3.10.jar:3.10]
        at org.apache.cassandra.cql3.statements.ModificationStatement$Parsed.prepare(ModificationStatement.java:796) ~[apache-cassandra-3.10.jar:3.10]
        at org.apache.cassandra.cql3.statements.ModificationStatement$Parsed.prepare(ModificationStatement.java:789) ~[apache-cassandra-3.10.jar:3.10]
        at org.apache.cassandra.cql3.QueryProcessor.getStatement(QueryProcessor.java:557) ~[apache-cassandra-3.10.jar:3.10]
        at org.apache.cassandra.cql3.QueryProcessor.prepare(QueryProcessor.java:412) ~[apache-cassandra-3.10.jar:3.10]
        at org.apache.cassandra.cql3.QueryProcessor.preloadPreparedStatement(QueryProcessor.java:154) ~[apache-cassandra-3.10.jar:3.10]
        at org.apache.cassandra.service.CassandraDaemon.setup(CassandraDaemon.java:358) [apache-cassandra-3.10.jar:3.10]
        at org.apache.cassandra.service.CassandraDaemon.activate(CassandraDaemon.java:601) [apache-cassandra-3.10.jar:3.10]
        at org.apache.cassandra.service.CassandraDaemon.main(CassandraDaemon.java:735) [apache-cassandra-3.10.jar:3.10]

与不存在的密钥空间相关的其他堆栈跟踪：

org.apache.cassandra.db.KeyspaceNotDefinedException: Keyspace test_keyspace1 does not exist
        at org.apache.cassandra.thrift.ThriftValidation.validateKeyspace(ThriftValidation.java:85) ~[apache-cassandra-3.10.jar:3.10]
        at org.apache.cassandra.thrift.ThriftValidation.validateColumnFamily(ThriftValidation.java:109) ~[apache-cassandra-3.10.jar:3.10]
        at org.apache.cassandra.cql3.statements.SelectStatement$RawStatement.prepare(SelectStatement.java:920) ~[apache-cassandra-3.10.jar:3.10]
        at org.apache.cassandra.cql3.statements.SelectStatement$RawStatement.prepare(SelectStatement.java:915) ~[apache-cassandra-3.10.jar:3.10]
        at org.apache.cassandra.cql3.QueryProcessor.getStatement(QueryProcessor.java:557) ~[apache-cassandra-3.10.jar:3.10]
        at org.apache.cassandra.cql3.QueryProcessor.prepare(QueryProcessor.java:412) ~[apache-cassandra-3.10.jar:3.10]
        at org.apache.cassandra.cql3.QueryProcessor.preloadPreparedStatement(QueryProcessor.java:154) ~[apache-cassandra-3.10.jar:3.10]
        at org.apache.cassandra.service.CassandraDaemon.setup(CassandraDaemon.java:358) [apache-cassandra-3.10.jar:3.10]
        at org.apache.cassandra.service.CassandraDaemon.activate(CassandraDaemon.java:601) [apache-cassandra-3.10.jar:3.10]
        at org.apache.cassandra.service.CassandraDaemon.main(CassandraDaemon.java:735) [apache-cassandra-3.10.jar:3.10]

Answer 1

我想出来了。卡桑德拉将准备好的语句写入系统。prepared_statements密钥空间。不太确定他们是什么时候推出这个功能的。它似乎将所有准备好的语句保留在该表中，并在重新启动时尝试读取它们。我的实例中有数百万行，包括以前删除的键区中的行。

截断表格系统。preparedstatements为我解决了这个问题，启动时间从几小时到几秒。

截断表格：

truncate system.prepared_statements;