如何弄清楚 Cassandra 额外的堆外内存使用情况

Question

我有32GB Ram的节点。我设置了 20 GB 的堆大小。我知道 cassandra 使用堆外进行内存表、缓存等。尽管内存的使用量非常低，但 cassandra 以某种方式使用 27GB 内存。我怎么知道，Cassandra如何使用额外的7GB内存？

Answer 1

您可以使用JConsole获取指标

或者你可以使用Jolokia代理。为此，下载并将jolokia代理设置为您的Cassandra节点。例如 Linux

mkdir /opt/jolokia
cd /opt/jolokia
wget https://github.com/rhuss/jolokia/releases/download/v1.4.0/jolokia-1.4.0-bin.tar.gz
tar -xf jolokia-1.4.0-bin.tar.gz

将代理路径作为 JVM 选项添加到 cassandra-env.sh 文件的末尾并重新启动 cassandra

echo 'JVM_OPTS="$JVM_OPTS -javaagent:/opt/jolokia/jolokia-1.4.0/agents/jolokia-jvm.jar"' >> /etc/conf/cassandra/cassandra-env.sh

重新启动卡桑德拉。

然后，您可以查询以下指标：

堆内存总计：

wget http://localhost:8778/jolokia/read/org.apache.cassandra.metrics:type=Memory/HeapMemoryUsage

总堆外内存：

wget http://localhost:8778/jolokia/read/org.apache.cassandra.metrics:type=Memory/NonHeapMemoryUsage

内存表使用的堆外内存：

wget http://localhost:8778/jolokia/read/org.apache.cassandra.metrics:type=Table,keyspace=*,scope=*,name=MemtableOffHeapSize

对于 Bloomfilter、IndexSummary 和 Compression 元数据：

wget http://localhost:8778/jolokia/read/org.apache.cassandra.metrics:type=Table,keyspace=*,scope=*,name=BloomFilterOffHeapMemoryUsed
wget http://localhost:8778/jolokia/read/org.apache.cassandra.metrics:type=Table,keyspace=*,scope=*,name=IndexSummaryOffHeapMemoryUsed
wget http://localhost:8778/jolokia/read/org.apache.cassandra.metrics:type=Table,keyspace=*,scope=*,name=CompressionMetadataOffHeapMemoryUsed

---

更新： 来自 Jolokia 终结点的示例响应：

{
"request":{
"mbean":"org.apache.cassandra.metrics:keyspace=*,name=CompressionMetadataOffHeapMemoryUsed,scope=*,type=Table",
"type":"read"
},
"value":{
"org.apache.cassandra.metrics:keyspace=my_keyspace,name=CompressionMetadataOffHeapMemoryUsed,scope=my_table_name,type=Table":{
"Value":832
},
"org.apache.cassandra.metrics:keyspace=system,name=CompressionMetadataOffHeapMemoryUsed,scope=compaction_history,type=Table":{
"Value":64
},
"org.apache.cassandra.metrics:keyspace=my_keyspace,name=CompressionMetadataOffHeapMemoryUsed,scope=my_table_name2,type=Table":{
"Value":8184
},
...
}
}