Optimale JVM-Einstellungen für Cassandra

Muss ich zu Stimmen das JVM-Einstellungen von Cassandra zu nutzen, um mehr Speicher?

Dem DataStax Tuning Von Java-Ressourcen doc hat tatsächlich einige ziemlich gute Ratschläge auf dieser:

Viele Anwender, die von Cassandra sind versucht zu drehen, Java-heap-Größe zu
hoch, verbraucht die Mehrzahl der zugrunde liegenden system-RAM. In
den meisten Fällen, erhöhen der Java-heap-Größe ist eigentlich schädlich für die
diesen Gründen:

• In den meisten Fällen, die Fähigkeit von Java, um ordnungsgemäß zu behandeln-garbage
  Sammlung über 8GB schnell abnimmt.
• Moderne Betriebssysteme
  Pflege der OS-Seite-cache für Häufig verwendete Daten und sind sehr
  gut zu halten, diese Daten im Speicher, sondern werden kann, gehindert
  seinen job durch einen erhöhten Java-heap-Größe.

Wenn du mehr als 2 GB
system-Speicher, die typisch ist, halten Sie die Größe des Java-heap -
relativ klein, damit mehr Speicher für die Seite den cache.

Als verfügen Sie über 100 GB RAM auf Ihrem Computer, wenn Sie (in der Tat laufen unter der "Standard-JVM-Einstellungen") Ihrer JVM max heap-Größe sollte gedeckelt sein bei 8192M. Und tatsächlich, ich würde nicht davon abweichen, dass Sie, sofern Sie Probleme mit der garbage collection.

JVM Ressourcen für Cassandra kann festgelegt werden, in der cassandra-env.sh - Datei. Wenn Sie neugierig sind, schauen Sie sich den code für cassandra-env.sh und suchen für die calculate_heap_sizes() Methode. Das sollte Ihnen einen Einblick, wie Cassandra berechnet Ihre Standard-JVM-Einstellungen.

Was alles sollte ich suchen, um entsprechende Einstellungen vorzunehmen?

Wenn Sie mit OpsCenter (und Sie sein sollte), fügen Sie ein Diagramm für "Heap Verwendet" und "Nicht-Heap Verwendet."

Diese können Sie ganz einfach überwachen Sie die JVM-heap-Verwendung, die für Ihren cluster. Eine andere Sache, die mir geholfen haben, zu schreiben, das ein bash-script, in dem ich im Grunde entführt die JVM Berechnungen von cassandra-env.sh. So kann ich es auf einer neuen Maschine, und sofort wissen, was meine MAX_HEAP_SIZE und HEAP_NEWSIZE werden:

#!/bin/bash
clear
echo "This is how Cassandra will determine its default Heap and GC Generation sizes."

system_memory_in_mb=`free -m | awk '/Mem:/{print $2}'`
half_system_memory_in_mb=`expr $system_memory_in_mb /2`
quarter_system_memory_in_mb=`expr $half_system_memory_in_mb /2`

echo "   memory = $system_memory_in_mb"
echo "     half = $half_system_memory_in_mb"
echo "  quarter = $quarter_system_memory_in_mb"

echo "cpu cores = "`egrep -c 'processor([[:space:]]+):.*' /proc/cpuinfo`

#cassandra-env logic duped here
#this should help you to see how much memory is being allocated
#to the JVM
    if [ "$half_system_memory_in_mb" -gt "1024" ]
    then
        half_system_memory_in_mb="1024"
    fi
    if [ "$quarter_system_memory_in_mb" -gt "8192" ]
    then
        quarter_system_memory_in_mb="8192"
    fi
    if [ "$half_system_memory_in_mb" -gt "$quarter_system_memory_in_mb" ]
    then
        max_heap_size_in_mb="$half_system_memory_in_mb"
    else
        max_heap_size_in_mb="$quarter_system_memory_in_mb"
    fi
    MAX_HEAP_SIZE="${max_heap_size_in_mb}M"

    # Young gen: min(max_sensible_per_modern_cpu_core * num_cores, 1/4 * heap size)
    max_sensible_yg_per_core_in_mb="100"
    max_sensible_yg_in_mb=`expr ($max_sensible_yg_per_core_in_mb * $system_cpu_cores)`

    desired_yg_in_mb=`expr $max_heap_size_in_mb /4`
    if [ "$desired_yg_in_mb" -gt "$max_sensible_yg_in_mb" ]
    then
        HEAP_NEWSIZE="${max_sensible_yg_in_mb}M"
    else
        HEAP_NEWSIZE="${desired_yg_in_mb}M"
    fi

echo "Max heap size = " $MAX_HEAP_SIZE
echo " New gen size = " $HEAP_NEWSIZE

Update 20160212:

Auch sicher sein, check-out -Amy Tobey s 2.1 Cassandra Tuning Guide. Sie hat einige große Tipps, wie Sie Ihre cluster optimal läuft.