AWS S3: Wie kann ich sehen, wie viel Speicherplatz belegt ist?

Ich ein AWS-Konto. Ich bin mit der S3 zum speichern von sicherungen, die von verschiedenen Servern. Die Frage ist, gibt es keine Informationen in der AWS-Konsole über wie viel Festplatte spase auf meinem S3 cloud?

Dank

InformationsquelleAutor der Frage KennyPowers | 2012-01-23

  1. 76

    Yippe - ein update auf die AWS CLI können Sie rekursiv ls durch Eimer...

    aws s3 ls s3://<bucketname> --recursive  | grep -v -E "(Bucket: |Prefix: |LastWriteTime|^$|--)" | awk 'BEGIN {total=0}{total+=$3}END{print total/1024/1024" MB"}'

    InformationsquelleAutor der Antwort cudds

  2. 50

    Ich bin nicht sicher, Wann dieser Hinzugefügt wurde, um die AWSCLI gegeben, dass die ursprüngliche Frage war vor 3 Jahren, aber das Kommandozeilen-tool gibt eine schöne Zusammenfassung mit:

    aws s3 ls s3://mybucket --recursive --human-readable --summarize

    InformationsquelleAutor der Antwort thaavik

  3. 33

    s3cmd zeigen, können Sie dies durch ausführen von s3cmd du Optional die übergabe der bucket-Namen als argument.

    InformationsquelleAutor der Antwort markusk

  4. 20

    Die AWS CLI unterstützt jetzt die --query parameter, die eine JMESPath Ausdrücken.

    Bedeutet dies, dass Sie können die Summe die Werte für die Größe gegeben durch list-objects mit sum(Contents[].Size) und zählen, wie length(Contents[]).

    Dies kann ausgeführt werden unter Verwendung des offiziellen AWS CLI, wie unten vorgestellt und wurde in Feb 2014

     aws s3api list-objects --bucket BUCKETNAME --output json --query "[sum(Contents[].Size), length(Contents[])]"

    InformationsquelleAutor der Antwort Christopher Hackett

  5. 8

    Finden Sie heraus, die Größe von S3-bucket AWS-Konsole:

    1. Klicken Sie auf den S3-bucket-name
    2. Wählen Sie "Verwaltung" Registerkarte
    3. Klicken Sie auf "Metriken" Navigations-Taste
    4. Standardmäßig sollten Sie die Speicherung der Metrik der Eimer

    Hoffe, das hilft.

    InformationsquelleAutor der Antwort endriju

  6. 7

    Auf linux-box, die python (mit pip installer) grep und awk installieren Sie die AWS CLI (command-line-tools für EC2, S3 und viele andere Dienstleistungen)

    sudo pip install awscli

    dann erstellen Sie eine .awssecret Datei in Ihrem home-Ordner mit Inhalt wie unten (einstellen, Schlüssel, geheim und region als erforderlich):

    [default]
aws_access_key_id=<YOUR_KEY_HERE>
aws_secret_access_key=<YOUR_SECRET_KEY_HERE>
region=<AWS_REGION>

    Dieser Datei Lesen und schreiben, um Ihre Benutzer-nur:

    sudo chmod 600 .awssecret

    und exportieren Sie Sie auf Ihre Umgebung

     export AWS_CONFIG_FILE=/home/<your_name>/.awssecret

    dann führen Sie im terminal (das ist eine einzige Zeile Befehl, getrennt durch \ für leicht zu Lesen hier):

    aws s3 ls s3://<bucket_name>/foo/bar | \
grep -v -E "(Bucket: |Prefix: |LastWriteTime|^$|--)" | \
awk 'BEGIN {total=0}{total+=$3}END{print total/1024/1024" MB"}'
    • die aws Teil sind die Eimer (oder Optional einen 'Unterordner')
    • die grep Teil entfernt (mit -v) die Zeilen, die mit dem Regulären Ausdruck übereinstimmen (mit -E). ^$ ist für Leerzeile -- ist für die Trennlinien in der Ausgabe von aws s3 ls
    • den letzten awk einfach hinzufügen total die 3. Spalte der Ausgabe (die Größe in KB), dann zeigt es am Ende

    HINWEIS dieser Befehl funktioniert für die aktuelle Eimer oder 'Ordner', nicht rekursiv

    InformationsquelleAutor der Antwort JScoobyCed

  7. 6

    Sehen https://serverfault.com/questions/84815/how-can-i-get-the-size-of-an-amazon-s3-bucket

    Beantwortet von Vic...

    <?php
if (!class_exists('S3')) require_once 'S3.php';

//Instantiate the class
$s3 = new S3('accessKeyId', 'secretAccessKey');
S3::$useSSL = false;

//List your buckets:
echo "S3::listBuckets(): ";
echo '<pre>' . print_r($s3->listBuckets(), 1). '</pre>';

$totalSize = 0;
$objects = $s3->getBucket('name-of-your-bucket');
foreach ($objects as $name => $val) {
    //If you want to get the size of a particular directory, you can do
    //only that.
    //if (strpos($name, 'directory/sub-directory') !== false)
    $totalSize += $val['size'];
}

echo ($totalSize /1024 /1024 /1024) . ' GB';
?>

    InformationsquelleAutor der Antwort JonLovett

  8. 6

    Cloud watch ermöglicht Ihnen auch das erstellen von Metriken für Ihren S3-bucket. Es zeigt, dass Sie Metriken, die von der Größe und dem Objekt zählen.
    Dienstleistungen> Management-Tools> Cloud-Uhr. Wählen Sie die region, wo Sie Ihren S3-bucket und die Größe und object-count-Metrik wäre unter den verfügbaren Metriken.

    InformationsquelleAutor der Antwort rowelee

  9. 5

    Immer großen Eimer Größe über API (entweder aws cli oder s4cmd) ist ziemlich langsam. Hier ist meine HowTo erklärt, wie man analysieren S3 Usage Report mit bash one liner:

    cat report.csv | awk -F, '{printf "%.2f GB %s %s \n", $7/(1024**3 )/24, $4, $2}' | sort -n

    InformationsquelleAutor der Antwort Jakub Głazik

  10. 4

    Neben Christopher ' s Antwort.

    Wenn Sie brauchen, um count Gesamtgröße von versionierten Eimer verwenden:

    aws s3api list-object-versions --bucket BUCKETNAME --output json --query "[sum(Versions[].Size)]"

    Zählt es sowohl Aktuelle und Archivierte Versionen.

    InformationsquelleAutor der Antwort ruletkin

  11. 1

    Die AWS-Konsole nicht zeigen, Sie dies aber können Sie Bucket Explorer oder Cloudberry Explorerum die gesamte Größe eines Eimers. Beide haben Kostenlose Versionen zur Verfügung.

    Hinweis: diese Produkte haben immer noch zu Holen Sie sich die Größe jedes einzelnen Objekts, so könnte es lange Zeit dauern, bis die Eimer mit vielen Objekten.

    InformationsquelleAutor der Antwort Geoff Appleford

  12. 1

    Basierend auf @cudds Antwort:

    function s3size()
{
    for path in $*; do
        size=$(aws s3 ls "s3://$path" --recursive | grep -v -E "(Bucket: |Prefix: |LastWriteTime|^$|--)" | awk 'BEGIN {total=0}{total+=$3}END{printf "%.2fGb\n", (total/1024/1024/1024)}')
        echo "[s3://$path]=[$size]"
    done
}

...

$ s3size bucket-a bucket-b/dir
[s3://bucket-a]=[24.04Gb]
[s3://bucket-b/dir]=[26.69Gb]

    Auch, Cyberduck bequem ermöglicht die Berechnung der Größe für einen Eimer oder in einen Ordner.

    InformationsquelleAutor der Antwort Evgeny Goldin

  13. 1

    Mini John's Antwort völlig für mich gearbeitet! Genial... musste 

    --region eu-west-1

    aus Europa, obwohl

    InformationsquelleAutor der Antwort pitxon_net

  14. 1

    Dies ist eine alte Anfrage, aber da war ich auf der Suche nach der Antwort stieß ich auf Sie. Einige der Antworten machte mich daran erinnern, ich benutze S3 Browser, um Daten zu verwalten. Sie können sich auf einen Eimer und schlug Eigenschaften und zeigt Ihnen die insgesamt. Ziemlich einfach. Ich empfehle den browser: https://s3browser.com/default.aspx?v=6-1-1&fam=x64

    InformationsquelleAutor der Antwort user7191982

  15. 0

    Gut, Sie können es auch durch ein S3-client, wenn Sie lieber eine menschenfreundliche Benutzeroberfläche.

    Benutze ich CrossFTPdas ist kostenlos und cross-Plattform, und dort können Sie mit der rechten Maustaste auf den Ordner -> wählen Sie "Eigenschaften..." -> klicken Sie auf "Berechnen" - button neben Größe und voila.

    InformationsquelleAutor der Antwort Yiannis Tsimalis

  16. -2

    Benutze ich Cloud-Turtle um die Größe der einzelnen Perioden. Wenn die bucket-Größe überschreitet >100 Gb, dann würde es einige Zeit dauern, bis die Anzeige der Größe.
    Cloud-turtle ist freeware.

    InformationsquelleAutor der Antwort Sangram Anand

Schreibe einen Kommentar