Wie listet _all_ Objekte in Amazon S3-Bucket auf?

S3Client.ListObjects wieder nur 1000 Objekte. So rufen Sie die Liste aller vorhandenen Objekte mit Amazon C# - Bibliothek?

InformationsquelleAutor der Frage user626528 | 2012-03-29

  1. 53

    Wie bereits dargelegt, Amazon S3 in der Tat erfordert Listing Schlüssel Mithilfe des AWS SDK für .NET:

    Als Eimer enthalten kann, bei einer nahezu unbegrenzten Anzahl von Schlüsseln, die
    komplette Ergebnisse einer Liste Abfragen können sehr groß werden. Verwalten
    große Ergebnis-sets, Amazon S3 verwendet Paginierung, Spalten Sie Sie in
    mehrere Antworten. Jede Liste, die Tasten, Antwort gibt eine Seite bis zu
    1,000 Schlüssel mit einem Indikator, der angibt, ob die Antwort abgeschnitten.
    Senden Sie eine Serie der Liste " Schlüssel-Anforderungen, bis Sie alle erhalten haben
    die keys.

    Den genannten Indikator ist die NextMarker Eigenschaft aus der ObjectsResponse Klasse - seine Verwendung zeigt das komplette Beispiel Listing Schlüssel Mithilfe des AWS SDK für .NETmit dem entsprechenden fragment:

    static AmazonS3 client;
client = Amazon.AWSClientFactory.CreateAmazonS3Client(
                    accessKeyID, secretAccessKeyID);

ListObjectsRequest request = new ListObjectsRequest();
request.BucketName = bucketName;
do
{
   ListObjectsResponse response = client.ListObjects(request);

   //Process response.
   //...

   //If response is truncated, set the marker to get the next 
   //set of keys.
   if (response.IsTruncated)
   {
        request.Marker = response.NextMarker;
   }
   else
   {
        request = null;
   }
} while (request != null);

    InformationsquelleAutor der Antwort Steffen Opel

  2. 4

    Sich bewusst sein, dass die Antwort oben ist nicht mit der empfohlenen API zum Auflisten von Objekten: http://docs.aws.amazon.com/AmazonS3/latest/API/v2-RESTBucketGET.html

    Folgende snippet zeigt, wie es aussieht mit der neuen API:

    using (var s3Client = new AmazonS3Client(Amazon.RegionEndpoint.USEast1))
{
    ListObjectsV2Request request = new ListObjectsV2Request
    {
          BucketName = bucketName,
          MaxKeys = 10
    };
    ListObjectsV2Response response;
    do
    {
         response = await s3Client.ListObjectsV2Async(request);

         //Process response.
         //...

         request.ContinuationToken = response.NextContinuationToken;

    } while (response.IsTruncated == true);        
}

    InformationsquelleAutor der Antwort lgrosales

  3. 0

    Laut der Dokumentation der client verwendet die Paginierung im Fall, den Sie beschreiben. Als pro-Dokumentation, die Sie verwenden sollten IsTruncated auf das Ergebnis... wenn es true nennen ListObjects wieder mit dem richtig setup Marker um die nächste Seite usw. stop rufen, wenn IsTruncated zurück false.

    InformationsquelleAutor der Antwort Yahia

Schreibe einen Kommentar