AmazonS3: Erste Warnung: S3AbortableInputStream:Nicht alle bytes gelesen wurden, von der S3ObjectInputStream, Abbruch der HTTP-Verbindung

Hier ist die Warnung, die ich erhalte:

S3AbortableInputStream:Nicht alle bytes gelesen wurden, von der S3ObjectInputStream, Abbruch der HTTP-Verbindung. Dies ist wahrscheinlich ein Fehler und kann dazu führen, sub-optimales Verhalten. Anfrage nur die bytes müssen Sie über einer reichte HOLEN oder ablassen des input-Streams nach dem Gebrauch.

Versuchte ich mit try-mit-Ressourcen, aber S3ObjectInputStream scheint nicht zu schließen, über diese Methode.

 try (S3Object s3object = s3Client.getObject(new GetObjectRequest(bucket, key));
      S3ObjectInputStream s3ObjectInputStream = s3object.getObjectContent();
      BufferedReader reader = new BufferedReader(new InputStreamReader(s3ObjectInputStream, StandardCharsets.UTF_8));
    ){
  //some code here blah blah blah
 }

Ich habe auch versucht folgenden code explizit schließen, aber das funktioniert auch nicht:

S3Object s3object = s3Client.getObject(new GetObjectRequest(bucket, key));
S3ObjectInputStream s3ObjectInputStream = s3object.getObjectContent();

try (BufferedReader reader = new BufferedReader(new InputStreamReader(s3ObjectInputStream, StandardCharsets.UTF_8));
){
     //some code here blah blah
     s3ObjectInputStream.close();
     s3object.close();
}

Jede mögliche Hilfe würde geschätzt.

PS: ich bin nur das Lesen von zwei Zeilen der Datei aus dem S3 und die Datei mehr Daten.

InformationsquelleAutor Chirag Sejpal | 2017-08-10
  1. 18

    Bekam die Antwort über ein anderes medium. Teilen Sie es hier:

    Die Warnung zeigt an, dass Sie mit dem Namen close() Lesen, ohne die ganze Datei. Dies ist problematisch, denn S3 ist immer noch versuchen, Daten zu senden, und du bist verlassen, die Verbindung in einem traurigen Zustand.

    Gibt es hier zwei Optionen:

    1. Lesen Sie den rest der Daten aus dem input-stream, so daß die Verbindung kann wiederverwendet werden.
    2. Nennen s3ObjectInputStream.abort() schließen der Verbindung, ohne das Lesen der Daten. Die Verbindung wird nicht wiederverwendet werden, daher nehmen Sie sich einige der performance-hit mit der nächsten Anforderung neu erstellen der Verbindung. Dies kann es Wert sein, wenn es dauert eine lange Zeit, um Lesen Sie den rest der Datei.
    • Was tun, yo bedeutet - "Verbindung kann wiederverwendet werden"? Ich dachte, dass eine HTTP-Verbindung ist erstellt für jeden S3-GET-Anfrage
    • Hi Chirag, können Sie etwas näher auf Punkt 1 Lesen Sie den rest der Daten aus dem input-stream, so daß die Verbindung kann wiederverwendet werden)? Meine Zeile sieht so aus: S3ObjectInputStream targetStream = confige.getObjectContent(); XSSFWorkbook excelf = new XSSFWorkbook(targetStream); nicht sicher, wie Sie um diese Warnung zu unterdrücken.
    • Die SDK hält eine Verbindung pool unter der Decke und kann re-verwenden Sie eine Verbindung für eine weitere Anfrage für eine bessere Leistung.
    InformationsquelleAutor Chirag Sejpal
  2. 0

    Hinzufügen, um ein Beispiel zu Chirag Sejpal Antwort (ausführend option #1), die Folgendes kann verwendet werden, um Lesen Sie den rest der Daten aus dem input-stream, bevor Sie es schließen:

    S3Object s3object = s3Client.getObject(new GetObjectRequest(bucket, key));

try (S3ObjectInputStream s3ObjectInputStream = s3object.getObjectContent()) {
  try {
    //Read from stream as necessary
  } catch (Exception e) {
    //Handle exceptions as necessary
  } finally {
    while (s3ObjectInputStream != null && s3ObjectInputStream.read() != -1) {
      //Read the rest of the stream
    }
  }

  //The stream will be closed automatically by the try-with-resources statement
}
    • Ich glaube nicht, dass dies funktioniert, wenn eine Ausnahme geworfen wird, während die // Read from stream as necessary Teil
    • Ich habe aktualisiert das Beispiel so, dass der rest der stream ist zu Lesen, auch wenn es eine Ausnahme während der // Read from stream as necessary Teil.
    • Ich hatte versucht, Sie Methode, es zeigt java.io.IOException: Attempted read on closed stream
    InformationsquelleAutor DPG
Schreibe einen Kommentar