Die Standardausgabe Stdout des Node.js child_process exec ist kurz geschnitten

In Node.js ich bin mit dem exec-Befehl, der child_process-Modul aufrufen, einen Algorithmus in Java, gibt eine große Menge von text auf standard heraus, welche ich dann analysieren und zu verwenden. Ich bin in der Lage zu erfassen, ist es meist, aber wenn es über eine bestimmte Anzahl von Zeilen, der Inhalt ist cutoff.

exec("sh target/bin/solver "+fields.dimx+" "+fields.dimy, function(error, stdout, stderr){
    //do stuff with stdout
}

Ich habe versucht, mit setTimeouts und Rückrufe aber noch nicht gelungen, aber ich habe das Gefühl, dies geschieht, weil ich bin Referenzierung stdout in meinem code ein, bevor Sie abgerufen werden können, vollständig. Ich habe getestet, dass stdout ist in der Tat-wo der Verlust von Daten zuerst Eintritt. Es ist nicht ein asynchron-Problem weiter unten auf der Linie. Ich habe auch getestet, die auf meinem lokalen Rechner und Heroku, und das exakt gleiche Problem tritt auf, abschneiden an der exakt gleichen Zeilennummer zu jeder Zeit.

Irgendwelche Ideen oder Vorschläge, was helfen könnte?

InformationsquelleAutor Alex H Hadik | 2014-01-17

  1. 5

    Bearbeitet:
    Ich habe versucht mit dir /s auf meinem computer (windows) und hab das gleiche problem( und es Aussehen wie ein Fehler), wird dieser code lösen das problem für mich:

    var exec = require('child_process').exec;

function my_exec(command, callback) {
    var proc = exec(command);

    var list = [];
    proc.stdout.setEncoding('utf8');

    proc.stdout.on('data', function (chunk) {
        list.push(chunk);
    });

    proc.stdout.on('end', function () {
        callback(list.join());
    });
}

my_exec('dir /s', function (stdout) {
    console.log(stdout);
})
    warum denken Sie, es sieht aus wie ein bug? bitte haben Sie einen Blick auf meine Antwort
    sehen Sie die Geschichte von dieser Antwort, ich habe erhöhte Puffer-Größe, aber es funktioniert nicht für mich.
    Ich bin unter windows auch, und es funktioniert gut :/

    InformationsquelleAutor damphat

  2. 11

    Hatte ich exec.stdout.auf('Ende') Rückrufe hing immer mit @damphat Lösung.

    Andere Lösung ist die Erhöhung der Puffergröße in den Optionen exec: finden Sie in der Dokumentation hier

    { encoding: 'utf8',
  timeout: 0,
  maxBuffer: 200*1024, //increase here
  killSignal: 'SIGTERM',
  cwd: null,
  env: null }

    Zitieren: maxBuffer gibt die größte Menge von Daten erlaubt, die auf stdout oder stderr -, wenn dieser Wert überschritten wird, dann wird der Kind-Prozess wird getötet. Ich verwende jetzt folgende: dies bedeutet nicht, dass Umgang mit dem getrennt Teile des chunks, die durch Kommas getrennt in stdout, im Gegensatz zu den akzeptierten Lösung.

    exec('dir /b /O-D ^2014*', {
    maxBuffer: 2000 * 1024 //quick fix
    }, function(error, stdout, stderr) {
        list_of_filenames = stdout.split('\r\n'); //adapt to your line ending char
        console.log("Found %s files in the replay folder", list_of_filenames.length)
    }
);

    InformationsquelleAutor olamotte

  3. 9

    Die richtige (und beste) Lösung für dieses problem ist die Verwendung spawn anstelle von exec.
    Wie gesagt in diesem Artikel, spawn ist besser geeignet für den Umgang mit großen Datenmengen :

    child_process.exec gibt die gesamte Ausgabe-Puffer von der Kind-Prozess. Standardmäßig ist die buffer-Größe ist festgelegt bei 200k. Wenn der Kind-Prozess gibt etwas mehr als das, Sie das Programm stürzt mit der Fehlermeldung "Fehler: maxBuffer überschritten". Sie können das problem beheben durch Einstellung einer größeren Puffergröße in der exec-Optionen. Aber Sie sollten es nicht tun, weil exec ist nicht dazu gedacht, für Prozesse, die Rückkehr RIESIGE Puffer zu Knoten. Sie sollten verwenden Sie laichen. Also, was tun Sie mit exec? Es verwenden, um Programme auszuführen, die return-Ergebnis-Status, anstelle der Daten.

    spawn erfordert eine andere syntax als exec :

    var proc = spawn('sh', ['target/bin/solver', 'fields.dimx', 'fields.dimy']);

proc.on("exit", function(exitCode) {
    console.log('process exited with code ' + exitCode);
});

proc.stdout.on("data", function(chunk) {
    console.log('received chunk ' + chunk);
});

proc.stdout.on("end", function() {
    console.log("finished collecting data chunks from stdout");
});
    Vielen Dank für diese Antwort! Es half mir zu verstehen, dass meine exec wurde wieder ein Fehler wegen der 1 MB-Ausgabe. Leider ist das error-Objekt von exec war nur die Rückgabe der name des Befehls, ohne Detaillierung der Grund für den Fehler: {"cmd":"./read_mail.sh"}

    InformationsquelleAutor igelineau

Schreibe einen Kommentar