Überprüfen Sie die Speichernutzung der Teilprozess in Python


Ich entwickle eine Anwendung in Python auf Ubuntu und ich bin mit externen Binärdateien, die von innen mit python subprocess. Da diese Binärdateien werden zur Laufzeit generiert und können gehen, rogue, ich brauche, um eine strenge Registerkarte auf der Höhe der Speicherbedarf und die Laufzeit dieser Programme. Gibt es irgendwie ich kann, beschränken oder überwachen der Speicherauslastung dieser binäre Programme, die zur Laufzeit? Ich würde wirklich hassen, um so etwas wie "ps" im Teilprozess für diesen Zweck.

InformationsquelleAutor Neo | 2010-09-30
  1. 5

    Mit einer PID-Nummer von Ihrem Teilprozess Lesen Sie alle Infos aus proc-file-system. Verwendung:

    /proc/[PID]/die smaps (seit Linux
    2.6.14)
    Diese Datei zeigt den Speicherverbrauch für jedes der Verfahren die Zuordnungen.
    Für jede der Zuordnungen, gibt es eine Reihe
    von Zeilen wie folgt:

    oder

    /proc/[PID]/statm
    Bietet Informationen über die memory Auslastung, gemessen in Seiten.

    Alternativ können Sie die Ressourcen begrenzen, welcher Teilprozess kann dadurch mit :

    subprocess.Popen('ulimit -v 1024; ls', shell=True)

    Gegeben, wenn der virtuelle Speicher-limit erreicht ist-Prozess Fehler mit out of memory.

    • Ich implementieren muss dies innerhalb von Python. Ich bräuchte also einen fork ein child-Prozess, und gleichzeitig führen Sie eine while-Schleife, die dafür sorgt, überwachung /proc/pid ()/die smaps-Datei. Gibt es nicht einen anderen Weg, ex: ich kann Feste Arbeitsspeicher reservieren für ein Kind Teilprozess? Ich hatte gehofft, mithilfe von python-Speicher-manager irgendwie.
    • Dang, hätte nie gedacht dieses. Ja, das sollte gut funktionieren für mich.
    • ulimit ist veraltet. Auszug aus der Manpage: "Warnung: Diese Funktion ist veraltet. Verwenden getrlimit(2), setrlimit(2), und sysconf(3) statt."
    InformationsquelleAutor gertas
  2. 11

    Können Sie Python ' s Ressource Modul, Grenzen zu setzen, bevor Sie laichen Ihre Teilprozess.

    Zur überwachung, Ressource.getrusage() geben Sie die zusammengefassten Informationen über alle Ihre Teilprozesse; wenn Sie wollen, um zu sehen, pro-Unterprozess Informationen, die Sie tun können das /proc-trick im anderen Kommentar (nicht tragbar), aber effektiv), oder Schicht ein Python-Programm zwischen jeder Teilprozess und herauszufinden, einige der Kommunikation (portable, hässlich, schwach wirksam).

    • Dank Habbie, das ist genau das, was ich brauchte.
    InformationsquelleAutor Habbie
Schreibe einen Kommentar